実際のデータソース(postgresのテーブル)を変更(レコードを削除)する場合、Sparkは優れた方法ではありません。jdbcクライアントを直接使用して同じことを実現できます。
とにかくこれを実行したい場合(データフレームの一部として計算しているいくつかの手がかりに基づいて分散された方法で);レコードを削除するためのロジック/トリガー情報を持ち、複数のワーカーで並行して実行できるデータフレームに対応して、同じjdbcクライアントコードを記述できます。
実際のデータソース(postgresのテーブル)を変更(レコードを削除)する場合、Sparkは優れた方法ではありません。jdbcクライアントを直接使用して同じことを実現できます。
とにかくこれを実行したい場合(データフレームの一部として計算しているいくつかの手がかりに基づいて分散された方法で);レコードを削除するためのロジック/トリガー情報を持ち、複数のワーカーで並行して実行できるデータフレームに対応して、同じjdbcクライアントコードを記述できます。