このdockerコマンドを試して、psycopg2アダプターをインストールしてください
docker-compose exec web pipenv install psycopg2-binary==2.8.3
必要に応じて、独自の特定のバージョンについて言及することもできます。
それでもエラーが発生する場合は、コンテナが適切に停止されていないことを意味します。以下のコマンドを使用して停止します
docker-compose down
psycopg2をインストールしてから起動します
docker-compose up