テーブルサイズはINSERTのパフォーマンスに影響しますか？

はい。ただし、重要なのはテーブル自体のサイズではなく、インデックスのサイズです。インデックスの書き換えがディスクを破壊し始めると、速度が低下します。インデックスのないテーブル（もちろん、データベースにそのようなものはありません）は、劣化が見られないはずです。コンパクトインデックスが最小限のテーブルは、劣化することなく、非常に大きなサイズに成長する可能性があります。大きなインデックスが多数あるテーブルは、すぐに劣化し始めます。