CSVを利用している場合は「商品画像URL」列のURLを変更する事で一括変更できます。
CSVが使えない場合は、登録中の商品画像と同じファイル名で、ftpへ一括で上書きすれば入れ替えられます。
この場合は反映まで最大24時間かかるので、急ぎの場合はCSVを利用した方法で登録するといいでしょう。