最近は比較的にイメージを維持してくれるようになりましたが上手くいかない時は
　・元画像を毎回添付する
　・「GenIDを維持して」と追加で記入する。
　※GenIDとは：その回の生成で内部的に使われた乱数や特徴情報を識別する番号のようなものです。

上記を行うと比較的に維持されるかと思います。

同じチャットで生成を続けているのも失敗の原因になるので、上手くいかなくなったら別チャットに移行した方が良いです。