В img2img силу изменения задаёт не только промпт
Во многих diffusion-инструментах есть параметр denoising strength. Перед генерацией к исходной картинке добавляется цифровой шум, а модель затем восстанавливает изображение с учётом вашего описания.
Мало шума — сохраняются поза, контуры и композиция, меняются преимущественно фактура и детали. Много шума — исходник становится слабой подсказкой, поэтому модель может перестроить всю сцену.
Названия различаются: иногда встречается image strength, причём шкала может работать в обратную сторону. Поэтому сначала сравните несколько значений на одном изображении — так понятнее, где заканчивается редактура и начинается новая генерация.