Выход каждого нового смартфона с камерой, которая может делать цифровое приближение 50x или даже 100x, создает массу споров о том, могут ли такие модули делать четкие снимки Луны. В разное время разных производителей обвиняли в том, что они буквально подменяют фото Луны во время съемки, то есть занимаются полной имитацией.
Последнее такое обсуждение произошло после выхода Galaxy S23 Ultra, 200-мегапиксельная камера которого может делать снимки с цифровым приближением 100х. Все началось с того, что Маркес Браунли с канала MKBHD записал ролик для YouTube Shorts, показав как S23 Ultra может делать фото Луны и сказал, что в отличие от Huawei, которого обвиняли в подмене, камера Samsung делает настоящие снимки.
Это утверждение подтолкнуло пользователя ibreakphotos из Reddit провести небольшой эксперимент. Он взял снимок Луны, снизил ее до 170х170 точек, размыл и поместил на экран своего компьютера, после чего сфотографировал на Galaxy S23 Ultra с приближением 100х. Конечно, камера смартфона обеспечила больше деталей на исходном изображении, хотя по сути их невозможно было получить из оригинального фото.
Это возобновило дискуссию о том, есть ли снимки Луны на камеру смартфона полным фейком и чем вообще современная мобильная фотография. Сама компания Samsung, как оказывается, уже давно выпустила запись в блоге на корейском языке, в котором объяснила, как работают снимки Луны. На фоне обсуждений на Reddit и в медиа компания перевела этот пост на английский.
Из него можно узнать, что для создания фото Луны камера Galaxy использует функцию Super Resolution для синтеза более 10 изображений, сделанных с 25-кратным увеличением или выше. Такие снимки, конечно, нуждаются в устранении шума, повышении четкости и других деталей.
При этом технология Super Resolution помогает создавать изображения с помощью многокадровой композиции. Если включена функция Scene Optimizer и Луна распознана как объект, камера обеспечивает более высокое качество снимков благодаря использованию нейросети.
Сам механизм распознавания Луны был создан на основе различных форм и деталей Луны, от полной до полумесяца, и базируется на изображениях, сделанных с Земли.
Scene Optimizer использует модель глубокого обучения искусственному интеллекту для обнаружения присутствия Луны и площади, занимаемой на соответствующем изображении. С поверхности Земли можно увидеть только одну половину Луны (около 60% ее поверхности), поэтому спутник является довольно простым объектом для тренировки нейросети. Причем после того, как модель ИИ завершила анализ, она может определять площадь, занятую Луной, даже на неиспользуемых в учебе изображениях.
Когда распознанная Galaxy Луна имеет соответствующий уровень яркости, пользователь может нажать кнопку съемки, после чего камера выполнит несколько шагов, чтобы получить изображение.
Во-первых, Scene Optimizer подтверждает, нужно ли использовать механизм улучшения деталей с помощью ИИ-обработки. Затем камера делает несколько снимков и синтезирует их в одно яркое изображение с пониженным уровнем шума.
После завершения многокадровой обработки камера Galaxy использует механизм улучшения детализации Scene Optimizer на основе глубокого обучения, чтобы эффективно устранить остатки шума и улучшить детали изображения.
По сути, программное обеспечение Samsung действительно «дорисовывает» Луне нужные детали, чтобы сделать более качественный снимок, используя натренированную на сотнях фотографий нейросеть. От полной замены такой формат фото отличает только то, что камера действительно делает снимки, из которых пытается получить дополнительную информацию. К такому подходу можно относиться по-разному, но на самом деле так работает современная мобильная фотография.
Еще в 2016 году с анонсом первых смартфонов Pixel стало ясно, что алгоритмы постобработки будут играть большую роль в создании снимков. Тогда Google добавил в свои аппараты абсолютно обычные модули камер, никак не выделявшиеся на фоне других решений, но смогли удивить пользователей качеством снимков. А все благодаря использованию нейросети, буквально дорисовывавшей детали на фотографиях.
То же происходит при работе «Ночного режима» съемки, часто пейзажей и даже еды. Смартфоны автоматически улучшают фото, что стало неотделимой частью их функциональности. Производители только балансируют между физическими возможностями модулей камер и того, что можно извлечь из них благодаря алгоритмам. Однако в основном постобработка не слишком критическая, а случай с Луной является редким гиперболизированным использованием этой технологии.
Как всегда, во главу угла получается результат, и если вам нравится сделанное смартфоном фото Луны, в этом нет ничего страшного. Для любителей более натуралистического подхода в настройках камеры часто можно отключить алгоритмические улучшения. В аппаратах Samsung для этого достаточно отключить опцию «Оптимизация кадра» (Scene Optimizer).
