Lens Blur Fields: нейросетевая ФРТ на службе улучшения фотографий и идентификации камеры
Оптическое размытие или функция рассеяния точки — собирательное название для множества эффектов деградации изображения. В их числе — расфокусировка, дифракции и аберрации. Характер ФРТ крайне сложно калибровать, поскольку она меняется в зависимости от положения на сенсоре, настройки фокуса, расстояния до объекта и даже конкретной области на плоскости изображения. Поэтому любые попытки точно описать размытие реальной камеры сталкиваются с необходимостью измерять слишком большое количество параметров, что на практике выполнить почти невозможно. Метод Lens Blur Fields предлагает новое решение: использовать многослойные перцептроны, которые обучаются представлять ФРТ в виде непрерывной функции высокой размерности ( arXiv:2310.11535 ). Такая модель способна обобщать по всем параметрам сразу и восстанавливать плавные изменения ФРТ вместо того, чтобы хранить её в виде разрозненной таблицы замеров. В теории это значит, что метод Lens Blur Fields позволит не только сделать очередной красивый фильтр с боке, но и различать экземпляры камер по снимкам с них.
https://habr.com/ru/articles/947862/
#машинное_обучение #функция_рассеяния_точки #исследования #научные_работы #вычислительная_фотография #боке #смартфоны #фотографии_на_смартфоны #iPhone #Lytro


