Фотография в световом поле: что это и как работает?
Фотография в светлом поле существует уже давно. Первое аналоговое устройство светового поля было изобретено в 1908 году Габриэлем Липпманном, который в конечном итоге получил Нобелевскую премию за свою работу по цветной фотографии.
Фотография в светлом поле увлекательна, поскольку позволяет перемещать плоскость фокусировки изображения после того, как изображение уже было снято, что невозможно в обычной фотографии.
Итак, как работает фотография в светлом поле? Эта статья научит вас всему, что вам нужно знать.
Что такое фотография в световом поле?
Обычная фотография работает очень похоже на человеческий глаз. Вы фокусируетесь с помощью камеры, и сенсор фиксирует двухмерное изображение трехмерного пространства, причем «срез» этого пространства находится в фокусе. Все впереди или позади области фокусировки размыто и не в фокусе. Это связано с тем, что обычный датчик фиксирует информацию только об интенсивности света.
Световое поле относится ко всем лучам света (каждому фотону) в сцене. Световые лучи, составляющие световое поле, определяются пленоптической функцией (поэтому камеры светового поля также называются пленоптическими камерами). Пленоптическая функция описывает луч света в пяти измерениях: его координаты в трехмерном пространстве (X, Y, `) и его направление в двухмерном пространстве (два угла).
Фотография светового поля захватывает информацию из светового поля в конкретной сцене, включая как интенсивность света, так и направление световых лучей (в соответствии с пленоптической функцией).
Фотография в светлом поле сильно отличается от обычной фотографии. Он позволяет делать трехмерное изображение и выбирать, где будет фокусировка постфактум. Используя несколько датчиков, можно уловить как падающий свет, так и направление световых лучей.
Как работает фотография в световом поле?
Как уже упоминалось, камера светового поля фиксирует всю информацию о световом поле перед камерой. Эта информация включает интенсивность, цвет и направление света. Благодаря этому можно математически определить, откуда исходит каждый луч света, прежде чем он достигнет датчика. Это означает, что можно построить трехмерную модель сцены.
Например, есть несколько методов захвата светового поля:
- Использование одной камеры для захвата информации о сцене с разных ракурсов. Этот метод производит выборку из множества изображений.
- Массивы с несколькими камерами. Обычно они включают в себя десятки датчиков в широком диапазоне, каждый из которых собирает информацию о сцене под немного другим углом. Этот метод также создает сразу несколько изображений.
- Матрицы микролинз. Наличие массива из сотен микролинз перед одним сенсором цифровой камеры позволяет регистрировать информацию светового поля. Это создает изображение, состоящее из сотен фрагментов изображения.
Каждое изображение или фрагмент изображения отличается тем, что улавливает световые лучи, исходящие из немного разных мест в пространстве. Поскольку каждый пиксель будет отображать немного другую сцену, записывается информация об угле падения светового луча. Это позволяет рассчитать расстояние до каждого объекта от камеры и положение в сцене и, в конечном итоге, разработать 3D-модель сцены.
Применение фотографии светового поля
Есть разные способы использования фотографии в светлом поле, которые могут быть невероятно полезными. Поскольку вся информация о световом поле сцены записывается, можно обрабатывать изображения светового поля разными способами, которые невозможны в обычной фотографии.
Пользовательский фокус
Самая известная особенность фотосъемки в световом поле – это возможность изменять точку фокусировки после того, как изображение было снято. Это связано с тем, что информация, захваченная камерой, включает фокусировку на каждом расстоянии, что означает, что с помощью сложного программного обеспечения можно выбрать любое расстояние в качестве фокусной точки в сцене.
Переменная глубина резкости
Подобно фокусировке, из-за характера записываемой информации можно обрабатывать изображения с «синтетической апертурой». Диафрагма – это диаметр отверстия в объективе, который определяет глубину резкости (насколько расфокусированы передний план и задний план) на изображении.
Поскольку изображение в светлом поле включает информацию на всех возможных фокусных расстояниях, можно создавать изображения с минимально возможной глубиной резкости (в фокусе находится только очень маленький участок). Также возможно создать изображение с бесконечной глубиной резкости, где все в изображении находится в фокусе.
Эффект параллакса
В зависимости от способа захвата светового поля можно получить немного разные углы обзора сцены. Это зависит от диаметра или ширины системы, используемой для получения изображения. Чем шире система линз, тем больше света улавливается с более широких углов.
После того, как изображение было снято, можно немного изменить перспективу изображения, как если бы вы двигали головой в реальной сцене. Это называется эффектом параллакса. Используя эффект параллакса, также можно восстановить трехмерное изображение.
Рассчитать расстояния
В зависимости от чувствительности системы фотосъемки в световом поле и от того, насколько известны ее оптические свойства, можно рассчитать расстояние от объектива до объектов в сцене. Одним из основных применений этого может быть микроскопия, где полезно точно измерить размер синтетических или биологических образцов.
Изменить условия освещения
Поскольку при фотосъемке в светлом поле записывается так много информации о глубине сцены, с помощью программного обеспечения для постобработки можно точно восстановить освещение в сцене. Поскольку программное обеспечение знает относительное положение всех объектов на изображении, оно может убедительно рассчитать, где упадут тени.
Виртуальная реальность
Фотография в светлом поле может навсегда изменить кинопроизводство и виртуальную реальность . Это связано с тем, что фотографию светового поля можно использовать для создания реальной виртуальной реальности. Google разработал примеры на этот счет, которые можно просмотреть в Steam .
Используя массив вращающихся камер из 16 GoPros, они сделали тысячи изображений, на которых была записана вся информация о световом поле в трехмерном пространстве. Затем они смогли создать трехмерную виртуальную реальность с шестью степенями свободы.
Камеры светового поля – будущее фотографии?
В 2012 году компания Lytro выпустила первую камеру светового поля для потребительского рынка. Эта камера имела разрешение в один мегапиксель с постоянной диафрагмой F / 2 и продавалась по цене от 400 до 500 долларов. С тех пор на рынке появилось очень мало камер светового поля, ориентированных на потребителей.
Отсутствие разрешения и качества изображения означало, что камеры со световым полем просто не стали популярными на потребительском рынке, как зеркальные. Фактически, многие применения технологии светового поля все еще находятся в разработке.
Но есть причина, по которой Google (а теперь и Apple) инвестируют в эту технологию, и ее использование для создания трехмерного пользовательского интерфейса для виртуальной реальности – лишь один из примеров!