Wie die Lytro Kamera die Welt sieht: RAW-Daten eines LichtFeld Sensors

Lytro’s LichtFeld Sensor besteht aus einem herkömmlichen CMOS Bildsensor und einem darauf montierten, sogenannten Mikrolinsen-Raster. Mit dieser Kombination wird es möglich, anstatt einer flachen Abbildung des Motivs auch die Richtung der einzelnen Lichtstrahlen aufzuzeichnen (mit Hilfe komplexer Algorithmen).
Aber was bedeutet das wirklich, und was genau sieht der LichtFeld Sensor eigentlich?

Die RAW-Daten der Kamera können mit dem Tool lfpsplitter extrahiert werden (zur Zeit fehlt allerdings ein Update, um mit der neuesten Version der lfp-Dateien arbeiten zu können). Weil das RAW-Bild 12-bit-Daten enthält – im Gegensatz zu den herkömmlichen 8-bit-Daten von JPGs – kann es nicht per se in Farbe dargestellt werden.
Flickr-Benutzer Corby Ziesman hat sich die Zeit genommen, die RAW-Sensordaten zu extrahieren und in eine Schwarz-Weiß-TIFF-Datei umzuwandeln. Anschließend nutzte er einen Fokus-Stapel der JPG-Ebenen aus der berechneten -stk.lfp-Datei, und überlagerte diese über die TIFF-Datei. Dadurch wird sichtbar, was der Bildsensor eigentlich aufzeichnet: Ein großes Bild, das aus ca. 100.000 geringfügig unterschiedlichen Sub-Bildern zusammengesetzt ist.

Here I extracted the JPEGs from the LFP file and focus stacked the images, then I extracted the sensor RAW data from the other LFP file and converted it to a TIFF and overlaid the color from the focus stacked image onto the grayscale sensor RAW image. This way you can see how the Lytro actually views the scene with the micro lens array over the sensor. You can even see individual hot pixels.

Diese Ansicht erlaubt es komplizierten Algorithmen, einzelne Lichtstrahlen zu finden und passende Paare im Gesamtbild zu finden. Verfolgt man diese Lichtstrahlen zurück zu ihrem Ursprung, kann man ein dreidimensionales Abbild der aufgenommenen Situation erstellen. Außerdem wird es möglich, die Fokusebene der Kamera virtuell zu verschieben (Software-Refokus)

https://pictures.lytro.com/corbyz/pictures/52572

Das Bild in voller Größe gibt’s hier auf Flickr: Actual Lytro micro lens array