Um den Kinomodus auf das iPhone zu bringen, haben wir genau studiert, wie grosse Filmemacher:innen durch Schärfenverlagerung Drama und Emotionen erzeugen.
Beim Dreh von Hollywoodfilmen braucht man ein Team aus Expert:innen. Wie Kameraleute, die grundsätzlich entscheiden, was im Fokus steht und wann sich das ändert. Und die Kamera-Assistenz, die für gelungene Übergänge, präzises Timing und gestochen scharfe Motive sorgt.
Dass das alles automatisch auf deinem iPhone passiert, war gar nicht so einfach.
Zuerst mussten wir hochwertige Tiefendaten erfassen, damit der Kinomodus die genaue Entfernung zu den Menschen, Orten und Tieren in einer Szene erkennen kann. Und da es um Videos geht, brauchten wir diese Tiefendaten kontinuierlich – mit 30 Bildern pro Sekunde.
Ausserdem haben wir der Neural Engine beigebracht, wie die Expert:innen zu arbeiten. Sie entscheidet unmittelbar, was fokussiert werden sollte, und verschiebt fliessend den Fokus, wenn sich das ändert. Wenn du kreative Kontrolle willst, kannst du jederzeit die Regie übernehmen und die Schärfe selbst verlagern, entweder direkt bei der Aufnahme oder beim Schnitt.
Die Berechnungen sind so anspruchsvoll, dass wir einen Chip brauchten, der leistungsstark genug ist. Willkommen A15 Bionic.
Die Rechenleistung, die du brauchst, um in Echtzeit die Algorithmen für maschinelles Lernen auszuführen, Autofokus-Änderungen zu rendern, manuelle Fokuswechsel zu unterstützen und eine Korrektur für jedes Bild in Dolby Vision durchzuführen, ist unglaublich.
Das ist, als hättest du Hollywood in der Hosentasche.