Για να φέρουμε τη λειτουργία Κινηματογράφος στο iPhone, μελετήσαμε προσεκτικά πώς οι μετρ του κινηματογράφου χρησιμοποιούν την εστίαση rack, για να δώσουν ένταση και συναίσθημα στην ιστορία που αφηγούνται.
Στο Χόλιγουντ, η σωστή εικονοληψία απαιτεί μια ομάδα ταλαντούχων ειδικών. Όπως, για παράδειγμα, έναν διευθυντή φωτογραφίας, ο οποίος ορίζει τι θα πρέπει να βρίσκεται σε πρώτο πλάνο και πότε πρέπει να γίνονται οι αλλαγές στην εστίαση. Σημαντικοί είναι επίσης και οι βοηθοί εικονολήπτη, δουλειά των οποίων είναι να διασφαλίζουν ότι οι μεταβάσεις είναι ομαλές, ο χρόνος αλλαγής είναι σωστός και τα θέματα φαίνονται ξεκάθαρα.
Το να μπορέσει ένα iPhone να κάνει όλα τα παραπάνω—και μάλιστα αυτόματα—δεν ήταν κάτι εύκολο.
Αρχικά, έπρεπε να δημιουργήσουμε δεδομένα βάθους υψηλής ποιότητας, ώστε η λειτουργία Κινηματογράφος να αναγνωρίζει την ακριβή απόσταση μεταξύ ατόμων, θέσεων και κατοικιδίων σε μια σκηνή. Και επειδή μιλάμε για βίντεο, χρειαζόμαστε αυτά τα δεδομένα διαρκώς, στα 30 καρέ ανά δευτερόλεπτο.
Επίσης, εκπαιδεύσαμε το Neural Engine να εργάζεται όπως οι επαγγελματίες. Αποφασίζει αστραπιαία τι πρέπει να βρίσκεται στο επίκεντρο, ενώ εφαρμόζει, επίσης, ομαλές μεταβάσεις εστίασης όταν αυτό αλλάζει. Εάν θέλεις να έχεις τον απόλυτο δημιουργικό έλεγχο, μπορείς να κάτσεις στην καρέκλα του σκηνοθέτη και να προσαρμόσεις χειροκίνητα την εστίαση rack, είτε θέλεις να βγάλεις μια λήψη, είτε να την επεξεργαστείς.
Δεδομένου του τεράστιου υπολογιστικού φόρτου, ήταν απαραίτητο ένα chip που να είναι ικανό να αντεπεξέλθει. Εδώ έρχεται στο προσκήνιο το A15 Bionic.
Η καθαρή υπολογιστική ισχύς που απαιτείται για την εκτέλεση αλγορίθμων μηχανικής μάθησης, την απόδοση των αλλαγών αυτόματης εστίασης, την υποστήριξη χειροκίνητων αλλαγών εστίασης και την προσαρμογή κάθε καρέ στο Dolby Vision είναι εντυπωσιακή, ειδικά όταν πρόκειται για διεργασίες που γίνονται σε πραγματικό χρόνο.
Είναι σαν να έχεις ένα κινηματογραφικό συνεργείο στην τσέπη σου.