For å lage Filmatisk modus for iPhone har vi nøye studert hvordan de beste filmskaperne bruker rackfokus til å legge drama og følelser inn i historiene de forteller.
På Hollywood-produksjoner kreves det et team med eksperter for å kjøre fokus under opptak. Det trengs en fotograf, som avgjør hva som skal være i fokus og når fokus skal endres. Og en b‑fotograf, som sørger for myke overganger, at timingen er perfekt og at objektene er helt i fokus.
Å få alt dette til å skje automatisk på iPhonen var ingen smal sak.
Først måtte vi generere høykvalitets dybdedata, så Filmatisk modus kjenner den nøyaktige avstanden til personer, steder og dyr i et opptak. Og fordi dette er video, måtte denne dybdedataen være kontinuerlig – ved 30 bilder per sekund.
Vi lærte også Neural Engine å jobbe som ekspertene. Den tar avgjørelser under opptak om hva som burde være i fokus, og den legger inn myke overganger når fokuset endres. Hvis du vil ha full kreativ kontroll, kan du alltids sette deg i regissørstolen og styre fokus selv, enten når du tar opp eller senere, i redigeringen.
Databehandlingen var så intens at vi trengte en chip som kunne håndtere den. Og A15 Bionic ble skapt.
Datakraften som trengs for å kjøre algoritmene for maskinlæring, rendre endringer i autofokus, støtte manuelle fokusendringer og gradere hvert bilde – i sanntid – er nesten ikke til å fatte.
Det er som å gå rundt med Hollywood i lommen.