Avots: Sina Technology Synthesis
Vienas kameras izmantošana, lai iegūtu izplūdušu fotogrāfiju, nav nekas jauns, iepriekšējaisiPhone XRun agrākGoogle Pixel 2ir bijuši līdzīgi mēģinājumi.
Apple jaunais iPhone SE arī ir tāds pats, bet tākameruelements ir pārāk vecs, galvenais kredīts joprojām ir algoritmā.
No iFixit demontāžas ziņojuma mēs varam redzēt, ka dažas jaunā iPhone SE daļas pilnībā atbilstiPhone 8, pat tiktāl, ciktāl tos var izmantot aizvietojami, tostarp 12 megapikseļu platleņķakameru .
“Jauna vīna vecās pudelēs” prakse iPhone SE nav nekas neparasts.Vēl pirms četriem gadiem pirmās paaudzes iPhone SE arī izmantoja 5s izskatu un lielāko daļu aparatūras, tāpēc Apple var piedāvāt zemāku cenu.
Teorētiski, kopējot to pašu kameras aparatūru,kameruabu raksturlielumiem nevajadzētu būt ļoti atšķirīgiem.Piemēram,iPhone 8neatbalsta mazu asuma dziļuma fotoattēlu uzņemšanu ar skaidru objektu un izplūdušu fonu, ko mēs bieži saucam par "portreta režīmu".
Bet, apskatot Apple atbalsta lapu, jūs atklāsit, ka portreta režīms netiek atbalstītsiPhone 8atbalsta jaunais iPhone SE — pat tad, ja abu aizmugurējo objektīvu specifikācijas ir pilnīgi vienādas.
Parastos apstākļos izplūdušu fotoattēlu uzņemšana mobilajā tālrunī bieži ir jāveic ar divām kamerām — tāpat kā cilvēka acīm, arī mobilajam tālrunim ir jāiegūst divi attēli dažādos leņķos caur diviem objektīviem dažādās pozīcijās un pēc tam jāapvieno skats Atšķirība nosaka lauka dziļumu, lai panāktu fona izplūšanu un saglabātu objektu skaidru.
Sarakstā iekļautās Plus sērijas vai X, XS un 11 pēdējos gados pamatā paļaujas uz vairāku kameru sistēmām, lai pabeigtu portreta izplūšanu.
Tātad, kā tiek atrisināta iPhone priekšējā viena kamera?Kodols atrodas Face ID sistēmas infrasarkanajā punktmatricas projektorā, kas var iegūt arī pietiekami precīzus dziļuma datus, kas ir līdzvērtīgi "palīglēcai".
No šī viedokļa iPhone SE var fotografēt portreta režīmā, tas ir ļoti īpašs: pirmkārt, tas neuzņem vairākus kadrus, otrkārt, tam nav Face ID, būtībā nav aparatūras atbalsta iespējas.
Acīmredzot Apple ir veikusi dažas izmaiņas, kuras mēs nevaram redzēt programmatūras līmenī.
Nesen Bens Sandofskis, trešās puses kameru lietojumprogrammas Halide izstrādātājs, atklāja tehniskos principus, paskaidrojot, kāpēc jaunajā iPhone SE tiek izmantotas tādas pašas viena objektīva specifikācijas kāiPhone 8, taču tas var sasniegt portreta fotoattēlu režīmu, ko tas nespēj.
Viņi teica, ka jaunais iPhone SE, visticamāk, būs "pirmais iPhone, kas var radīt portreta izplūšanas efektu, izmantojot tikai vienu 2D attēlu".
Jūs varētu teikt, kaiPhone XRnav arī vienas kameras izplūšana.Vai SE to tikai nekopē?
Tomēr demontāžas situācija ir pierādījusi, kakamerasiPhone SE uniPhone XRnav konsekventi, kas arī rada atšķirības abu tehniskajā īstenošanā.
▲Samsung Galaxy S7sērija ir pirmā ierīce, kas izmanto DPAF tehnoloģiju viedtālrunīkameru
Vissvarīgākais ir tas, kakamerunoiPhone XRvar izmantot dual pixel autofocus (DPAF) tehnoloģiju, kas ļauj iegūt noteiktu dziļuma datus, pamatojoties uz aparatūru.
Vienkārši izsakoties, DPAF tehnoloģija ir līdzvērtīga pikseļa sadalīšanai uzkamerusensoru divos mazākos blakus pikseļos, lai uzņemtu divus fotoattēlus ar dažādiem leņķiem, tāpat kā mūsu kreiso un labo aci.
Lai gan šī radītā leņķa atšķirība nav tik acīmredzama kā dubultākameru, tas joprojām veicina dziļuma datu ģenerēšanas algoritmu.
▲Google Pixel 2, 3Divas atšķirības kartes, kas iegūtas, izmantojot DPAF tehnoloģiju, ir grūti aplūkojamas ar neapbruņotu aci
uztvert, bet joprojām var palīdzēt attēla segmentācijas algoritmam pieņemt spriedumus
Iepriekš,Googleizmantoja arī šo tehnoloģijuPixel 2, 3lai panāktu viena kadra izplūšanu.UzPikselis4, jo kamera ir aizstāta ar vairāku kameru specifikāciju, paralakses noteikšana ir ievērojami precīzāka nekā viena kamera.
▲ Apskatīsim datus, kas iegūti Pixel 4, izmantojot divas kameras.
Kas attiecas uz jauno iPhone SE, tā kā tā sensori ir pārāk veci, Halide apgalvo, ka tas nevar paļauties uz sensoriem, lai iegūtu atšķirības kartes, un būtībā var paļauties tikai uz mašīnmācīšanās algoritmu, ko nodrošina A13 Bionic mikroshēma, lai simulētu un ģenerētu dziļuma datus. kartes.
Viena teikuma skaidrojums ir tāds, ka iPhone SE portreta izplūšanas fotografēšana pilnībā tiek panākta, izmantojot programmatūru un algoritmus.
▲ Uzņemiet šo fotoattēlu tieši ariPhone XRun jaunais iPhone SE
Halide izmantojaiPhone XRun jauno iPhone SE, lai nofotografētu kucēnu (nevis īstu kadru, tikai lai nofotografētu "vienu fotoattēlu"), un pēc tam salīdzināja abu attēlu dziļuma datus.
Viņi atklāja, kaiPhone XRtikko veica vienkāršu attēla segmentāciju, lai izvilktu galveno korpusu, taču pareizi neatpazina kucēna ausi.
▲ dziļuma datu grafiks,iPhone XRkreisajā pusē, jaunais iPhone SE labajā pusē
Bet jaunajā iPhone SE ar jauno algoritmu, ko nodrošina A13 mikroshēma, mēs ieguvām dziļuma karti, kas pilnīgi atšķiras noXR.Tas ne tikai pareizi atpazīst kucēna ausis un vispārējo kontūru, bet arī veic dažādu fonu apstrādi.
Šāda veida dziļuma karte nav 100% precīza.Halide sacīja, ka jaunā iPhone SE izgriezuma un izplūšanas precizitāte, uzņemot izplūdušus fotoattēlus bez sejas, nav tik precīza kā portretu uzņemšanas laikā.
Īpaši tad, ja daži objekti un fona attēli ir ļoti izplūduši, vairāku kameru priekšrocības šobrīd būs acīmredzamākas.
▲ Šāda veida motīvā, kas nav seja, un objekts un fons nav skaidri nodalīti, jaunā iPhone SE izplūdums
ir viegli kļūdīties
Kā redzat no šī attēla,iPhone 11 Proaprīkots ar vairāku kameru sistēmu, var ne tikai pilnībā iezīmēt mazos augus uz baļķa, bet arī atpazīt attālumu no fona un veikt slāņveida apstrādi.
▲ dziļuma datu grafiks,iPhone 11 Prokreisajā pusē, jaunais iPhone SE labajā pusē
Jaunajā iPhone SE, neskatoties uz tiem pašiem slāņveida apstrādes rezultātiem, objekts un fons ir pilnībā sapludināti.Protams, pēcizplūšanas process, protams, būs daudz sliktāks nekāiPhone 11 Pro.
▲ faktiskie izplūdušie pierādījumi,iPhone 11 Prokreisajā pusē un jaunais iPhone SE labajā pusē
Tāpēc, kad jaunais iPhone SE izmanto iOS pašukamerulietotnē, tikai tad, kad tiek noteikta cilvēka seja, "Portreta režīmu" var iespējot, lai uzņemtu izplūdušus fotoattēlus.Citos gadījumos tiks parādīta kļūda.
Iemesls joprojām ir saistīts ar Apple algoritmu.Halide minēja paņēmienu, ko sauc par “Portrait Effects Matte” (Portrait Effects Matte), ko galvenokārt izmanto, lai portreta režīma fotoattēlos atrastu precīzas cilvēku kontūras, tostarp tādas detaļas kā matu līnija uz malas, briļļu rāmis utt. Objekts un fons ir segmentēti.
Taču šobrīd šis uz mašīnmācīšanos balstīto segmentācijas tehnoloģiju komplekts ir vairāk sagatavots "cilvēku šaušanai", tas patiešām var kompensēt paralakses datu trūkumu par vienukamerutālruņi, piemēramiPhone XRun iPhone SE, bet, ja priekšmets Algoritms arī pieļaus sprieduma kļūdu, mainot rakstzīmes no citiem objektiem.
Kas attiecas uz tālruņiem ar vairākām kamerām, piemēramiPhone 11 Pro, jūs varat iegūt paralakses datus tieši caurkameruaparatūru, lai viņi varētu izmantot portreta režīmu arī sižetos, kas nav sejas, izmantojot savaskameru.
▲ Jaunā iPhone SE priekšējais objektīvs atbalsta arī portreta režīmu, un sejas precizitāte ir ļoti augsta,
un attēla atšķirība ir tikai bokeh efektā
Protams, trešo pušu izstrādātāji joprojām var izmantot lietas, kas nav oficiāli atbalstītas.Tagad lietotne Halide var atbalstītiPhone XR, SE, lai uzņemtu izplūdušus mazu dzīvnieku vai citu objektu attēlus.Faktiski tā izmanto arī Apple portreta masku tehnoloģiju, lai iegūtu dziļuma kartes, un pēc tam pievieno savu aizmugures optimizāciju, lai to panāktu.
▲ Izmantojot trešo pušu programmas, piemēram, Halide, varat izmantot jauno iPhone SE, lai uzņemtu izplūdušus objektus, kas nav sejas
Kopumā portreta izplūšana, ko panāk šis jaunais iPhone SE, ir robeža, ko var sasniegt ar programmatūras optimizāciju vienas kameras tālruņiem.Stingri sakot, tas patiesībā ir A13 mikroshēmas dēļ.Ja tas nesniedza jaunāko mašīnmācīšanās algoritmu,kamerupieredze vien, SE šaušanas pieredzei acīmredzot jābūt pusei.
Tāpēc viedtālruņiem joprojām ir jēga izstrādāt vairāku kameru sistēmas.Mēs varam izmantot īpaši platu leņķi, lai paplašinātu redzes lauku, un mēs varam paļauties uz telefoto objektīvu, lai iegūtu nesagraujošus tālummaiņas fotoattēlus.Papildinātās realitātes noteikšanas palīdzība, to var panākt ne tikai ar OTA jaunināšanu vai algoritmu slīpēšanu.
Protams, kaitina arī akli lielīties un sacensties par kameru skaitu.Ja aparatūra nosaka tikai attēlveidošanas apakšējo robežu, tad izcilu algoritmu kopums var ievērojami paaugstināt attēlveidošanas augšējo robežu un pat atkārtoti izteikt vecās aparatūras vērtību un vērtību.potenciāls.
Es nezinu, vai varam pagaidīt vēl četrus gadus.Kad iznāks nākamā iPhone SE paaudze, tas būs vienskameruvai joprojām ir vieta mobilo tālruņu nozarē?
Ievietošanas laiks: maijs-06-2020