Fonte: Sina Technology Synthesis
L'usu di una sola camera per ottene a fotografia sfocata ùn hè nunda di novu, u precedenteiPhone XRè primaGoogle Pixel 2anu avutu tentativi simili.
U novu iPhone SE d'Apple hè ancu listessu, ma u socameral'elementu hè troppu vechju, u creditu principale hè sempre in l'algoritmu.
Da u rapportu di disassemblamentu di iFixit, pudemu vede chì alcune parti in u novu iPhone SE sò cumpletamente coherente cù uiPhone 8, ancu in a misura chì ponu esse utilizati in modu intercambiable, cumpresu u largu angulu di 12 megapixel.camera .
A pratica di "vinu novu in vechji buttigli" ùn hè micca inusual per l'iPhone SE.Torna à quattru anni fà, a prima generazione di l'iPhone SE hà ancu appiicatu l'apparenza di 5s è a maiò parte di u hardware, cusì Apple pò dà un prezzu più bassu.
Teoricamente, quandu si copia u listessu hardware di càmera, ucameracaratteristiche di i dui ùn deve esse assai differente.Per esempiu,iPhone 8ùn sustene micca piglià una piccula prufundità di ritratti di campu cù un sughjettu chjaru è un fondo sfocata, chì hè ciò chì spessu chjamemu u "modu di ritrattu".
Ma quandu vi taliari a pagina di supportu di Apple, truverete chì u modu di ritrattu chì ùn hè micca supportatu da uiPhone 8hè sustinutu da u novu iPhone SE, ancu s'è e specificazioni di lenti posteriore di i dui sò esattamente listessi.
In circustanze nurmale, piglià e foto sfocate nantu à un telefuninu mobile spessu deve esse fattu da doppia camera - cum'è l'ochji umani, u telefuninu hà ancu bisognu di ottene duie immagini in diverse anguli attraversu duie lenti in diverse pusizioni, è dopu cumminà l'anguli di vista A diferenza stima a prufundità di campu per ottene u sfocatura di u fondu è mantene u sughjettu chjaru.
A serie Plus nantu à a lista, o X, XS, è 11 in l'ultimi anni, basamente si basanu in sistemi multi-camera per cumplettà a ripresa di sfocatura di ritratti.
Allora cumu si risolve a camera unica frontale di l'iPhone?U core si trova in u prughjettu di a matrice di punti infrared in u sistema Face ID, chì pò ancu ottene dati di prufundità abbastanza precisi, chì equivale à una "lenti ausiliaria".
Da questu puntu di vista, l'iPhone SE pò piglià ritratti in modu di ritrattu hè assai spiciale: prima, ùn piglia micca parechje scatti, in segundu, ùn hà micca Face ID, ùn ci hè basicamente a pussibilità di supportu hardware.
Apparentemente, Apple hà fattu alcuni cambiamenti chì ùn pudemu micca vede à u livellu di u software.
Recentemente, Ben Sandofsky, u sviluppatore di l'applicazioni di càmera di terzu Halide, hà revelatu i principii tecnichi, spieghendu perchè u novu iPhone SE usa e stesse specificazioni di lente unica cum'èiPhone 8, ma pò ottene u modu di ritrattu di ritratti chì l'ultimi ùn ponu micca.
Anu dettu chì u novu iPhone SE hè prubabile di esse "u primu iPhone chì pò generà un effettu sfocatura di ritrattu utilizendu solu una sola maghjina 2D".
Pudete dì chì uiPhone XRùn hè ancu micca un sfocatura di una sola camera.Ùn hè micca SE solu copià?
Tuttavia, a situazione di smantellamentu hà dimustratu chì ucameredi iPhone SE èiPhone XRùn sò micca cunsistenti, chì porta ancu à diffirenzii in l'implementazione tecnica di i dui.
▲Samsung Galaxy S7A serie hè u primu dispositivu chì usa a tecnulugia DPAF in u smartphonecamera
U puntu più impurtante hè chì ucameradi uiPhone XRpò aduprà a tecnulugia di l'autofocus dual pixel (DPAF), chì li permette di ottene certe dati di prufundità basatu nantu à hardware.
In termini simplici, a tecnulugia DPAF hè equivalente à dividendu u pixel nantu à ucamerasensor in dui pixel più chjuchi side-by-side per catturà duie foto cù anguli diffirenti, cum'è i nostri ochji manca è drittu.
Ancu s'è a diffarenza d'angolo prodotta da questu ùn hè micca cusì ovvia cum'è quella di dualecamera, hè sempre favuritu à l'algoritmu per generà dati di prufundità.
▲Google Pixel 2, 3Dui carte di disparità ottenute cù a tecnulugia DPAF sò difficiuli à l'occhiu nudu
percepisce, ma pò ancu aiutà l'algoritmu di segmentazione di l'imaghjini per fà ghjudizii
Prima,Googlehà ancu utilizatu sta tecnulugiaPixel 2, 3per ottene una sfocatura di un colpu.Nantu à uPixel4, perchè a camera hè rimpiazzata da una specificazione multi-camera, a rilevazione di parallax hè significativamente più precisa cà una sola camera.
▲ Fighjemu i dati ottenuti da u Pixel 4 cù duie camere.
In quantu à u novu iPhone SE, perchè i so sensori sò troppu vechji, Halide dichjara chì ùn pò micca s'appoghjanu nantu à i sensori per ottene carte di disparità, è in fondu pò appughjà solu nantu à l'algoritmu di apprendimentu di machine furnitu da u chip A13 Bionic per simulà è generà dati di prufundità. mappe.
Una spiegazione di sentenza hè chì a ripresa di sfocatura di ritratti di l'iPhone SE hè interamente ottenuta da u software è l'algoritmi.
▲ Pigliate sta foto direttamente cùiPhone XRè novu iPhone SE
Halide hà utilizatuiPhone XRè u novu iPhone SE per piglià una foto di u cucciolo (micca un veru colpu, solu per piglià una foto di 'una foto'), è poi paragunate i dati di prufundità di i dui ritratti.
Anu trovu chì uiPhone XRSolu fattu una segmentazione simplice di l'imaghjini per caccià u corpu principale, ma ùn hà micca ricunnisciutu bè l'arechja di u cucciolo.
▲ Graficu di dati di prufundità,iPhone XRà manca, novu iPhone SE à a diritta
Ma nantu à u novu iPhone SE, cù u novu algoritmu furnitu da u chip A13, avemu avutu una mappa di prufundità chì hè cumplettamente sfarente daXR.Ùn ricunnosce micca solu currettamente l'arechje di u cucciolo è u contornu generale, ma ancu fà un trasfurmazioni in strati per diversi sfondi.
Stu tipu di mappa di prufundità ùn hè micca 100% precisa.Halide hà dettu chì l'accuratezza di u cutout è u sfocatura di u novu iPhone SE quandu si spara e foto sfocate senza faccia ùn hè micca cusì precisa cum'è quandu pigliate ritratti.
In particulare in u casu induve certi sugetti è l'imaghjini di fondo sò assai sfocati, u vantaghju di parechje camere serà più evidenti à questu tempu.
▲ In stu tipu di tema senza faccia, è u sughjettu è u fondu ùn sò micca chjaramente separati, u sfocatura di u novu iPhone SE
hè faciule fà sbagli
Comu pudete vede da sta stampa, uiPhone 11 Profurnutu cù un sistema multi-camera pò micca solu delinea cumplettamente i pianti chjuchi nantu à u logu, ma ancu ponu ricunnosce a distanza di u sfondate è fà un trasfurmazioni stratificate.
▲ Graficu di dati di prufundità,iPhone 11 Proà manca, novu iPhone SE à a diritta
Nantu à u novu iPhone SE, malgradu i stessi risultati di trasfurmazioni stratificate, u sughjettu è u sfondate sò stati cumpletamente fusi inseme.Naturalmente, u prucessu post-blurring serà naturalmente assai peghju chè uiPhone 11 Pro.
▲ E prove sfocate reali,iPhone 11 Proà a manca è u novu iPhone SE à a diritta
Hè per quessa, quandu u novu iPhone SE usa iOS propiucameraApp, solu quandu un visu umanu hè rilevatu, u "Mode Portrait" pò esse attivatu à piglià photos sfocata.In altri casi, un errore appariscerà.
U mutivu hè sempre ligata à l'algoritmu di Apple.Halide hà mintuatu una tecnica chjamata 'Effetti Ritratti Matte' (Effetti Ritratti Matte), chì hè principarmenti utilizatu per truvà u contornu precisu di e persone in ritratti in modu di ritrattu, cumprese dettagli cum'è a linea di capelli nantu à a riva, a cornice di occhiali, etc. U sughjettu è u fondu. sò segmentati.
Ma attualmente, stu settore di tecnulugia di segmentazione basata nantu à l'apprendimentu di machine hè più preparatu per "tirà a ghjente", pò daveru cumpensà a mancanza di dati di parallax in una sola.cameratelefoni cum'èiPhone XRè iPhone SE, ma s'è u sughjettu L'algoritmu farà ancu un errore di ghjudiziu quandu cambia i caratteri da altri ogetti.
In quantu à i telefoni multi-camera cum'èiPhone 11 Pro, Pudete ottene dati parallax direttamente attraversu ucamerahardware, perch'elli ponu ancu aduprà u modu di ritrattu in sceni non-face quandu utilizanu u so propiucamera.
▲ A lente frontale di u novu iPhone SE sustene ancu u modu di ritrattu, è a precisione di a faccia hè assai alta,
è a diferenza di l'imaghjini hè solu in l'effettu bokeh
Di sicuru, i sviluppatori di terzu pò ancu aduprà e cose chì ùn sò micca supportati ufficialmente.Avà l'app Halide pò susteneiPhone XR, SE per piglià ritratti sfocati di picculi animali o altri oggetti.In fatti, usa ancu a tecnulugia di maschere di ritratti d'Apple per ottene carte di prufundità, è dopu aghjunghje a so propria ottimisazione back-end per ottene.
▲ Utilizendu app di terze parti cum'è Halide, pudete aduprà u novu iPhone SE per piglià foto sfocate di sughjetti senza faccia.
In generale, a sfocatura di ritratti ottenuta da stu novu iPhone SE hè u limitu chì pò esse ottinutu da l'ottimisazione di u software per i telefoni di una sola camera.In modu strettu, questu hè in realtà per u chip A13.S'ellu ùn hà micca purtatu l'ultimu algoritmu di apprendimentu di macchina, ucamerasperienza sola, l'esperienza di tirò SE deve esse ovviamente a mità.
Dunque, hè sempre significativu per i smartphones per sviluppà sistemi multi-camera.Pudemu aduprà un angolo ultra-largu per allargà u campu di vista, è pudemu confià nantu à a lente telephoto per ottene ritratti di zoom non distruttivi.Aiutà à a rilevazione di a realtà aumentata, queste ùn sò micca solu ottenute da un aghjurnamentu OTA, o da a macinazione di l'algoritmi.
Di sicuru, bragging blindly è cumpetizione per u numeru di camere hè ancu fastidiosu.Se u hardware determina solu u limitu più bassu di l'imaghjini, allora un inseme d'algoritmi eccellenti ponu elevà significativamente u limitu superiore di l'imaghjini, è ancu riesprime u valore è u valore di u vecchiu hardware.putenziale.
Ùn sò micca s'ellu pudemu aspittà altri quattru anni.Quandu a prossima generazione di iPhone SE esce, serà unicucameruun hà sempre un postu in l'industria di u telefuninu?
Tempu di post: May-06-2020