Smart telefon 3D-bildteknik

May 21, 2018

1, öppnar iPhone X en ny era av 3D-bildbehandling

Face ID är höjdpunkten för iPhone X, 3D-bildbehandling orsakade enastående uppmärksamhet


I år är alla mest imponerade av iPhone Xs nya identitetsautentiseringsmetod, nämligen Face ID, som också är en nyckelförsäljningsplats för iPhone X. Användaren behöver bara titta på telefonen för att låsa upp ansiktet. IPhone Xs ansikte ID skiljer sig från vanligt ansiktsigenkänning och lägger till djup information, vilket gör identitetsautentisering säkrare.


Ansikts-ID är klar med ett litet område på toppen av iPhone X som inte är täckt av skärmen. Detta område integrerar 8 delar, inklusive mikrofon, högtalare, frontlins, omgivande ljussensor, avståndssensor, infraröd lins, flödesavkännande element, punktmatrisprojektorer etc. Apple kallar hela systemet True Depth Camera System och hela systemet kan användas inte bara för ansikte-ID-ansiktsverifiering utan också för självutlösare och AR-effekter.




3D-bildteknik använder infraröda sändare och mottagarmoduler för att förvärva djupdata som position och detalj i skytteobjektet och återställer verkligen den verkliga scenen. För närvarande finns det tre huvudsakliga sätt att förverkliga: (1) Monokulärt strukturerat ljus, på företagets vägnar, har Apple (förvärvet av det största strukturljusteknikföretaget Prime Sense), Microsoft Kinect-1, Intel RealSense, Google Project Tango , etc. För närvarande följer nästan alla startföretag Följ den här tekniska rutten. (2) Binokulärt synligt ljus som representerar företaget Leap Motion; (3) är tiden för flygmetoden (TOF), som representerar företaget Microsoft Kinect-2.


Strukturerat ljus är baserat på principen om optisk triangulering. Avståndet mellan objektet och ljuset mäts enligt graden av ljuspunktsförvrängning på objektet. När exempelvis ljuspunkten är direkt, återspeglar storleken avståndet mellan motivet och objektet. När ljuset är snett är brännvidden på den elliptiska punkten Reflekterande vinkeln mellan skottobjektet och kameran, kameran samlar in ändrade platsdata och rekonstruerar objektmodellen genom en algoritm.


TOF är en 3D-avbildningsmetod genom att kontinuerligt avge en laserpuls till ett mål och sedan ta emot det reflekterade ljuset från sensorn. Det exakta målavståndet uppnås genom detektering av lopppulsens avgångstid.


Binocular Stereo Vision är en viktig form av maskinsyn. Den baseras på parallaxprincipen och använder avbildningsutrustning för att förvärva två bilder av ett uppmätt objekt från olika positioner och beräknar positionsavvikelsen mellan motsvarande punkter i bilden. För att få objektets 3D geometriska information.


Bland de tre mainstream-systemen är de mer mogna de strukturerade ljuset och TOF. Som den tidigaste utvecklade 3D-bildlösningen är den strukturerade ljuslösningen den mest mogna och har använts i stor utsträckning inom det industriella 3D-synfältet. Däremot är dess nackdelar sårbarheten för yttre ljusinterferens, långsam respons och låg igenkänningsnoggrannhet. Den är lämplig för närliggande scener. Det är för närvarande den vanliga lösningen för framåtvänd 3D-bildbehandling. TOF-systemet är mer fördelaktigt än det strukturerade ljusschemat i dessa aspekter. Flygtiden kan noggrant mäta realtidsavståndet. Det har blivit den mest lovande lösningen för den nuvarande bakkamera. Jämfört med de tidigare två har den binokulära stereoskopiska bildhanteringslösningen stark anti-omgivande ljusinterferens och hög upplösning, och är också en av de mobila terminalalternativen. Teknikutvecklingstiden är dock kort och inte mogen. För närvarande används den i stor utsträckning i robotvision och automation. Körningsområde.



Face ID använder ett strukturerat ljusschema och är den säkraste ansiktsigenkänningslösningen tillgänglig idag


Det finns flera sätt att implementera 3D-bildbehandling. Apple Face ID använder en strukturerad ljuslösning. Det projekterar ett nätverk av mer än 30.000 ljusa fläckar på en persons ansikte, och när användaren vänder på huvudet för att kartlägga 3D-formen på ansiktet, är slutresultatet en tredimensionell bild. Samtidigt jämförs med den registrerade användarens ansiktsdata genom frigörandet av en oberoende neuromotor (Neural Engine) för behandling av användarens ansiktsdata.


Apples ansikte ID antar strukturerat ljusläge, främst för att möta ansikts komplexitet och säkerhetskrav i människans ansikte. Användning av ett visst belysningsinstrument använder OR: rgb (51,51,51); FONT-STYLE: normal; TEXT- ALIGN: center; ORPHANS: 2; WIDOWS: 2; LETTER-SPACING: normal; BAKGRUND-FÄRG: rgb (248, 252, 255); TEXT-INDENT: 0px; font-variant-ligaturer: normal; font-variant-caps: normal; - Webkit-text-stroke-bredd: 0px ">

Figur: Tre ljuskällans prestanda jämförelse

VCSEL-tillverkningsföretagens mobila design är främst koncentrerade i USA, Finsar, Lumentum, Princeton Optronic, Heptagon och andra företag. För närvarande har endast Acceleration Technologies lanserat kommersiella VCSEL-produkter inom området optisk kommunikation.


Kollimeringslins (ökad efterfrågan): Kollimatorlinsens funktion är att omvandla laserljuset till en axisymmetrisk cylindrisk parallell ljusstråle, som i allmänhet består av två grupper av linser. Den första gruppen av linser komprimerar först laserstrålen till en ljusstråle med en mindre dispersionsvinkel. Efter att ha passerat genom den andra uppsättningen konvexa linser är strålen i rumsutrymmet axisymmetrisk cylindrisk parallell stråle.


Wafer-nivå objektiv: WLO} WaferLevelOptics) processen producerar huvudsakligen WLC (Wafer Level Cameras), som är asfärisk replikering av två ytor av glas, 8 tums Wafer kan producera mer än 6000 Dies åt gången och behöver inte vara i WLC paketprocessen. Fokusering, vilket reducerar processen att fokusera hartslinsen direkt på TSV för att täta halvlederprocessens batchkopi-lins och sedan skäras i en enda lins jämfört med den traditionella kameramodulen, vilket minskar kameramodulens tjocklek. Det eliminerar moduleringsfokusering och kan monteras direkt med hjälp av SMT-utrustning. Det blir den stora trenden i framtida kameramodul. Bland dem hålls de flesta patent för wafernivålinser i heptagonens händer. I Kina har Jingtian Technology och Huatian Technology behärskat wafer-nivå objektiv efterbehandlingsteknik och förväntas komma ikapp.


DOE (diffraktionsöppning): Laserstrålen som utsänds av VCSEL är inte specifik. Efter kollimering kollimeras laserstrålen och sedan används DOE-diffusorn för att erhålla det önskade spetsmönstret. För närvarande hålls DOE-diffusorns huvudpatent av tyska CDA-företag. Inhemsk Fujing Technology har viss teknisk ackumulering här.


Infraröd mottagare av 3D-bildkärnemodul


Infraröd mottagare: tar emot osynligt infrarött ljus reflekterat från ett ämne och erhåller rumslig information av det fångade objektet genom beräkning. Infraröd mottagare innehåller tre delar av speciella infraröda CMOS; smalt bandfilter: objektivlins.


Infraröd CMOS (inkrementell efterfrågan): Används för att ta emot överförda infraröda fläckar. Skillnaden med konventionella RPG-sensorer är att de ljusstrålar som behöver identifieras är mestadels infrarött ljus, vilket är en relativt nisch och mogen marknad, med nedströms VR, AR, Assisted Driving, ansiktsigenkänning ökar, framtida marknaden kommer att gradvis öka! Men klyftan inom hushållssensorer är tydligare, kortsiktig är svår att bryta igenom.


Infrarött smalbandsfilter (inkrementell efterfrågan): Infraröd CMOS mottar infrarött ljus vid 940 nm. För att avlägsna påverkan av omgivande ljus krävs ett smalbandsljusfilter för att filtrera det mesta av det omgivande ljuset. Endast nära infrarött ljus av ett specifikt våglängdsband får passera. För närvarande använder smala band smalband filter huvudsakligen principen om störningar, vilket kräver dussintals lager av optiska beläggningar. Jämfört med RGB-absorptionsfilter har det högre tekniska svårigheter och produktpriser.


Huvudproduktionskapaciteten för smalbandsfiltrar är huvudsakligen koncentrerad i USA VIAVI och inhemska kristall fotoelektriska händer, leverantörerna är begränsade, är för närvarande det viktigaste genombrottet i den inhemska 3D-bildindustrin.


Objektiv (icke-inkrementell efterfrågan): Objektiv med traditionell 2D-bildbehandling är industrin kedjan relativt mogen, främst märkt med kristall fotoelektriska, Da Liguang (3008.TW), Yu Jing Optoelektronik.


Kamera- och chipalgoritmmodul i 3D-bildkärnemodul


Kameramodul (inkrementell efterfrågan): 2D-bildmodultekniken är mogen, huvudinkrementet kommer från

Bytet av 3D-bildmodulen ökar värdet för de enskilda modulerna. I modulindustrin finns det företag som Ophelia, Sunny Optical och Chute Technology.


Bildbehandlingschip (inkrementell efterfrågan): hög teknisk svårighet, höga hinder. 3D-bilden erhålls genom att integrera 2D-bilden med positionsinformationen från infraröd. För närvarande styrs chipet av Texas Instruments och STMicroelectronics, och inhemska Quanzhi Technology, Beijing Junzheng och Ruixin Micro har viss ackumulering på bildbehandlingschipet.


2, 3D-bildteknik för att lösa gränserna för 2D-bildbehandling, öppnar djupdata nya applikationer

Applikationsscenariot 2D är för restriktivt. De heta områdena av nuvarande teknik, såsom interaktion mellan människor och datorer, ansiktsigenkänning, AR / VR, dronnavigering, somatosensoriska spel, förarhjälp, robotvision och så vidare, är alla bortom 2D-plan bildbehandling.


3D-kameran kan täcka flera domän applikationsscenarier, och 3D-kameran kan realisera 3D-informationsuppsamling i realtid.

Den objektmedveten funktionen adderades till konsumentelektronikterminalerna och introducerade därmed flera "smärtpunktsapplikationsscenarier", inklusive interaktion mellan människa och datorer, ansiktsigenkänning, tredimensionell modellering, AR, säkerhet och assisterad körning.


1) Biometrics: främst ansiktsigenkänningsteknik och iris-erkännande teknik. För djup samling av mänskliga ansikts- och pupildetaljdata kan 3D-bildbehandling slutföra datainsamlingen i realtid av infångade objekt, vilket förbättrar biometrins tillförlitlighet. .


Under de sex åren från 2007 till 2013 nådde den sammanslagna tillväxten på den globala biometriska marknaden en nivå på cirka 22%. Det förväntas att marknadsstorleken för den globala biometriska industrin kommer upp till 25 miljarder dollar år 2020.



2) Gestigenkänning: Gestigenkänning frigör traditionella gester från skärmen, aktuella 2D-gester

Erkännande kan bara göra några enkla operationer, till exempel kontroll av start och paus av videouppspelning, visning av bilder etc. För mer komplicerade sportspel eller AR / VR är 2D-gestigenkänningstekniken ännu inte färdig. Den intelligenta hårdvaran integrerad med 3D-kameran i framtiden kommer att underlätta populariseringen och tillämpningen av 3D-gestkännedomen, vilket också kommer att ge en interaktiv upplevelse som ligger närmare människans sätt än pekskärmsinteraktionen.


3) Smart körning. 3D-bildbehandling tillämpas på intelligent körning, och det kan mer fullständigt få information om vägbanan att matas tillbaka till det intelligenta drivsystemet i realtid. Hjälpsystemet kan slutföra korrekt kommandooperation och göra framtida smart körning säkrare.


4) När det gäller smart säkerhet kan smarta kameror användas för att analysera huruvida människors beteende är potentiellt skadligt inom finansbranschen, men deras algoritmiska krav är mycket höga.


5) AR / VR: AR / VR utvecklas snabbt och hårdvaran har ackumulerats, men

När det gäller att göra innehåll genereras det mesta av VR-innehållet av datorn. I framtiden kan djupkameran användas.

Få innehåll direkt och verkligen inse virtuell verklighet interaktion.


För närvarande använder både mobilterminalstillverkare, linsprodusenter och Internet och datafält aktivt 3D-bildbehandling, och 3D-bildningsfältet kommer att bli nästa blå hav i framtiden.


3, 3D bildbehandling framtida marknad utrymme

Under årtionden har 3D bild- och sensorteknologi mognat på high-end-marknaden och har uppnått stor framgång inom medicinska och industriella områden.


Enligt Yoles nyligen annonserade innovativa bildteknik och marknadsundersökningsrapport, 2016, 3D-bildbehandling

Sensorns delar började visa en betydande kommersiell expansion med en marknadsstorlek på över 1,3 miljarder dollar. Under den närmaste tiden har det skett en accelerationsutveckling. Genom första tillträdet till smarttelefonmarknaden kommer VR / AR och bärbara applikationer också att öka volymen av leveranser. Det beräknas att 2022 kommer mer än en miljard 3D-avbildningsenheter att skickas. Under de kommande fem åren förväntas den sammanslagna årliga tillväxttakten på 3D-bildnings- och sensordelmarknaden bli 37,7% och år 2022 uppnår den 9 miljarder USD.


Enligt Intelligence Research Consulting, år 2020, uppnådde smartphone-sändningar 1,925 miljarder enheter. Vi förutspår att, med tanke på antagandet av den främre vända 3D-kameran i iPhone X, kommer 3D-kamerans penetrationsgrad i Apples mobiltelefon 2017 att vara ca 20%, 70% 2018, 90% 2019 och 100% 2020 . Andra tillverkare började sent, och det förväntas att 2018, 2019 och 2020 kommer penetrationshastigheten för det främre 3D-bildstruktureringsljusprogrammet att vara 10%, 20% respektive 30%. Marknadsstorleken för smarta telefoner framstegs 3D-konstruktionsljuslösningar uppgår till 4 928 miljoner US-dollar och kommer att bibehålla snabb tillväxt de närmaste åren.


Du kanske också gillar