STMicroelectronics kondigde aan dat het nu al autofabrikanten aan het uitrusten is met de vereiste technologieën. Terwijl DMS een grotere verkeersveiligheid belooft door de alertheid van de bestuurder te beoordelen, bewaakt de volgende generatie dubbele beeldsensor die ST aankondigde het volledige interieur van het voertuig, dat zowel de bestuurder als alle passagiers omvat. Nieuwe toepassingen die door de nieuwe beeldsensor van ST mogelijk worden gemaakt, zijn onder meer veiligheidsgordelcontroles van de passagiers, bewaking van vitale tekens, detectie van het verlaten van een kind, gebarenherkenning, en video/foto-opnamen van hoge kwaliteit.

De nieuwe sensor, de VD/VB1940, biedt een kosteneffectieve oplossing die de gevoeligheid en hoge resolutie van infrarooddetectie combineert met HDR (High Dynamic Range) kleurenbeeldvorming in één enkele component. Het kan afwisselend beelden opnemen in rolling-shutter en global-shutter modes. Met 5,1 megapixels legt hij de HDR-kleurenbeelden (High Dynamic Range) vast die nodig zijn voor een bewakingssysteem voor personen (OMS), naast de hoogwaardige bijna-infraroodbeelden (NIR) die standaard DMS-sensoren gewoonlijk vastleggen.

DMS gebruikt NIR-beelden om de hoofd- en oogbewegingen van de bestuurder in alle lichtomstandigheden te analyseren. Aangeboden in zowel kale wafers (VDB1940) als verpakt in BGA's (VB1940), zijn er nu monsters beschikbaar en is massaproductie gepland om te voldoen aan de vraag voor de voertuigen van modeljaar 2024 die nu ontworpen worden. Verdere technische informatie: De nieuwe beeldsensor voor auto's maakt gebruik van ST's tweede generatie 3D-stacked back-side illuminated (BSI) wafer-technologie, die het optische gebied en de verwerking op de chip maximaliseert in verhouding tot de die-grootte.

Hierdoor kan de sensor gesofisticeerde algoritmen lokaal uitvoeren voor optimale prestaties in zowel kleuren- als NIR-beeldvorming, waardoor stroom wordt bespaard en de vraag naar een externe co-processor wordt ontlast. Tot de algoritmen die op de chip worden uitgevoerd behoren Bayer-omzetting en HDR-samenvoeging voor optimale beeldkwaliteit en beeldsnelheid. Met de Bayerization-verwerking op de chip kan de gebruiker de kleurenpixels van het RGB NIR 4X4 patroon herschikken in een RGGB formaat dat compatibel is met een groot aantal SoC's.

Bovendien zorgt de lokale verwerking ook voor onafhankelijke kleur- en NIR-pixelbelichtingsoptimalisatie voor een optimale beeldkwaliteit in beide modi, en voor slim upscalen om de NIR-beeldresolutie te maximaliseren door extra NIR-informatie uit RGB-pixels te halen. De ingebouwde processor beheert ook verbeterde cyberbeveiliging om de privacy te garanderen in toepassingen met aangesloten voertuigen, inclusief wederzijdse authentificatie en koppeling van camera en elektronische regeleenheid (ECU), en verificatie van videostreams. De sensor registreert NIR-beelden in global-shutter modus, die synchronisatie met de infrarode LED-emitter mogelijk maakt om snel bewegende scènes zonder bewegingsonscherpte vast te leggen.

Door ook rolling-shutter modus te ondersteunen, waarbij pixelgegevens rij per rij worden gelezen, biedt de VD/VB1940 optimale beeldprestaties in kleur. Door gebruik te maken van de HDR-samenvoegfunctie op de chip in rolling-shutter modus, produceert de VB/VD1940 een 100dB kleurbeeld met volledige resolutie. De VD/VB1940 is gekwalificeerd volgens AEC-Q100 en voldoet aan ISO 26262 om het gebruik in functionele-veiligheidssystemen tot ASIL-B te vergemakkelijken.