Wanneer ingenieurs een cameramodule evalueren, wordt het energieverbruik vaak behandeld als een eenvoudige specificatie die in het gegevensblad wordt vermeld. In werkelijkheid is het energieverbruik van de cameramodule het resultaat van de samenwerking van meerdere subsystemen, waaronder de beeldsensor, ISP, geheugenbuffers, hoge-snelheidsinterfaces, klokken, spanningsregelaars en de hostprocessor.
Inzicht in de onderliggende bronnen van energieverbruik is van cruciaal belang voor embedded vision-systemen, industriële camera's, AI-edge-apparaten, producten op batterijen- en machine vision-toepassingen. Een slecht begrip van het stroomgedrag kan leiden tot oververhitting, onstabiele beeldkwaliteit, een kortere levensduur van de batterij en onverwachte systeemstoringen.
Wat nog belangrijker is, is dat veel ingenieurs ten onrechte aannemen dat het energieverbruik rechtstreeks wordt geschaald met de sensorresolutie. In de praktijk is de dominante factor vaak de totale beelddoorvoer-de hoeveelheid beeldgegevens die elke seconde moet worden vastgelegd, verwerkt, verzonden en geanalyseerd.
Het stroomverbruik begint met de pixeldoorvoer
Op sensorniveau hangt het energieverbruik nauw samen met de pixeldoorvoer en niet alleen met de resolutie.
Bijvoorbeeld:
- 2 MP @ 30 FPS=ongeveer 60 miljoen pixels per seconde
- 5 MP @ 30 FPS=ongeveer 150 miljoen pixels per seconde
- 8 MP @ 60 FPS=ongeveer 480 miljoen pixels per seconde
Elke pixel moet worden belicht, omgezet van analoge naar digitale vorm, overgedragen via sensoruitleescircuits, verwerkt door de ISP, verzonden via de interface en uiteindelijk afgehandeld door de hostprocessor.
Naarmate de pixeldoorvoer toeneemt, verbruikt bijna elk blok in de beeldpijplijn meer stroom. Dit is de reden waarom een 8MP-camera die met hoge framesnelheden werkt meerdere malen meer stroom kan verbruiken dan een 2MP-camera, zelfs als beide vergelijkbare halfgeleidertechnologieën gebruiken.
De beeldsensor is meer dan alleen pixels
De beeldsensor wordt vaak gezien als de belangrijkste energieverbruiker, maar om te begrijpen waar de sensorkracht aan wordt besteed, moet dieper in de interne architectuur worden gekeken.
Moderne CMOS-beeldsensoren bevatten:
- Pixelarrays
- Rij- en kolomdrivers
- Analoge versterkers
- Gecorreleerde dubbele bemonsteringscircuits
- Analoog-naar-digitaal converters (ADC's)
- Timing-generatoren
- Serializers met hoge-uitvoer
Van deze blokken zijn ADC's en hoge{0}} uitgangscircuits vaak verantwoordelijk voor een aanzienlijk deel van het energieverbruik van de sensor. Naarmate de framesnelheden toenemen, moeten deze circuits op hogere frequenties werken, waardoor het dynamische energieverbruik aanzienlijk stijgt.
Beeldvorming bij weinig-licht kan ook de stroombehoefte van de sensor verhogen. Langere belichtingstijden, hogere analoge versterking en geavanceerde HDR-modi vereisen vaak extra sensorbewerkingen die meer energie verbruiken dan standaard beeldmodi.
Waarom ISP-verwerking de grootste stroomverbruiker kan worden
In veel moderne camerasystemen verbruikt de Image Signal Processor (ISP) evenveel stroom als de sensor zelf-of zelfs meer.
Ruwe sensordata zijn niet direct bruikbaar. Voordat een afbeelding de applicatielaag bereikt, doorloopt deze doorgaans tientallen verwerkingsfasen:
- Demozaïek
- Automatische belichting (AE)
- Automatische witbalans (AWB)
- Correctie van lensschaduw (LSC)
- Defectpixelcorrectie (DPC)
- Ruisonderdrukking
- Verscherping
- Kleurcorrectie
- HDR/WDR-verwerking
- Gamma-aanpassing
- Toon mapping
Veel van deze algoritmen werken op elke pixel van elk frame. Naarmate de resolutie en framesnelheid toenemen, groeit de rekencomplexiteit snel.
De HDR- en WDR-modi zijn bijzonder veeleisend omdat meerdere belichtingen moeten worden vastgelegd en samengevoegd tot één beeld. In sommige toepassingen kan het inschakelen van HDR de ISP-werklast met meer dan 50% verhogen, wat resulteert in een merkbare stijging van het totale energieverbruik van het systeem.
Framesnelheid is vaak belangrijker dan resolutie
Veel ingenieurs concentreren zich sterk op megapixels, terwijl ze de framesnelheid over het hoofd zien.
Vanuit een energieperspectief kan de framesnelheid een nog grotere impact hebben dan de resolutie, omdat deze rechtstreeks bepaalt hoe vaak de gehele beeldpijplijn moet werken.
Overweeg een 2MP-camera:
- 2MP @ 30FPS
- 2MP @ 60FPS
- 2MP @ 120FPS
Een verdubbeling van de framesnelheid verdubbelt effectief de sensoruitleesactiviteit, de ISP-verwerkingswerklast, de geheugentoegangsfrequentie en de vereisten voor interfacetransmissie.
Dit verklaart waarom industriële hoge-camera's vaak actieve koeling vereisen, zelfs als hun resolutie relatief bescheiden is.
De verborgen kosten van geheugen- en gegevensverplaatsing
Een vaak over het hoofd geziene bron van energieverbruik is geheugentoegang.
Voor veel beeldverwerkingsbewerkingen zijn tijdelijke framebuffers nodig die zijn opgeslagen in het DDR-geheugen. Elke lees- en schrijfbewerking verbruikt energie.
Voor AI-visiesystemen kunnen beeldgegevens meerdere keren worden overgedragen:
- Sensor naar ISP
- ISP naar DDR-geheugen
- DDR naar AI-versneller
- AI-versneller naar CPU
- CPU voor weergave of opslag
In veel edge AI-apparaten verbruikt het verplaatsen van beeldgegevens door het geheugen meer stroom dan de daadwerkelijke beeldverwerkingsalgoritmen zelf.
Het stroomverbruik van de interface is niet te verwaarlozen
Hoge-snelheidsinterfaces zoals USB 3.0, MIPI CSI-2 en Gigabit Ethernet vereisen speciale fysieke laagcircuits die op zeer hoge frequenties werken.
Naarmate de beelddoorvoer toeneemt, stijgen de eisen aan de interfacebandbreedte dienovereenkomstig.
Het verzenden van ongecomprimeerde 4K-video vereist bijvoorbeeld aanzienlijk meer interfacevermogen dan het verzenden van gecomprimeerde 1080P-video. In sommige systemen kan het interfacevermogen een betekenisvol percentage van het totale verbruik van de cameramodules worden.
Het stroomverbruik heeft een directe invloed op de beeldkwaliteit
Stroomverbruik is niet alleen een elektrisch probleem. Het beïnvloedt rechtstreeks het thermisch gedrag.
Naarmate de sensortemperatuur stijgt:
- Donkerstroom neemt toe
- Beeldruis wordt beter zichtbaar
- De signaal-tot-ruisverhouding neemt af
- De prestaties bij weinig-licht gaan achteruit
- De betrouwbaarheid op de lange- termijn kan verminderd zijn
Dit is de reden waarom thermisch ontwerp vaak onlosmakelijk verbonden is met de selectie van cameramodules. Een camera die slechts één extra watt verbruikt, kan de bedrijfstemperatuur in een compacte behuizing aanzienlijk verhogen.
Selectietips voor cameramodules
In plaats van de sensor met de hoogste- beschikbare resolutie te selecteren, moeten technici beginnen met de toepassingsvereisten en systeembeperkingen.
- Bepaal de werkelijke pixeldichtheid die vereist is op de doelafstand
- Definieer de minimaal aanvaardbare framesnelheid
- Evalueer de HDR/WDR-vereisten zorgvuldig
- Houd rekening met de doelstellingen voor de gebruiksduur van de batterij
- Beoordeel de thermische beperkingen van de behuizing
- Controleer de bandbreedtemogelijkheden van de processor en het geheugen
- Schat de totale beelddoorvoer voordat u een sensor selecteert
In veel embedded vision-toepassingen kan een goed geoptimaliseerde 2 MP- of 5 MP-cameramodule de vereiste beeldprestaties bereiken terwijl hij aanzienlijk minder stroom verbruikt dan een alternatief met een hogere- resolutie.
