Blauwdruk voor de toekomst van fotografie - computationele fotografie

Schrijver: Lewis Jackson
Datum Van Creatie: 13 Kunnen 2021
Updatedatum: 14 Kunnen 2024
Anonim
23 JOBS OF THE FUTURE (and jobs that have no future)
Video: 23 JOBS OF THE FUTURE (and jobs that have no future)

Inhoud


We zijn bezig met onze tweede week van de #ShotOnSnapdragon-fotowedstrijd en daarmee ook nog eens nader bekeken hoe platforms zoals het Qualcomm (R) Snapdragon (™) 855 mobiele platform de mogelijkheden van de fotografie van uw smartphone verbeteren. Als je dat nog niet hebt gedaan, bekijk dan onze tips om ook je fotografische vaardigheden te verbeteren.

Voortbouwend op de blik van vorige week op Image Signal Processors (ISP), onderzoeken we vandaag hoe Qualcomm Spectra (™) ISP-technologie in combinatie met Computational Photography-mogelijkheden uw smartphonefoto's naar een geheel nieuw niveau brengt. Met computationele fotografie bedoelen we geavanceerde beeldvormingstechnieken die de reguliere mogelijkheden van digitale fotografie verbeteren en uitbreiden. Sommige hiervan stellen fotografen in staat om hun afbeeldingen handmatig aan te passen, terwijl anderen subtiel op de achtergrond werken en ervoor zorgen dat uw foto's er altijd de beste uitzien. Laten we erin duiken.


Mobiele platforms gebouwd voor het kraken van beeldgegevens

Hoewel een ISP perfect is in het omgaan met reguliere fotografie- en video-opnametaken, vereisen meer geavanceerde algoritmen voor computationele fotografie krachtigere hardware. Gebruiksscenario's omvatten bokeh-software-software voor een professionele scherptediepte-effect, High Dynamic Range-kleurenverwerking, multi-camera-opnamen, elektronische beeldstabilisatie (EIS) en superieure digitale zoommogelijkheden.

Snapdragon Mobile Platforms zijn opgebouwd uit veel verschillende verwerkingsonderdelen, elk met hun eigen specialiteiten en mogelijkheden - waarvan vele geschikt zijn voor geavanceerde beeldverwerking. Naast de algemene CPU en het vastleggen van afbeeldingen Qualcomm Spectra ISP, bevatten Snapdragon mobiele platforms een Qualcomm (R) Hexagon (™) Digital Signal Processor (DSP) en Qualcomm (R) Adreno (™) Graphics Processing Unit (GPU) die beide goed geschikt voor het verwerken van geavanceerde beeldvormingsalgoritmen. Het gebruik van deze componenten op het platform staat in de mobiele industrie bekend als heterogene verwerking.


Het combineren van de mogelijkheden van meerdere SoC-verwerkingscomponenten verbetert de prestaties en energie-efficiëntie van computationele fotografie op een Snapdragon Mobile-platform

Elk van deze verwerkingseenheden is nuttig bij verschillende soorten algoritmen. CPU's bieden bijvoorbeeld de beste prestaties wanneer het algoritme niet erg parallel is en vereist

vertakkingen. Ondertussen lopen zeer parallelle algoritmen, die vaak opduiken in beeldverwerkingstechnieken zoals HDR en verwijderbare objecten, veel sneller op een GPU. Ten slotte is een DSP de perfecte verwerkingseenheid voor real-time sensorgebaseerde applicaties en machine learning-taken zoals objectdetectie.

Smartphones met Snapdragon bieden bijvoorbeeld Electronic Image Stabilization (EIS) zonder dat er extra mechanische onderdelen nodig zijn. Door bewegingen van de versnellingsmeterhardware van de telefoon te volgen en trackingalgoritmen op de Adreno GPU uit te voeren, kan de Spectra ISP op het juiste moment een zeer stabiel ogend beeld nemen. Dit zorgt ervoor dat je foto's niet wazig worden, zelfs als je geen vaste handen hebt.

De nieuwste Qualcomm Spectra 380 ISP in de Snapdragon 855 en Qualcomm Spectra 350 in de Snapdragon 730 bevatten speciale Computer Vision (CV-ISP) verwerkingscomponenten voor nog efficiëntere versnelling. Hierdoor kan de CV-ISP zelf objectdetectie, achtergrondvervanging en real-time 4K HDR bokeh-vervaging uitvoeren, waardoor verwerkingsbronnen op de CPU, GPU en DSP worden vrijgemaakt om andere processen uit te voeren.

Fotografie slimmer maken

Software bokeh scherptediepte

Portretmodi en software-bokeh zijn een nietje-effect van smartphonecamera's geworden. Biedt DSLR-achtige vervaging, verschillende lichteffecten en zelfs achtergrondvervangende effecten om het uiterlijk van uw foto's drastisch te veranderen.

Om een ​​software-wazig effect te creëren, heeft de camera diepte-informatie nodig over de scène waarin u fotografeert. Een manier om dit te doen is om een ​​speciale dieptecamera, zoals een vliegtijdsensor, op te nemen om de werkelijke afstand te detecteren. Als alternatief kan een telefoon met twee camera's tegelijkertijd een foto maken op twee verschillende brandpuntsafstanden. Snapdragon Mobile Platforms ondersteunen meerdere camera's als fabrikanten van smartphones deze technologie willen implementeren. Een alternatieve methode die door veel afzonderlijke camera's wordt gebruikt, is het maken van foto's op meerdere focuspunten zeer snel achter elkaar.

Zodra de telefoon gegevens met meerdere brandpuntsafstanden heeft, worden stereo-algoritmen, die op dezelfde manier werken als onze ogen, toegepast om te onderscheiden welke objecten zich op de voorgrond en welke op de achtergrond bevinden. Een tweede vervagingsalgoritme wordt vervolgens op de afbeelding toegepast om objecten te verzachten die niet scherp zijn. Het voordeel van deze methode is dat het onderwerp, de hoeveelheid onscherpte en andere effecten kunnen worden gewijzigd nadat de foto is gemaakt. Deze gegevens kunnen ook worden opgeslagen in het HEIF-beeldformaat.

Software Bokeh uit Software bokeh aan

Met de CV-ISP in de nieuwste Snapdragon Mobile Platforms kunnen handsets bokeh-vervaging toepassen op niet alleen foto's, maar ook op live video. De CV-ISP produceert bokeh-onscherpte tot 4K in real-time video, en ondersteunt ook een hoog dynamisch bereik, ook 10-bits kwaliteit.

Superieur zoomen

Inzoomen op onderwerpen in een zeer handige fotografietechniek om de perfecte foto in te kaderen. Sommige telefooncamera's zitten echter altijd vast aan de digitale zoomfunctie, wat de kwaliteit aanzienlijk verlaagt zodra je vrij ver begint in te zoomen. Optische zoom- of telelenscamera's lijken hierbij te helpen, maar extra camera's en lenzen kunnen duur zijn. Het is mogelijk om zeer goede ingezoomde foto's te maken met slechts één camera, dankzij enkele slimme algoritmen en hardware om ze efficiënt te laten werken.

Qualcomm (R) OptiZoom (™) camerafunctie is ontworpen om 12 beelden snel vast te leggen. Algoritmen combineren gegevens van deze 12 opnamen samen door verschillen en overeenkomsten tussen pixels te observeren. Deze verschillen in subpixels tussen opnames worden gebruikt om extra details te verzamelen, waardoor een afbeelding met een hogere resolutie en extra details ontstaat. Dit wordt ook wel superresolutiezoom genoemd en het levert enorm superieure resultaten op voor het digitaal bijsnijden van je foto nadat je op de ontspanknop hebt gedrukt.

2,6x voorbeeld van digitale zoom 2,6x voorbeeld van superresolutiezoom

Hoog dynamisch bereik (HDR)

HDR-verwerking is vereist in scènes met een grote variatie tussen licht en donker om over- of onderbelichting te voorkomen. Voorbeelden hiervan zijn het proberen om een ​​object te fotograferen tegen een fel verlichte achtergrond, zoals een bewolkte hemel of fotograferen bij weinig licht met een enkele lichtbron.

Smartphones aangedreven door Leeuwebek maken foto's met een hoog dynamisch bereik door meerdere foto's samen te combineren, elk met een andere belichtingsinstelling. Donkerdere foto's belichten highlights correct, zoals de zon en wolken, terwijl helderdere belichtingen highlights in het donker naar voren brengen. Algoritmen combineren details van al deze afbeeldingen samen om een ​​afbeelding te maken die betere highlights en schaduwen biedt dan een standaardafbeelding. De "spookvrije" HDR-technologie van Qualcomm Technologies werkt ook om wazige randen te voorkomen door bewegingen van de opname te detecteren en te verwijderen.

HDR uit HDR aan

Helpt u betere foto's te maken

Moderne smartphones zijn voorbijgegaan en bieden alleen geweldige camerahardware. Ze bieden nu ook geavanceerde verwerkingstechnieken en trucs om de steeds kleinere kloof te dichten met professionele DSLR-camera's. Snapdragon Mobile Platforms vormen de kern van veel van de apparaten die consumenten het allerbeste bieden op het gebied van mobiele fotografie.

Natuurlijk is geavanceerde verwerking slechts een deel van het beeld. Als je uitstekende foto's wilt maken, bekijk dan onze tips van experts voor het maken van de perfecte foto. En vergeet niet uw inzendingen voor de #ShotOnSnapdragon-fotowedstrijd in te dienen voor uw kans om een ​​Snapdragon 855-smartphone te winnen.

Inhoud gesponsord door Qualcomm Technologies, Inc.

Qualcomm Snapdragon, Qualcomm Spectra, Qualcomm Adreno, Qualcomm Kryo, Qualcomm OptiZoom en Qualcomm Hexagon zijn producten van Qualcomm Technologies, Inc. en / of haar dochterondernemingen.

Update, 8 juli 2019 (11:15 AM ET):Volgen een nieuw rapport vanDe NY Pot, Kan Google in geprek zijn met Dih al het gaat om het maken van de verondertelde vierde provider die in het ondertaande artikel ...

Volgen bronnen van binnen preken metBloomberg, Dih i naar verluidt in laatte geprekken om verchillende activa - incluief draadloo pectrum - te kopen van zowel T-Mobile al print. Al dit waar i, kan dit...

Interessant Vandaag