Što je semantička segmentacija? Objašnjena tehnologija kamere pametnog telefona

Qualcomm je nedavno najavio svoju najnoviju vodeću platformu za pametne telefone, the Snapdragon 8 Gen 2.

Jedno od najvećih ažuriranja ovdje bio je novi Cognitive ISP, pametni procesor signala slike koji daje do 200 megapiksela slike, inteligentnije prepoznavanje lica putem Always-Sensing kamere i sve prednosti semantike u stvarnom vremenu segmentacija.

No, što je semantička segmentacija i što ona znači za kameru vašeg telefona?

Što je semantička segmentacija?

Semantička segmentacija je tehnologija snimanja koja kameri omogućuje prepoznavanje pojedinačnih aspekata unutar okvira, poput lica, kose, odjeće, pozadine i više. Ti se aspekti zatim mogu zasebno optimizirati, što znači da će kamera modificirati boju, ton, oštrinu i količinu šuma na slici od slučaja do slučaja.

Razmislite o semantičkoj segmentaciji poput slojeva Photoshopa unutar kamere vašeg telefona, dopuštajući da se različiti dijelovi slike pojedinačno prilagođavaju umjesto da kamera uređuje sliku kao cjelinu.

Semantička segmentacija u stvarnom vremenu točno je kako zvuči – isto kao i gore, ali sve se događa dok koristite kameru, a ne nakon što snimite sliku ili završite snimanje videozapisa.

Postoji mnogo slučajeva u kojima semantička segmentacija u stvarnom vremenu može poboljšati vašu mobilnu fotografiju.

Tehnologija se može koristiti za zaglađivanje kože, uklanjanje refleksije s naočala, izoštravanje kose i krzna, donosi više plavo do neba i poboljšati čitljivost teksta na ekranima iu knjigama, da spomenemo samo neke od njih u stvarnom svijetu koristi.

Možete vidjeti semantičku segmentaciju na djelu u videu iznad.

Koliko je točan?

Imali smo priliku testirati semantičku segmentaciju u stvarnom vremenu na Qualcommovom Snapdragon Summitu na Havajima ove godine i ustanovio da dobro odvaja kožu od kose, odjeće i pozadine iza nas, ali nije savršen.

U demonstraciji je kamera bila postavljena da sve što je pretpostavila da je koža pretvori u zelenu kako bi nam dala predodžbu koliko je točna.

Kamera je dobro odradila posao naglašavajući svu kožu na slici, osim malog dijela koji je virio iza naočala. No, dosta se borila s elementima slične boje, greškom ističući bež haljinu i narančasti iPhone kao koža jer su im se tonovi preblizu slagali s licem i rukama na slici.

U drugoj smo demonstraciji testirali značajku zaglađivanja kože i otkrili da je vrlo suptilna i prirodna, što rezultira nečim pomalo uvjerljiviji od nekih pretjerano revnih efekata izglađivanja pronađenih na TikToku, Instagramu i Android kameri nekih proizvođača originalne opreme softver.

U konačnici, na svakom je OEM-u da prilagodi značajke koje je omogućio Cognitive ISP onako kako želi, rekao nam je potpredsjednik odjela za upravljanje proizvodima za fotoaparate Judd Heape na Summit, što znači da ćemo morati pričekati da stigne prva serija telefona 8 Gen 2 da vidimo kako će semantička segmentacija u stvarnom vremenu poboljšati slike u stvarnom svijetu koristiti.

Zašto vjerovati našem novinarstvu?

Osnovan 2004., Trusted Reviews postoji kako bi našim čitateljima dao temeljite, nepristrane i neovisne savjete o tome što kupiti.

Danas imamo milijune korisnika mjesečno iz cijelog svijeta i procjenjujemo više od 1000 proizvoda godišnje.