Kas ir semantiskā segmentācija? Paskaidroja viedtālruņa kameru tehnoloģija

Qualcomm nesen paziņoja par savu jaunāko viedtālruņu vadošo platformu Snapdragon 8 Gen 2.

Viens no lielākajiem atjauninājumiem šeit bija jaunais Cognitive ISP, viedais attēla signālu procesors, kas nodrošina līdz 200 megapikseļiem. attēli, viedāka sejas noteikšana no Always-Sensing kameras un visas reāllaika semantiskās priekšrocības segmentācija.

Bet kas ir semantiskā segmentācija un ko tā nozīmē jūsu tālruņa kamerai?

Kas ir semantiskā segmentācija?

Semantiskā segmentācija ir attēlveidošanas tehnoloģija, kas ļauj kamerai atpazīt atsevišķus kadra aspektus, piemēram, sejas, matus, apģērbu, fonu un citus. Pēc tam šos aspektus var optimizēt atsevišķi, kas nozīmē, ka kamera katrā gadījumā mainīs attēla krāsu, toni, asumu un trokšņa daudzumu.

Padomājiet par semantisko segmentāciju, piemēram, Photoshop slāņiem tālruņa kamerā, ļaujot dažādas attēla daļas pielāgot atsevišķi, nevis kamerai rediģēt attēlu kopumā.

Reāllaika semantiskā segmentācija ir tieši tā, kā tas izklausās — tāpat kā iepriekš, taču viss notiek kameras lietošanas laikā, nevis pēc attēla uzņemšanas vai videoklipa ierakstīšanas.

Ir daudz gadījumu, kad reāllaika semantiskā segmentācija var uzlabot jūsu mobilās fotogrāfijas.

Tehnoloģiju var izmantot, lai izlīdzinātu ādu, noņemtu atspulgus no brillēm, asinātu matus un kažokādas, lai iegūtu vairāk zilas līdz debesīm un uzlabo teksta lasāmību ekrānos un grāmatās, lai nosauktu tikai dažas reālās pasaules lietojumiem.

Iepriekš redzamajā videoklipā varat redzēt semantisko segmentāciju darbībā.

Cik precīzi tas ir?

Mums bija iespēja pārbaudīt reāllaika semantisko segmentāciju Qualcomm Snapdragon samitā Havaju salās šogad un atklāja, ka tas labi atdalīja ādu no matiem, drēbēm un fona, bet tā nebija ideāls.

Demonstrācijā kamera tika iestatīta tā, lai viss, kas tika pieņemts kā āda, kļūtu zaļš, lai sniegtu mums priekšstatu par tās precizitāti.

Kamera paveica labu darbu, izceļot visu attēlā redzamo ādu, izņemot nelielu daļu, kas lūkojās ārā aiz brillēm. Tomēr tā daudz cīnījās ar līdzīgas krāsas elementiem, kļūdaini izceļot bēšo kleitu un oranžo iPhone kā ādu, jo to toņi pārāk cieši saskanēja ar attēlā redzamo seju un rokām.

Citā demonstrācijā mēs pārbaudījām ādas izlīdzināšanas funkciju un atklājām, ka tā ir ļoti smalka un dabiska, kā rezultātā radās kaut kas mazliet pārliecinošāk nekā daži no pārlieku dedzīgākajiem izlīdzināšanas efektiem, kas atrodami TikTok, Instagram un dažās OEM Android kamerās programmatūra.

Galu galā katrs oriģinālā aprīkojuma ražotājs ir noregulē Kognitīvā ISP iespējotās funkcijas tā, kā tas viņiem patīk, mums pastāstīja kameras produktu pārvaldības viceprezidents Džads Hīps. Summit, kas nozīmē, ka mums būs jāgaida pirmā 8 G 2 tālruņu sērija, lai redzētu, kā reāllaika semantiskā segmentācija uzlabos attēlus ar reālo pasauli. izmantot.

Kāpēc uzticēties mūsu žurnālistikai?

Uzņēmums Trusted Reviews tika dibināts 2004. gadā, lai sniegtu mūsu lasītājiem izsmeļošus, objektīvus un neatkarīgus padomus par to, ko iegādāties.

Mūsdienās mums ir miljoniem lietotāju mēnesī no visas pasaules, un gadā mēs novērtējam vairāk nekā 1000 produktu.