Kas yra semantinis segmentavimas? Išmaniojo telefono kameros technologija paaiškinta

„Qualcomm“ neseniai paskelbė apie savo naujausią pavyzdinę platformą išmaniesiems telefonams Snapdragon 8 Gen 2.

Vienas didžiausių atnaujinimų čia buvo naujasis „Cognitive ISP“ – išmanusis vaizdo signalo procesorius, užtikrinantis iki 200 megapikselių. vaizdai, išmanesnis veidų aptikimas iš „Always-Sensing“ fotoaparato ir visi realaus laiko semantikos pranašumai segmentavimas.

Bet kas yra semantinis segmentavimas ir ką tai reiškia jūsų telefono kamerai?

Kas yra semantinis segmentavimas?

Semantinis segmentavimas yra vaizdo gavimo technologija, leidžianti fotoaparatui atpažinti atskirus kadro aspektus, pvz., veidus, plaukus, drabužius, foną ir kt. Tada šiuos aspektus galima optimizuoti atskirai, o tai reiškia, kad fotoaparatas kiekvienu konkrečiu atveju pakeis vaizdo spalvą, toną, ryškumą ir triukšmo kiekį.

Pagalvokite apie semantinį segmentavimą, pvz., „Photoshop“ sluoksnius telefono kameroje, leidžiančią atskirai koreguoti skirtingas vaizdo dalis, o ne fotoaparatui redaguoti vaizdą kaip visumą.

Realaus laiko semantinis segmentavimas yra būtent tai, kas skamba – taip pat, kaip aprašyta aukščiau, bet viskas vyksta naudojant fotoaparatą, o ne po to, kai nufotografuojate ar baigiate įrašyti vaizdo įrašą.

Yra daug atvejų, kai semantinis segmentavimas realiuoju laiku gali pagerinti jūsų mobiliąją fotografiją.

Technika gali būti naudojama norint išlyginti odą, pašalinti atspindžius nuo akinių, paaštrinti plaukus ir kailį, atnešti daugiau mėlyna iki dangaus ir pagerina teksto skaitomumą ekranuose ir knygose, kad būtų galima paminėti keletą realaus pasaulio naudoja.

Semantinį segmentavimą galite pamatyti aukščiau esančiame vaizdo įraše.

Kiek jis tikslus?

Šių metų „Qualcomm“ „Snapdragon Summit“ susitikime Havajuose turėjome galimybę išbandyti semantinį segmentavimą realiuoju laiku. ir nustatėme, kad tai puikiai atskyrė odą nuo plaukų, drabužių ir fono už mūsų, bet taip nebuvo puikus.

Demonstracinėje versijoje fotoaparatas buvo nustatytas taip, kad paverstų viską, kas, kaip manoma, oda yra žalia, kad suprastume, koks jos tikslumas.

Fotoaparatas puikiai išryškino visą vaizde esančią odą, išskyrus nedidelę dalį, žvelgiančią iš už akinių. Tačiau ji labai kovojo su panašių spalvų elementais, klaidingai išryškindama smėlio spalvos suknelę ir oranžinį iPhone kaip odą, nes jų tonai per daug sutapo su nuotraukoje esančiu veidu ir rankomis.

Kitoje demonstracijoje išbandėme odos išlyginimo funkciją ir nustatėme, kad ji labai subtili ir natūrali, todėl atsirado kažkas šiek tiek įtikinamesni nei kai kurie pernelyg uolūs išlyginimo efektai, rasti „TikTok“, „Instagram“ ir kai kuriose OĮG „Android“ kamerose programinė įranga.

Galų gale kiekvienas originalios įrangos gamintojas turi pritaikyti „Cognitive IPT“ įgalintas funkcijas taip, kaip jiems patinka“, – sakė kameros produktų valdymo viceprezidentas Judd Heape. Summit, tai reiškia, kad turėsime palaukti, kol pasieks pirmoji 8 kartos 2 telefonų partija, kad pamatytume, kaip semantinis segmentavimas realiuoju laiku pagerins vaizdus naudojant realų pasaulį. naudoti.

Kam pasitikėti mūsų žurnalistika?

2004 m. įkurta „Trusted Reviews“ sukurta tam, kad skaitytojams pateiktų išsamius, nešališkus ir nepriklausomus patarimus, ką pirkti.

Šiandien turime milijonus vartotojų per mėnesį iš viso pasaulio ir per metus įvertiname daugiau nei 1000 produktų.