Sony bygger in AI i en kamerasensor - det är därför det är en enorm affär

Sony har meddelat världens första bildsensorer med inbyggd AI-bearbetning och lovar att smarta upp kameror för ett brett utbud av produkter.

Bildjätten har meddelat ett par 12,3 megapixelsensorer (kallade IMX500 och IMX501) som integrerar marker för att hantera uppgifter som bildigenkänning, utan att behöva skicka data till molnet.

Att ha Intelligent Vision Sensor inom enheten minskar inte bara fördröjningen med att skicka data till och från molnet, utan håller också data på själva enheten, vilket innebär förbättrad integritet. Sony påpekar också att de nya sensorerna kommer att sänka strömförbrukningen, vilket bör översättas till längre batteritid för enheter som gungar den nya tekniken.

Sony säger att sensorn "fångar innebörden av informationen från ljuset framför den", utför bildanalys och matar ut allt i chipet. I exemplet som används i en förklaringsvideo visar Sony sensorn som t.ex. identifierar en basketboll och en gitarr.

Fokus kommer att ligga på ett brett utbud av IoT-enheter, snarare än bara dedikerade kameror och telefoner. Sony lägger detta till företag till att börja med. Exempelvis kommer butiker att kunna använda sensorerna för att avgöra vem som handlar efter vad.

Relaterad: Bästa kamera 2020

Den här delen av presentationen minskar det tidigare spelet när det gäller sekretess eftersom det visar sensorn som plockar upp en persons kön, uppskattad ålder och produkten de håller. Men sensorn kan, i det aktuella språket, också vara användbar för att upptäcka vem som är och inte bär en mask eller följer regler för social distansering.

Företaget säger också att smarta högtalare kan dra nytta av eftersom de kan känna igen vilken familjemedlem som gör begäran.

Sonys nya sensorer kan också installeras i fordon för att säkerställa att förarna sitter i optimalt läge eller somnar vid ratten. Ingen av denna funktionalitet kräver att data skickas till molnet, så bristen på latens kan visa sig vara livräddande i vissa fall.

Sony säger att sensorer kommer att finnas i produkter i slutet av året, men vi kommer att se fler tillverkare anta dem 2021.