23948sdkhjf

Mobilen ska hjälpa synskadade att se känslor

| Av Lisa von Garrelts | Tipsa redaktionen

Med hjälp av AI har en mobiltillverkare skapat tjänsten Facing emotions som med hjälp av mobilen kamera översätter sju olika ansiktsuttryck till sju unika ljud.

Två tredjedelar av all kommunikation mellan människor är icke-verbal och våra ansiktsuttryck är nära sammankopplade med våra känslor. Samtidigt finns det en värld där andras känslouttryck inte är synliga, en värld som är vardag för blinda och personer med synnedsättning. Nu finns ny teknologi som kan hjälpa personer med synnedsättning att ”se” ett leende.

Mobiltillverkaren Huawei har skapat en tjänst som möjliggör nya användningsområden för mobilen. Med hjälp av artificiell intelligens har man skapat tjänsten Facing emotions som gör det möjligt att uppleva känslor och känslouttryck hos andra på nya sätt. Facing emotions-appen drivs med hjälp av kameran och AI-teknologi. Den inbyggda kameran och AI-teknik översätter sju olika ansiktsuttryck till sju unika ljud. Förhoppningen är att den nya tekniken kan möjliggöra nya användningsområden, bland annat underlätta för personer med synnedsättning att i realtid uppleva andra människors ansiktsuttryck och känslor.

Tjänsten fungerar som så att kameran i mobilen läser av ansiktet på mottagaren som användaren pratar med. Tjänsten identifierar därefter nyckelelement i ansiktet såsom ögon, näsa, ögonbryn och mun och framförallt elementens relation till varandra. Den inbyggda AI-tekniken i mobilen processar det identifierade uttrycket till ett fördefinierat ljud i telefonen eller i hörlurarna. Översättningen sker offline i realtid.

– Vårt arbete med Facing emotions är viktigt för att visa hur teknik blir tillgängligt för alla och hur innovativ teknik kan möjliggöra nya användningsområden som vi inte har tänkt på tidigare. Vi har intervjuat flera personer med synnedsättning som fått tillfälle att prova tjänsten och ”se” känslor och min förhoppning är att tjänsten kan förenkla användarens vardag, säger Sofia Björnerfors på Huawei Sverige.

Facing emotions utvecklades med stöd av organisationer såsom The Polish blind association. Tillsammans med organisationen har Huawei tillsatt en nyckelgrupp av testpersoner som involverades i utvecklingsfasen av tjänsten. Ett flertal personer med synnedsättning intervjuades om deras behov och därefter utvecklades en lösning utifrån gruppens önskan. Gruppens synpunkter har varit till stor hjälp vid utvecklingen av den slutgiltiga användarupplevelsen när det kommer till alltifrån funktioner, färger och ljud.

En betydande del av arbetsprocessen var ljudet som skapades av den blinde kompositören Tomasz Bilecki. Ljuden i tjänsten behövde vara korta, koncisa och enkla för att användaren enkelt ska kunna använda funktionen i vardagen utan störningar.

Håll dig uppdaterad med MedTech Magazine
Är du prenumerant? Bli prenumerant

Med en prenumeration får du obegränsad tillgång till webbtidningen. Läs webbtidningen online.

Kommentarer (0)
Startsidan just nu

Getinge gör miljardförvärv

Köper bolag som utvecklar bioreaktorsystem.

Ny koreansk stororder för Senzime

Jobb & Karriär
Ny vd tar Kry in i nästa fas

Växlar upp sin roll efter två år som COO.

Data från Sigrid visar på motverkad viktuppgång

Ny studie på möss publicerad i Nanomedicine visar att Sigrids medicintekniska produkt SiPore15 motverkar viktuppgång. Detta öppnar vägen till nya behandlingar av fetma och diabetes.

AI lika bra som patologer

”När det gäller gradering av prostatacancerns allvarlighet ligger AI:n i samma spann som de internationella experterna”

Väljer huvudkandidat i strålningsprojekt

Utvecklar nanopartiklar för tumörselektiv strålning – Nästa steg är proof of concept.

Nyhetsbrev

Utvecklar återanvändningsbar binda

”Fungerar ungefär som en menskopp, fast utanför kroppen” – Fick 9,9 miljoner från Vinnova.

Arkiv

Ny sårgel närmare kliniska studier

Resistens vanligt vid ledprotesinfektioner

Kardiolog stämmer Apple

Anklagas för patentintrång för den teknik som används för att upptäcka förmaksflimmer med Apple Watch.

Cellink breder ut sig

God jul och gott nytt år!

Nu tar MedTech Magazine ett uppehåll under helgerna.

Får miljoner för big data i vården

Gävleforskare utvecklar metod för att ta fram relevant underlag ur big data.

Skåne klara med helt digital cancerdiagnostik

Ett steg mot kortare svarstider och snabbare diagnoser.

Jobb & Karriär
Titti Lundgren lämnar Coala

Samtidigt blir Christian Pitulia CCO för bolaget.

Så digitaliserar V6-kommunerna sin omsorg

Med projektet Divos ökar man den digitala kompetensen inom vård och omsorg.

Smile-bolag avtalar med Baxter

Hackarträff mot antibiotikaresistens

Tar fram digitala lösningar mot spridningen av resistens.

Här är Raysearch nya huvudkontor

Flyttar från sina gamla lokaler till toppmodern fastighet.

Får stöd från Horizon

Vill bli alternativ till antibiotika – Hoppas nå marknaden 2021.

Lagenligt: Förutsättningar för gränsöverskridande digitala vårdtjänster

Utvecklar sensorer i förband med gel som bakterier äter

Tråd- och batterilösa sensorer i förband som tidigt kan upptäckta sårinfektioner. Javier Sotres, forskare vid Malmö universitet, har beviljats medel för att förverkliga idén om en enkel metod att övervaka sår i hemmet.

Debatt
Hur blir det med it-säkerheten i vården?

Det krävs ökat fokus på utbildning, säkra klientenheter, centrala lösningar och strategier, skriver Dynabooks Kenni Ramsell.

Debatt
”Välkommet med hårdare regler”

Elina Berglund och Raoul Scherwitzl, Natural cycles, välkomnar de hårdare kraven som kommer att ställas på mensappar genom den nya medicintekniska lagstiftningen.

Innovationslunch på Karolinska

Hon ska utveckla framtidens sjukhus

Pharmarelations stärker upp

Addlife köper italienskt

Hon blir generaldirektör

Jobb & Karriär
Ny vd på Klaria

Sekretomet kartlagt – Analyser saknas

Jobb & Karriär
Ny topp på Icellate

Samarbete ska få fart på sjukhusens AI

Se alla Företagens egna nyheter

Germanium glas från Mirit Glas

Dr Karl Busch hederssenator vid Münchens universitet

Receptionsdiskar - Gör ett bra första intryck

Modern vakuumteknik för avgasning under extrudering

Busch Vacuum Solutions - World Market Leader 2020

God Jul och Gott nytt år!

Hög driftsäkerhet vid vakuumgenering inom plastindustrin

Mirit Glas tilbyr Skräddarsydda glasvaror

White Paper: Kontaktdon med integrerade EEPROM-minnen

Livsmedel-godkänt glas från Mirit Glas

Ny teknik: Systemlösningar med silikonövergjutning

E700: Smart och modernt kassa- och betalsystem

Floatglas – Materialet som används överallt

Dolphin vätskeringvakuumpumpar

Medicintekniska vågar, Klass III, CE - Vad betyder det?

Blyglas för industriell och medicinsk användning

Effektiv vakuumförsörjning för tillverkning av husbilar

Vi ses på Elmia!

Mätteknik för vakuum i ny tappning

Skyddsglas för lasersvetsning från Mirit Glas

BALINIT ® DYLYN – nu i Halmstad!

Livsmedel-godkänt glas från Mirit Glas

Värmerutor från Mirit Glas

Järnfattigt glas från Mirit Glas

Mirit Glas leverar Skyddsglas för lasersvetsning

Sänd till en kollega

0.125