23948sdkhjf

Mobilen ska hjälpa synskadade att se känslor

| Av Lisa von Garrelts | Tipsa redaktionen

Med hjälp av AI har en mobiltillverkare skapat tjänsten Facing emotions som med hjälp av mobilen kamera översätter sju olika ansiktsuttryck till sju unika ljud.

Två tredjedelar av all kommunikation mellan människor är icke-verbal och våra ansiktsuttryck är nära sammankopplade med våra känslor. Samtidigt finns det en värld där andras känslouttryck inte är synliga, en värld som är vardag för blinda och personer med synnedsättning. Nu finns ny teknologi som kan hjälpa personer med synnedsättning att ”se” ett leende.

Mobiltillverkaren Huawei har skapat en tjänst som möjliggör nya användningsområden för mobilen. Med hjälp av artificiell intelligens har man skapat tjänsten Facing emotions som gör det möjligt att uppleva känslor och känslouttryck hos andra på nya sätt. Facing emotions-appen drivs med hjälp av kameran och AI-teknologi. Den inbyggda kameran och AI-teknik översätter sju olika ansiktsuttryck till sju unika ljud. Förhoppningen är att den nya tekniken kan möjliggöra nya användningsområden, bland annat underlätta för personer med synnedsättning att i realtid uppleva andra människors ansiktsuttryck och känslor.

Tjänsten fungerar som så att kameran i mobilen läser av ansiktet på mottagaren som användaren pratar med. Tjänsten identifierar därefter nyckelelement i ansiktet såsom ögon, näsa, ögonbryn och mun och framförallt elementens relation till varandra. Den inbyggda AI-tekniken i mobilen processar det identifierade uttrycket till ett fördefinierat ljud i telefonen eller i hörlurarna. Översättningen sker offline i realtid.

– Vårt arbete med Facing emotions är viktigt för att visa hur teknik blir tillgängligt för alla och hur innovativ teknik kan möjliggöra nya användningsområden som vi inte har tänkt på tidigare. Vi har intervjuat flera personer med synnedsättning som fått tillfälle att prova tjänsten och ”se” känslor och min förhoppning är att tjänsten kan förenkla användarens vardag, säger Sofia Björnerfors på Huawei Sverige.

Facing emotions utvecklades med stöd av organisationer såsom The Polish blind association. Tillsammans med organisationen har Huawei tillsatt en nyckelgrupp av testpersoner som involverades i utvecklingsfasen av tjänsten. Ett flertal personer med synnedsättning intervjuades om deras behov och därefter utvecklades en lösning utifrån gruppens önskan. Gruppens synpunkter har varit till stor hjälp vid utvecklingen av den slutgiltiga användarupplevelsen när det kommer till alltifrån funktioner, färger och ljud.

En betydande del av arbetsprocessen var ljudet som skapades av den blinde kompositören Tomasz Bilecki. Ljuden i tjänsten behövde vara korta, koncisa och enkla för att användaren enkelt ska kunna använda funktionen i vardagen utan störningar.

Håll dig uppdaterad med MedTech Magazine
Är du prenumerant? Bli prenumerant

Med en prenumeration får du obegränsad tillgång till webbtidningen. Läs webbtidningen online.

Kommentarer (0)
Startsidan just nu

Får stöd från Horizon

Vill bli alternativ till antibiotika – Hoppas nå marknaden 2021.

Lagenligt: Förutsättningar för gränsöverskridande digitala vårdtjänster

Utvecklar sensorer i förband med gel som bakterier äter

Tråd- och batterilösa sensorer i förband som tidigt kan upptäckta sårinfektioner. Javier Sotres, forskare vid Malmö universitet, har beviljats medel för att förverkliga idén om en enkel metod att övervaka sår i hemmet.

Debatt
Hur blir det med it-säkerheten i vården?

Det krävs ökat fokus på utbildning, säkra klientenheter, centrala lösningar och strategier, skriver Dynabooks Kenni Ramsell.

Debatt
”Välkommet med hårdare regler”

Elina Berglund och Raoul Scherwitzl, Natural cycles, välkomnar de hårdare kraven som kommer att ställas på mensappar genom den nya medicintekniska lagstiftningen.

Innovationslunch på Karolinska

Nyhetsbrev

Hon ska utveckla framtidens sjukhus

Arkiv

Krönika: Målkonflikter – en ständig utmaning

Vi måste erkänna att målkonflikter faktiskt existerar, skriver Mats Ohlson, konsult inom regulatorisk rådgivning.

Pharmarelations stärker upp

Han ska utreda materialbristen

”Regionerna vill ha en övergripande analys av händelseförloppet för att se vad som gick fel”, säger Toivo Heinsoo som fått uppdraget att granska vad som hände när fem regioner bytte leverantör till Apotekstjänst.

Addlife köper italienskt

Hon blir generaldirektör

Jobb & Karriär
Ny vd på Klaria

Krönika: Mjukvaran kan öka överlevnaden

Vi får inte bortse från mjukvarans avgörande roll för canceröverlevnaden, skriver Richard Hausmann, vd och koncernchef för Elekta.

Förbereder sig för marknaden

Sekretomet kartlagt – Analyser saknas

1

När patienten själv löser problemen

Jobb & Karriär
Han tar plats på Vinnova

Lars Hammarström blir även en del av ledningsgruppen.

Så tror de vården ser ut 2030

SÖS och Danderyd följer KS – stort varsel av vårdpersonal

Jobb & Karriär
Ny topp på Icellate

Samarbete ska få fart på sjukhusens AI

EMA:s flytt snart klar

Flyttar in i nybyggda, skräddarsydda lokaler i januari.

Satsar på AI

Mer än bildanalys – AI ska effektivisera arbetsflödet vid röntgenundersökningar.

Hon tar plats på Biovica

Studie skapar Cellink-hud

Hon fick 3D-printat gips

2

PVC-fri infusionsslang når marknaden 2020

Klaria säkrar patent genom bolagsförvärv

Jobb & Karriär
Blir koncernchef och vd för Aleris

Jobb & Karriär
Alteco får ny vd

Neodynamics får godkänt

Är vården redo för extrem fetma?

Se alla Företagens egna nyheter

Hög driftsäkerhet vid vakuumgenering inom plastindustrin

Mirit Glas tilbyr Skräddarsydda glasvaror

White Paper: Kontaktdon med integrerade EEPROM-minnen

Livsmedel-godkänt glas från Mirit Glas

Ny teknik: Systemlösningar med silikonövergjutning

E700: Smart och modernt kassa- och betalsystem

Floatglas – Materialet som används överallt

Dolphin vätskeringvakuumpumpar

Medicintekniska vågar, Klass III, CE - Vad betyder det?

Blyglas för industriell och medicinsk användning

Effektiv vakuumförsörjning för tillverkning av husbilar

Vi ses på Elmia!

Mätteknik för vakuum i ny tappning

Skyddsglas för lasersvetsning från Mirit Glas

BALINIT ® DYLYN – nu i Halmstad!

Livsmedel-godkänt glas från Mirit Glas

Värmerutor från Mirit Glas

Järnfattigt glas från Mirit Glas

Mirit Glas leverar Skyddsglas för lasersvetsning

Mirit Glas erbjudar Blyglas

Mirit Glas tilbydar safirglas, som är nästan lika hårt som diamant

Värmerutor från Mirit Glas

Förberedd för industri 4.0: Ny lamellvakuumpump med tryckreglering

Härdat glas - en stark lösning från Mirit Glas

Böjt och rundat glas från Mirit Glas

Sänd till en kollega

0.359