Twórcy uniwersytetu w Waszyngtonie stworzyli słuchawki AI z chipem Apple M2, które tłumaczą mowę kilku mówców, zachowując cechy głosowe

Zespół twórców z Uniwersytetu w Waszyngtonie zaprezentował koncepcję innowacyjnych słuchawek, które mogą zmienić międzynarodową komunikację, czyniąc ją bardziej komfortową i naturalną.

Co wiadomo

Inżynierowie wbudowali chip M2 od Apple oraz binauralny mikrofon Sonic Presence SP15C w obudowę słuchawek Sony WH-1000XM4. To rozwiązanie pozwoliło urządzeniu wykorzystać AI do tłumaczenia synchronicznego mowy, zachowując cechy głosowe kilku mówców oraz kierunek dźwięku.

Słuchawki tłumaczą z języka hiszpańskiego, niemieckiego lub francuskiego z idealną dokładnością, a przetwarzanie dźwięku zajmuje 2-4 sekundy. Technologia dostosowuje głośność dźwięku w zależności od odległości od mówcy. Cały proces odbywa się lokalnie, zapewniając pełną poufność.

Takie słuchawki mogą znaleźć zastosowanie w konferencjach online, w programach edukacyjnych oraz w zwykłej komunikacji z obcokrajowcami.

Twórcy przyznają, że opóźnienie tłumaczenia wynoszące 2-4 sekundy może utrudnić dialog, ale wraz z rozwojem technologii ten problem z pewnością zostanie rozwiązany.

Kod projektu jest ogólnie dostępny i otwarty dla twórców.

Źródło: Sigchi