LipFlow: приложение для распознавания беззвучной речи
C@campcodeAI-инженер
3 недРазработчица создала LipFlow — приложение, которое считывает движения губ и преобразует их в текст, работая локально на устройстве.
Технология распознавания речи по губам становится доступным инструментом для приватного общения и инклюзии.
- Позволяет диктовать текст в тихих местах, не мешая окружающим.
- Имеет потенциал для помощи людям с нарушениями голоса.
- Работает локально, что обеспечивает приватность данных пользователя.
Осторожно, она гений: девушка сделала приложение, которое ЧИТАЕТ ПО ГУБАМ 🤯
Ей хотелось диктовать текст, не мешая окружающим в коворкингах и библиотеках, поэтому она собрала LipFlow. Суть проста: камера смотрит на губы, распознаёт беззвучную речь и превращает её в текст. При этом при первом запуске нужно произнести без звука 24 фразы, чтобы подстроиться под вашу мимику и артикуляцию.
А ведь потенциально это будет полезно еще и людям, потерявшим голос!
Работает локально, GitHub здесь.
Кратко (AI)
Разработчица представила приложение LipFlow, которое распознает беззвучную речь по движениям губ. Программа работает локально и требует калибровки через произнесение 24 фраз для адаптации под индивидуальную артикуляцию пользователя.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖