Перетворення механізму в СhatGPT «голос в голос» на «голос в текст»

💡 Усі статті, обговорення, новини про AI — в одному місці. Приєднуйтесь до AI спільноти!

Одного разу, користуючись ChatGPT, я зрозумів, що мені набридло постійно вводити багато тексту для отримання відповідей. Тут я подумав: а що, якщо можна було б автоматично обробляти голос в текстову відповідь?

У текстовому режимі можна було б додати можливість надсилати голосові команди у відповідь на текст. Це значно покращило б зручність використання.

Ось як це буде працювати

Користувач натискає кнопку запису, а потім конвертований текст надсилається одразу після завершення дзвінка.
Користувач натискає кнопку запису, після завершення запису натискає кнопку паузи, натискає кнопку продовжити і продовжує з того ж місця, також коли натискається кнопка завершення і повідомлення відправляється.

Це значно економить час на введенні тексту.

Що думаєте про такий механізм роботи? І як воно б працювало на практиці?

Теми: AI, ChatGPT

Ctrl + Enter

Олег Дорожко 21.08.2024 00:12

Можна використовувати цю схему на ютюбе, коли без навушників, вимикаєш звук щоб було тихо і дивишся автогенеровані субтитри ( якість яких досі не найкраща у світі)

Відповісти

Підтримати

Mobile 20.08.2024 02:57

Пошукай хром экстеншени, вже було багато саме таких — жмеш кнопку и говориш, говориш...

Volodymyr Torkalo 13.08.2024 20:10

А ви спробуйте цей свій проект голосом закодити — стане ясно що легше: говорити чи друкувати

Сергій Труш 10.08.2024 16:08

Я розробляю щось наближено схоже — голосовий асистент
github.com/...nt/blob/main/code/main.py
Правда він використовує не ChatGPT а локально встановлену на моєму комп’ютері велику мовну модель.

Mobile 20.08.2024 03:35

а в чому прікол мать ллм у себе на компі ? та сама джеміні буде постійно оновлюватись і не так дорого стойть за кожний виклик?

Сергій Труш

Сергій Труш 20.08.2024 22:26

Це pet-проєкт, не бачу змісту в нього вкладати якісь гроші.

Mobile

Vova Galan 10.08.2024 11:50

Я писав такий скрипт, але на практиці не зручно
1. Не завжди коректно розпізнає голос
2. Не зручно якщо не сам

Oleh Zhyntychka CEO, AI Engineer в XFutuRestyle Technology 10.08.2024 12:01

Саме тому було б круто якщо OpenAI реалізували б це на рівні системи.

Vova Galan

Vitaliy Kaplenko C++ DataBase Developer 10.08.2024 11:24

Можна надиктовувати текст у Google Translate, а потім копіпастити ChatGPT

Олег Дорожко 10.08.2024 05:18

Я натискаю гугло мікрофон на новій вкладці — диктую промт, тоді копіюю у копілот
P.S.
(wink) Або треба просто розпізнати голосове повідомлення.
Я думаю, найшвидше взяти десять слів і розпізнати їх. А тоді ще 10 і так дійти до певного словника.
Для цього треба створити модель звуку. Для початку. Що там далі? Порівняти слово — звук від моделі із вхідним від користувача — як співпадіння є то — на вихід слово текст.
А тоді від цього всього якось перейти до розпінання слогів.

Vitalii Stepanenko AI Engineer 10.08.2024 02:46

Він давно є і працює на практиці (в мобільному додатку) 🙂

Oleh Zhyntychka CEO, AI Engineer в XFutuRestyle Technology 10.08.2024 07:56

Знаю що він є в мобільному додатку, але він відповідає голосом а не текстом. Маю на увазі змінити трохи пиринцип роботи бо в веб версії цього не має.

Vitalii Stepanenko

Vitalii Stepanenko AI Engineer 13.08.2024 19:17

Та ні, там є режим, де відповідає текстом (іконка навушників — голосовий режим, іконка мікрофону всередині текстового поля — speech 2 text)

Oleh Zhyntychka

Oleh Zhyntychka CEO, AI Engineer в XFutuRestyle Technology 13.08.2024 19:57

Так він відповідає, потрібно трохи доопрацювати, бо це не автоматизовано як в голосовому режимі. В веб версії взагалі відсутній.

Юра 09.08.2024 13:15

1. зовсім не факт, що говорити легше, чим вводити текст...

2. щоб він сприймав, треба говорити чітко і зрозуміло...
це перетвориться на постійну звичку...
ти і з людьми так будеш говорити................

Oleh Zhyntychka CEO, AI Engineer в XFutuRestyle Technology 09.08.2024 13:21

Та нормально буде якщо покращать розпізнавання мовлення. По суті це є взаємодоповнення до текстового введення.

Юра

anonymous 09.08.2024 13:04

Перетворення механізму в СhatGPT «голос в голос» на «голос в текст»

Ось як це буде працювати

17 коментарів

Підписатись на коментарі