VEGA-дегі Live дауыс режимі: GPT-Live 1-мен нақты уақыттағы әңгімелер

Біз VEGA платформасында AI-мен нақты уақытта дауыстық әңгімелесу үшін жаңа Live режимін іске қостық. OpenAI-дің GPT-Live 1 (openai/gpt-live-1) моделімен қуатталған Live режимі ана тіліңізде табиғи сөйлеуге және жазба промпттарды енгізбей немесе бөлек дауысты мәтінге айналдыру қадамын күтпей, жауапты бірден естуге мүмкіндік береді.

Live режимі дауыстық диктовкадан қалай ерекшеленеді

Дауыстық диктовка айтылғанды кіріс жолына мәтінге айналдырады, содан кейін қалыпты жазбаша хабарлама жіберуге болады. Live — бұл толық дуплексті дауыстық сессия: модель 24 кГц PCM аудио ағымы бойынша тыңдап отырып сөйлейді.

• Ана тіліңізде сөйлеңіз: GPT-Live 1 сіздің сөйлеп тұрған тіліңізді анықтап, сол тілде табиғи ырғақ пен интонациямен жауап береді.


• Ақаусыз үзіп кіру (барджин): VEGA әлі сөйлеп тұрған кезде сөйлей бастасаңыз, ойнату бірден тоқтап, модель қайтадан тыңдауға көшеді — нақты телефондық қоңырау сияқты.


• Чаттағы тікелей эквалайзер: 20 жолақты аудио визуализаторы микрофоныңыздың деңгейіне де, VEGA-ның дауыстық шығысына да нақты уақытта реакция береді, сондықтан сессия тыңдап тұрғанын, ойланып тұрғанын немесе сөйлеп тұрғанын әрқашан көресіз.


• Тікелей субтитрлер және чат тарихы: Сөйлесу барысында айтылғандар транскрипцияланып, қоңыраудан кейін оқу немесе экспорт үшін тікелей чат ағынына сақталады.

Бұл қалай жұмыс істейді

Live құралдар тобында Әңгімелесуді бастау түймесін басқан кезде:

• VEGA серверде бір реттік клиенттік секрет құрып, AI Gateway Live нүктесіне тікелей WebSocket сессиясын ашады.


• Браузер микрофон аудиосын AudioWorklet арқылы қабылдап, оны 24 кГц моно PCM16-ға қайта үлгілеп, ең аз кідіріспен ағынмен жібереді.


• openai/gpt-live-1 моделінен келетін аудио дельталар Web Audio API арқылы кадр-кадрға жоспарланады, ал тікелей транскрипциялар чат интерфейсіне ағынмен түседі.


• Кез келген уақытта микрофоныңызды баса аласыз немесе қайта қоса аласыз, сондай-ақ қоңырауды аяқтап, сессияны таза түрде рәсімдей аласыз.

Секундына төлем

Live сессиялары VEGA депозитіңізден нақты ұзақтығы секундмен есептеледі, бүтін минуттарға дейін дөңгелектелмейді. Қоңырауды аяқтаған кезде төлем провайдер хабарлаған нақты сессия уақыты бойынша есептеледі.

VEGA-да Live режимін байқап көріңіз

vega.chat сайтын ашыңыз, құралдар таңдау жолағынан Live режимін таңдап, Әңгімелесуді бастау түймесін басыңыз. Құлаққап киіңіз немесе құрылғыңыздың микрофонын пайдаланып, кез келген тілде VEGA-мен сөйлесіңіз.