Перейти к содержимому
← Все кейсыReal-time StreamingAI

NZT — навигатор диалога в реальном времени

Whisper STT в реальном времени → GPT-4o генерирует контекстные подсказки → WebSocket-стрим в Android; FSM управляет фазами разговора. 200+ тестов.

Кратко
Real-time: Whisper STT → GPT-4o → WebSocket

Архитектор и разработчик (solo)

solo · solo

  • Python
  • FastAPI
  • Kotlin
  • Whisper
  • GPT-4o
  • WebSocket

Развернуть разбор ↓

Проблема

Что не работает

В переговорах и интервью нет времени думать — подсказка нужна контекстно и мгновенно, а не после разговора. Латентность распознавания + генерации + доставки должна быть незаметной.

Решение

Архитектурный подход

Real-time пайплайн: Whisper транскрибирует речь стримингом, GPT-4o генерирует подсказки под контекст, WebSocket доставляет их в Android с минимальной задержкой. FSM отслеживает фазу разговора (открытие / переговоры / закрытие) и адаптирует промпты под неё.

Моя роль и вклад

Архитектор и разработчик (solo)

Спроектировал и построил real-time пайплайн: стриминговый Whisper STT, GPT-4o для контекстных подсказок, WebSocket-доставку в Android-клиент, FSM состояний диалога, backend на FastAPI и клиент на Kotlin. 378 backend + 16 frontend + 10 e2e тестов.

Готовы обсудить?

Если вам нужен архитектор, который строит автономные AI-системы — напишите.

Сербия (Белград) · CET/CEST · рабочие часы совпадают с EU · Опыт международных контрактов