Голосовое управление стримом: скажите вслух — и это сделано

Двенадцать дел, и это весь список

Говорите так, как сказали бы человеку. Ассистент сам разберёт, о котором из них речь.

• Запустить опрос — «запусти опрос: какая карта, Dust или Mirage».
• Завершить опрос досрочно и показать результат.
• Запустить прогноз — «победим ли мы в этой игре, да или нет».
• Закрыть приём ставок по прогнозу.
• Завершить прогноз и выплатить баллы.
• Отменить прогноз и вернуть ставки всем.
• Переключить сцену OBS — «перейди на сцену Break».
• Сменить название эфира, категорию или и то, и другое.
• Сохранить клип — «заклипай это».
• Написать в чат — «скажи в чат, что стрим закончится через десять минут».
• Нажать кнопку на Панели управления — а с ней выполнится весь сценарий за ней.
• Переключить умную розетку — «включи лампу на минуту».

На что он отвечает, ничего не делая

Всё, что не входит в эти двенадцать, — обычный ответ вслух, пока вы продолжаете играть.

• Что идёт прямо сейчас: название, категория, сколько длится эфир и сколько человек смотрит.
• Во что вы играли пять прошлых эфиров, сколько каждый шёл и сколько было зрителей на пике.
• Ваши команды чата по именам, лоты идущего аукциона и их суммы.
• Факты, которые вы записали сами: ваши ссылки, ваше железо, ответы, которые вы повторяете каждый эфир.
• Что угодно из интернета — когда вопрос этого требует и поиск вами разрешён.

Это не список волшебных фраз

Обычно голосовые команды означают заученную формулировку. Здесь три разные фразы приводят к одному действию.

• «Сделай клип», «заклипай это» и «сохрани этот момент» — одно и то же.
• Названия, которые он может назвать — сцены OBS, кнопки пульта, умные розетки, исходы прогнозов, — берутся из того, что реально подключено, поэтому выдумать несуществующую сцену он не может.
• Клипы, название, опросы и прогнозы идут через Twitch. На YouTube и Kick ассистент пишет в чат, переключает сцены и жмёт кнопки вашего пульта.

Половина работает здесь, половина — это ИИ

Распознавание речи — модель на вашем диске: звук не покидает компьютер и к счёту ничего не добавляет. Понимает вас и действует ИИ, и платите вы именно за эту половину — цена каждого действия в кредитах написана на его карточке заранее.

• Модель распознавания выбирается по замеренным нами цифрам — скорость и память, на видеокарте и на процессоре, — а не по размеру.
• По удержанию клавиши микрофон открыт, только пока вы её держите, — и продолжает работать внутри полноэкранной игры.
• Либо микрофон открыт весь эфир, а у бота есть имя, и до него доходит только «Nova, запусти опрос».
• Голосовая команда — это два запроса к ИИ, а не один: дешёвый шаг, который исправляет услышанное и понимает, чего вы хотели, и сам ответ.
• Кредиты берутся из аккаунта strAImer: сотня в месяц на бесплатном тарифе, и одно переключение сцены стоит там от двух кредитов до шести — смотря какую модель вы выбрали; модели подороже требуют платного тарифа.

Ничего необратимого не происходит молча

Четыре дела из двенадцати назад не отыграть — завершить опрос, закрыть ставки, выплатить прогноз, вернуть его. Они изначально выключены, а включив их, вы услышите вопрос: ассистент называет исход, а не действие.

• Каждое из двенадцати — отдельная карточка: выключите те, которых голосом делать не нужно.
• Стоп-слово обрывает озвучку на полуслове — произнесли, и бот сразу замолчал.
• Ничто написанное зрителем действия не запускает: инструменты выдаются только микрофону вашей машины.

Видно всё, что он услышал

Тайл на Панели управления ведёт ленту ваших фраз и ответов по порядку, и цвет полосы говорит, чем всё закончилось.

• Синий — ответ, зелёный — сделано, жёлтый — встречный вопрос, красный — отказ с причиной рядом.
• Кнопка микрофона переключает удержание клавиши и постоянный режим, не уходя с пульта.
• Кнопка питания останавливает распознавание и освобождает память, которую занимала модель.

Из чего собрано

Каждая часть — отдельный модуль: ставите только нужные, и любой можно убрать, не сломав остальное.

Как начать

1. Подключите аккаунт strAImer: Настройки → Аккаунт strAImer — оттуда ассистент берёт кредиты.
2. Откройте Голос → Распознавание, скачайте модель и выберите, когда слушать: по удержанию клавиши или постоянно, дав боту имя.
3. Откройте Чат-бот → Голосовое управление и включите нужные действия.
4. Поставьте тайл «Эфир: Голос» на Панель управления, поближе.

Все двенадцать есть в приложении, которое можно скачать сегодня: чтобы вас услышать, хватит модели распознавания на вашем диске, а аккаунт strAImer оплачивает ту половину, которая вас понимает и действует.

Работает вместе с