[Модуль] [Железо] Голосовое управление по ключевому слову на базе Orange Pi Zero и аналогов

Разработка дополнительных модулей, подключение различных приложений.

Модератор: immortal

Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms »

lanket писал(а): Ср май 09, 2018 12:07 am
webms писал(а): Вт май 08, 2018 11:09 pm >Велосипед оказывается уже был изобретен.
А как это все выглядит?
Как, как. Позвал Алису. Она откликнулась. Наговорил что хочешь. Мажорик если недопонял спросил через терминал уточняющий вопрос.
И главное работет все это.

А велосипед был уже изобретен группой разработчиков Snowboy. Devoff немного поправил код в сторону мажора. И написал второй скрипт который обеспечиват реакцию на запросы через сокеты от мажора на уточняющие вопросы. А если более точно то команды ask seyreplay.

Сейчас надо доработать еще функционала для более удобного использования массами. Поправить иразобраться в некоторых вопросах. Отшлифовать некоторые неровности.

Я пишу модуль для мажора управлением умной колонки. Часть модуля уже готова. Сейчас стоит небольшая задачка выноса настроект отдельно и обработка от модуля запросов на изменение настроек и работа по ним. Есть некоторые трудности. Таким образом уйдем от эмуляции работы мажордроида и получим более богатый и гибкий функционал. Планов гора. Есть еще куча интересных мвслей. Но пока надо основное доделать.

На данном этапе уже можно пользоваться. Работает.
Покажите еще как визуально выглядит пожалуйста
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket »

webms писал(а): Ср май 09, 2018 12:30 am ...
Покажите еще как визуально выглядит пожалуйста
Честно не пойму как визуально показать работу голосового терминала.
Могу лог вывести из консоли и из "чата" мажордомо.
Наверно можно еще записать видео работы терминала как он реагирует, задает вопросы. Отвечает. А Мажордомо ловит распознанный текст ответов или команд.

Но только это завтра, сейчас у меня все спят и я не буду вслух болтать с компом.
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms »

Да нет, чудо ящика с микрофоном хотелось бы посмотреть)
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket »

webms писал(а):Да нет, чудо ящика с микрофоном хотелось бы посмотреть)
Вот оно чудо.

Но всё же выяснянтся что wifi у апельсин зеро всё же болеет зависанием.
Лечиться Wi-Fi свистком, или использованием другим чудом nano pi.
SPOILERSPOILER_SHOW
Изображение
Изображение


Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket »

Ну или такое если прятать в стену /потолок
SPOILERSPOILER_SHOW
Изображение


Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket »

По модулю для мажордомо.
Реализовал подписку на команды связанные с построением диалогов голосом.

Сделал отправку команд терминалу таких как say, ask, seyreplay
и сервисных команд через сокеты.

Теперь нет нужды ставить галочку majordroidapi в терминалах.
Иначе будут дублироваться проговаривания.


Сделал отправку настроек на терминал json.

Накидал кнопки управления записи ключевого слова. Но пока без функционала.

Не так уж и трудно писать тут модули. Даже моего уровня знаний хватило накатать достаточно быстро.
Была бы идея полезная.

Devoff накатает обработку получения настроек на стороне терминала и будет уже это работать в связке, основная задача избавить пользователя лезть в колонку по SSH ну и удобство конечно.

Но голосовые команды и диалоги и так работают, если кто либо поставит модуль обязательно надо в настройке терминала, я имею ввиду в стандартных настройках где все терминалы, снять галочку majordroid API.
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
skysilver
Сообщения: 3006
Зарегистрирован: Чт авг 21, 2014 8:28 am
Откуда: Киров, Россия
Контактная информация:

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение skysilver »

Интересно, удастся сообществом насобирать 2000 сэмплов для слова "Алиса", чтобы ребята из snowboy сгенерили универсальную umdl-модель по типу как уже сделано для jarvis, smart mirror, alexa?

Наверно, не в нашем веке. :)
joxi_screenshot_1525905898108.png
joxi_screenshot_1525905898108.png (54.8 КБ) 6596 просмотров
MajorDoMo (GitHub) на Cubietruck. ОС Debian 7 (wheezy) (kernel 3.4.105) с переносом на HDD.
Мой CONNECT | Блоги | Telegram
directman66
Сообщения: 2800
Зарегистрирован: Пн дек 26, 2016 9:51 am
Откуда: Екатеринбург
Контактная информация:

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение directman66 »

Ищу железо, чтобы встроить в корпус сгоревшей китайской charge 2+ (типа JBL).
SPOILERSPOILER_SHOW
8-1024x680.jpg
8-1024x680.jpg (137.11 КБ) 6584 просмотра
1-1024x680.jpg
1-1024x680.jpg (122.45 КБ) 6584 просмотра
https://andapps.ru/review/razborka-kita ... l-charge-2

Может кто что посоветует? Т.е. нужно что-то с усилителем и wifi. Чтоб можно было использовать под этот проект.
Если вам помогло данное сообщение, не поленитесь нажать кнопку "спасибо".
CONNECT | Оборудование | Блог | Дополнения | Email | Telegram
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms »

Интересно у вас получается!
Давно мечтаю чтоб мой дом меня понимал когда я с говорю

Пока только она разговаривает)
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms »

Но хочется чтоб по русски (что пока нет у алексы и гугла) и понимала четко и из далека, а не кричать на всю кв)
Ответить