[Модуль] [Железо] Голосовое управление по ключевому слову на базе Orange Pi Zero и аналогов

Разработка дополнительных модулей, подключение различных приложений.

Модератор: immortal

Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am
Благодарил (а): 221 раз
Поблагодарили: 88 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms » Ср май 09, 2018 12:30 am

lanket писал(а):
Ср май 09, 2018 12:07 am
webms писал(а):
Вт май 08, 2018 11:09 pm
>Велосипед оказывается уже был изобретен.
А как это все выглядит?
Как, как. Позвал Алису. Она откликнулась. Наговорил что хочешь. Мажорик если недопонял спросил через терминал уточняющий вопрос.
И главное работет все это.

А велосипед был уже изобретен группой разработчиков Snowboy. Devoff немного поправил код в сторону мажора. И написал второй скрипт который обеспечиват реакцию на запросы через сокеты от мажора на уточняющие вопросы. А если более точно то команды ask seyreplay.

Сейчас надо доработать еще функционала для более удобного использования массами. Поправить иразобраться в некоторых вопросах. Отшлифовать некоторые неровности.

Я пишу модуль для мажора управлением умной колонки. Часть модуля уже готова. Сейчас стоит небольшая задачка выноса настроект отдельно и обработка от модуля запросов на изменение настроек и работа по ним. Есть некоторые трудности. Таким образом уйдем от эмуляции работы мажордроида и получим более богатый и гибкий функционал. Планов гора. Есть еще куча интересных мвслей. Но пока надо основное доделать.

На данном этапе уже можно пользоваться. Работает.
Покажите еще как визуально выглядит пожалуйста
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Ср май 09, 2018 12:37 am

webms писал(а):
Ср май 09, 2018 12:30 am
...
Покажите еще как визуально выглядит пожалуйста
Честно не пойму как визуально показать работу голосового терминала.
Могу лог вывести из консоли и из "чата" мажордомо.
Наверно можно еще записать видео работы терминала как он реагирует, задает вопросы. Отвечает. А Мажордомо ловит распознанный текст ответов или команд.

Но только это завтра, сейчас у меня все спят и я не буду вслух болтать с компом.
За это сообщение автора lanket поблагодарил:
webms (Ср май 09, 2018 12:44 am)
Рейтинг: 1.16%
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am
Благодарил (а): 221 раз
Поблагодарили: 88 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms » Ср май 09, 2018 12:44 am

Да нет, чудо ящика с микрофоном хотелось бы посмотреть)
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Чт май 10, 2018 12:03 am

webms писал(а):Да нет, чудо ящика с микрофоном хотелось бы посмотреть)
Вот оно чудо.

Но всё же выяснянтся что wifi у апельсин зеро всё же болеет зависанием.
Лечиться Wi-Fi свистком, или использованием другим чудом nano pi.
СпойлерПоказать
Изображение
Изображение


Отправлено с моего Redmi Note 4 через Tapatalk

За это сообщение автора lanket поблагодарил:
webms (Чт май 10, 2018 8:57 am)
Рейтинг: 1.16%
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Чт май 10, 2018 12:07 am

Ну или такое если прятать в стену /потолок
СпойлерПоказать
Изображение


Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Чт май 10, 2018 12:13 am

По модулю для мажордомо.
Реализовал подписку на команды связанные с построением диалогов голосом.

Сделал отправку команд терминалу таких как say, ask, seyreplay
и сервисных команд через сокеты.

Теперь нет нужды ставить галочку majordroidapi в терминалах.
Иначе будут дублироваться проговаривания.


Сделал отправку настроек на терминал json.

Накидал кнопки управления записи ключевого слова. Но пока без функционала.

Не так уж и трудно писать тут модули. Даже моего уровня знаний хватило накатать достаточно быстро.
Была бы идея полезная.

Devoff накатает обработку получения настроек на стороне терминала и будет уже это работать в связке, основная задача избавить пользователя лезть в колонку по SSH ну и удобство конечно.

Но голосовые команды и диалоги и так работают, если кто либо поставит модуль обязательно надо в настройке терминала, я имею ввиду в стандартных настройках где все терминалы, снять галочку majordroid API.
За это сообщение автора lanket поблагодарили (всего 6):
skysilver (Чт май 10, 2018 12:27 am) • C_3AXAPOB (Чт май 10, 2018 12:48 am) • fandaymon (Чт май 10, 2018 2:29 am) • directman66 (Чт май 10, 2018 8:11 am) • Amarok (Чт май 10, 2018 9:58 am) • Ron (Сб май 26, 2018 12:49 pm)
Рейтинг: 6.98%
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
skysilver
Сообщения: 3006
Зарегистрирован: Чт авг 21, 2014 8:28 am
Откуда: Киров, Россия
Благодарил (а): 400 раз
Поблагодарили: 1753 раза
Контактная информация:

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение skysilver » Чт май 10, 2018 1:50 am

Интересно, удастся сообществом насобирать 2000 сэмплов для слова "Алиса", чтобы ребята из snowboy сгенерили универсальную umdl-модель по типу как уже сделано для jarvis, smart mirror, alexa?

Наверно, не в нашем веке. :)
joxi_screenshot_1525905898108.png
joxi_screenshot_1525905898108.png (54.8 КБ) 4972 просмотра
MajorDoMo (GitHub) на Cubietruck. ОС Debian 7 (wheezy) (kernel 3.4.105) с переносом на HDD.
Мой CONNECT | Блоги | Telegram
directman66
Сообщения: 2801
Зарегистрирован: Пн дек 26, 2016 9:51 am
Откуда: Екатеринбург
Благодарил (а): 380 раз
Поблагодарили: 693 раза
Контактная информация:

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение directman66 » Чт май 10, 2018 8:14 am

Ищу железо, чтобы встроить в корпус сгоревшей китайской charge 2+ (типа JBL).
СпойлерПоказать
8-1024x680.jpg
8-1024x680.jpg (137.11 КБ) 4960 просмотров
1-1024x680.jpg
1-1024x680.jpg (122.45 КБ) 4960 просмотров
https://andapps.ru/review/razborka-kita ... l-charge-2

Может кто что посоветует? Т.е. нужно что-то с усилителем и wifi. Чтоб можно было использовать под этот проект.
За это сообщение автора directman66 поблагодарил:
webms (Чт май 10, 2018 8:57 am)
Рейтинг: 1.16%
Если вам помогло данное сообщение, не поленитесь нажать кнопку "спасибо".
CONNECT | Оборудование | Блог | Дополнения | Email | Telegram
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am
Благодарил (а): 221 раз
Поблагодарили: 88 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms » Чт май 10, 2018 8:56 am

Интересно у вас получается!
Давно мечтаю чтоб мой дом меня понимал когда я с говорю

Пока только она разговаривает)
Аватара пользователя
webms
Сообщения: 498
Зарегистрирован: Чт дек 15, 2016 3:13 am
Благодарил (а): 221 раз
Поблагодарили: 88 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение webms » Чт май 10, 2018 8:59 am

Но хочется чтоб по русски (что пока нет у алексы и гугла) и понимала четко и из далека, а не кричать на всю кв)
Ответить