First alpha-test of Ai persona-based chatbot Avatar completed - by GraphGrailAi

in #chatbot5 years ago

67810192_10219939859063674_4537769420809830400_o.jpg

We have completed our first alpha-test of persona-based chatbot Avatar.
30 testers used bot for 1.5 weeks asking it different questions about it's personality and lifestyle.

During this time we have implemented several improvements in ML part - added datasets, fallback policy, fixed some design bugs.
Beta-test coming soon - register for Beta here in Google form

https://docs.google.com/forms/d/e/1FAIpQLScKH14R1htM7dG6o7CbOLv_l00d_2hTQw4RYl4uNx7L6e-Ffw/viewform

If know RU then you will be able to test persona-based neural conversation model.

Next is RU text with more details:

Завершился Альфа-тест чатбота-аватара.
30 человек в течение 1,5 недель писали боту всякие непотребства и выявили несколько недостатков, мы добавили fallback. 😎

🥞Скоро будет бета-тест!🥞 Регистрация там же в Гугл форме

https://docs.google.com/forms/d/e/1FAIpQLScKH14R1htM7dG6o7CbOLv_l00d_2hTQw4RYl4uNx7L6e-Ffw/viewform

В бете будет лучше: протестим persona-based neural conversation model, будет больше датасетов, лучше связность диалогов.

Гипотезу вовлеченности мы протестировали, пока не достигаем нужного уровня, нужно улучшать качество. Поэтому и до виральности пока не дошли, хотя она в целом понятна.
У нас есть еще гипотезы по вовлеченности: игровые механики для бота, которые мы обсуждали с людьми из gamedev.

Итак, наши выводы:
Вообще, у меня была конечно догадка, что боту будут писать не те вопросы, на которые он сможет ответить, и я даже думал это написать во вступительном описании, но потом решил протестить, смогут ли юзеры без этого задавать вопросы, подходящие по концепции.

  1. Люди привыкли к Алисе-Марусе, то есть к болталкам общего назначения. И поэтому они похожие же вопросы задают и нашему Аватару, но фишка в том, что мы не делаем аналог Алисы.
    Юзер: как погода в Москве?
    Бот и не должен ответить на такой вопрос. Аватар не бот отвечалка по внешним данным сайтов о погоде (типа виджета в вашем телефоне). Аватар также не ответит на вопросы сколько ног у человека, т.к. он не бот на датасете Википедии (то есть любые вопросы о мире типа на какой планете живем - он не должен отвечать).

Как побороть: я думаю только брендингом. Объяснять и обучать юзеров, что это 👑ЛИЧНОСТЬ👑, и задавать ему надо те вопросы, на которые ответ знает сам прообраз Аватара.

  1. Люди задают много вопросов уровня читчат, или уточняющих:

Бот: я умею отвечать на вопросы о своей жизни и шутить, пиши.
Юзер: а что лучше?

Вроде бы логичный вопрос, но это метавопрос, даже реальный человек задумается, если вы его спросите - с ним пошутить или серьезно говорить, зависит же от ситуации, а ситуации мы пока не моделируем.

Как побороть: Думаю мы сделаем отработку таких вопросов, мы добавим читчат датасеты, (это вопросы типа кто тебя сделал, ты умеешь петь - и ответы все вроде "нет я же робот", меня сделали разрабы такие-то) + развилки в тематиках. Отдельно будет фильтр мата и тролинга, и тут важно не переборщить в ответах, иначе это будет уже бот-оскорблятель, то есть ДРУГОЙ продукт.

Наш сайт http://graphgrail.com/ru/

Sort:  

Congratulations @gromozeka! You have completed the following achievement on the Steem blockchain and have been rewarded with new badge(s) :

You distributed more than 2000 upvotes. Your next target is to reach 3000 upvotes.

You can view your badges on your Steem Board and compare to others on the Steem Ranking
If you no longer want to receive notifications, reply to this comment with the word STOP

To support your work, I also upvoted your post!

Vote for @Steemitboard as a witness to get one more award and increased upvotes!