IT-компанія Master of Code Global розробила безплатний інструмент Chatbot Analysis Framework для оцінювання розмовних можливостей чат-ботів.
Штучний інтелект програми може оцінити розмовні можливості ботів і визначити способи їх вдосконалення.
Аналіз охоплює вісім критеріїв:
- Аналіз варіантів використання. У яких випадках (діалоги, транзакції тощо) використовується розмовне рішення.
- Персоналізація та контекст. Наскільки використовуються APIs та SDKs для персоналізації та враховуються контексти.
- Оброблення природної мови. Наскільки добре система обробляє те, що вводять користувачі.
- Доступність. Чи відповідає інтерфейс користувача стандартам доступності.
- Персона бота й призначення. Наскільки персона бота відповідає бренду й tone of voice.
- Інтеграція живого агента. Наскільки добре бот переключає на живу людину.
- Зворотний зв’язок. Чи дає змогу система ділитися відгуками клієнту.
- Дизайн-розмови. Наскільки зрозумілим є контент відповідей.
Після оцінювання чат-бот отримає оцінку за 20-бальною шкалою за кожним критерієм.
- 1—10 балів — мінімальне використання автоматизації. Означає, що бот має мінімальну кількість функцій і випадків використання та обмежений у використанні технологій для автоматизації.
- 11—15 балів — хороше використання автоматизації. Означає, що бот має більший перелік випадків використання та ліпше використовує технології для автоматизації, але все ще має потенціал для вдосконалення.
- 16—20 балів — потужне використання автоматизації. Означає, що багато кращих практик і бенчмарків уже впроваджені в боті.