Umay представляет собой виртуального помощника, владеющего казахским языком, созданного в цифровой форме в виде реалистичного человеческого аватара женского пола.
— Как показывают мировые тренды, хоть мы и привыкли к различным типам чат-ботов, либо ассистентов как Алиса, либо Alexa, в будущем наше общение с компьютерами перейдет именно в такой формат, когда мы будем разговаривать с виртуальными аватарами для того, чтобы активизировать ресурсы. Мы будем встречать их не только в бизнесе, в банках, но и даже, например, в ЦОНах, — отметила аналитик данных ISSAI Мадина Абдирахманова.
Возможности ассистента охватывают широкий спектр областей, включая науку, образование, историю, технологии и медицину. Она объединяет передовые речевые технологии, разработанные в ISSAI, в том числе автоматическое распознавание речи (ASR) и преобразование текста в речь (TTS), для облегчения естественного и свободного общения на казахском языке.
Кроме того, благодаря передовым технологиям компьютерного зрения, Umay способна не только распознавать пользователей, но также определять их возраст, пол и даже эмоциональное состояние. В основе этой системы лежит ChatGPT от OpenAI. Она также использует усовершенствованную модель нейронного машинного перевода «Tilmash», разработанную ISSAI.