Инновационный бот для человекоподобного общения на основе модели GPT с использованием Интернета. Благодаря постоянному доступу в Интернет, бот сможет дать актуальный ответ на любой ваш вопрос.
Для обучения был собран датасет из 10 тысяч примеров вида <вопрос пользователя><ответ_интернета><ответ_GPT>.
В разработке были использованы и обучены 3 модели искуственного интеллекта:
- Классификатор (нужно/не нужно совершать запрос в Интернете)
- Экстрактивная суммаризация (краткая выжимка из полученной из Интернета и спаршенной странички с ответом на вопрос пользователя)
- модель "facebook opt-1.3b", дообученная на собранном ранее датасете с помощью библиотеки Transformer
Ссылка на Github проекта:
WebGPT
