Самое забавное что в бесплатной части курса по Data Science от яндекс-практикума есть похожий сценарий.

Там посадили в техподдержку бота и нужно было оценить его эффективность. Оказалось что новые клиенты были им довольны потому что на любую проблему он писал типа: "разберемся, вот вам промокод". А со старыми пользователями такое не прокатывало, потому что бот был туповат и ничего кроме промокода предложить не мог.

В итоге по сценарию этого бота убрали и посадили обратно живых людей.

Яндекс ты почему сам у себя не учишься?