Тестирование китайской компании - боль
Работаю в китайской компании по разработке игр. Давно уже работаю и не перестаю удивляться, как у разработчиков все просто. Дано было задание, протестировать соединение при помощи разработанного приложения(игровой ВПН), ну первый раз делаем, можно попробовать. Тогда я еще не знал на что подписался =)) Тестовое задание довольно простое, программа для ПК, скачиваешь ее, запускаешь и ускоряешь нужную игру под сервисом. Улучшение пинга и стабильности сети. Главная загвоздка была в том, что нужны были тестеры с необходимыми играми. Ну так вот:
1) Тестер 1 - игра Дота2
Тестировщик уверял что играет в Доту больше 5 лет и все про нее знает. В ТЗ нужно было сделать скриншоты с внутриигровыми показателями пинга. Выяснилось, что эта функция в стиме довольно запутанная и нужно через консоль ее прописывать, а консоль через путь к файлу дописывать. Тестер курил мануалы 2 часа потом отказался от теста.
2) Тестер 2 - игра Апекс
Игра где нужно было сыграть пару матчей с прогой и без, чтобы увидеть разницу между прямым соединением до сервера и с помощью маршрута в приложении. В ТЗ было четко написано, что нужно подключаться к конкретным серверам и расписано как это сделать(тест с дотой дал понять, что чем подробнее написано - тем лучше). В конце концов, после проверки логов, обнаружилось, что у тестер подключен был к другим серверам, а не к тем, которые нужно было протестировать.
3) Тестер 3 - игра PUBG
Тестер все сделал вроде бы правильно, но данные не согласовывались с нашими предыдущими тестами. Так как коэффициент улучшения был намного ниже чем обычно. Пришлось копать логи и смотреть в чем было дело, в серверных маршрутах или на стороне провайдера. В конце концов, выяснилось, что он забыл выключить свой обычный ВПН перед тестами...
И это все было только в одном тесте, в котором учавствовали 12 человек. Нужно учиться на своих ошибках и делать более подробные ТЗ.
PS: У нас проходит еще один тест в данный момент, если кому будет интересно(тесты с оплатой), можете в комментах написать, я распишу задачу, если будет интересно, можете присоединиться.