Множественное обучение pytorch
Всем доброго времени суток! Пытаюсь обучать свою языковую модель. И недавно я задумался: если есть распределённое обучение(обучение на кластере компьютеров), то можно ли как то повторить подобное, но на одной видеокарте, если ей конечно хватит ресурсов? Если есть такое существует, скиньте, пожалуйста ссылку на доки, с удовольствием покурил бы их на досуге, если нет, поясните непонятливому мне где я ошибся.
а гугл в сторну батча , ничего не говорит ?