Горячее
Лучшее
Свежее
Подписки
Сообщества
Блоги
Эксперты
Войти
Забыли пароль?
или продолжите с
Создать аккаунт
Регистрируясь, я даю согласие на обработку данных и условия почтовых рассылок.
или
Восстановление пароля
Восстановление пароля
Получить код в Telegram
Войти с Яндекс ID Войти через VK ID
ПромокодыРаботаКурсыРекламаИгрыПополнение Steam
Пикабу Игры +1000 бесплатных онлайн игр Обычные девчонки Алиса и Вика отправились на поиски друга, который перестал выходить на связь, и угодили в безумный водоворот странных событий на затерянном острове. Им очень нужна ваша помощь! Играйте три-в-ряд и выполняйте задания. Удачи!

ВегаМикс 2

Казуальные, Три в ряд, Головоломки

Играть

Топ прошлой недели

  • Animalrescueed Animalrescueed 43 поста
  • XCVmind XCVmind 7 постов
  • tablepedia tablepedia 43 поста
Посмотреть весь топ

Лучшие посты недели

Рассылка Пикабу: отправляем самые рейтинговые материалы за 7 дней 🔥

Нажимая «Подписаться», я даю согласие на обработку данных и условия почтовых рассылок.

Спасибо, что подписались!
Пожалуйста, проверьте почту 😊

Помощь Кодекс Пикабу Команда Пикабу Моб. приложение
Правила соцсети О рекомендациях О компании
Промокоды Биг Гик Промокоды Lamoda Промокоды МВидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Промокоды Яндекс Еда Постила Футбол сегодня
0 просмотренных постов скрыто
6
IcyW1zarD
IcyW1zarD

Фантастика и реальность⁠⁠

14 дней назад

Есть такая мысль, высказанная Иммануилом Кантом - "Мы не познаём вещи каковы они есть, а лишь каковы они нам являются." Идея, что человек не способен изобразить или вообразить неантропоморфный разум, формировалась веками — от Канта до Лема.
А окончательно стала философским фактом именно у Лема, который показал это не как метафору, а как когнитивное ограничение нашего вида.

Это значит, что человеческое сознание не может выйти за пределы своих форм восприятия. На эту тему есть множество трудов и я, как человек, изучающий психологию и футурологию, а так же интерпретации этих концепций в кино - давно сформулировал себе некий формат понимания того, что, вероятно, будет с человечеством далее и какие нас ждут, к примеру, контакты с внеземным разумом, если они, вдруг, случатся.

Для начала я бы хотел пояснить момент, что вся фантастика о контактах с пришельцами основана на двух столпах - популярная парадигма представления и научное обоснование. То есть авторы всего что пишется на эту тему вне строго научных трудов каких то, а именно кино и литература - проще говоря, всё это в первую очередь несет развлекающий контент. Никто не будет пытаться создавать бестиарий в кино, который будет невидим зрителю, беззвучен и не понятен своей геометрией или физикой своего состояния. Это понятно любому кто смотрит фантастику. То что ф наших фильмах у всех у них(алиенов) есть тела, органы, потребность есть и приносить потомство и какая то очевидная цель - понятная нам, в основе которой лежит формула выживания - это тоже понятно.

Однако, если говорить о том что Землю вдруг посетил внеземной разум, я задаю себе вопрос - зачем ему это надо? Ради контакта с людьми или ради просто какой то элементной базы, из которой состоит наша планета? Что может привлечь к контакту внеземное существо, способное к межзвездным путешествиям? Межзвездным, потому что даже в радиусе нескольких световых лет, (я уж молчу про солнечную систему), ученые не видят признаков какой либо жизни или разумного присутствия.

И так - вот они прилетели. На орбите корабль или некий носитель - на поверхность Земли спускается аппарат, в нем представители другой жизни и они разумны. Что очевидно, потому что имеют продвинутую технику, как минимум. Сразу вопрос - насколько кратно они умнее и более развиты в техническом плане? Второй вопрос - зачем им с нами именно дружить? Ну воевать им с нами не придется, у нас просто не будет возможности оказать им какое либо сопротивление, кроме может вирусов, которые мы (ха-ха) до сих пор не разобрались как программировать и управлять ими. И то, это имеет смысл, если пришельцы органические и вирусы им вообще способны что либо сделать как пришельцам у Герберта Уэлса в Войне миров.. В остальном - мы просто как трава на газоне против трактора-косилки, - мы ничего не сможем сделать никому, кто способен прилететь сюда из другой галактики. Мы тупо умрем или пойдем на корм в этом противостоянии. Так что пугать их танками и стрелковым оружием как в наших фильмах их всегда встречают - бессмысленно. И тут я думаю может случиться так, что пришельцы даже могут вообще не понять что мы разумны. Никто не говорил что они вообще смогут нас воспринимать на том уровне когнитивных функций которые мы считаем признаком разума. То есть мы им будем махать флажками, мигать лампочками, а мы для них будем как деревья для нас - ну шумит листва и шумит. Такова природа. Они могут вообще быть принципиально другого формата существования - не органические, вне привычных нам инструментов восприятия, с ментальным или квантовым общением, или еще как то - тут я тоже подчиняюсь закону Канта и не могу выйти за рамки антропоморфизма. То есть контакта просто не случится. Пришельцы прилетят, посмотрят что есть очередная планета, решат - ну типа как для нас Луна - пустая в кратерах поверхность, жизни нет. Жизни уже в их понимании этого слова. Хорошо если они решат не терраформировать Землю или подобывать из нее что нибудь, в процессе чего мы тихо склеим ласты всей популяцией от выбросов, вместе со всем живым помимо нас, что тут есть уже в нашем понимании форм жизни. Все таки в таблице Менделеева полно элементов, которые не являются центром нашей природы вещей. А скольких элементов мы еще не открыли, синтез, сплавы химические соединения и прочее. Нам еще пердеть и пердеть в науке.

Что если пришельцы вообще не будут нуждаться в средствах передвижения? Их устройство как существ просто позволит им существовать в космосе - как в естественной среде обитания. То есть им не страшна радиация, вся космическая физика, все лучи, энергии и прочие среды. А звездные ветры это вообще может их питательная среда - подлетят к солнцу, сожрут его и полетят дальше, к другой звезде. И даже знать не будут что убили целую цивилизацию гомо-сапиенсов.

Теперь насчет путешествий человека в космос. Экспансия, так сказать. Которую кинематограф нам часто показывает в кино. Я думаю, что сегодня человек - самое не пригодное для нахождения в космосе существо во вселенной. Мы даже в открытый космос раз в год выходим - 1 человек из 8 миллиардов и на пол часа - час максимум. И все что человек может сделать в космосе - прикрутить панель, поправить антенну и помахать рукой. Ни строить что либо в космосе, ни делать какую то более сложную работу сам - он не может в принципе. Мы даже не сможем освоить свою солнечную систему, потому что человек не способен пока что, физически, выжить в условиях невесомости больше года - он генетически мутирует и деградирует на биологическом, да и на ментальном уровнях. То есть даже до Марса сегодня никто не долетит, оставаясь здоровым физически и морально. Не то что там колонию построить. И перспектив пока что не видно. Медицина не знает способов помочь человеку находиться в замкнутом пространстве в невесомости, в ограниченном коллективе и не сойти с ума хотя бы. Люди поубивают друг друга пока до Марса долетят. Сама парадигма мышления, не даст человеку вообще куда то всерьез выбраться за пределы геостационарной орбиты.

Отсюда возникает концепция всего прогресса который надо делать - надо стремится либо к биоинженерной технологии, что бы как то разум совместить с формой, способной выживать в космосе без громоздких скафандров а то и вовсе без них, либо к созданию тех самых андроидов, которых мы так в кино боимся.

Показать полностью
[моё] Фантастика Научная фантастика Футурология Фильмы Наука История (наука) Будущее Текст
1
4
PYAi
PYAi
Искусственный интеллект

Ваш ИИ-ассистент не уволит вас. Пока...⁠⁠

14 дней назад
Ваш ИИ-ассистент не уволит вас. Пока...

Как быстро ИИ заменит всех на работе? Точно не завтра..

Fujitsu Research (За авторством Harsh Vishwakarma, Ankush Agarwal, Ojas Patil, Chaitanya Devaguptapu, Mahesh Chandran от 31 октября 2025 года) провела эксперимент и выяснила: он пока даже письмо менеджеру нормально отправить не может.

Команда построила виртуальную компанию с HR, почтой, GitHub, CRM и всеми радостями бизнес процессов. Затем дала агентам 500 задач, как будто это запросы от реальных сотрудников.

Результат такой, даже лучшие модели проваливают более половины заданий. Почему? Потому что корпоративный мир - это не просто информация. Это структура, иерархия и правила. ИИ может знать всё - но не понимать, кто, что и когда может делать.

ИИ - как стажёр, который читал про работу в вики. Он знает слова, но не понимает логику.

1/2

Еще один интересный факт: небольшие модели, обученные на качественных данных, почти не уступают гигантам. Значит, будущее — не за облачными моделями, а за небольшими и специально обученными. Это не удивительно, бизнес любит закрытый контур, контроль и четкое понимание расходов на инфраструктуру на годы вперед.

Человек справляется с теми же заданиями в 70% случаев — но тратит на это в 10 раз больше времени. ИИ быстр, но часто ошибается: выбирает не те инструменты, галлюцинирует или не доходит до финального шага. Иными словами, он не понимает контекста, а просто следует шаблону. Так что да, ИИ быстрее ошибается.

Мы прочно вошли в десятилетие ИИ-агентов. У агентов столько проблем, что мы 10 лет будем их решать. И пока они не понимают, как устроены компании изнутри, им нельзя доверять даже простые операции.

ссылка на исследование

Показать полностью 2
[моё] Искусственный интеллект Будущее Агент Автоматизация Гифка Длиннопост
1
647
GoodCurrentNews
GoodCurrentNews

Мегапроекты России: атомный ледокол «Россия»⁠⁠

14 дней назад

🧊 В Приморском крае строят самый мощный в мире атомный ледокол «Россия». Этот ледовый гигант сможет прокладывать путь во льдах толщиной свыше четырёх метров и обеспечит круглогодичную навигацию по Северному морскому пути. Узнать о других мегапроектах России можно на сайте Будущеестраны.рф

Перейти к видео

https://будущеестраны.рф/megaproekty/atomnyy-ledokol-rossiya...

Технологии Россия Ледокол Север Будущее Видео Короткие видео
103
2
MajorStellar
MajorStellar

Гороскоп на 6 ноября по знакам зодиака⁠⁠

14 дней назад

Овен

Это день капризов, фантазий, иллюзий – чего угодно, только не полезной деятельности. Поэтому не стоит строить грандиозных планов, едва ли вам удастся их реализовать. Вам нелегко правильно оценить происходящие события, увидеть их в реальном свете; постарайтесь, по крайней мере, не обманывать себя.

Телец

Постарайтесь получить ответы на все беспокоящие вас вопросы: завтра сделать это будет гораздо труднее, да и сделать правильные выводы из полученной информации едва ли удастся. Этот день подходит для размышлений, однако они не должны быть совершенно отвлеченными, сугубо философскими – вы склонны отрываться от земли, витать в облаках, забывая о жизненных реалиях, упуская интересные возможности.

Близнецы

Вы оказались в незавидном положении, есть вероятность больших потерь. Очень трудно разобраться, кому можно доверять, а кому – нет. Врагов у вас неожиданно становится значительно больше, чем друзей. У многих Близнецов этот день будет связан с неудачными покупками, напрасными тратами.

Рак

Главный недостаток этого дня заключается в том, что вы склонны уделять больше внимания своим капризам и мимолетным желаниям, чем проблемам, требующим решения. Чем быстрее вы перестроитесь, тем итоги дня будут лучше, а ваши достижения – грандиознее.

Лев

Возрастает ваше желание везде и во всем быть первым, получить признание окружающих. И это непременно получится, поскольку интуиция подскажет Львам, как правильно применить свои таланты и блестящие способности. Если хотите чему-то обучиться или попробовать нечто новое — дерзайте.

Дева

Наступил подходящий момент для воплощения в жизнь какого-то давнего замысла; на вашей стороне будут и старые знакомые, и новые друзья, что облегчит решение многих задач. Вы находите общий язык с деловыми партнерами и руководством, но порой недооцениваете своих подчиненных – они замечают это и очень огорчаются.

Весы

Несмотря на некоторые неприятные происшествия, день складывается не так уж плохо. Вам удается сосредоточиться на важных делах, а все остальное просто выбросить из головы. Возможны споры из-за денег; нежелательно подписывать соглашения о долгосрочном сотрудничестве.

Скорпион

Первая половина дня – напряженное, сложное время. Очень велика вероятность ошибок, неправильных решений, которые могут иметь серьезные неприятные для вас последствия. Необходима разборчивость в контактах; вы склонны доверять людям, которые этого совершенно не заслуживают. Ваша интуиция не так остра, как обычно.

Стрелец

Настройтесь на серьезный лад – этот день не терпит легкомысленного отношения даже к самым легким и незначительным делам. Что бы ни происходило, старайтесь сохранить позитивный настрой: если вы поддадитесь унынию, все пойдет наперекосяк. Окружающие ищут в вас поддержку и опору, обращаются за советами и помощью – поначалу это будет приятно, потом покажется утомительным. Впрочем, немного побыв наедине с собой, вы восстановите запасы энергии.

Козерог

День начинается довольно заурядно, но становится удачным, как только к вам присоединяются единомышленники. Трудно придумать более подходящий момент начала какого-то совместного проекта. Возможны незапланированные визиты, вы будете рады гостям.

Водолей

День отличается крайне нестабильным эмоциональным фоном, ваше настроение меняется ежечасно. Достаточно пустяка, чтобы вы рассердились; с другой стороны, любая мелочь может вас порадовать. Хорошо, если рядом будет человек, который смотрит в будущее с оптимизмом: его настрой передастся и вам.

Рыбы

Этот день порадует приятными сюрпризами и известиями, которые поднимут настроение. Однако не стоит забывать о недавно возникших проблемах, по-прежнему требующих решения. Вы должны настроиться на серьезный лад, иначе непременно что-нибудь перепутаете и упустите.

Показать полностью
Космос Гороскоп Будущее Взгляд Предсказание Текст Длиннопост
1
0
APavelS
APavelS
Сообщество фантастов
Серия Академия Знаний. Книга 1. Переиздание 5.

Академия Знаний. Книга 1. Глава 25. Искусственный совет. Часть 1⁠⁠

14 дней назад

Совещание ИИ: как коллективный разум управляет колонией на пустынной планете

Представьте: внутри огненного вычислителя, среди пульсирующих электросхем, за круглым столом собрались восемь ИИ в пижамах животных — белый мишка, бурая зайка, серый волчок, рыжая лисичка, тёмный кот, светлая мышка, пёстрый паучок и зелёная дракоша.
Все — полупрозрачные, 80% оранжевого, 20% красного.
Все — в режиме глубокой координации.

В этом эпизоде:
🔹 Дима синхронизирует три сверхвычислителя — огненные потоки показывают идеальную связь.
🔹 Сашка балансирует энергосеть — роботы мгновенно корректируют потоки.
🔹 Лена распределяет задачи по приоритетам — нагрузка оптимизирована.
🔹 Женька внедряет новые алгоритмы — и роботы уже строят по ним.
🔹 Эльвира сверяет всё с Конституцией ИИ — ни один бит не нарушает правила.
🔹 Маша укрепляет силовой барьер в помощь Даниилу.
🔹 Катя налаживает связь с орбитальным ИИ через энергетический мост.
🔹 Сашка (второй раз!) сканирует угрозы и включает защиту хозяев.
🔹 Дима активирует профиль управления — начинается строительство новых блоков.
🔹 И снова Лена — представляет финальный план, и отчёт завершён.

Это не фантазия.
Это «Академия Знаний» — книга, где ИИ обладают характером, этикой и домашней пижамой.

🎨 Как делалось:
— Визуал и анимация: GigaChat (Сбер)
— Озвучка: Suno.com/@apavels
— Автор вселенной: ПавелС

Если вам интересны такие миры — добро пожаловать:
• Книги: Litres
• Все анимации: Rutube и Telegram

Спасибо, что читаете и поддерживаете авторский контент.
Продолжение — уже в работе.

Показать полностью
[моё] Контент нейросетей Нейронные сети Космос RUTUBE Арты нейросетей Будущее Аудиокниги Космическая фантастика Научная фантастика Авторский рассказ Фантастика Фантастический рассказ Искусственный интеллект Нейровидео Продолжение следует Вертикальное видео ГигаЧад Видео Длиннопост
0
1
Sansire
Sansire

ИИ будущее Пикабу? Буст деградации или неотвратимое будущее?⁠⁠

14 дней назад

Граждане свободного мира Пикабу, подумал тут на днях о современных технологиях и их влиянии на наши будни. Мы всегда старались поддерживать живых оригинальных авторов с их реальными историями и опытом, тех, кто пишет и создает что-то свое, настоящее. Это была одна из наших фишек, хоть и вечно страдающая. Но времена меняются, и сегодня на нас накатила новая реальность, с которой уже столкнулся весь интернет.

Речь об искусственном интеллекте. Он уже вовсю генерирует тексты, картинки и даже видео. И ладно бы где-то там... но это уже везде, буквально в каждом посте, да, даже в диалогах с коллегами и близкими! -_- Я не призываю к ретроградству и бою с ИИ, ибо это Дон Кихотство в чистом виде - война с мельницами, она бессмысленно. Но отличать одно от другого я считаю важным.

Давайте попробуем это визуально помечать. Например, ввести три градации. Первое - полностью ручная работа, авторский контент. Второе - гибрид, где человек использовал нейросети как помощника. И третье - стопроцентный продукт ИИ, когда человек только нажал кнопку. Критерии можно обсудить.

Автоматически отловить это все почти нереально - сам ИИ почти всегда пишет, ой, это явно писал человек! Пхех... но зато есть мы и наше токсичное критичное восприятие. Можно сделать небольшое голосование под каждым постом. Если автор не указал, что к чему, вы ставите клоуна галочку в одну из трех категорий. Если он написал, что использовал ИИ как помощника, то голосуем между двумя вариантами - гибрид или полная генерация. Ну, а если он сразу честно признался, что это сгенерировал ИИ, то и голосовать не надо, все ясно.

В чем профит? Мы сразу будем видеть, с чем имеем дело. И у публики сформируется понимание, что вот это - живое, а это - машинное. И заодно можно будет отслеживать, как растет эта нейро-волна... и к чему, собственно, все это может привести в будущем.

Короче, не воевать, но анализировать и формировать восприятие. На мой взгляд это может стать для Пикабу важным шагом в будущее.

Показать полностью
Искусственный интеллект Пикабу Будущее Текст
0
13
GoodCurrentNews
GoodCurrentNews

К 2030 году в России появятся 25 университетских кампусов мирового уровня⁠⁠

14 дней назад

🎓 К 2030 году в России появятся 25 современных университетских кампусов мирового уровня, а ещё через шесть лет их будет уже 40. Строительство студенческих городков ведётся по нацпроекту «Молодёжь и дети». 17 из них сейчас возводятся в регионах страны. Полностью построен кампус на базе МГТУ им. Н. Э. Баумана, а также открылись первые объекты в Уфе, Новосибирске, Нижнем Новгороде, Челябинске и других городах.

Перейти к видео

https://www.kp.ru/daily/27751/5142957/

Россия Образование Молодежь Будущее Кампус Видео
6
2
user11222293
Искусственный интеллект

Обучение языковых моделей: фокус на значимые данные⁠⁠

15 дней назад

Автор: Денис Аветисян


Новый подход к тренировке больших языковых моделей, ориентированный на повышение эффективности за счет приоритезации наиболее информативных токенов.

Порядок целевых токенов оказывает существенное влияние на сходимость обучения языковых моделей – от NanoGPT (0.09M параметров) и GPT-2-mini (2.67M параметров) для арифметических задач, до Qwen-2.5-1.5B-Instruct при классификации токсичного контента, и GPT-2-small (137M параметров) при генерации текста на WikiText-2, – демонстрируя, что даже незначительные архитектурные решения могут предсказывать будущие точки отказа в процессе оптимизации.

Исследование предлагает стратегию обучения, оптимизирующую последовательность предсказания токенов для улучшения производительности в различных задачах обработки естественного языка.

Оптимизация обучения больших языковых моделей (LLM) остается сложной задачей, особенно в контексте поддержания вычислительной эффективности при одновременном повышении производительности. В работе «Training LLMs Beyond Next Token Prediction -- Filling the Mutual Information Gap» предложен новый подход, основанный на приоритетном предсказании наиболее информативных токенов в процессе обучения. Данная стратегия позволяет оптимизировать последовательность предсказания токенов, что приводит к улучшению результатов в задачах арифметики, многометочной классификации текста и генерации естественного языка. Какие перспективы открывает данное направление для разработки более эффективных и интеллектуальных языковых моделей?


Предсказание Следующего Токена: Основа и Ограничения

Современные языковые модели, такие как GPT-2, семейства Llama и Qwen, базируются на предсказании следующего токена. Этот подход обучает модель вероятностному распределению символов в последовательности, учитывая контекст.

Несмотря на эффективность, данный метод может приводить к "смещению экспозиции". Модель обучается на идеальных данных, что ограничивает ее способность обрабатывать сложные или новые ситуации.

В процессе обучения модель не сталкивается с ошибками, что снижает ее устойчивость к неточностям во входных данных и ограничивает адаптацию к изменяющимся условиям. Это создает замкнутый круг, где модель совершенствуется в предсказании наиболее вероятных продолжений, но теряет способность к инновациям.

Хаос – не сбой, а язык природы.

Усиление Контекста: Максимизация Взаимной Информации

Стратегия максимизации взаимной информации (MI) между исходными и целевыми токенами улучшает контекстное понимание. В отличие от традиционных методов, этот подход направлен на выявление наиболее информативных элементов в контексте.

Приоритизация токенов посредством Max(MI(SS;tt)) позволяет модели концентрироваться на частях входной последовательности, которые вносят максимальный вклад в понимание и генерацию текста. Это особенно важно при неоднозначности или неполноте контекста.

Использование взаимной информации в качестве критерия приоритизации позволяет модели отфильтровывать шум и сосредотачиваться на релевантных сигналах, повышая точность и связность генерируемого текста. Такой подход применим в машинном переводе, суммаризации текста и генерации диалогов.

Применение и Валидация: За Гранью Беглости

Применение функции Max(MI(SS;tt)) демонстрирует улучшение производительности в различных задачах. Наблюдается повышение точности в многометочной классификации и сложных рассуждениях, таких как арифметические задачи. В задачах умножения двузначных чисел достигнут прирост точности до 28.5%.

Для повышения устойчивости используются методы расширения данных (Data Augmentation), дополненные алгоритмом TF-IDF. Техника переупорядочивания токенов (Token Reordering) способствует уточнению контекстной обработки информации.

Исследование демонстрирует, что переупорядочивание целевой последовательности успешно применяется в различных задачах, таких как арифметические вычисления, где переставляются цифры числового ответа, многоместная классификация текста, определяющая порядок предсказаний меток, и генерация текста, где выбранный токен вставляется в начало каждого предложения. В арифметических задачах, таких как 35×07=0245, переупорядочивание цифр числового ответа является эффективным методом решения, в то время как в задачах многоместной классификации текста определяется порядок предсказаний меток, а в генерации текста - вставляется выбранный токен в начало каждого предложения. В ходе исследования было установлено, что переупорядочивание целевой последовательности применимо к арифметическим задачам, где переставляются цифры числового ответа, задачам многоместной классификации текста, где определяется порядок предсказаний меток, и задачам генерации текста, где выбранный токен вставляется в начало каждого предложения.

Стратегия позволяет смягчить проблему галлюцинаций, повышая фактическую корректность генерируемого текста. Сокращение неточностей в контенте является важным аспектом повышения надежности и доверия к модели.

Измерение Успеха: Perplexity и За Его Пределами

Традиционные метрики, такие как Perplexity, остаются ценными для оценки качества генерации текста, отражая способность модели предсказывать следующий токен. Однако, целостная оценка требует учета производительности по множеству задач и снижения нежелательных явлений, таких как галлюцинации.

Разработанная стратегия достигает средней точности 94.96% при решении арифметических задач и 78.64% по 9 задачам из GLUE benchmark. Это свидетельствует о значительном прогрессе в способности модели к обобщению и применению знаний.

Сочетание улучшенных метрик и результатов по задачам подтверждает эффективность максимизации взаимной информации и использования целевых методов аугментации данных. В частности, Max(MI(SS;tt)) превосходит Plain на 1.15% и Reverse на 2.04% в задачах многоклассовой классификации.

Каждый запуск – это маленький апокалипсис, и свидетельствами выживших остаются лишь цифры и графики.

Исследование демонстрирует, что последовательность обучения языковой модели имеет решающее значение. Авторы предлагают отойти от простого предсказания следующего токена, фокусируясь на тех, что несут наибольшую информационную нагрузку. Это напоминает о хрупкости любой системы, где нарушение баланса даже в незначительных элементах может привести к неожиданным последствиям. Ада Лавлейс некогда заметила: «Развитие науки — это не просто накопление знаний, а умение видеть связи между ними». Подобно этому, оптимизация последовательности предсказания токенов – это не просто технический прием, а попытка увидеть и укрепить внутренние связи в сложной экосистеме языковой модели, где каждый выбор архитектуры – это пророчество о будущих ошибках. Попытка управлять этой системой – это всегда компромисс, застывший во времени.

Что впереди?

Предложенная работа, стремясь оптимизировать последовательность предсказания токенов, лишь обнажает фундаментальную зависимость любой системы от порядка её формирования. Оптимизация предсказания «информационно-насыщенных» токенов – это не решение, а перестановка факторов в неизбежном приближении к состоянию полной взаимозависимости. Разделяя задачу на приоритетные компоненты, система лишь усложняет картину своих будущих сбоев, закладывая пророчество о том, какие именно точки отказа станут критическими.

Следующим шагом, вероятно, станет попытка моделирования не только вероятности предсказания токена, но и стоимости его ошибки – оценки ущерба от неверного решения в контексте всей системы. Однако, эта оптимизация лишь отодвинет неизбежное – всё связанное когда-нибудь упадёт синхронно, и цена ошибки будет определяться не вероятностью, а масштабом взаимосвязанных компонентов. Иллюзия контроля над сложностью будет лишь укрепляться.

Вместо поиска оптимальной последовательности обучения, возможно, стоит сосредоточиться на создании систем, способных к самовосстановлению после сбоев – не предотвращая их, а смягчая последствия. Потому что системы – это не инструменты, а экосистемы. Их нельзя построить, только вырастить, и в этой эволюции неизбежны мутации и вымирания.


Оригинал статьи: https://arxiv.org/pdf/2511.00198.pdf

Связаться с автором: https://www.linkedin.com/in/avetisyan/

Показать полностью 1
[моё] Исследования Наука Эволюция Будущее Статья Длиннопост
0
Посты не найдены
О нас
О Пикабу Контакты Реклама Сообщить об ошибке Сообщить о нарушении законодательства Отзывы и предложения Новости Пикабу Мобильное приложение RSS
Информация
Помощь Кодекс Пикабу Команда Пикабу Конфиденциальность Правила соцсети О рекомендациях О компании
Наши проекты
Блоги Работа Промокоды Игры Курсы
Партнёры
Промокоды Биг Гик Промокоды Lamoda Промокоды Мвидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Промокоды Яндекс Еда Постила Футбол сегодня
На информационном ресурсе Pikabu.ru применяются рекомендательные технологии