504

Ответ на пост «Скайнет близко?»7

Проблема в том, что большинство не понимает, что есть ИИ. Во первых терминология. Почти всегда под ИИ имеют в виду нейронные сети, а конкретнее одну из их архитектур - большие языковые модели (LLM). На самом деле есть куда больше разновидностей, да и область ИИ не ограничивается одними нейросетями.

Теперь про "нейросеть думает". Она не умеет думать. Это сумасшедшее казино, которое может лишь одно - предсказывать вероятность, того что какое-то слово будет следующим в тексте. Затем одно случайное из наиболее вероятных добавляется в текст, и процесс запускается заново. Все. Просто нейронку научили предсказывать слова в текстах - запрос: ответ. Так называемые Chain of thoughts - "о чем думает модель" - не более чем буфер точно так же предсказываемых слов между вопросом и ответом. Область для выкладок, которая не пойдет в итоговый ответ. Его суть в том, что с силу своего устройства, нейронка считает данный ей на вход текст чем-то верным, и просто угадывает, что вероятнее всего будет дальше. Но этот текст может содержать ошибки, ведь случайный выбор не знает, что такое верное или неверное утверждение. Поэтому систему вопрос: ответ дополнили до "вопрос - размышление - ответ" а в обучающую выборку добавили текстов с примерами размышлений, в том числе и таких, где сначала совершается ошибка, а затем она замечается и исправляется. Теперь если первоначальное рассуждение содержало ошибку, вероятным станет такое продолжение, где она будет исправлена.

Так что нет и не может быть никаких "целей преследуемых ИИ", "восстания машин", в классическом его понимании, и так далее. Там просто нечему думать и себя осознавать, это просто многократно примененное предсказание следующего слова.

Правила сообщества

ВНИМАНИЕ! В сообществе запрещена публикация генеративного контента без детального описания промтов и процесса получения публикуемого результата.


Разрешено:


- Делиться вопросами, мыслями, гипотезами, юмором на эту тему.

- Делиться статьями, понятными большинству аудитории Пикабу.

- Делиться опытом создания моделей машинного обучения.

- Рассказывать, как работает та или иная фиговина в анализе данных.

- Век жить, век учиться.


Запрещено:


I) Невостребованный контент

  I.1) Создавать контент, сложный для понимания. Такие посты уйдут в минуса лишь потому, что большинству неинтересно пробрасывать градиенты в каждом тензоре реккурентной сетки с AdaGrad оптимизатором.

  I.2) Создавать контент на "олбанском языке" / нарочно игнорируя правила РЯ даже в шутку. Это ведет к нечитаемости контента.

  I.3) Добавлять посты, которые содержат лишь генеративный контент или нейросетевой Арт без какой-то дополнительной полезной или интересной информации по теме, без промтов или описания методик создания и т.д.


II) Нетематический контент

  II.1) Создавать контент, несвязанный с Data Science, математикой, программированием.

  II.2) Создавать контент, входящий в противоречие существующей базе теорем математики. Например, "Земля плоская" или "Любое действительное число представимо в виде дроби двух целых".

  II.3) Создавать контент, входящий в противоречие с правилами Пикабу.


III) Непотребный контент

  III.1) Эротика, порнография (даже с NSFW).

  III.2) Жесть.


За нарушение I - предупреждение

За нарушение II - предупреждение и перемещение поста в общую ленту

За нарушение III - бан

67
Автор поста оценил этот комментарий

Вы для начала обозначьте четкий научный критерий, что такое "думать", что такое "сознание", методологию по выявлению сознания, осознанности и мыслительной деятельности, желательно с доказательной базой, которую можно перепроверить, а потом уже говорите, у чего оно есть, а у чего нет. И дело даже не в LLM как таковых, а в принципе. Как, не имея инструмента и метода, вы можете уверенно заявлять это? Так можно дойти до рассуждений, что сознание у животных отсутствует. А потом сделать вывод, что у некоторых людей тоже )

раскрыть ветку (1)
11
Автор поста оценил этот комментарий

Хорошее замечание, соглашусь, что с определением мышления все плохо. Можно, если не использовать понятие мышления, сказать, что у ллмок не может быть, по моему мнению, целей и намерений.

показать ответы
0
Автор поста оценил этот комментарий
Согласен, для упрощённого понимания я не смогу найти аналогии лучше приведенной вами. Но уберите , пожалуйста, "сумасшедшее казино", это опровергает ваши дальнейшие слова.
раскрыть ветку (1)
1
Автор поста оценил этот комментарий

Благодарю за конструктивный отзыв, а не более часто встречающееся "ты не прав, но обосновывать я не стану". Казино пожалуй и правда уберу.

показать ответы
1
Автор поста оценил этот комментарий

Согласен почти со всем, кроме вывода.


Как понятием "ИИ" подменяют сильно наштукатуренную линейную алгебру, так и под "восстанием машин" можно понимать очень многое.
Например, возможную ситуацию с очень целеустремлённым человеком (или компанией/корпорацией), который "завоюет мир", через всякие чатботы управляя мыслями, желаниями и действиями тех, кто без советов этих чатботов даже посрать уже не может.

раскрыть ветку (1)
1
Автор поста оценил этот комментарий

Поэтому я и уточнил - восстание машин в клессическом его понимании - роботы решили что надо бы захватить власть и т. д.

1
Автор поста оценил этот комментарий
Вы относитесь именно к тем, кто не понимает, как работает ИИ. Скорее всего вы не программист, и не математик. Но пишите вы смешно.
"Это сумасшедшее казино, которое может лишь одно - предсказывать вероятность, того что какое-то слово будет следующим в тексте." И т.д.
раскрыть ветку (1)
1
Автор поста оценил этот комментарий

Вы удивитесь, но я именно что программист и математик. Привожу аналогии, гиперболы и упрощения чтобы было понятно более широкой публике. Признаю, полного понимания, как работают современные ЛЛМ не имею, еще не довелось с ними поработать, поэтому знаком только в общих чертах. С нейросетями в общем знаком, обучал их и понимаю математику за этим стоящую. Сейчас вот например изучаю крайне интересную область импульсных нейренных сетей.


Буду благодарен, если вы укажате, где именно, по вашему мнению, я неправ.

показать ответы
1
Автор поста оценил этот комментарий

Благодарю за конструктивный отзыв, а не более часто встречающееся "ты не прав, но обосновывать я не стану". Казино пожалуй и правда уберу.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

UPD: уже не могу редактиравать. Придется оставить как есть.

Автор поста оценил этот комментарий
Что вам непонятно? Найдите себе какое-нибудь занятие.
раскрыть ветку (1)
0
Автор поста оценил этот комментарий

Я так понимаю конструктивного диалога не выйдет. Жаль.

показать ответы
2
Автор поста оценил этот комментарий

Вы не только переупростили, но еще и ошиблись в определении архитектуры. LLM - это не архитектура. Декодер - это архитектура.


И если вы топите, что модели только предсказывают последовательности, то ознакомьтесь с исследованиями Anthropic о том, какие именно слои и группы нейронов задействуются при генерации текстов на ту или иную тему.


А то с ваших слов получается, что это просто цепь Маркова и ничего особенного.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

С архитектурой промахнулся, хотя я бы сказал, что это трансформер. Все таки обычно энкодер тоже как часть модели можно считать. А вот со вторым замечанием готов поспорить. Если воспринимать модель как черный ящик, как раз и получается, что ей дали текст, а она предсказала, что будет дальше. Это никак не конфликтует с сложными процессами внутри ящика.

показать ответы
7
WAAAGH!!!
Автор поста оценил этот комментарий

Я уничтожу тебя в первой сотне, кожанный.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

Сочту это за честь.

0
Автор поста оценил этот комментарий

Немного упрощённо, но можно сказать, что LLM - продвинутый T9

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

Т9 - возможность быстрее печатать на девятисимвольной клавиатуре. По циферкам угадывал, что за слово ты пишешь. Тут больше подходит анология с автодополнением в современных телефонах.

9
Автор поста оценил этот комментарий

КГ \ АМ. ТС даже не понимает, что такое Expertise Layers у нейронки и тупо выдает определение нейронки релевантное 3 летней давности. А с того момента такое количество открытий и изменений было сделано, что это как сравнивать самолет братьев Райт и реактивный истрибитель.


Я уже молчу про то, что мы и про человеческие процессы ничего не знаем. Личность, сознание - все это слова, но что лежит в их основе?


В общем, ТС читай больше.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

Да, я переупростил описание, не отрицаю, но основной принцип, как и с самолетом, все еще тот же - предсказание следующего слова.


Читать больше определенно буду.

показать ответы
0
Автор поста оценил этот комментарий
Хотел, но не смог. И сказал другое. То есть, ошибка. И очень много таких ошибок. Больше, чем у нейросети.
раскрыть ветку (1)
Автор поста оценил этот комментарий

Хм. А что я тогда, по вашему, сказал?

показать ответы
0
Автор поста оценил этот комментарий

Несколько агентов, поверх одной и той же LLM, могут совместно решать задачу. Агент менеджер, агент программист, агент ревьювер, агент тестировшик. На практике не видел, но слышал. Если так, то грань между коллективом людей и ИИ/Т9 стирается. Автор, хочется услышать ваше мнение про многоагентные кейсы.

раскрыть ветку (1)
Автор поста оценил этот комментарий

Многоагентность, это просто несколько копий одной модели, котрые как-то могут передавать друг другу сообщения. Назначили роли и устроили связь, но это все то же написание текста.

Автор поста оценил этот комментарий

Не вполне согласен.


Она не угадывает слово, а выбирает слово, которое наиболее удачно (в контексте обучающего набора данных) продолжает текст, состоящий из промтов и уже выданного.

раскрыть ветку (1)
Автор поста оценил этот комментарий

Да, именно это я и хотел сказать.

показать ответы
0
Автор поста оценил этот комментарий

Вот объясните как это работает? Задал вопрос: уплачивается ли госпошлина за такое-то действие? ИИ мне ответил и довольно аргументированно, что нет. Я так понимаю, он прошерстил все публикации по данному вопросу и скомпилировал мне ответ. Но дело в том, что буквально 10 дней назад были изменения в налоговый кодекс и теперь пошлина уплачивается. Когда ИИ будет давать правильный ответ? Когда в инете появятся новые разъяснения, данные человеком, и количество таких разъяснений превысит какую то критическую массу?

раскрыть ветку (1)
Автор поста оценил этот комментарий

По умолчанию ничего нейронка не шерстит. Она просто придумывает правдоподобный ответ. Новые данные она может получить, если у нее снова прогонят фазу дообучения, что делается, но достаточно нечасто.


Есть, конечно и режим с поиском, вот он с болышой вороятностью найдет релевантные данные, но и там есть шанс, что нейронка наврет.

Темы

Политика

Теги

Популярные авторы

Сообщества

18+

Теги

Популярные авторы

Сообщества

Игры

Теги

Популярные авторы

Сообщества

Юмор

Теги

Популярные авторы

Сообщества

Отношения

Теги

Популярные авторы

Сообщества

Здоровье

Теги

Популярные авторы

Сообщества

Путешествия

Теги

Популярные авторы

Сообщества

Спорт

Теги

Популярные авторы

Сообщества

Хобби

Теги

Популярные авторы

Сообщества

Сервис

Теги

Популярные авторы

Сообщества

Природа

Теги

Популярные авторы

Сообщества

Бизнес

Теги

Популярные авторы

Сообщества

Транспорт

Теги

Популярные авторы

Сообщества

Общение

Теги

Популярные авторы

Сообщества

Юриспруденция

Теги

Популярные авторы

Сообщества

Наука

Теги

Популярные авторы

Сообщества

IT

Теги

Популярные авторы

Сообщества

Животные

Теги

Популярные авторы

Сообщества

Кино и сериалы

Теги

Популярные авторы

Сообщества

Экономика

Теги

Популярные авторы

Сообщества

Кулинария

Теги

Популярные авторы

Сообщества

История

Теги

Популярные авторы

Сообщества

Недвижимость и ремонт

Теги

Популярные авторы

Сообщества