Нейросеть GPT-4 теперь просто установить и запускать с рабочего стола без VPN.
Есть версии для Windows, для Mac, для Linux. Прямая загрузка на Windows и Mac
Установочные файлы выложили в X (ex.Twitter) - здесь потребуется VPN для пользователей из России. Подробные гиперпараметры моделей и обучающие коды можно найти в репозитории GitHub.
Извлечение занимает до 20 минут. На Mac появится сообщение о том, что приложение не является доверенным, если вы так считаете, перейдите в Системные настройки - Приватностьи безопасность, найдите "Безопасность" и одобрите установку.
После загрузки программы установки для вашей платформы запустите ее и внимательно следите за местом установки, так как после завершения установки вам нужно будет перейти в эту папку. После завершения установки найдите подкаталог bin в папке установки. Чтобы запустить приложение GPT4All Chat, выполните файл 'chat' в папке 'bin'. Файл будет называться 'chat' в Linux, 'chat.exe' в Windows и 'http://chat.app' в macOS.
Подписывайтесь на ИИшница🍳 - тут все самое интересное из мира новых технологий и нейросетей 🤖
Понравилась картинка в посте? Вы с легкостью научитесь делать красивые изображения в Midjourney. Почему она? Потому что Midjourney - самая понятная и настраиваемая нейросеть, которая создает шедевры. Для Вас мой курс - быстрый старт в Midjourney для бизнеса
Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпишитесь на мой тг НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса
В небольшом городке Харроуфорд местный мудрец обращается к героям с просьбой. Он нашел древнюю карту, указывающую на забытую библиотеку, где хранится знание, способное изменить мир. Он просит исследователей найти библиотеку и принести из неё книги или свитки с важной информацией.
Основная Цель:
Найти затерянную библиотеку и извлечь из неё ценные знания.
Локация:
Таинственный лес, в котором скрыта библиотека, окруженная древними руинами.
Основные Этапы Приключения:
Путешествие через Лес:
Преодоление препятствий и ловушек в лесу.
Встреча с лесными обитателями, которые могут как помочь, так и помешать.
Руины у Подножия Библиотеки:
Исследование древних руин, содержащих ключ к входу в библиотеку.
Разгадывание загадок и головоломок для открытия скрытого входа.
Затерянная Библиотека:
Исследование затерянной библиотеки, полной забытых знаний и магических артефактов.
Встреча с защитником библиотеки (например, древним магом или магическим созданием).
Сбор Ценных Книг:
Поиск и извлечение самых ценных книг и свитков.
Столкновение с ловушками и защитными заклинаниями, охраняющими знания.
Побег из Библиотеки:
Открытие, что библиотека начинает рушиться или исчезать после взятия книг.
Спешный побег через обрушивающиеся коридоры и комнаты.
Завершение:
Возвращение в Харроуфорд с ценными знаниями. Мудрец благодарит героев и обещает использовать информацию для блага. Герои получают награду и новые знания, которые могут использовать в своих будущих приключениях.
Награды и Последствия:
Награды: магические предметы из библиотеки, золото от мудреца, новые знания и навыки.
Последствия: раскрытие новых секретов мира, которые могут вести к новым приключениям и открытиям.
Игроки находятся в небольшом городке, где местный лорд срочно просит их помощи. Дочь лорда, Лиана, пропала при загадочных обстоятельствах. Последний раз её видели возле старой заброшенной башни на окраине города. Лорд обещает щедрую награду за её возвращение.
Основная Цель:
Игроки должны исследовать заброшенную башню, найти Лиану и выяснить, что случилось.
Локация:
Заброшенная башня - загадочное место с четырьмя уровнями и подвалом. Внутри обитают небольшие монстры и расставлены ловушки.
Основные Этапы Приключения:
Исследование Подножия Башни:
Встреча с местными жителями, которые рассказывают странные истории о башне.
Обнаружение следов, ведущих к башне.
Первый Уровень Башни:
Головоломка с механизмом для открытия двери на следующий уровень.
Боевая встреча с небольшими монстрами (например, скелетами).
Второй Уровень Башни:
Встреча с дружелюбным призраком, который может предоставить подсказки.
Неожиданный поворот: находят дневник Лианы, намекающий на её интерес к темной магии.
Третий Уровень Башни:
Сложная ловушка, требующая командной работы для безопасного прохождения.
Обнаружение секретной комнаты с магическими артефактами.
Четвертый Уровень Башни:
Босс-битва с магическим созданием, охраняющим последний уровень.
Спасение Лианы, которая оказывается заколдованной.
Подвал Башни:
Открытие, что Лиана сама вызвала создание, но потеряла контроль над ситуацией.
Битва с последними сторожевыми монстрами и возвращение Лианы домой.
Завершение:
Игроки возвращают Лиану её отцу. Лорд благодарит их и вручает обещанную награду. Открывается возможность для будущих приключений, связанных с тайнами башни и Лианы.
Награды и Последствия:
Награды включают золото, магические предметы из башни и благосклонность лорда.
Последствия: Лиана может стать союзником или противником в будущем, в зависимости от того, как игроки обращались с ней.
В этой статье мы расскажем вам про самые важные фичи, внедренные за последние полгода в ChatGPT (самую мощную нейросетку в мире), а также обсудим – каким видением будущего поделился Сэм Альтман на прошедшей 7 ноября конференции от OpenAI. Спойлер: они хотят запилить «агентов Смитов», которые смогут самостоятельно взаимодействовать с миром!
Сэм Альтман здесь be like: «Ну мы, короче, сейчас настрогаем этих агентов и навыпускаем в сеть – а чего дальше будет, так вы в фильме сестер Вачовски посмотрите, не буду вам спойлерить...»
У этой статьи как будто бы два автора, но на самом деле почти весь текст написал Игорь Котенков (автор канала Сиолошная про машинное обучение, космос и технологии). Можно сказать, что Игорь тут отвечал за техническую корректность и экспертизу в искусственном интеллекте, а потом еще Павел Комаровский (автор канала RationalAnswer про рациональный подход к жизни и финансам) навалил поверх странных мемов. Короче, нет времени объяснять, поехали!
С момента выхода нашей прошлой статьи «GPT-4: Чему научилась новая нейросеть, и почему это немного жутковато» произошло много интересного. Были как обновления уже существующих продуктов, так и релизы кардинально новых. Разработчики не успевают клепать новые AI-стартапы, компании наперегонки привлекают миллиарды долларов инвестиций, а люди теряются в новостях и не понимают, что происходит в мире искусственного интеллекта. В общем, мы решили, что пора уже нам запилить обзор ключевых изменений, произошедших за более чем полгода, а также рассказать про самые свежие анонсы с только-только закончившейся конференции OpenAI DevDay 2023. Даже если вы внимательно следили за развитием ChatGPT — уверены, будет познавательно и интересно!
Примечание о ChatGPT/ChatGPT-3.5/GPT-4 во избежание путаницы (читать только педантам и занудам)
В целом, все эти слова означают примерно одно и то же. Но давайте всё же поясним используемую нами терминологию:
LLM, Large Language Model — большая языковая модель. Собственно, любая текстовая нейросетка, ярким представителем которой является и ChatGPT.
GPT-3.5 — это базовая текстовая модель (LLM) от OpenAI, долгое время существовавшая в виде сервиса для разработчиков. По навыкам похожа на завирусившуюся в декабре 2022-го ChatGPT.
ChatGPT, она же ChatGPT-3.5 — первая версия диалогового ИИ-ассистента, основанного на GPT-3.5. Добавлен формат диалога и проведено дообучение конкретно под этот формат.
GPT-4 или ChatGPT-4 — продвинутая версия модели от OpenAI. Она больше, тренировали ее дольше, поэтому она умнее и понимает больше языков. Сразу же была добавлена на сайт ChatGPT, поэтому фактически с марта 2023 года ChatGPT может обозначать и GPT-4: слова используются как синонимы. Отдельная версия GPT-4 без Chat-формата никогда не показывалась публике.
По большому счету, ChatGPT обозначает диалоговую LLM в общем. Почти во всех контекстах можно воспринимать это как GPT-4, так как смысла говорить о старых и менее способных моделях нет. Так что да, ChatGPT = GPT-4. :)
Если вы раньше вдруг не читали два наших прошлых лонгрида с объяснением простым языком принципов работы технологии текстовых нейросеток — то самое время наверстать это упущение (это поможет вам и в понимании текущей статьи):
Для начала скажем пару слов про то, насколько прокачалась ChatGPT с точки зрения популярности и проникновения в широкие массы. (Кстати, опрос среди авторов данной статьи показал, что эту нейросетку регулярно используют уже 50% людей!)
Сэм Альтман (глава OpenAI) на конференции OpenAI DevDay 2023 раскрыл следующую статистику: недельная аудитория (WAU, Weekly Active Users) ChatGPT превышает сто миллионов человек. Интересно, что недельный показатель — не самый частоиспользуемый, обычно говорят про DAU (дневную аудиторию) или MAU (месячную). Мы помним, что в начале 2023-го продуктом уже пользовалось больше 100 млн человек в месяц. Аккуратно предположим, что эта цифра не выросла драматически, и поэтому решено было чуть-чуть изменить способ подачи. Например, согласно подсчетам по интернет-трафику, MAU составляет примерно 180 млн человек, что всё еще очень недурно для годовалого продукта!
Если вы финансист, то вам должно быть интересно следующее: 92% компаний из списка Fortune 500 (крупнейшие компании США по размеру выручки) уже используют продукты OpenAI. Короче, бизнесы вовсю пытаются придумать, как бы эту вашу технологическую сингулярность половчее использовать, чтобы бабосов побольше заработать!
Но, как говорится, есть нюанс: если натренировать нейросетку на базе данных с чатами, в которых программисты общаются по работе – она довольно быстро начинает отвечать на любые запросы в стиле «ох, что-то я выгорела, щас бы свеженький смузи выпить...»
А главное, всё это достигнуто совершенно без какой-либо платной рекламы — только сам продукт, молва о котором передается из уст в уста! (Disclaimer: этот материал не был проплачен OpenAI).
Ок, а теперь — давайте кратко пройдемся по ключевым вехам развития детища OpenAI, которые мы наблюдали с момента релиза флагманской модели GPT-4 в марте 2023-го.
Весна 2023: Инструменты и плагины для ChatGPT, или как приделать нейросетке «ручки»
Многие пользователи уже давно и справедливо критиковали «маломощные» способности языковых моделей, так как те не имеют доступа в интернет – а значит, не могут находить и использовать свежую информацию для формирования ответов на запросы. Все знания, что в них заложены, диктуются тренировочной выборкой, которую видела модель. Более того, в своем первозданном виде LLM довольно плохи в математике, и осуществляют лишь приблизительные вычисления (хоть иногда они и могут оказываться точными).
OpenAI, понимая эту проблему, адаптировали концепцию «инструментов». Как человек пользуется калькулятором для сложных вычислений вместо прикидки в голове, так и ChatGPT может обратиться к внешнему сервису с целью сделать одно конкретное действие — даже если оно сильно сложнее сложения двух да двух. Почти сразу после выхода модели GPT-4 появились «плагины», основными из которых стали доступ в поисковик Bing (эх, не пошутить про то, что модель «гуглит»!) и интерпретатор кода. Первый помогает актуализировать знания по разным темам, передавая в GPT результаты работы поисковика по конкретному текстовому запросу (который модель же и формирует), а второй — определяет, когда модель хочет запустить Python-программу, выполняет все действия и показывает результат.
Пример использования поисковика моделью. Пятая новость вообще появилась в день написания статьи — так что материал свежачок!
У самых любознательных читателей может возникнуть вопрос: а как это вообще работает? Как «подключить» реальный мир к языковой модели, которая не умеет делать ничего, кроме как читать и писать текст? Для того, чтобы ответить на этот вопрос, необходимо вспомнить два факта, которые мы разбирали в первой статье «Как работает ChatGPT»:
Современные языковые модели были обучены следовать инструкциям.
Современные языковые модели хорошо понимают концепцию программирования и сносно пишут код. (Ну конечно, они же весь интернет прочитали! Столько жарких споров на форумах разработчиков, ну и документация тоже помогла, конечно.)
Исходя из этого, намечается следующая идея: а давайте напишем инструкцию, которая покажет модели, в каком формате она может обращаться к тому же калькулятору с помощью кода? А внешняя программа будет просто «читать» вывод модели по словам и выполнять соответствующие действия.
Пример: мы написали ChatGPT, какой формат ответа мы от нее ожидаем. Единственный для нее способ удовлетворить пользователя — это следовать нашей инструкции, и делать ровно то, что мы ее попросили (даже несмотря на то, что мы задали странный порядок).
Звучит максимально просто, но это работает даже для сложных плагинов! Может не вериться, но именно по такой логике подключается браузер (когда текст с экрана переводится в обычный текст, и модель выбирает, куда нужно «кликнуть»). А во всех деталях про обучение модели веб-сёрфингу можно прочитать в статье Игоря «ChatGPT как инструмент для поиска».
И еще один из самых полезных и популярных инструментов, доступных модели — это математический движок Wolfram Alpha, с которым знаком каждый студент-технарь (гуманитарии, вы пока сидите спокойно). Любые сложные вычисления теперь не помеха и для LLM!
Исследования показывают, что GPT-4 может даже справиться с управлением автоматизированной химической лабораторией и осуществлять синтез веществ разной полезности, но это уже другая история.
GPT-4 была подключена к системе управления пробирками (изображено слева сверху). Ей давались простые задачи, описываемые естественным языком, на построение определённых фигур из реагентов. Модель успешно прошла тесты.
Единственная проблема с инструментами (плагинами) — модель может потеряться, если их слишком много. Не всегда ясно, в какой последовательности к ним нужно обращаться, и какой конкретно выбрать. Навык модели скорее близок к «неплохо» нежели к «отлично». Поэтому сейчас их выделили в разные чаты: в одном можно сёрфить по интернету, в другом программировать, а в третьем — писать курсовую вместе с Wolfram (преподу только не рассказывайте, чем вы занимаетесь). Но со временем модель прокачалась, и теперь можно делать всё и сразу, без компромиссов!
Осень 2023: Текстово-картиночная модель Dall-E 3, или квест по генерации идеального чебурека
Отдельным продуктом, который был представлен OpenAI совсем недавно, в конце сентября, является генеративная нейросеть Dall-E 3. Она, как и ее предшественники первого-второго поколения, генерирует изображения по входному запросу. Но большинство подобных нейронок имеет жесткое ограничение: чем длиннее промпт (входной текстовый запрос) и чем больше в нем деталей, тем меньше изображение будет соответствовать описанию. Поэтому зачастую промпты состоят всего из 1-2 предложений (иногда даже из пары слов), и большая часть деталей остается на откуп модели: уж как она представит себе объект, так и будет. Для художников/дизайнеров инструмент хоть и может быть полезным, но не в полной мере — ибо сложно добиться чего-либо, полностью соответствующего авторскому видению и задуманной композиции.
Например, вот картина Théâtre D'opéra Spatial, победившая в конкурсе штата Колорадо в 2022 году. Работа обошла другие, созданные живыми людьми, но на ее создание потребовалось более 600 запросов к модели MidJourney!
OpenAI здесь сделали огромный шаг вперед: теперь Dall-E 3 понимает гигантские промпты, и создает изображения, которые точно соответствуют заданному тексту. Давайте посмотрим на пример с лендинга продукта:
Конечно, для рекламы на официальном сайте выбирается самый лучший пример, и такие складные генерации всё-таки получаются не каждый раз. Но по первым субъективным тестам и отзывам в сети внимание свежей нейросетки к деталям всё равно поражает.
Причина, по которой Dall-E 3 попала на эту страницу — ведь она, на первый взгляд, никак не связана с ChatGPT и большими языковыми моделями — заключается в принципе ее работы. Dall-E 3 с первых дней создавался на основе ChatGPT, ведь именна эта LLM генерирует козырные подробные промпты для модели (на базе ваших «колхозно сформулированных» запросов). Просто коротко укажите ChatGPT, что вы хотите видеть, пусть даже в двух словах. Она перепишет промпт, обогатит его деталями, и только после этого передаст в Dall-E 3. И интегрируется это точно также, как и описанная выше идея «плагинов»!
AI буквально берет на себя часть работы по промпт-инженирингу, заменяя ленивого человека и вместе с тем предлагая новые идеи для изображения. Вы пишете «чебурек», а получаете (заранее просим прощения у всех, кто сейчас голоден!)...
Сгенерированный промпт: «A freshly made cheburek on a wooden cutting board, half-cut to reveal the juicy meat filling inside. The dough is golden-brown and crispy, with steam rising from the filling. The background is a rustic kitchen setting...»
Интереснее, как эту модель тренировали. У нас нет всех деталей обучения, OpenAI поделились самыми важными отличиями. Насколько нам известно, это первый раз, когда модель такого масштаба обучается на синтетических данных, а не на произведенных человеком. Вы не ослышались — 95% набора пар «картинка <-> текст» (именно на них и тренируется модель) были порождены GPT-4-Vision, анонсированной еще весной. Модель смотрела на изображения из интернета и писала несколько длинных описаний, и эту процедуру повторили несколько миллиардов раз. Вот так вот модели начали помогать обучать другие модели, и никаких остановок на пути к сингулярности уже не будет!
Осень 2023: AI-ассистент из мира фантастики
Помните такого ассистента Siri? Сразу после его появления, кажется, возникло ощущение, что еще чуть-чуть — и мы окажемся в мире этих супер-умных и крутых робо-помощников, понимающих нас с полуслова и умеющих делать тысячу вещей. Но за более чем десятилетнюю историю развития продукта от Apple, как будто бы никаких поражающих воображение обновлений и не вышло. Siri-бот (или «ботиня», как там сейчас правильно?) всё так же тупит, путает звонок «моей маме» и «моей бабе»...
Тем временем, в сентябре вышло обновление мобильного приложения для ChatGPT, позволяющее ему видеть, слышать и говорить. Теперь самая мощная нейросеть современности имеет удобные интерфейсы коммуникации с вами. А самое главное — понимает десятки языков и умеет на них отвечать, а также способна гуглить (пардон, «бингить») под капотом.
Вот здесь можно посмотреть пример, как парень из Твиттера (ой, простите, X) пытается учить русский язык — обратите внимание, что приложение отвечает ему на разных языках, не меняя голос. В целом, выглядит прямо очень круто, Джарвис из «Железного человека» уже явно бессильно грызет свою шляпу от зависти!
На основе этой же технологии функционирует и работа с изображениями. Можно загрузить несколько фото (и даже документов), выделить интересную часть и расспросить ChatGPT о ней. Как починить велосипед? Какой ключ из набора взять (чтобы не огрести от бати)?
Пример с картинкой: можно обвести конкретное место на фото и спросить ChatGPT «что это за вундервафля?!»
Некоторые даже спрашивали дорогу до ближайшего магазина по фотографии! Нет, не то чтобы ChatGPT знает каждую улочку, просто понимая урбанистику и глядя на указатели, смогла подсказать, как добраться. На этой же идее основан и продукт компании Be My Eyes — он помогает слепым или слабовидящим выполнять задачи, связанные со зрениием, будь то поиск ключей или что-то поважнее. Раньше там работали волонтеры, а теперь их заменяет GPT. Уже в ближайшем будущем для кого-то без возможности видеть технология может стать буквально глазами в наш мир.
Здесь и сейчас: GPT-4, включаем Turbo-ускорение!
Ну что ж, вот мы, кажется, и добрались до сегодняшнего дня. 7 ноября произошло событие, благодаря которому мы и сели писать этот материал — конференция OpenAI DevDay 2023, где было представлено более десятка мелких и крупных обновлений почти к каждому продукту компании. Как мы видели ранее, за последние полгода GPT-4 и так серьезно прокачалась, обросла вспомогательными инструментами и интерфейсами. Некоторые компании уже начали применять ее в бизнесе и даже строить отдельные продукты исключительно на этой технологии. При этом, у нее остается много ограничений, и разработчики гадали — что же конкретно нам покажут на долгожданном DevDay?
OpenAI начали с козырей: GPT-4-Turbo. Было заявлено 7 улучшений, но многие из них носят технический характер (конференция ведь для разработчиков, всё-таки), поэтому мы сфокусируемся только на самом главном и интересном.
Если вы пользовались ChatGPT целый год, то заметили, что на вопросы, касающиеся событий после сентября 2021 года, модель не отвечает (или вовсе галлюцинирует). Если вам хотелось обработать подобного рода информацию, то на помощь приходил режим работы с поисковиком Bing. Альтернативно, можно было вручную загрузить документ, чтобы модель его «прочитала» и дала соответствующие этому тексту ответы.
На конференции было анонсировано, что актуальность знаний подтянули аж до апреля 2023-го, и впредь не планируют оставлять «в памяти» модели таких больших временных разрывов. Это означает, что примерно каждые 1-3 месяца знания нейросетки будут «подтягивать» до более свежего момента. Главное только, чтобы ничего из прошлого при этом не забылось!
Ходят слухи, что когда бедную модель заставили «учить» новости за 2022 год — из серверной OpenAI были слышны страшные крики...
В дополнение к этому, в модели прокачали возможность загрузки файлов — теперь можно заливать до нескольких гигабайт своих файлов на веб-сайт OpenAI, и модель при генерации ответа будет сначала искать релевантную страницу, и уже потом отвечать. Это не означает, что проблема решена полностью и для всех типов вопросов, но точно улучшит качество ответов в интересном вам домене знаний.
Кроме того, существенно прокачали и длину контекста модели — до 128 тысяч токенов, или больше 300 страниц текста. Теперь можно будет вести с ChatGPT последовательный диалог в течение пары недель и быть уверенным, что модель не забудет детали, обговоренные в прошлый понедельник. Отметим, что пока что это самый большой контекст, доступный на рынке от приватных компаний — до этого лидировали Anthropic с моделью Claude 2 и контекстом в 100 тысяч токенов. А вот среди открытых (но и, вместе с тем, более глупых) GPT буквально вчера появились «гиганты» с окном в 200 тысяч токенов.
График сравнения разных моделей до того, как на танцпол ворвалась GPT-4-Turbo.
У читателя может возникнуть закономерный вопрос: а зачем это вообще надо, в чем польза таких длинных чатов? Можно пофантазировать о нескольких сценариях:
В промпт модели-ассистента в разработке можно положить не один файл или кусок кода, а сразу весь проект или значимую его часть. В этом случае AI будет лучше ориентироваться, понимать, какие подсказки стоит дать, какие баги могут появиться, и так далее. Схожую логику можно применить и к модели-юристу, читающей, например, всё налоговое законодательство за один присест.
Написание огромной инструкции длиной в книгу, с описанием всех тонкостей выполняемой задачи. Очень часто модель не учитывает какую-то особенность, понимаемую человеком, а в промпте не хватает места для нюансов. Но теперь будет влезать!
Один из самых популярных и рабочих способов улучшения качества ответов модели является few-shot prompting: это когда перед постановкой задачи нейронке показывают пару десятков примеров, что нужно делать. Понятно, что такой набор не может покрыть каждый блок логики, но вот если его расширить до тысяч примеров, то ситуация может измениться в корне.
Вот так выглядит few-shot: в промпте есть 3 примера определения сентимента отзыва (2 позитивных и один негативный). ChatGPT в данном случае предсказывает неправильный ответ — возможно, здесь как раз не помешало бы загрузить в промпт не 3, а 3000 примеров
Итого, основная цель подобных изменений — это улучшение общего качества ответов ChatGPT с помошью более детального описания задачи, будь то примеры, инструкции или подробный контекст работы. Сделаем аккуратное предположение, что те, кто заявлял о неминуемой смерти промпт-инжениринга до того, как появились модели с длинным контекстом, скорее всего просто обладали слабым воображением. Мы по сути еще и не начали писать (и автоматически генерировать) промпты на полную!
Кстати, Сэм Альтман подчеркнул, что модель умнее, чем обычная GPT-4. Она уже доступна в официальном UI на chat.openai.com, пробуйте и делитесь своими впечатлениями — стало лучше или хуже?
API-доступ ко всем моделям и снижение цены: рождественские подарки для разработчиков
Как с большой силой приходит большая ответственность, так и с большим промптом приходит большой счет за использование GPT. Платить за использование API (интерфейса доступа к GPT, к которому обращаются разработчики) нужно тем больше, чем длиннее промпт и генерируемый текст — вполне логично, ведь это напрямую влияет на количество вычислений, необходимых для работы нейросети.
Поэтому больше всего оваций на конференции сорвал анонс снижения цен на Turbo-модель. Использование такой модели дешевле в 3 раза на текст из промпта, и в 2 раза на генерируемые токены (их обычно меньше). Почему важно такое разделение? Как было указано выше, иногда в промпт хочется запихать ну уж очень много деталей и примеров. Теперь в ту же цену влезет в 3 раза больше, да еще и работать должно лучше — либо можно просто сэкономить на стоимости использования. Как ни посмотри, одни плюсы!
Кроме этого, разработчики получили доступ к API для всех упомянутых моделей: и для работы с изображениями (GPT-4-Vision), и для генерации картинок в Dall-E 3, и для генерации голоса по тексту (а перевод голоса в текст уже был доступен раньше, его просто прокачали новой моделью). API — это способ простому смертному обратиться к закрытым моделям, работающим на каком-то сервере, и получить результат. То есть теперь каждый разработчик может интегрировать эти технологии в свое приложение по частям.
Вот пример, как GPT-4-Vision помогает провести домашнюю инвентаризацию, определив предметы из IKEA. Правда, в одном она ошиблась — внимательным читателям предлагается найти неточность!
Народные умельцы уже в первые сутки забабахали несколько интересных прототипов. Например, AI-комментатор футбола! Из видеозаписи берется по 2 кадра каждую секунду, сотни извлеченных кадров подаются в GPT-4 — а та, в свою очередь, пишет речь от лица комментатора. Затем это озвучивается одним из шести представленных OpenAI голосов, и вот результат.
Получилось не так эмоционально, как у испанского комментатора, но это всего лишь 2023 год, дайте AI маленькую скидку и немного времени! Тем более что работники индустрии озвучки уже жалуются на то, что у них отбирают работу.
Идея лежит настолько на поверхности, что почти одновременно появился и второй жестяной комментатор — на этот раз, для популярной онлайн-игры League of Legends. Качество сгенерированной речи выше, а комментарии уместны и относятся к стратегии в игре.
Да, это не что-то, что поражает воображение, и подобные приложения на телефонах уже давно были. Однако тут важно, что это всё смесь из двух-трех разных моделей, подключаемых в одну строчку кода. Теперь эти инструменты доступны каждому, они работают над широчайшим кругом задач (зачастую даже лучше, чем специализированные системы, заточенные решать одну конкретную задачу — например, находить кошек и собак на видео), а прототип можно накидать за час. При этом технология становится всё более доступной.
В Твиттере даже завирусился мем, высмеивающий стартапы, которые являлись тонкими прокладками с минимальной добавочной ценностью относительно продуктов OpenAI.
Картинка сделана в Фотошопе, но это всё равно lol — тут не поспоришь
Например, сайты по типу ChatWithPDF / AskPDF позволяли загрузить файл (даже большой, в 100 страниц), а потом задавать вопросы по документу, при этом ответ формировался на основе предоставленного источника. Лень читать 50-страничный отчет по работе? Изучите его за 3 минуты! Правда, технология была уж очень простой — при желании можно накидать такую же функциональность за вечер. OpenAI почесали голову и сказали: давайте каждому пользователю предоставим возможность чатиться с документами? Бабах, и маленький наколеночный стартап испаряется, как будто по щелчку пальцев. Однако, настоящим стартапам, развивающим доменную экспретизу и предоставляющим большую ценность и без вспомогательной технологии такая судьба не грозит... ну, пока по крайней мере, lol.
Поддержка в судебных делах по копирайту, или как пользоваться плодами нейронок безопасно
Мы живем в такое время, что иногда сложно отделить настоящее искусство от пустышки. Хотя дебаты по этому поводу идут уж точно не меньше века (как минимум, с появления «Черного квадрата» Малевича), сейчас, в эпоху AI, они особенно остры. Пока в крупнейших юрисдикциях идут споры по поводу легальности текстовых данных и изображений из интернета для тренировки нейросетей, большие компании видят риски в их использовании. Вдруг завтра прилетит судебная повестка из-за нарушения копирайта? А вдруг сгенерированная картинка для обложки журнала или постер для фильма на самом деле неоригинальны?
Понимая и разделяя переживания бизнесов, ключевые поставщики технологии спешат навстречу. Так, например, если третья сторона подаст в суд на коммерческого клиента Github Copilot (грубо говоря, это ChatGPT для программистов) за нарушение авторских прав из-за использовании продукта или результатов его работы, то Microsoft будет защищать клиента в суде, а также при необходимости выплатит сумму штрафов или неустоек. Схожие анонсы сделали: Adobe — при использовании генеративных функций фотошопа (модель Firefly), Google — почти для всех своих продуктов, IBM, и другие.
В общем, сейчас, если кто-то вам предъявляет за неуместное копирование чужих идей — смело отвечайте «Гугл мне вот это всё разрешил!»
И вот на конференции DevDay было объявлено, что OpenAI тоже вступает в эту игру, запустив программу Copyright Shield. Распространяется она, увы, не на всех пользователей, а только на Enterprise и разработчиков. Другими словами, если вы на официальном сайте что-то сгенерировали, то под защиту оно не попадет (если ваша компания не оформила партнерство с OpenAI отдельным договором).
Интересно, что буквально за пару недель до анонса произошло следующее: трое художников подали иск против технологических компаний (Midjourney, Stability AI и DeviantArt) по обвинению в нарушении авторских прав. В свою очередь, эти компании подали ходатайство о прекращении дела. Судья Окружного суда США удовлетворил это ходатайство. Основная причина такого решения заключается в том, что художники не зарегистрировали авторские права на каждую из своих работ. Однако суд также выдал рекомендации по корректировке претензий. Что будет дальше — узнаем в следующих сериях!
Кстати, если вы переживаете за свои данные, то вот еще новость: Сэм Альтман заверил, что OpenAI не тренирует модели на данных пользователей. Это верно по умолчанию для бизнесов и разработчиков, работающих по API, а вот обычным пользователям необходимо убрать специальный флажок в настройках на сайте ChatGPT.
Миссия Microsoft и OpenAI: счастье для всех, и пусть никто не уйдет обиженным (ну или типа того)
Перед самой главной частью презентации на сцену вышел Сатья Наделла, СЕО Microsoft. На пару с Сэмом Альтманом они обсудили партнерство двух компаний, а также общее видение. Официальная миссия Microsoft звучит так: «to empower every person and every organization on the planet to achieve more» (дать возможность каждому человеку и каждой организации на планете достичь большего).
И разработка инструментов, увеличивающих эффективность выполнения работы и расширяющих возможности, точно согласуется с этой миссией. Умные AI-ассистенты на основе ChatGPT уже сегодня справляются с этим, если верить исследованиям (от MIT, от Harvard University). Что же будет дальше, каков план OpenAI? Глобально их видение — это создание AGI (Artificial General Intelligence, универсальный искусственный интеллект), который приносит пользу всему человечеству. Не смейтесь, не пугайтесь, сейчас всё объясним. У AGI много определений, поэтому важно правильно выстроить ожидания. Определение, которое используют OpenAI, можно сформулировать примерно так: AGI — это высокоавтономные системы, которые превосходят людей в большинстве экономически ценных работ. Уже не так страшно, да? Никаких терминаторов (вроде бы...).
Сатья и Сэм смотрят на тебя как на кожаного мешка, чью жизнь они вот-вот неимоверно улучшат своими высокоавтономными сверхумными ИИ
В этом определении несколько ключевых составляющих. Первая — это автономность систем. Они должны функционировать с минимальным вовлечением человека, получая верхнеуровнево сформулированную задачу. Работает по схеме «дал задачу и забыл». Вторая — фокус на экономическую составляющую, на увеличение эффективности интеллектуального труда.
Конечная цель — сделать так, чтобы можно было просто сказать компьютеру, какой итоговый результат ты хочешь получить, а он сам придумает и реализует все необходимые подзадачи для достижения этой цели. Системы такого рода с указанным уровнем возможностей в области AI часто называют «агентами». Сам факт появления подобной технологии, и уж тем более ее внедрение, потребуют большого количества вдумчивых обсуждений всем обществом — что делать людям, которые потеряют работу? Как изменится политика? Какие права будут у AI-«работников»? Но пока это чуть более отдаленное и туманное будущее, а мы находимся здесь и сейчас. И OpenAI в рамках конференции рассказали про первый маленький шажок по направлению к этому будущему: GPTs.
Тут мы вынуждены прерваться, так как заложенный на Пикабу лимит символов на статью не позволяет впихнуть остаток материала. Так что, окончание лонгрида про GPTs-агентов Смитов и про гигантский плавучий суперкомпьютер либертарианцев, который будет компилировать интегралы в нейтральных водах, можно прочитать вот здесь.
Никто не просил, а я взял и попросил GPT-4 представить какими бы были старые классические игры если бы их делали в наше время. «Авторское» видение дизайна при разработке постеров сохранено.
Tetris Evolution": классический "Тетрис" трансформируется в полномасштабную AAA-игру с ролевыми элементами и строительством мира. Игрок начинает с простой задачи укладывать тетромино, но каждая завершённая линия позволяет не только зарабатывать очки, но и собирать ресурсы для строительства и развития своего города. С увеличением уровня сложности появляются новые типы блоков, каждый со своими уникальными свойствами, которые могут помочь или помешать развитию инфраструктуры. В игре вводится сюжетная линия, где каждый "мир" или уровень имеет свои экологические условия, экономические задачи и стратегические цели. Интерактивная среда с динамической погодой и временем суток влияет на игровой процесс, а многопользовательский режим позволяет соревноваться или сотрудничать с другими игроками в построении мегаполисов. Современная графика и оркестровый саундтрек дополняют эпическое ощущение от простой, но глубокой механики "Тетриса".
Pac-Man Unleashed": Культовая игра "Pac-Man" переосмысливается как современный AAA-экшен с элементами стелса и платформера. В этой версии игрока ждёт огромный, трёхмерный лабиринт, полный зловещих призраков, где каждый уровень представляет собой заброшенный городской район, амбициозный промышленный комплекс или затерянный в джунглях древний храм. Pac-Man обладает новыми способностями, такими как невидимость, скоростной бег и специальные атаки, которые необходимо стратегически использовать, чтобы избегать или обезвреживать призраков. В игре добавлена сюжетная линия, где каждое съеденное привидение раскрывает часть истории мира Pac-Man и его места в нём. Современные физика и AI призраков делают каждую погоню уникальной и непредсказуемой, а собирание традиционных фруктов и новых предметов привносит элементы головоломки и исследования. Интерактивное окружение, смена дня и ночи и динамическая музыка создают погружающую атмосферу, а привычная механика "съесть или быть съеденным" получает новое прочтение.
"Breakout: Urban Anarchy": классическая аркада "Breakout" трансформируется в современную AAA-игру, где игрок управляет не просто платформой и мячом, но и отрядом революционеров в дистопическом городе. Каждый уровень - это различные районы и здания, которые нужно "очищать" от врагов и препятствий с помощью стратегически отскакивающих снарядов. Мяч в этом контексте становится разнообразным арсеналом, от граффити-бомб до технологических взрывчатых устройств, каждый со своими уникальными физическими свойствами и воздействием на окружающую среду.
Игроку предстоит применять тактические решения, чтобы максимизировать урон и создавать цепные реакции, разрушая здания и укрепления противника. Постепенно расширяя зоны влияния и завоевывая улицы, игроки взаимодействуют с различными фракциями и гражданским населением, что влияет на развитие сюжета и доступные ресурсы. Современная графика и физический движок придают новую жизнь концепции "Breakout", а элементы стратегии и управления отрядом обогащают игровой процесс, сохраняя при этом его аркадные корни.
Space Invaders: Tactical Defense" - классическая аркада "Space Invaders" перевоплощается в тактическую оборонительную игру с элементами реального времени и стратегии. В этой игре игроки строят и модернизируют оборонительные башни, каждая из которых вдохновлена оригинальными пришельцами, но с уникальными способностями и оружием. Осада ведется в космическом пространстве, на орбите планет и даже на их поверхности, где игроки должны защищать базы от волн врагов с помощью стратегического расположения и управления башнями.
Каждый успешно отбитый нападение раскрывает новые технологии и улучшения для обороны, а также открывает сюжетные ветки, в которых игроки узнают больше о мотивах и происхождении инопланетных захватчиков. Современные графические и звуковые эффекты создают напряженную атмосферу боевых действий, а сложные тактические решения обеспечивают глубокий и увлекательный игровой процесс, который продвигает классическую игру "Space Invaders" на новый уровень.
Парень попросил GPT-4 описать то, что происходит на видео и она профессионально прокомментировала гол Лионеля Месси. А генератор голоса автоматически всё озвучил.
Футбольных фактов нейронка точно знает не меньше чем Константин Генич или Василий Уткин, так что скоро будем смотреть спорт вот так.
Писать о том, в чем нравится разбираться. Может кому-то будет полезно.
Найти коммьюнити, чтобы разбираться в чем-то было интереснее с одной стороны, а с другой – можно было бы расширить поле для тестирования.
К делу. Я работаю преподавателем, экспертом в области высшего образования, социологом, помимо этого, веду образовательные проекты, и моя работа состоит из нескольких составляющих: я креативлю, организую, придумываю, соединяю людей, учу студентов, подтягиваю их к своим инициативам или инициативам команды, и в целом, мне все нравится!
Полгода назад, когда языковые нейронки начали очень бурно развиваться (ChatGPT), я решил потестировать эту историю и был очень приятно удивлен. Использование языковых нейронок, таких как ChatGPT, GPT-4, Claude, а также такие сервисы, как Raycast Copilot для macOS или Perplexity.AI, это совершенно новое понимание продуктивности, эффективности и работы с информацией. Если вы смотрели фильм "Области тьмы", где главный герой кушал таблеточки и становился ну просто невероятным, то вот у меня примерно такие же ощущения.
Могу говорить долго про этику, юридический аспект или про то, что роботы нас всех победят и уволят, однако, факт есть факт. На данный момент мы можем наблюдать вполне себе явную тенденцию: человеко-машинный комплекс (смотри человек + chatGPT) гораздо более эффективный сотрудник, чем просто человек. Почему? Да просто потому, что человек, который использует нейронки в повседневности, быстрее и эффективнее, способен гораздо быстрее генерировать контент, идеи, ему не нужны дополнительные созвоны для уточнений, фокус-группы для проверки гипотез или другая точка зрения, так как обо всем этом можно попросить чатик, открытый в любом интернет-браузере на любом устройстве в любое время.
Далее я расскажу о нескольких сервисах, которые я использую ежедневно в своей работе, и опишу сценарии взаимодействия с ними. Все они так или иначе связаны с языковой моделью GPT-4.
ChatGPT — на данный момент, наверное, самый распиаренный сервис, потому что про него пишут СМИ и технологические форумы каждый день. Недавно сказали, что ChatGPT отупел, но это совсем не так. Если оплатить подписку, то горизонты использования данного чатбота начинают ограничиваться лишь вашей фантазией. Можно работать с файлами любых форматов, работать с интернет-источниками, при использовании плагинов, обрабатывать таблицы, проводить операции с данными. С помощью чатбота можно планировать день, писать креативные концепции проектов, управлять, автоматизировать, управлять финансами. Данный сервис я использую практически во всех своих проектах и публичных выступлениях.
Perplexity.ai — просто находка, которая использует интернет в каждом запросе. Причем ее можно настроить как на интересующие вас источники, так и расширить каждый запрос с помощью ютуба, реддита или академических источников, что для людей науки просто какая-то находка. При активации подписки вы получаете модель GPT-4, а также функцию Copilot, которая будет уточнять промпты или задавать конкретные наводящие вопросы, при этом проверяя весь контент, который она за вас производит в интернете.
Raycast — софтинка, которая позволяет с помощью хоткеев делать и запускать что угодно буквально из одной строки. В последних обновлениях интегрировали ИИ в качестве полноценной интеграции в систему, которую настраиваете сами. Сценарии, которые использую каждый день: перевод академических текстов с английского на русский, автоматические ответы на письма, автоматическая проверка орфографии, пунктуации и стиля, и все это подвязано на горячие клавиши.
Здесь описаны сервисы, которые я использую каждый день по несколько часов.
Недавно на реальных кейсах проверял, насколько все эти инструменты могут быть полезны в продакт-менеджменте: составление опросов, гайдов интервью, расчеты по формулам, unit-экономические кейсы, построение roadmap, работа с CJM, производство гипотез и способов их проверки. Со всем этим сервисы справляются просто отлично, если правильно писать промпты (про это я также отдельно напишу пост).
Про цены на подписки не писал сознательно, но рассчитывайте на то, что каждый сервис стоит около 2000 рублей в месяц и принимает к оплате только иностранные карты. Как такую сделать быстро, просто и дешево — напишу отдельный гайд.
Также для использования ChatGPT требуется хороший VPN-сервис/протокол. Если получится сделать коммьюнити полноценное, то подключу всех желающих.
P.S. Грамотность данного поста проверена с помощью нейросети.
P.S.S. Пишите комменты, подкидывайте гипотезы для проверки, буду смотреть и делиться опытом!