Во время ежегодного мероприятия Google Cloud Next компания Google представила свою новую модель искусственного интеллекта (ИИ) Gemini 1.5 Pro. Ранее эксклюзивная модель ИИ, доступная только разработчикам в Google AI Studio, теперь открыта для широкой публики.
Улучшенные функции Gemini 1.5 Pro
Gemini 1.5 Pro претерпел значительные улучшения, позиционируя его как одну из самых мощных моделей ИИ, доступных в настоящее время. Среди улучшений - увеличенное контекстное окно, которое расширено до 128 000 токенов в базовой форме и до одного миллиона токенов в специализированном варианте.
Увеличенный размер контекстного окна позволяет ИИ анализировать значительный объем данных, сравнимый с содержанием многих книг. Это позволяет ему предоставлять более точные и актуальные ответы на запросы пользователей.
Дополнительные функции Gemini 1.5 Pro
Gemini 1.5 Pro также добавляет дополнительные функции, такие как встроенная аудиосистема, которая позволяет ИИ понимать голосовые команды и реагировать на них. Кроме того, включение File API позволяет упростить управление файлами, системными командами и режимом JSON, предоставляя разработчикам расширенный контроль.
Более того, модель ИИ теперь включает в себя мультимодальные возможности, позволяющие анализировать фотографии и видео как часть ответов.
Отзывы первых потребителей
Первые потребители сообщили о замечательных результатах использования Gemini 1.5 Pro, подчеркнув его способность точно анализировать значительные объемы данных и давать проницательные ответы.
Выводы
Gemini 1.5 Pro с улучшенными функциями и простотой использования призван стимулировать прогресс во многих секторах и сферах применения, предоставляя пользователям мощный инструмент для использования технологий искусственного интеллекта.
P.S
Чтобы опробовать Gemini 1.5 Pro, нужно:
открыть Google Chrome и включить либо собственный VPN, либо бесплатное VPN расширение Browsec VPN;
Отделите правду от вымысла об AI! На нашем канале - проверенные факты и объективный взгляд на развитие ИИ. https://t.me/+lJKT0x-NrX5hODRi
Adobe круто обновил нейронку Firefly. Дизайнеры, только не упадите. Теперь ИИ умеет создавать картинки из скетчей, менять погоду на изображениях и многое другое.
Также нейронка круто генерит надписи. Можно играться со шрифтами и менять что угодно. Достаточно только вбить нужный промпт.
Firefly доступна в последних версиях Photoshop и Illustrator.
- Круче генератора изображений я в руках не держал, очень тонкая и понятная настройка. ИИ очень хорошо понимает русский язык, можно выбрать ракурс камеры, цветовую палитру, стиль и освещение. Много регуляторов, и самое главное, все понятно и просто, любой разберется. В месяц дается 25 генераций, выдается за один раз по 4 результата. Для использования нужен VPN и аккаунт Google. - Я создал это изображение голубя, используя свой промт на русском языке. - Готовое изображение можно спокойно распечатать и повесить на стену. - Будем ждать, когда выйдет новая версия Кандинский, посмотрим, что получится!
Новая нейросеть UDIO вышла в открытую бету, это значит, что на этот период продукт бесплатен и пользователи могут генерировать до 1200 песен в месяц!
Можно создать песню как со своими словами, так и рандомными, еще можно перенять стиль артиста.
Я опять использовала такой же промпт, что и для Suno и Stable Audio. Нейросеть так же генерирует по 2 трека длительностью 30 секунд, но понравившийся трек можно продлить.
Треки генерировались 4 минуты и сам сервис немного подвисает из-за наплыва пользователей, желающих протестировать новинку бесплатно.
Видео, кстати, тоже скачать не удалось, ну как видео- обложка сингла с играющей музыкой. Так что, пришлось быстренько на коленке соорудить видос под эту музычку 🎞
Чтобы написать собственную лирику, просто добавьте текст на вкладку "Пользовательская лирика" в выпадающем списке подсказок. Чтобы разнообразить свои творения, попробуйте добавить в поле текста такие дескрипторы, как [Chorus], [Hook], [Verse], [Sax Solo] или [Drop]. Вы также можете указать бэк-вокал, используя круглые скобки. Больше полезных советов здесь
Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпишитесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.
OpenAI сделала доступной мощную модель GPT-4 Turbo с Vision через свой API, что открывает новые возможности для сервисов и разработчиков. Теперь можно интегрировать передовые языковые и визуальные возможности в свои приложения.
💥 GPT-4 Turbo Vision предлагает:
Значительное улучшение скорости.
Увеличение окна контекста ввода до 128 000 токенов (примерно 300 страниц).
Повышение доступности для разработчиков.
🔑 Ключевое улучшение: возможность использовать распознавание и анализ изображений модели с помощью текстового формата JSON и вызова функций. Это позволяет разработчикам генерировать фрагменты кода в формате JSON, которые могут автоматизировать действия в подключенных приложениях.
Несколько стартапов уже используют GPT-4 Turbo с Vision:
🧑💻Cognition: автоматическая генерация полного кода для различных задач программирования.
🍕Healthify: анализ питания и рекомендации на основе фотографий блюд.
👩💻TLDraw: управление виртуальной доской и преобразование пользовательских рисунков в функциональные веб-сайты.
Несмотря на жесткую конкуренцию со стороны более новых моделей, запуск API должен помочь OpenAI укрепить позиции на корпоративном рынке.
Если вас интересует тема ИИ и то, как он вам может помочь в работе и повседневной жизни, высвободить ваше время для родных и интересных увлечений, а также заметно повысить производительность труда и значительно повысить ваш доход - то вы в правильном месте.
Давайте осваивать ИИ вместе. Сейчас - самое время, не упустите!
Здравствуйте, друзья. Меня зовут Виктор.
Я больше 25 лет работаю в IT-отрасли. В онлайн - более 5 лет. Освоил множество интернет- специальностей. Умею делать сайты, лендинги, интернет-магазины и онлайн-школы. Могу писать интересные тексты с цепляющими заголовками, создавать креативы. Умею создавать, настраивать и докручивать рекламные кампании в Таргете и Директе. Могу создавать воронки продаж и делать автоматизацию бизнеса с помощью чат-ботов. Мое последнее увлечение - это искусственный интеллект (далее ИИ или AI). Мне очень нравится его мощь и те возможности, которые он предоставляет людям, умеющим с ним работать.
Не ИИ заменит человека, а люди, владеющие ИИ постепенно вытеснят тех, кто им не владеет.
А как вы думаете, заменит ли ИИ человека?
И если ДА, то на каких профессиях это отразится в первую очередь?
От того, насколько адекватно мы будем относиться к появлению ИИ, возможно будет зависеть наше место в стремительно меняющейся действительности. Третья революция уже меняет нашу жизнь. В крупных IT компаниях массово увольняют сотрудников традиционных специальностей и набирают новых, владеющих навыками работы с ИИ.
В апреле 2024 года широкий резонанс вызвала новость о том, что в офлайн-магазинах Amazon вместо заявленного искусственного интеллекта работу выполняли сотни индийцев, наблюдавших за покупателями по видеокамерам. Мы проверили, так ли это.
Спойлер для ЛЛ:сотрудники ( количество точно не известно, но большинство из них и правда находились в Индии) осуществляли работу по разметке данных, тренировке модели и исправлению допущенных ею ошибок, но не работали вместо ИИ
Публикации о том, что Amazon якобы закрывает свои магазины с ИИ-технологией Just Walk Out («Взял и иди»), начали появляться сначала в американской прессе, а потом и в русскоязычных СМИ. 3 апреля издание РБК написало, что вместо ИИ товары сканировала 1000 индийцев, а публикация на сайте НТВ вышла под заголовком «Работу нейросети в умных магазинах Amazon выполняли тысячи индусов».Портал «ГородЧе» описал случившееся так: «Крупнейшая афера в области ИИ. 1000 индусов заменили искусственный интеллект. Amazon признался в крупной афере». Прокомментировали новость и в Госдуме РФ — по мнению депутата Алексея Говырина, «России не стоит связываться с Amazon», ведь «вместо того, чтобы взять десять кассиров и охранника, компания эксплуатировала тысячу индусов-удалёнщиков». Аналогичное утверждение опубликовало и издание «Холод»: «Amazon выдавал работу тысячи индийцев за искусственный интеллект», а на самом деле «кассиров просто перевели в другое место».Сообщения об афере разошлись и в Telegram — например, канал «Топор 18+» (3 млн просмотров на момент написания этого разбора) отметил: «Оказалось, что никакого искусственного интеллекта не было», а «ВПШ» (500 000 просмотров) написал, что «технология [Amazon] оказалась фейком». «За покупателями через камеры следила тысяча низкооплачиваемых индусов — они смотрели, какие товары вы взяли, и проводили покупку», — говорится в публикации.
Технология Just Walk Out — разработка компании Amazon, которая позволяет офлайн-магазинам обслуживать покупателей без касс и продавцов. На входе в магазин стоят турникеты, для входа нужно отсканировать QR-код в приложении Amazon Go. В торговом зале покупатель может взять товар с полки и положить себе в сумку или карман — тогда продукт вносится в предварительный список покупок (если вернуть товар на место, то он будет удалён из перечня). Когда человек покидает магазин через те же турникеты, приложение фиксирует итоговый список покупок, а через пару минут присылает электронный чек и списывает плату со счёта в Amazon.
Визуализация магазина с технологией Just Walk Out. Источник: Amazon
С технической точки зрения такие умные магазины работают примерно так: в момент сканирования QR-кода покупателем видеокамеры считывают и запоминают его физические характеристики, а датчики движения и микрофоны начинают отслеживать перемещение человека по торговому залу. Система инфракрасных датчиков и сенсоров веса распознаёт, какие товары посетитель взял с полки и положил в сумку, а какие вернул на место. По информации на сайте Amazon, Just Walk Out сочетает в себе те же технологии, что и беспилотные автомобили: компьютерное зрение (область ИИ, связанная с анализом изображений и видео), слияние сенсорных данных (построение единой картины на основе информации, полученной от разных датчиков) и глубокое обучение (тип машинного обучения, который с помощью искусственных нейронных сетей обеспечивает цифровым системам возможность обучаться и принимать решения на основе неструктурированных данных).
Amazon начал разработки технологии Just Walk Out в 2012 году. Спустя четыре года компания открыла первый тестовый магазин для своих сотрудников, а ещё через два года запустила первый офлайн-магазин для широкой публики. Позже систему внедрили в магазинах Amazon Go, Amazon Fresh, супермаркетах других крупных ретейлеров и минимаркетах на стадионах, в аэропортах и прочих заведениях в США, Великобритании, Канаде и Австралии. В 2018 году основатель Amazon Джефф Безос в своём ежегодном письме акционерам писал, что технология Just Walk Out — способ «избавиться от худшего, что есть в физической розничной торговле: очереди на кассу».
Итак, действительно ли технология Just Walk Out полагалась не на ИИ, а на тысячу людей из Индии, которые дистанционно наблюдали за покупателями и вручную заносили их покупки в чек? Впервые упоминание о занятой в проекте тысяче индийцев появилось в издании The Information в мае 2023 года, но, как отметили спустя почти год сами авторы, осталось тогда без особого внимания. Они предположили, что это могло произойти из-за «отсутствия скептицизма в отношении любой технологии, связанной с искусственным интеллектом». The Information сообщало, что в проекте Just Walk Out задействовано более тысячи сотрудников, в основном базирующихся в Индии. Тогда же представитель Amazon подтвердил, что компания наняла людей в этой стране для отсмотра видеозаписей, но не уточнил, сколько их было и чем именно они занимались. 2 апреля 2024 года вице-президент Amazon Тони Хоггетт в интервью для издания The Information заявил о прекращении использования Just Walk Out в супермаркетах Amazon Fresh. И когда в статье с интервью издание снова упомянуло команду из Индии в контексте некоторых трудностей, с которыми столкнулись разработчики Just Walk Out, тогда-то деталь про тысячу индийцев и получила столько внимания в СМИ.
Однако в публикациях, обвиняющих Amazon в обмане, есть большая неточность касаемо того, зачем технологии Just Walk Out, помимо ИИ, нужно было столько сотрудников. ИИ-система требует постоянных корректировок, и даже самую простую нейронную сеть нужно сначала обучить на огромном количестве примеров с уже размеченными данными. В случае Just Walk Out это могли быть, например, заранее подготовленные кадры с покупателями, совершающими определённое действие, и пометки о том, что именно делает человек. Такой метод обучения нейросети называется «обучение с учителем». То есть прежде, чем ИИ сможет самостоятельно и качественно анализировать данные, человек должен подготовить для него тысячи образцов с разъяснениями. В разговоре с изданием Quartz неназванный бывший сотрудник Amazon, работавший с Just Walk Out, пояснил, что его индийские коллеги занимались именно разметкой данных для обучения ИИ-модели и что это является обычной практикой в машинном обучении. Также команда из Индии перепроверяла видео покупок, помеченные самой нейросетью как «события с низкой степенью уверенности», то есть результаты её анализа, в которых вероятны ошибки. В таких случаях люди отсматривали ролики и при необходимости пересчитывали сумму в чеке покупателя.
Изначально Amazon предполагал, что по мере совершенствования ИИ-модели перепроверять придётся не больше 5% покупок. На момент запуска Just Walk Out в 2016 году консультация человека требовалась почти во всех случаях, к середине 2022 года количество проверок уменьшилось до 70%, а в апреле 2024 года, по словам бывшего разработчика Amazon, снизилось до 20–50%, что всё равно было в разы выше изначального плана компании. При этом пресс-служба Amazon в комментарии USA Today заявила, что «сотрудники проверяют лишь небольшую долю покупок» и что «от года в год количество перепроверок людьми сокращается, несмотря на масштабирование проекта». На посыпавшиеся обвинения в подмене ИИ работниками из Индии представитель Amazon Сармишта Рамеш возразила, что эти сотрудники лишь аннотируют видеоизображения с целью совершенствования модели, лежащей в основе технологии Just Walk Out.
Подобная подстраховка искусственного интеллекта человеческим используется повсеместно, особенно на этапе тренировки ИИ-моделей. Например, OpenAI — создатель ChatGPT — в 2023 году платил тысячам фрилансеров по $15 в час за написание предлагаемых ответов на вопросы пользователей чат-бота, которые потом использовались для обучения ИИ. Примерно столько же предлагала компания Invisible за написание тренировочных разговоров, в котором работник поочерёдно выступал в роли пользователя и нейросети. За маркировку данных для беспилотных автомобилей некоторые фрилансеры получали $1 в час. У Amazon даже есть специальная платформа для найма таких сотрудников — Amazon Mechanical Turk, названная в честь шахматного автомата XVIII века, в котором на самом деле прятался живой шахматист, выдающий свои ходы за игру умной машины.
Человеческий труд широко используется не только для тренировки ИИ, но и для подстраховки и исправления допущенных им ошибок. Например, беспилотные такси компании Cruise на этапе тестирования требовали дистанционного вмешательства оператора-человека каждые 7–8 км, когда «водители-роботы» попадали на дороге в трудную ситуацию. А фрилансеры ChatGPT исправляли ответы чат-бота, помеченные пользователями как некачественные. Несмотря на быстрое развитие ИИ, он всё ещё во многом полагается на огромные человеческие ресурсы.
Тем не менее Amazon действительно решил отказаться от использования Just Walk Out в своих супермаркетах Fresh по ряду причин. По словам бывшего сотрудника компании, с которым поговорило издание Quartz, руководство планировало сделать это уже почти год — технология хорошо работала в небольших магазинах с маленьким выбором товаров и потоком людей, а вот для крупных торговых точек оказалась неподходящей. Датчики веса для отслеживания покупок, обходившие камеры в надёжности, были слишком дорогими в изготовлении ($350 каждый), а доля перепроверок людьми хоть и снижалась, но всё равно была значительно выше запланированных 5%.
Во многих публикациях о закрытии магазинов Amazon с технологией Just Walk Out не только искажена роль в проекте сотрудников из Индии, но и допущены другие неточности. Во-первых, эта технология уходит только из супермаркетов Amazon Fresh в США, но по-прежнему будет применяться в магазинах Amazon Go, некоторых точках Amazon Fresh в Великобритании и более чем 130 сторонних магазинах в аэропортах, учебных заведениях и кафе. Во-вторых, магазины Amazon Fresh в США не закрываются, просто на смену технологии Just Walk Out придёт новый гаджет — умные тележки Dash Cart, которые сканируют находящиеся в них товары. Некоторые супермаркеты Amazon Fresh уже несколько лет используют обе технологии одновременно вдобавок к традиционному методу оплаты покупок на кассе для тех, кто не является клиентом Amazon.
Таким образом, утверждения, что технология Just Walk Out оказалась фейком и что никакого искусственного интеллекта не было, а вместо него работала тысяча индийцев, не соответствуют действительности. Сотрудники (сколько их было — до конца непонятно, но большинство из них и правда находились в Индии) осуществляли обычную для ИИ-проектов работу по разметке данных, тренировке модели и исправлению допущенных ею ошибок. Решение отказаться от Just Walk Out в магазинах Amazon Fresh было обусловлено множеством неточностей в работе ИИ и дороговизной оборудования. При этом модель успешно показала себя в небольших магазинах, поэтому продолжит работать в десятках локаций в США, Великобритании, Канаде и Австралии.
Искусственный интеллект научился понимать смыслы и отвечать нам как человек, генерировать изображения, неотличимые от оригинала, и симулировать физику реального мира в формате видео. Из выпуска вы узнаете, как видят вас нейросети, и почему весь мир — это числа, почему вам больше не скрыться от систем распознавания лиц, как нейросети могут узнать ваши мысли, как ИИ расшифровывает для нас язык китов, кто будет держать руку на самом главном рубильнике, и почему мы можем добровольно отказаться от свободы воли