Microsoft создала новый ИИ Magma, который может управлять программным обеспечением и роботами.

Компания Microsoft представила новую модель искусственного интеллекта под названием Magma. Мультимодальная модель предназначена для понимания визуальных данных и языка, а значит, и для управления программным обеспечением и роботами.

Magma — название новой модели искусственного интеллекта от Microsoft, которая была разработана в сотрудничестве с исследователями из нескольких университетов США. Название Magma расшифровывается как «Мультимодальная агентская модель в Microsoft Research». По данным Microsoft, это первая мультимодальная модель, которая может не только понимать входные данные, но и планировать и действовать на их основе.

Хотя другие модели ИИ также могут обрабатывать мультимодальные входные данные и, таким образом, выполнять действия, для этого им часто требуется несколько моделей — например, одна для понимания входных данных, а другая для управления роботами или программными приложениями. Magma призвана объединить все эти навыки в одной модели. По данным Microsoft, Magma призвана «ликвидировать разрыв между вербальным, пространственным и временным интеллектом для решения сложных задач и ситуаций».

Microsoft приводит несколько примеров навыков, которыми обладает Magma. Во-первых, модель ИИ может управлять программным обеспечением для пользователей. Например, Magma обращается к браузеру Chrome, чтобы запросить информацию о погоде в определенном городе.

Во-вторых, управляя роботами, Magma может подбирать предметы и размещать их точно в указанных местах. Например, роботизированная рука, управляемая Magma, перемещает ткань на кухонной стойке так, чтобы она лежала по центру поверхности.

И последнее, но не менее важное: Microsoft демонстрирует, как Magma обрабатывает видеоданные из повседневных ситуаций с людьми. Например, пользователи могут сидеть у себя в гостиной и спрашивать ИИ, чем занять себя в ближайшие несколько часов. На основе распознанных объектов Magma предлагает включить телевизор, почитать книгу или насладиться видом из окна.

Первоначально Microsoft обучала Magma с помощью серии изображений, видео и данных от роботов. Были использованы две специальные методики. Set-of-Mark используется для выполнения действий. ИИ присваивает номера объектам на видео. Например, отдельным элементам пользовательского интерфейса присваивается собственный номер. Это позволяет ИИ целенаправленно нацеливаться на необходимые элементы. То же самое относится и к объектам, которые должен перемещать робот, управляемый Magma.

Второй метод важен для этапа планирования ИИ. ИИ изучает закономерности движения на основе видеоданных. Предполагается, что модель «распознает будущие состояния», прежде чем действовать. В качестве примера Microsoft показывает, что Magma должна перемещать апельсин в бутылку с водой с помощью роботизированной руки. Затем ИИ планирует в общей сложности 14 шагов, с помощью которых объекты можно будет приблизить.

Microsoft также приводит в статье результаты тестов Magma. Они показывают, что новая модель ИИ может конкурировать с такими инструментами, как GPT-4V или Qwen-VL, во многих областях. Однако разработчикам ИИ всегда следует относиться к таким тестам с долей скептицизма.

По крайней мере, Microsoft открыто признает, что Magma все еще имеет некоторые ограничения. ИИ, вероятно, не справится с очень сложными задачами, состоящими из множества этапов. Однако в будущем Microsoft планирует продолжить совершенствование ИИ. На следующем этапе исследователи хотят опубликовать выводы и данные обучения ИИ через Github.

Источник: overclockers
Оригинал: microsoftmicrosoft

Вчера прочитал список пидоров, которые в очередной раз кинут российских пользователей, там клик ап был, и все, что я смог сделать, это записать видео экрана пролистывая свои задачи в разных рабочих пространствах, потому что экспортировать не разрешили на бесплатном тарифе, а платный тариф без вариантов оплатить.

А сегодня даже открыть не могу, чтобы все удалить.

К счастью есть почти такой же удобный и нормальный отечественный сервис, я на нем уже с месяц как.

Знойным пендоским пидарам желаю вечного поноса ))

bloomberg По словам Золтана Позара из Credit Suisse Group AG, экономике США может потребоваться более глубокая и продолжительная рецессия, чем ожидают инвесторы в настоящее время, прежде чем инфляцию можно будет взять под контроль.

Рынки ожидают, что рост потребительских цен скоро достигнет пика, и центральные банки станут менее ястребиными, но существует высокий риск того, что глобальное ценовое давление останется повышенным, считает Позар.

По его словам, мир сотрясает экономическая война, которая подрывает дефляционные отношения, преобладавшие в последние десятилетия, когда Россия и Китай поставляли дешевые товары и услуги более развитым странам, таким как США и страны Европы.

«Война инфляционна», — писал Позар. «Думайте об экономической войне как о борьбе между Западом, ориентированным на потребителя, где уровень спроса был максимальным, и Востоком, ориентированным на производство, где уровень предложения был максимальным для удовлетворения потребностей Запада». Эта модель сохранялась «до тех пор, пока отношения между Востоком и Западом не испортились, а предложение не оборвалось», — сказал он.

В результате инфляция теперь является структурной проблемой, а не циклической. По словам Позара, перебои с поставками возникли из-за изменений в России и Китае, а также из-за более жестких рынков труда из-за иммиграционных ограничений и сокращения мобильности, вызванного пандемией коронавируса.

По его словам, в настоящее время существует риск того, что Федеральная резервная система под руководством председателя Джерома Пауэлла должна будет повысить процентные ставки до 5% или 6% и сохранить их на этом уровне, чтобы создать существенное и устойчивое сокращение совокупного спроса, чтобы соответствовать более жесткому профилю предложения.

Предупреждение Позара о том, что инфляция останется высокой, ставит его в противоречие с рынком казначейских облигаций, который вырос в прошлом месяце, поскольку инвесторы переключили свое внимание на риски рецессии из-за опасений по поводу инфляции. В то время как экономический спад обычно оказывает давление на потребительские цены, последний годовой показатель инфляции в США в 9,1% за июнь остается намного выше цели ФРС в 2%, хотя прогнозируется, что рост цен замедлится впервые за три месяца до 8,8% в июле. согласно опросу экономистов Bloomberg.

Рынок облигаций больше заблуждается , чем когда-либо в этом году, поскольку трейдеры делают ставку на то, что центральный банк США начнет снижать ставки в начале 2023 года, заявила на этой неделе главный экономист Bloomberg Economics по США Анна Вонг и ее коллеги. Денежные рынки делают ставку почти на один процентный пункт повышения к концу года, за которым следует снижение на четверть пункта к июню.

«Процентные ставки могут некоторое время оставаться высокими, чтобы гарантировать, что снижение ставок не вызовет восстановления экономики (буква «L», а не «V»), что может спровоцировать новый всплеск инфляции», — написал Позар в своей заметке. . «Риски таковы, что Пауэлл сделает все возможное, чтобы обуздать инфляцию, даже ценой «депрессии» и отказа от повторного назначения».