Apple Intelligence: Siri получает трансплантацию мозга LLM, интеграцию ChatGPT и Genmojis

10 июня 2024, 23:57 / Технологии → Новости / Технологии

Мы знали, что искусственный интеллект станет частью основного доклада Apple

Thumbnail: Apple Apple Inc. (МФА: [ˈæp(ə)l ɪŋk]; официальное русское написание — «Эппл») — американская корпорация, производитель персональных и планшетных компьютеров, аудиоплееров, телефонов, программного обеспечения. Один из пионеров в области персональных компьютеров и современных многозадачных операционных систем с графическим интерфейсом. Штаб-квартира — в Купертино, штат Калифорния. Википедия

на WWDC 2024. Компания выступила со своим собственным взглядом на искусственный интеллект, основанный на больших языковых моделях (LLM), хотя в данном случае AI означает «Apple Intelligence», всеобъемлющий набор функций, которые будут работать на iOS, iPadOS и других устройствах. и платформы macOS, начиная с этого лета (в бета-версии).

Apple заявляет, что хочет сделать свои устройства более полезными для пользователей, используя искусственный интеллект для решения самых разных задач. Он сделает это, выполняя большую часть обработки на устройстве, сохраняя вашу конфиденциальность. Однако, если задачу невозможно выполнить на устройстве, Apple воспользуется своей платформой Private Cloud Compute, которая, конечно же, работает на Apple Silicon.

Siri получает большое обновление благодаря Apple Intelligence

Siri была впервые запущена 13 лет назад как версия личного помощника Apple. Однако большинство отраслевых обозревателей считают, что Siri уже давно отстает от конкурентов по функциональности. Ситуация изменится с появлением новой версии Siri с поддержкой Apple Intelligence, которая теперь может принимать голосовые или текстовые подсказки (двойным касанием нижней части экрана), а также может запоминать и основываться на ваших предыдущих запросах вместо обработки каждого нового. запросить самостоятельно.

Голос Siri стал более естественным и лучше понимает язык. Например, если вы запнулись в своих словах или вам нужно собраться с мыслями во время запроса, Siri все равно сможет без проблем обработать информацию. Siri также будет иметь «экранную осведомленность», что означает, что она может получать вводимые данные из текста. Например, если друг поделился с вами своим адресом в текстовой строке, вы можете просто сказать: «Добавьте адрес из сообщения Джейсона в его контакт».

Эти новые возможности распространятся даже на изображения в приложении «Фотографии». Во время основного выступления ведущий сказал Siri: «Покажи мне фотографии Стейси в Нью-Йорке в розовом пальто». Затем были показаны результаты. Выбрав одну из фотографий, ведущий сказал Siri: «Добавь это фото в мою заметку с биографией Стейси». Siri смогла использовать контекст, чтобы выяснить, что хотел сделать ведущий, и приняла меры в соответствии с ее подсказкой.

Эти возможности распространяются на все собственные приложения Apple и даже на сторонние приложения, использующие App Intents API. Siri может помочь вам найти определенные фрагменты информации, даже если вы не помните, пришли ли они из текстового сообщения, электронного письма или предыдущей заметки. Например, если вы заполняете форму, требующую номер вашего водительского удостоверения, Siri может выполнить поиск на вашем устройстве, чтобы найти изображение вашего водительского удостоверения, и ввести соответствующий номер в необходимое текстовое поле.

В другой демонстрации ведущая спрашивала, когда приземлится самолет ее мамы. Из приложения авиакомпании был отображен маршрут полета, включая обновленное время приземления. Затем она спросила о планах на обед, которые она составила с мамой, и они появились. Наконец, она спросила Сири, сколько времени потребуется, чтобы добраться из аэропорта до ресторана после обеда, и Сири проложила маршрут с помощью Apple Maps.

Apple Intelligence в приложениях

Одной из интересных вещей, которые показала Apple, была новая функция под названием Genmoji в сообщениях. Вы можете создать свой собственный Genmoji в iOS 18

iOS 18 — восемнадцатая версия мобильной операционной системы iOS, разрабатываемой Apple для линейки продуктов iPhone. Была анонсирована 10 июня 2024 года на WWDC 2024. Как и в каждом выпуске, начиная с iOS 4, обновления доступны пользователям без дополнительной оплаты. Будучи преемником iOS 17, iOS 18 увидит бета-версию для разработчиков вскоре после WWDC. Публичные бета-версии состоятся в июле, а операционная система будет публично выпущена в сентябре 2024 года. Википедия

, iPadOS 18 и macOS Sequoia. В одном из примеров вводились слова «расслабляющий смайлик с огурцами на глазах» и выводился необходимый генмодзи знакомого желтолицого оттенка. Вы можете провести пальцем по экрану, чтобы увидеть различные варианты сгенерированного результата и найти тот, который лучше всего соответствует вашему вкусу.

Apple также представляет Image Playground, доступную через приложение «Сообщения». Вы можете создавать свои собственные мультяшные изображения, используя текстовые или голосовые подсказки. Image Playground также доступен как отдельное приложение, а сторонние приложения смогут подключаться к API для собственного использования. Говоря об изображениях, функция, похожая на Magic Erase от Google, появится в функции редактирования в приложении «Фотографии».

Мы уже видели многие функции, которые Apple рекламирует у других компаний (например, возможность резюмировать длинное электронное письмо, переписать текст в электронном письме для ясности или изменить его тон). Такие функции будут доступны во всех операционных системах Apple.

Партнерство Apple с OpenAI

Если вы большой поклонник ChatGPT

Thumbnail: ChatGPT ChatGPT — чат-бот с искусственным интеллектом, разработанный компанией OpenAI и способный работать в диалоговом режиме, поддерживающий запросы на естественных языках. ChatGPT — большая языковая модель, для тренировки которой использовались методы обучения с учителем и обучения с подкреплением. Данный чат-бот основывается на другой языковой модели от OpenAI — GPT-3.5 — улучшенной версии модели GPT-3. 14 марта 2023 года была выпущена языковая модель GPT-4, доступная тестировщикам и платным подписчикам ChatGPT Plus. Википедия

, то последнее соглашение между Apple и OpenAI

Thumbnail: OpenAI OpenAI — американская научно-исследовательская организация, занимающаяся разработками в области искусственного интеллекта. В состав OpenAI входят зарегистрированная в штате Делавэр некоммерческая организация OpenAI, Inc и её дочерняя коммерческая компания OpenAI Global, LLC. OpenAI ставит перед собой цель разработать «безопасный и полезный» сильный искусственный интеллект, который организация определяет как «высокоавтономные системы, превосходящие человека в выполнении наиболее экономически ценной работы». На пути к этой цели организация создала несколько больших языковых моделей, в том числе GPT-4 и ChatGPT, а также моделей для генерации изображений, как DALL-E; в прошлом она публиковала модели с открытым исходным кодом. Некоммерческая организация OpenAI была основана в декабре 2015 года; её сопредседателями стали Сэм Олтмен и Илон Маск. Википедия

станет музыкой для ваших ушей. ChatGPT-4o появится в новых операционных системах Apple — бесплатно и без необходимости внешней учетной записи.

Apple заявляет, что пользователи смогут перейти с ее LLM на ChatGPT, если последний обеспечит превосходные результаты. При выполнении запроса Siri будет предоставлена возможность доступа к ChatGPT. Затем вас попросят дать разрешение, чтобы ChatGPT с этого момента выполнял тяжелую работу. Хотя базовый доступ доступен бесплатно, те, кто подписался на премиум-функции ChatGPT, могут связать свои учетные записи для интеграции этой функции.

Последние мысли

Apple Intelligence в целом выглядит как полноценный подход Apple к искусственному интеллекту. Компания, как известно, неторопливо реагирует на новые тенденции в области технологий, и Apple Intelligence не является исключением. Тем не менее, акцент компании на конфиденциальности, а также партнерство с OpenAI, по крайней мере, поставили компанию на правильный путь к внедрению программ LLM для своей обширной клиентской базы.

Хотя некоторые функции, такие как Genmoji и Image Playground, могут показаться немного фальшивыми (помните Memojis?), обширные улучшения Siri станут долгожданным дополнением к iOS 18, iPadOS 18 и macOS Sequoia, которые будут выпущены для iOS 18, iPadOS 18 и macOS Sequoia. общедоступной этой осенью (хотя версии для разработчиков и бета-версии выйдут раньше).

Источник: Tomshardware.com