Apple Intelligence, новый набор возможностей искусственного интеллекта от производителя iPhone, появляющийся в iOS 18, ложит основу для нового способа использования приложений.
Сегодня устаревшая модель App Store постоянно подвергается регулятивным атакам. Между тем пользователи могут выполнять множество задач с помощью достаточно простых вопросов к помощнику по искусственному интеллекту, такому как ChatGPT. Приверженцы полагают, что ИИ может стать предпочтительным способом поиска ответов, повышения производительности на работе и экспериментирования с креативностью.
Какое место займут приложения и растущий доход от услуг (более 6 миллиардов долларов за последний квартал), который они генерируют для Apple?
Ответ касается сущности стратегии ИИ Apple.
Apple Intelligence сам по себе предлагает лишь небольшой набор возможностей из коробки, таких как помощники по написанию, инструменты суммирования, генеративное искусство и другие базовые предложения.
Однако ранее в этом году на Ежегодной конференции разработчиков (WWDC) в июне Apple представила новые функции, которые позволят приложениям разработчиков связываться более глубоко как с Siri, так и с Apple Intelligence.
Улучшения умного помощника позволят Siri вызывать любой элемент из меню приложения без дополнительных действий со стороны разработчика. Это означает, что пользователи могут попросить Siri «показать мне заметки докладчика» в слайд-шоу, например, и Siri будет знать, что делать. Siri также сможет получить доступ к любому тексту, отображаемому на странице, что позволяет пользователям ссылаться и действовать на то, что находится на экране.
Так что, если вы смотрите на напоминание о поздравлении члена семьи с «с днем рождения», вы можете сказать что-то вроде «FaceTime с ним», и Siri будет знать, какое действие предпринять.
Это уже улучшение по сравнению с базовой функциональностью сегодняшней Siri, но это еще не все. Apple также предоставляет разработчикам инструменты для использования Apple Intelligence в их собственных приложениях. На WWDC компания указала, что Apple Intelligence сначала станет доступным для определенных категорий приложений, включая Книги, Браузеры, Камеры, Читатели документов, Управление файлами, Журналы, Почту, Фотографии, Презентации, Таблицы, Доски и текстовые процессоры. Со временем Apple, вероятно, откроет эти возможности для всех разработчиков в App Store.
Функциональность ИИ будет построена на основе фреймворка App Intents, который расширяется с новыми намерениями для разработчиков. Конечная цель - позволить пользователям взаимодействовать с Siri не только для открытия своих приложений, но и для их использования.
Это означает, что пользователь не будет вынужден копаться в меню приложения, чтобы найти необходимую функцию для выполнения задачи. Они могут просто попросить Siri.
Пользователи также смогут давать эти запросы, говоря естественно - в разговорной форме - и могут обращаться к вещам, относящимся к их личному контексту.
Так, например, вы могли бы попросить приложение для обработки фотографий, например, Darkroom, «применить кинематографическую обработку к фотографии, которую я сделал вчера Иану». Сегодняшняя версия Siri не смогла бы выполнить такой запрос, но Siri, работающая на основе ИИ, вместо этого будет знать, как использовать намерение Apply Filter приложения и на какую фотографию вы просите его применить.
Apple сказала, что Siri сможет действовать, даже если вы запнулись на словах или ссылались на предыдущую часть беседы в своих инструкциях.
Также вы сможете выполнять действия в различных приложениях. Например, после редактирования вашей фотографии, вы можете попросить Siri переместить ее в другое приложение, такое как Заметки, не нажимая ни на что.
Кроме того, функция поиска на iPhone, Spotlight, сможет выполнять поиск данных из приложений, интегрируя объекты приложений в свои индексы. Это относится к пониманию Apple Intelligence таких вещей, как фотографии, сообщения, файлы, события календаря и другие.
Конечно, для такого более тонкого применения ИИ требуется принятие разработчиками. Apple в течение многих лет отчуждала некоторых своих крупных разработчиков, а иногда даже своих независимых, своими правилами дележки доходов, которые, как правило, позволяют компании удерживать 30% выручки за продукты и услуги, проданные через любое приложение. Но разработчики могут быть привлечены обратно, поскольку Siri берет приложения, которые ранее были скрыты в библиотеке приложений на задней панели телефона, и делает их легко доступными с помощью голосовых команд.
Вместо скучных экранов ввода, где пользователей обучают навигации и использованию их приложения, разработчики могли бы вместо этого сосредоточиться на том, чтобы убедиться, что Siri понимает, как работает их приложение, и как пользователи могут просить о том, что им нужно делать. Таким образом, пользователи могли бы взаимодействовать с приложением через Siri, как говоря, так и печатая команды, аналогично тому, как в настоящее время общаются с чат-ботом на основе ИИ, таким как ChatGPT.
Сторонние разработчики также получат другие выгоды от новой архитектуры ИИ Apple.
Благодаря сотрудничеству с OpenAI, Siri сможет передавать запросы ChatGPT, если у нее нет ответа. С функцией визуального поиска на iPhone 16, Apple также позволит пользователям получить доступ к чат-боту OpenAI или Google Search просто касанием новой кнопки управления камерой сбоку, превращая то, что они видят через видоискатель камеры, в действенный запрос.
Эти изменения не будут ощущаться так быстро революционными, как введение, например, ChatGPT, потому что скорость принятия разработчиками варьируется.
Более того, эти будущие обещания, кажется, еще далеки. В последних бета-версиях iOS 18 функциональность ощущается неполной. Сколько бы раз я не был удивлен тем, что новая Siri способна сделать, столько же раз я был смущен теми вещами, которые она не может. К этому относится даже внутри самих приложений Apple. Например, вы можете попросить Siri в приложении Фотографии отправить фотографию, которую просматриваете кому-то, но вы не можете попросить ее сделать что-то более сложное, например, превратить фотографию в стикер. Пока Siri продолжает сталкиваться с такими препятствиями, функционал может оказаться трудным в использовании.
