Вот что интересного показали:
🔸 Personal Intelligence - он же Apple Intelligence. Устройства станут ещё умнее и лучше будут понимать ваш контекст и предпочтения. Это, пожалуй, главная новость. Ну и как и предсказывали - Эппл пытается изменить аббревиатуру AI 😅
🔸 Writing Tools. Новый инструмент для переписывания, саммаризации и генерации текста, доступен повсеместно, убийца Grammarly.
🔸 Распознавание людей и генерация изображений. Ваши телефоны смогут распознавать людей на фото и даже создавать изображения с их участием. Лично меня это пугает.
Apple много говорила про безопасность и конфиденциальность, будто бы подтрунивая Microsoft с их Recall и самих себя (Дженифер Лоуренс наверняка сегодня икалось):
🔸 On-device LLM и diffusion models. Большинство вычислений будут происходить на устройстве.
🔸 Semantic Index. Быстрый и умный поиск по контенту.
🔸 Private Cloud Compute. Приватные облачные вычисления для тяжёлых задач, про них мы уже слышали. То, что оно приватное - не верю.
Siri стала умной:
🔸 GenAI под капотом. Теперь она умнее!
🔸 Type to Siri. Возможность писать Сири текстом.
🔸 Интеграция с ChatGPT. Siri теперь использует возможности ChatGPT для более точного распознавания и обработки запросов. Собственно, вторая главная новость презентации - теперь и Эппл имеет стратегическую привязку на уровне ОС к OpenAI. Сэм Альтман красавчик, конечно.
🔸 App Intents & API. Голосовое управление приложениями и их функциями. Для девелоперов прибавится работки.
🔸 Поиск по персональному контексту. Siri может искать информацию в ваших данных (почта, календари и т.д.).
Новые инструменты для работы с контентом:
🔸 Image Playground и API. Возможность создания и редактирования изображений с помощью ИИ + плейграунд для разработчиков. DALL-E больше не нужен.
🔸 Clean-up Tool. Удаление ненужных объектов с фото, аналогично инструментам Google.
🔸 Поиск по видео. Мощный инструмент для поиска контента внутри видеороликов (хотя тут неточно, возможно, я не так услышал).
🔸 Транскрибация аудио в текст в заметках и генерация изображений по скетчам. Теперь легко преобразовать аудиозаписи и свои каракули в текст и картинки. Забавно работает саммаризация текста в картинку (это когда, генерируя изображение, выделяешь пустое пространство в заметке).
———
Еще там было про умные нотификации, кучу автоматизаций с емейлами, ген-эмоджи, ИИ-бэкграунды, управление телефоном голосом, поиск по всем данным телефона, и конечно же КАЛЬКУЛЯТОР!!! (орали все😅)
Все эти нововведения будут доступны на устройствах от M1 и A17 (версии 15 и выше). Интеграцию с ChatGPT завезут в конце лета. Поначалу поддержка ИИ-тулзов будет только для устройств на U.S. English.
Если кто-то уже бежит отдавать свои деньги и отписываться от GPT, Gemini & Claude - не спешите. Скорее всего, локальные модельки будут сильно тупенькие, это на презентации только всё красиво. Да и как батарейка себя будет вести со всем этим добром на борту пока не ясно.
Но за крутецкий рок в конце (Mötley Crüe - Kickstart My Heart) эта презентация явно заслуживает уважения!