Apple представляет новый фреймворк MLX для машинного обучения

Apple раскрывает MLX - специализированный фреймворк для Apple Silicon.
Улучшенное машинное обучение: высокая производительность и легкость в использовании.
MLX поддерживает популярные языки программирования, облегчая интеграцию.
Эффективность: единая модель памяти минимизирует затраты на обработку данных.
Примеры возможностей: генерация изображений, языковые модели, распознавание речи.
Стратегия Apple: сделать машинное обучение доступней для исследователей.
Apple Silicon способствует высокой эффективности работы моделей ML, одновременно защищая данные пользователей.

Apple незаметно присоединяется :)

#Apple #MLX #MachineLearning

Apple делает ставку на ИИ в WWDC24

WWDC24 Apple обещает стать фестивалем искусственного интеллекта.
В июне компания планирует представить новации в Сири и инструменты для создания 3D-контента.
Языковая модель Ajax станет основой для функций автозаполнения и автоматического резюмирования в приложениях.
ИИ будет интегрирован в офисный пакет Apple, включая Pages и Keynote.
Новый Xcode получит ИИ для дополнения кода.
Apple Music научится создавать персонализированные плейлисты с помощью ИИ, а в AppleCare появится новая технология обслуживания.
Полная реализация видения генеративного ИИ Apple займет время, возможно, до 2025 года.

AI в каждый iPhone и на каждое iOS устройство.
А вот вопрос, - не получится ли как было с браузерами - начнут блокировать сторонние ИИ на своих платформах или замедлять их.
А потом комиссия какая-нибудь начнёт принуждать разрешить любой ИИ и т.д.
В общем, остаёмся на Андроиде на всякий пожарный.

#Apple #AI #WWDC24

Apple представила MGIE - прорыв в редактировании изображений с ИИ

Компания Apple выпустила в открытый доступ модель ИИ под названием MGIE (MLLM-Guided Image Editing), которая позволяет редактировать изображения по естественным языковым инструкциям.
MGIE использует мультимодальные LLM (MLLMs) для интерпретации команд пользователя и отрисовки графики.
Модель способна обрабатывать различные аспекты редактирования, включая модификацию в стиле Photoshop, глобальную оптимизацию фотографий и редактирование определённых областей.
MGIE - результат совместной работы Apple и исследователей из Университета Калифорнии в Санта-Барбаре.
Проект доступен на GitHub с кодом, данными и предварительно обученными моделями.
Пользователи могут опробовать MGIE онлайн через веб-демо на Hugging Face Spaces.

Вспоминается сцена из Bladerunner по разбору фото с отражением.

#Apple #MGIE #ИИ

чего ждать от Apple в ИИ в этом году

Apple тестирует новые функций генеративного ИИ для Xcode и планирует выпустить их уже в этом году.
В планах так же использование ИИ в потребительских продуктах: создание плейлистов, слайд-шоу и поисковые запросы.
Обновление Spotlight может позволить применять запросы на естественном языке.
Инструмент программирования Apple, подобный GitHub Copilot, предложит прогнозирование и автопродолжение кода.

Генеративные функции ИИ будут представлены в течение этого года.

Функции ИИ для Xcode уже показали руководству компании.

после анонса SORA от OpenAI и 10млн контекста от Google, - новости Apple больше похожи на новости из 2023го года.

#Apple #Xcode #ИИ

Apple и Google Gemini планируют сотрудничество.

Сама новость

Дали очень интересно нарисовал картинку к новости. :)

#Apple #Gemini #Google
———
@tsingular

Apple улучшит Siri с помощью новой модели AI ReALM

Apple анонсировала ReALM, революционную модель AI, обещающую существенно усовершенствовать Siri.
ReALM, разработанная для понимания контекста и неоднозначностей, позволит Siri быстрее реагировать на запросы.
Ожидается, что инновация дебютирует в Siri 2.0 на WWDC 2024.
Модель не только умнее, но и обгоняет GPT-4 от OpenAI по некоторым параметрам.
Цель ReALM - предоставлять контекст другим моделям, визуально распознавая экран и помечая сущности.

Скоро Siri сможет понимать нас лучше, чем товарищ майор.

#Apple #ReALM #Siri
-------
@tsingular

так работает Mixtral 8x22B на M3 Max, 128GB RAM с 4-bit квантизацией (4.5 токена в секунду)

#Mixtral #Apple #M3
———
@tsingular

Устройство моделей Apple Intelligence

Чтобы не зависеть от сторонних решений, Apple использует собственный ML стек - AXLearn, Apple Silicon и CoreML.
Выпущено 5 моделей: крупная серверная модель смеси экспертов, модели для генерации Swift кода на устройствах и в облаке, модель генерации изображений.

Для специализации моделей под конкретные задачи используются адаптеры (LoRA, DoRA), - файн-тюн модули размером в несколько десятков мегабайт, заточенные под конкретную маленькую задачу, - работа с письмами, расстановка запятых, дружественный тон и т.д.

В Siri добавили семантический поиск с помощью векторной БД.

Модели обучены на данных веб-сканирования AppleBot, лицензированных и синтетических данных.

Для оптимизации применяются сжатие, совместное использование таблиц эмбеддингов и др. техники.

Интересный разбор внутренней архитектуры.

#Apple #Intelligence #архитектура
-------
@tsingular

Apple WWDC 2025: Foundation Models Framework — On-Device LLM для разработчиков

Apple открыла доступ к собственной 3B языковой модели через Foundation Models Framework, позволив разработчикам интегрировать Apple Intelligence в приложения всего тремя строками Swift-кода.

Технические характеристики Foundation Models Framework:
• Компактная модель: ~3B параметров, оптимизированная для on-device запуска
• Поддержка платформ: iOS 26, iPadOS 26, macOS Tahoe, visionOS
• API: нативная Swift-интеграция через простой import
• Guided Generation: структурированный вывод (JSON, enum, custom types)
• Tool Calling: работа с пользовательскими функциями
• Приватность: полностью локальная обработка без серверных запросов

Новые AI-возможности в экосистеме:
Live Translation через AirPods Pro 2 Режим реального времени для международных переговоров с обработкой на устройстве.

Workout Buddy (watchOS 26)
• Анализ фитнес-данных с персонализированной мотивацией
• GPS-интеграция для контекстных виджетов
• Голосовые уведомления о прогрессе тренировок

Visual Search Enhancement Расширенные возможности распознавания объектов в Camera app.

Архитектурные особенности: Foundation Models Framework использует сжатую архитектуру для эффективной работы в мобильных устройствах.
Модель поддерживает многозадачность: суммаризацию, классификацию, многоходовые диалоги, генерация текстов.

Конкурентное позиционирование: В отличие от серверных решений Google/OpenAI, Apple делает ставку на приватность и автономность.
Разработчики получают мгновенный доступ к LLM без API-ключей и лимитов запросов.

Доступность: Developer Preview — сегодня, Public Beta — июль 2025.

#Apple #WWDC2025 #FoundationModels #AppleIntelligence
———
@tsingular

iOS 26 убивает айфоны.

◦ В миг высаживает аккум и перегревает даже iPhone 15;
◦ Окирпичивает телефоны в редких случаях;
◦ На старых моделях вроде iPhone 12 ось жутко лагает;
◦ Приложения банков и Яндекс Go превращаются в тыкву;
◦ Стоковая клавиатура безбожно тупит;
◦ Проверка обновлений глючит;
◦ На русский ось переведена не полностью.

Источник

Но это не вся история.
У меня в последние пол года Win11 все чаще вылетает в синий экран (собственно одна из причин перехода на Мак), что только не делал.
Оказалось, что это обновление 24H2 виновато и дело не только в моем компе, а в СОТНЯХ ТЫСЯЧ по всему миру.

Т.е. складывается ощущение, что все эти последние обновления навайбкожены аутсорсерами из третьих стран без надлежащей проверки или на уж очень дешевых моделях.
Так и до зимы ИИ недалеко, - откатят обновления и перепишут ручками.

#BSOD #brick #Apple #Microsoft
———
@tsingular

Apple выпустила необычную ИИ-модель для разработчиков

Apple тихо выложила на Hugging Face новую модель DiffuCoder-7B-cpGRPO с интересной особенностью.

Вместо классической генерации кода слева направо, она может писать код в любом порядке и улучшать несколько блоков одновременно, что делает генерацию быстрее.

Модель основана на диффузионном подходе (как в Stable Diffusion для картинок) и построена поверх Qwen2.5-7B от Alibaba. Показала прирост 4.4% на популярных бенчмарках моделей для программирования.

Особенность: регулируя температуру, можно менять порядок генерации токенов - от строгого последовательного до гибкого хаотичного.

#Apple #Coding #Diffusion
------
@tsingular