Компактная языковая модель Phi Silica стала мультимодальной

Компактная языковая модель Phi Silica стала мультимодальной
16:00, Апрель 26, 2025 Компактная языковая модель (SLM) Phi Silica от Microsoft теперь способна понимать не только текст, но и изображения, что переводит её в статус мультимодальных. Это важное обновление, поскольку модель интегрирована в операционную систему Windows 11 на устройствах ПК Copilot+ и работает на локальном нейронном процессоре (NPU), встроенном в процессор. Сейчас модель работает только с процессором Snapdragon X, но в ближайшее время появится поддержка чипов от AMD и Intel. Вместо добавления отдельной громоздкой модели для анализа изображений, инженеры Microsoft объединили существующие компоненты. Базой осталась уже развернутая модель Phi Silica. Для машинного зрения применяется кодировщик изображений Florence, который также используется в предварительной версии Windows Recall и улучшенном поиске на базе ИИ. И, наконец, разработан небольшой дополнительный модуль «Projector» (всего 80 млн параметров), который преобразует визуальные данные от Florence в формат, понятный Phi Silica. [media=https://vkvideo.ru/video-3783130_456239407] Так Microsoft удалось избежать необходимости развёртывания ещё одной громоздкой модели на устройствах пользователей. Этого подход позволил сэкономить дисковое пространство и уменьшить вычислительную нагрузку. Кроме этого, повторное использование существующих компонентов сократило затраты и время на обучение моделей. Главным примером практического применения новой технологии стала функция генерации описаний изображений для незрячих или слабовидящих пользователей. Мультимодальная Phi Silica может генерировать для «Экранного диктора» описания изображений с разной степенью детализации, [media=https://vkvideo.ru/video-3783130_456239407] Phi Silica создаёт краткие описания изображений из 135 символов в среднем за 4 секунды, тогда как для подробного описания из 400-500 символов требуется около 7 секунд. Текущая версия оптимизирована для английского языка, но в будущем планируется поддержка других языков. Пример описания изображения с картой острова Оаху Краткое описание: На изображении представлена карта Гавайского острова Оаху, на которой обозначены различные места, такие как мыс Кахуку (Kahuku Point), залив Кавела (Kawela Bay), Кахуку (Kahuku) и другие точки и поселения, включая Перл-Сити (Pearl City) и Эва-Бич (Ewa Beach). Подробное описание: Изображение представляет собой карту Гавайского острова Оаху, на которой обозначены различные места и географические объекты. Ключевые места включают мыс Кахуку (Kahuku Point), залив Кавела (Kawela Bay), Кахуку (Kahuku) и Кауаи (Kauai). Другие примечательные места: Лайе (Laie), Коолау (Koolau), Хауула (Hauula), Пуналу (Punaluu), Мокулея (Mokulēia), Анахулу (Anahulu), Вайалуа (Waialua), Кааава (Kaaawa) и Кауконахуа (Kaukonahua). Также виден Тихий океан (Pacific Ocean). Среди других упомянутых мест — Уитмор-Виллидж (Whitmore Village), гора Кала (Mt. Kala), мыс Куалоа (Kualoa Point), Вахиава (Wahiawa) и Канеохе (Kaneohe). На изображении также показаны различные поселки и города, такие как Милилани (Mililani), Ахуиману (Ahuimanu), Перл-Сити (Pearl City) и Ваипио (Waipio). Другие примечательные места включают Кахулу (Kahulu), Нанакули (Nānākuli), Коолау (Koolau) и Ваиманало (Waimanalo). Дополнительную техническую информацию об обновлении модели Phi Silica можно найти в официальном блоге Microsoft по этой ссылке....
Читать полный текст на thecommunity.ru  

Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Ведущая языковая модель успешно прошла тест Тьюринга

Ведущая языковая модель успешно прошла тест Тьюринга В ходе нового предварительного исследования, ожидающего экспертной оценки, исследователи показали, что модель GPT-4.5 разработки OpenAI удачно прошла так называемый «тест Тьюринга». В рамках трёхсторонней версии теста участники общались одновременно с человеком и искусственным интеллектом, …

Наука и Технологии 21:56, Апрель 4, 2025 | api.follow.it
Представлена новая модель шин для аграрного сектора от KAMA TYRES

Представлена новая модель шин для аграрного сектора от KAMA TYRES Компания KAMA TYRES объявила о начале серийного производства новой модели сельскохозяйственных шин КАМА АТТ в типоразмере 600/70R30. Новинка предназначена для применения на ведущих осях сельскохозяйственных тракторов (категория Т) и разработана с учетом особенностей эксплуатации в агропром …

Hardware 06:00, Апрель 1, 2025 | android-robot.com
Chery Himla  принципиально новая модель может появиться в РФ

Chery Himla — принципиально новая модель может появиться в РФ На автосалоне в Шанхае компания Chery представила модель в новом для себя сегменте – это рамный пикап, получивший название Himla. Пресс-служба сообщает, что это название «вдохновлено образом горных вершин и духом покорения – символом надежности, уверенности и силы». В компании заявляют, чт …

Авто / Мото 11:00, Апрель 26, 2025 | zr.ru
Топ-5 флагманов в 1 квартале 2025 года. Есть даже неожиданная модель

Топ-5 флагманов в 1 квартале 2025 года. Есть даже неожиданная модель Запускаем на iGuides новую рубрику с подборкой лучших девайсов, вышедших за прошедший квартал. Сегодня рассмотрим флагманские смартфоны, которые популярные бренды успели анонсировать в период с января по март. Некоторые из них мы даже успели протестировать лично, чтобы рассказать в отдельн …

Наука и Технологии 15:00, Апрель 11, 2025 | iguides.ru
Надежда Кадышева стала самой высокооплачиваемой певицей в России

Надежда Кадышева стала самой высокооплачиваемой певицей в России 65-летняя Надежда Кадышева, песни которой в последнее время завоевали популярность у молодёжи, стала самой высокооплачиваемой певицей в России. Гонорар за одно выступление артистки теперь составляет 20 млн рублей. Об этом сообщил давний друг Кадышевой и промоутер компании "Ру-концерт" Евге …

Мода, женское, сплетни 07:00, Апрель 25, 2025 | spletnik.ru
Лауреатом всероссийского конкурса стала Брянская спортшкола Сталь

Лауреатом всероссийского конкурса стала Брянская спортшкола «Сталь» В Москве, в Международном мультимедийном пресс-центре МИА «Россия сегодня», подведены итоги II Всероссийского конкурса в области цифровой трансформации сферы физической культуры и спорта и состоялась торжественная церемония награждения победителей. Участники мероприятия из Брянской области …

Новости 14:10, Октябрь 26, 2022 | bug32.ru
Вспышка на Солнце стала причиной прироста силы 25 солнечного цикла

Вспышка на Солнце стала причиной прироста силы 25 солнечного цикла Цикл солнечной активности возобновился после долгого перерыва, и это не останется без последствий. Солнечная активность - это солнечные пятна, вспышки, увеличение солнечного излучения и другие виды возмущений в солнечной короне. Активная фаза на Солнце непостоянна, она проходит циклами, в …

Наука 21:00, Апрель 7, 2025 | versiya.info
Мощная нейросеть Сбера GigaChat 2.0 стала доступна всем пользователям

Мощная нейросеть Сбера GigaChat 2.0 стала доступна всем пользователям Команда Сбербанка сообщила о релизе нового поколения нейросетевых моделей GigaChat. В модельный ряд вошли две версии — GigaChat 2 Pro и GigaChat 2 Max. Попробовать обновлённый GigaChat можно бесплатно на сайте, в телеграм-боте и в новом мессенджере Max от VK. Иллюстрация: Сбер В комп …

Наука и Технологии 19:00, Апрель 14, 2025 | ixbt.com
Цифровые ископаемые: как опечатка 1959 года стала кошмаром для GPT-4o и научных журналов

Цифровые ископаемые: как опечатка 1959 года стала кошмаром для GPT-4o и научных журналов «Вегетативная электронная микроскопия» — этот наукообразный, но абсолютно бессмысленный термин — как цифровое проклятие кочует по научным статьям, ответам нейросетей и даже рецензируемым журналам. Учёные раскрыли цепь событий, из-за которых опечатка 70-летней давнос …

Наука и Технологии 09:00, Апрель 19, 2025 | ixbt.com
Авито обогнал OpenAI и Google: нейросеть A-Vibe стала лучшей среди легких ИИ-моделей на русском языке

«Авито» обогнал OpenAI и Google: нейросеть A-Vibe стала лучшей среди легких ИИ-моделей на русском языке Большая языковая модель A-Vibe от «Авито» заняла первое место среди облегченных моделей (до 10 млрд параметров) в независимом российском бенчмарке MERA, обойдя международные аналоги от OpenAI, Google и Anthropic. A-Vibe лучше аналогичных моделей понимает запросы, генерирует код и поддержив …

Наука и Технологии 21:00, Апрель 7, 2025 | iguides.ru
Новая линейка младших профессиональных проекторов Epson (5000-7000 лм) стала еще заметнее выделяться на фоне существующих аналогов

Новая линейка младших профессиональных проекторов Epson (5000-7000 лм) стала еще заметнее выделяться на фоне существующих аналогов Выгодные преимущества новинкам обеспечивают 3-матричный конструктив, несколько комплектов специализированного ПО и использование постоянной оптики Серия проекторов Epson EB-L5xx/6xx/7xx относится к классу "младших" профессиональных проекторов, принципиальным отличительным признаком которых …

Hardware 21:59, Апрель 4, 2025 | allprojectors.ru
В России поступила в продажу модель Redmi Note 14S, дополнив серию Redmi Note 14

В России поступила в продажу модель Redmi Note 14S, дополнив серию Redmi Note 14 Компания diHouse, дистрибьютор продукции потребительской электроники и «умных» устройств Xiaomi, представляет на российском рынке модель Redmi Note 14S, которая дополняет серию Redmi Note 14 моделью с функциями флагманского уровня. «Культовые снимки, мастерство AI» Новинка, выпущенная под …

Наука и Технологии 09:00, Апрель 19, 2025 | digimedia.ru