Нейроморфная система улучшает машинное зрение в условиях экстремального освещения

04:00, Март 7, 2025 Недавно исследовательская группа разработала нейроморфную систему управления экспозицией (NEC), которая улучшает машинное зрение в условиях экстремальных изменений освещенности. Опубликованная в Nature Communications, эта биологически вдохновленная система имитирует человеческое периферийное зрение, достигая беспрецедентной скорости и надежности в динамических средах восприятия. Исследовательскую группу возглавляли профессор Цзя Пан и профессор Ифань Эван Пэн с кафедры компьютерных наук и кафедры электротехники и электроники инженерного факультета Университета Гонконга (HKU) в сотрудничестве с исследователем из Австралийского национального университета. Традиционные системы автоматической экспозиции (AE) полагаются на итеративную обратную связь по изображению, создавая дилемму «курица или яйцо», которая не срабатывает при резких изменениях яркости (например, туннели, блики). Система NEC решает эту проблему путем интеграции камер событий — датчиков, которые фиксируют изменения яркости по пикселям как асинхронные «события» — с новым алгоритмом Trilinear Event Double Integral (TEDI). Этот подход: работает со скоростью 130 миллионов событий/сек на одном ЦП, что позволяет развертывать периферию. «Подобно тому, как наши зрачки мгновенно адаптируются к свету, NEC имитирует биологическую синергию между путями сетчатки», — пояснил Шицзе Линь, первый автор статьи. «Объединяя потоки событий с физическими показателями света, мы обходим традиционные узкие места, чтобы обеспечить зрение, не зависящее от освещения». В ходе испытаний группа проверила NEC в критически важных сценариях: Автономное вождение: улучшенная точность обнаружения (mAP +47,3%) при выезде транспортных средств из туннелей на яркий солнечный свет. Дополненная реальность (AR): достигнуто на 11% более точное определение позы (PCK) при отслеживании руки под хирургическим освещением. 3D-реконструкция: обеспечивает непрерывную SLAM-съемку в условиях чрезмерного воздействия, где обычные методы неэффективны. Медицинская помощь с дополненной реальностью: сохранение четкой интраоперационной визуализации, несмотря на динамическую регулировку прожектора. Профессор Пан сказал: «Этот прорыв представляет собой значительный скачок в машинном зрении , преодолевая разрыв между биологическими принципами и вычислительной эффективностью. Система NEC не только устраняет ограничения традиционного контроля экспозиции, но и прокладывает путь для более адаптивных и устойчивых систем зрения в реальных приложениях — от автономных транспортных средств до медицинской робототехники». Профессор Пэн прокомментировал: «Наша совместная работа сыграла важную роль в расширении границ нейроморфной инженерии. Используя основанное на событиях зондирование и биоинспирированные алгоритмы, мы создали систему, которая не только быстрее, но и более надежна в экстремальных условиях. Это свидетельствует о силе междисциплинарных исследований в решении разнообразных сложных инженерных задач». В долгосрочной перспективе парадигма NEC предлагает новую схему обработки событий и кадров, которая снижает нагрузку на обработку событий/изображений высокого разрешения и включает биологически правдоподобные принципы в низкоуровневый контроль машинных глаз. Это открывает новые возможности для проектирования камер, системного управления и алгоритмов нисходящего потока. Успех команды в воплощении нейроморфной синергии в различных системах является важной вехой, которая может вдохновить многие оптические/изображения/нейроморфные конвейеры обработки и подразумевает прямые экономические и практические последствия для отрасли....

Человеческое зрение — вызов для ИИ Достижение разнообразия в человеческом зрении — одна из главных задач в исследованиях ИИ. В подавляющем большинстве случаев мы лучше машин понимаем окружающий мир. Но машины догоняют — медленно, но верно. «В течение одного дня мы, люди, можем перейти от вождения автомобиля к фридайвингу, п …

Наука и Технологии 16:10, Октябрь 26, 2022 | android-robot.com

Роскомнадзор по ДФО улучшает доступность связи для инвалидов в Приморье Управление Роскомнадзора по Дальневосточному федеральному округу ведёт активную работу по обеспечению доступности услуг связи для инвалидов в Приморье. Благодаря усилиям ведомства, количество нарушений в этой сфере неуклонно сокращается. Роскомнадзор осуществляет непрерывный контроль за со …

Новости 21:54, Апрель 4, 2025 | zr.media

Машинное обучение раскрывает скрытые механизмы переноса тепла в органических полупроводниках Сложные материалы, такие как органические полупроводники или микропористые металлоорганические структуры, известные как MOF, уже используются для многочисленных приложений, таких как OLED-дисплеи, солнечные батареи, хранение газа и извлечение воды. Тем не менее, они все еще таят в себе нес …

Наука и Технологии 11:00, Март 22, 2025 | android-robot.com

За высокой стеной ИК-4. Гляньте, в каких условиях пять лет жил Ефремов Михаил Ефремов вот-вот выйдет на свободу. За решеткой актер оказался из-за ДТП в состоянии алкогольного опьянения, унесшего жизнь водителя фургона в 2020 году. Михаил отбыл пятилетний срок из семи с половиной положенных лет. Характеристики у почти бывшего заключенного отличные, и поэтому У …

Новости 23:23, Апрель 8, 2025 | aif.ru

Компании проката автомобилей смогут выжить в условиях карантина в стране Правительство России выделит 2,5 миллиарда рублей для поддержания российских компаний каршеринга. Пандемия вируса в России сегодня полностью остановила работу компаний по прокату автомобилей. Однако владельцы каршеринга смогли взглянуть на образовавшиеся проблемы с другой стороны и принять …

Политика 23:35, Апрель 8, 2025 | versiya.info

"АНЭП-Металл" - комплексная система поставок металлопроката "АНЭП-Металл" Ростов — это крупнейшая на территории России и СНГ компания – поставщик металлопроката, существующая на рынке более 10 лет. Компания работает с любыми заказами, поставляет металлопрокат в опт и розницу, сотрудничает как с частными лицами, предоставляя возможность оплаты в рас …

Технологии 09:00, Апрель 19, 2025 | versiya.info

«Система VAC не смогла проверить вашу игровую сессию»: как исправить эту ошибку? Вы наверняка знаете, что все современные игровые площадки оснащены встроенным античитом. У Valve это — VAC, у Riot Games — Vanguard, у Epic Games — Easy Anti-Cheat. Год назад на платформу Battle.net (Blizzard) добавили античит RICOCHET, который сфокусирован на контроле честности игроков в …

Наука и Технологии 15:52, Октябрь 26, 2022 | ichip.ru

В России разработана система управления оборудованием для замены Crestron, Extron, QSC и AMX Компания TrueConf разработала новый программно-аппаратный комплекс для автоматизации переговорных комнат и офисных пространств — TrueConf Coordinator. Решение позволит заменить на отечественном рынке зарубежные решения Crestron, Extron, QSC и AMX, срок поставки которых увеличился более чем …

Наука и Технологии 16:10, Октябрь 26, 2022 | digimedia.ru

Летающий крематорий: Система пожаротушения SSJ-100 сработала через 20 секунд после остановки пылающего самолёта – источник Сгоревший в Шереметьево Sukhoi Superjet 100 компании «Аэрофлот» оказался не готов к ЧП - сигнал о пожаре на лайнере сработал за 4 секунды до того, как уже горящий самолёт остановился после посадки, сообщают СМИ со ссылкой на документы Росавиации. 5 мая в столичном аэропорту Шереметьево пос …

Происшествия 21:59, Апрель 4, 2025 | versiya.info