RAW + ИИ = новая эра "умных" камер

Chips&Media и Visionary.ai — разрабатывают процессор обработки изображений нового типа. Он полностью программный и работает на AI (искусственном интеллекте), без классического аппаратного ISP.

ISP (Image Signal Processor) — это специализированный процессор в камере, который принимает сырые данные с матрицы (RAW) и с помощью алгоритмов преобразует их в готовое изображение или видео: убирает шум, восстанавливает цвет, экспозицию и резкость.

Основная идея AI ISP

Идея AI ISP простая: весь путь от RAW-данных сенсора до готового изображения выполняется нейросетью. Классические ISP почти не менялись десятилетиями. Они жёстко зашиты в железо и плохо масштабируются под задачи — видео в темноте, высокий динамический диапазон, XR-устройства, автопилоты. Программный подход снимает эти ограничения.

Нейросеть обучается отдельно под каждый сенсор. Обучение автоматизировано и занимает часы, а не месяцы. Это резко снижает стоимость интеграции и упрощает поддержку разных платформ.

Что это значит для обычного фотографа?

Главный выигрыш — качество фото и видео в сложных условиях. В темноте система сохраняет детали без «восковых» текстур, уменьшает шум без агрессивной резкости, снижает ореолы, мерцание и двоение в движении. Обработка оптимизируется сразу целиком, а не отдельными блоками вроде шумоподавления или HDR. Хотя фокус сейчас на видео, этот принцип подходит и для фотографии.

Решение не привязано к одному чипу. Его можно адаптировать под разные нейронные или графические процессоры и развивать со временем — улучшать HDR, объединение экспозиций, сегментацию, ночные режимы и другие сценарии.

Аппаратные ISP не исчезнут сразу, но направление ясно: обработка изображений постепенно переходит из фиксированного «железа» в гибкое программное обеспечение на базе ИИ.