Китайские специалисты представили уникальный датчик, способный радикально снизить энергопотребление дронов и других умных машин при обработке визуальных данных. Детальное описание архитектуры этого инновационного двумерного чипа под названием LightTok было опубликовано в журнале Nature Sensors.
Главной особенностью устройства стала его способность преобразовывать сырой свет в базовые элементы данных для искусственного интеллекта прямо на самом кристалле. Благодаря этому элегантному решению система полностью пропускает сразу несколько энергозатратных этапов, от которых сильно зависят традиционные сенсорные комплексы.
Директор Института мозгоподобного интеллекта Нанкинского университета Мяо Фэн пояснил, что их главной задумкой был перенос генерации токенов непосредственно на датчик. По его словам, такой подход позволяет чипу самостоятельно формировать рабочие массивы данных сразу в тот момент, когда свет достигает линзы.
Исследователи подчеркивают, что сгенерированные таким образом токены содержат в себе абсолютно полную информацию о визуальном изображении. Нейросетевые модели могут мгновенно приступать к обработке этих сведений без дополнительной предварительной конвертации сигналов.
Новая разработка успешно объединяет сразу пять привычных этапов визуального восприятия в один короткий и эффективный шаг. Преобразование света в готовые строительные блоки для алгоритмов происходит на самом чипе, что заметно упрощает архитектуру оборудования.
Ранее российские ученые предложили новую архитектуру фотонного квантового компьютера.