0 |
Команда дослідників з Гарвардської школи інженерії та прикладних наук імені Джона А. Полсона (SEAS) оголосила про створення першого фотосенсора, що підтримуватиме вбудовану обробку зображень, які одержуються за його допомогою. Присвячена цьому публікація розміщена у журналі Nature Electronics.
За задумом розробників, така функціональність виявиться корисною для значного прискорення роботи з відео, наприклад, у системах автономного водіння, де критично важливо вчасно розпізнати перешкоду на дорозі. Важливою перевагою запропонованого рішення є можливість його застосування в комерційних продуктах, оскільки воно базується на поширеній технології CMOS.
Команда розробила матрицю кремнієвих фотодіодів. Наявні у продажу чіпи для розпізнавання зображень також мають масив кремнієвих фотодіодів для захоплення зображень, але фотодіоди команди мають електростатичне легування, а це означає, що чутливість окремих фотодіодів або пікселів до світла, що входить, можна налаштовувати за допомогою напруги. Масив, який з'єднує разом кілька фотодіодів з перебудовою напруги, може виконувати аналогову версію операцій множення та додавання, що є ключовими для багатьох конвеєрів обробки зображень, витягуючи відповідну візуальну інформацію відразу після захоплення зображення.
Матриця кремнієвих фотодіодів може бути запрограмована на різні фільтри для видалення непотрібних деталей або шуму для різних додатків. Система обробки зображень в автономному транспортному засобі, наприклад, може вимагати фільтр верхніх частот для відстеження розмітки смуги руху, тоді як інші програми можуть вимагати фільтр, який розмиває зображення для зменшення шуму.
"Ці динамічні фотодіоди можуть одночасно фільтрувати зображення в міру їхнього захоплення, дозволяючи перенести перший етап обробки зображення з мікропроцесора на сам датчик", - сказав Хоук Джанг, науковий співробітник SEAS і перший автор статті.
"Заглядаючи вперед, ми передбачаємо використання цього кремнієвого сенсорного процесора не тільки в додатках машинного зору, а й у біотехнологічних додатках, в яких рання обробка інформації дозволяє поєднувати сенсорні та обчислювальні блоки за прикладом мозку", - сказав Генрі Хінтон, аспірант SEAS та співавтор статті.
Далі команда має намір збільшити щільність фотодіодів та інтегрувати їх із кремнієвими інтегральними схемами.
“Замінивши стандартні непрограмовані пікселі в комерційних кремнієвих датчиках зображення програмованими, розробленими тут, пристрої обробки зображень зможуть інтелектуально обрізати непотрібні дані, що може стати більш ефективним як з точки зору енергоспоживання, так і в плані пропускної здатності, щоб задовольнити вимоги наступного покоління сенсорних додатків”, - сказав Хоук Джанг.
Стратегія охолодження ЦОД для епохи AI
0 |