Guangmai Teknologi Co., Ltd.
+86-755-23499599
Hubungi Kami
  • Tel: +86-755-23499599

  • Faks: +86-755-23497717

  • E-mel: info@gmleds.com

  • Tambah: Guangmai Teknologi Taman, No.96, Guangtian Jalan, Yanluo, Baoan Daerah, Shenzhen, China

Penderia Penglihatan yang diilhamkan-Retina Lebih Boleh Disesuaikan Dengan Pencahayaan Ambien

Mar 22, 2022

Untuk memantau alam sekitar dan menavigasi dunia nyata, robot seharusnya dapat memperoleh imej dan ukuran persekitaran di bawah keadaan pencahayaan latar belakang yang berbeza. Dalam tahun-tahun kebelakangan ini, penyelidik dan jurutera di seluruh dunia telah berusaha untuk membangunkan lebih banyak penderia yang lebih maju untuk disepadukan ke dalam robot, sistem pengawasan atau peranti lain yang dapat mengesan persekitaran mereka.


Menurut Memes Consulting, penyelidik dari Universiti Politeknik Hong Kong, Universiti Peking, Universiti Yonsei dan Universiti Fudan baru-baru ini telah membangunkan jenis sensor penglihatan bionik baharu yang menggunakan mekanisme yang mensimulasikan fungsi retina secara buatan dan boleh digunakan dalam pelbagai Data telah dikumpulkan dalam keadaan terang. Penderia penglihatan bionik ini berdasarkan fototransistor yang diperbuat daripada molibdenum disulfida.

MBXY-CR-a8de0a11284a2f146bb983f089d90576

Foto tatasusunan penderia penglihatan biomimetik (kiri); struktur skematik unit penderia penglihatan dan imej mikroskop optik (kanan)


"Our research team started work on optoelectronic memory five years ago," said Yang Chai, one of the researchers who developed the vision sensor. "This emerging device can output light-dependent and history-dependent signals, enabling image integration. , Weak signal accumulation, spectral analysis and other complex image processing functions, the multi-functional integration of sensing, data storage and data processing into one device."


Pada 2018, Yang Chai dan rakan-rakannya menerbitkan kertas pertama mengenai memori optoelektronik, di mana mereka memperkenalkan peranti memori pensuisan rintangan yang boleh melakukan operasi pengesanan cahaya dan logik. Setahun kemudian, pasukan itu memperkenalkan jenis memori akses rawak fotoresistif baharu dengan tiga fungsi berbeza. Khususnya, peranti baharu boleh mengesan persekitaran, menyimpan maklumat dalam ingatan dan melaksanakan operasi prapemprosesan visual neuromorfik.


"We studied the concepts of near-sensor and in-sensor computing paradigms in 2020 and published our views in the field." Yang Chai continued, "This new research on biomimetic vision sensors builds on our On top of all previous efforts."


The intensity of ambient natural light varies widely, with a total range of 280 dB. When the human retina senses external light signals, it adjusts the light sensitivity of its photoreceptors (i.e., rods and cones) according to the strength of the signal. This ultimately enables the human eye to gradually adapt to varying levels of lighting, allowing it to see clearly in both dark and bright environments, an ability known as "visual adaptation."


"For example, when you enter a dark cinema from a bright hall, you can hardly see anything at first, but after a while in the cinema, it becomes easier to see things," explains Yang Chai. "This phenomenon is called scotopic adaptation. Conversely, if you go from a dark movie theater to a sunny outdoors, you'll feel very dazzled at first, and it takes a while to get used to seeing what's going on around you. The process The opposite of dark adaptation is called photopic adaptation."


The main goal of Yang Chai and his colleagues' recent work is to build a vision sensor inspired by the structure and function of the human retina. To do this, they first started by studying the human retina and then tried to design perceptual strategies that would allow them to artificially simulate visual adaptations.


Keadaan-tentang--penderia imej seni berdasarkan teknologi CMOS biasanya mempunyai julat dinamik terhad sebanyak 70 dB. Walau bagaimanapun, julat dinamik ini jauh lebih sempit daripada julat pencahayaan pemandangan semula jadi (280 dB).


"To achieve visual perception over a wide range of light intensities, researchers have explored the use of controlled optical apertures, liquid lenses, adjustable exposure times, and denoising algorithms in post-processing," said Yang Chai. "However, these Methods often require complex hardware and software resources."

MBXY-CR-2ee2052a82928c7df91825136d5eed60

Dark and light adaptation of biomimetic vision sensor arrays. (a) Schematic of the dark adaptation test: recognition of low-light images using an 8 x 8 pixel array in a dark environment. (b) Schematic diagram of light adaptation test: recognition of high-illuminance images using an 8 x 8 pixel array in a bright environment. (c) Dark adaptation process to identify the "8" pattern. (d) The photoadaptation process to identify the "8" pattern.


Peranti optoelektronik dengan-penglihatan mudah suai dan julat penderiaan luas pada terminal deria boleh mempunyai aplikasi yang sangat berharga. Contohnya, mereka boleh membantu meningkatkan prestasi alat penglihatan komputer, mengurangkan kerumitan perkakasan yang diperlukan untuk membina robot atau sistem penderiaan lain dan meningkatkan ketepatan sistem pengecaman imej.


Walaupun, pasukan penyelidik lain telah membangunkan peranti optoelektronik yang boleh menyesuaikan diri dengan keadaan pencahayaan yang berbeza pada masa lalu. Walau bagaimanapun, kebanyakan peranti yang ditunjukkan sebelum ini hanya boleh meniru mekanisme penyesuaian cahaya retina. Proses penyesuaian gelap setakat ini terbukti lebih sukar untuk disimulasikan.


"There is still a long way to go to fully replicate the visual adaptation function of the retina," explains Yang Chai. "To achieve this, we designed a phototransistor-based vision sensor using ultra-thin semiconductors that can The degree of dark adaptation and light adaptation in the same device was controlled by applying different gate voltages. In this way, we simulated photoreceptors and horizontal cells in the retina and successfully achieved a sensing range of 199 dB. Vision-adaptive devices in biomimetic sensors."

MBXY-CR-44b9d8974d06f6f3438ef7c924d00272

Simulasi buatan fotoreseptor dan sel mendatar dalam retina untuk penyesuaian visual (penyesuaian gelap dan penyesuaian cahaya)


Penderia penglihatan biomimetik yang dibangunkan oleh Yang Chai dan rakan sekerja adalah berdasarkan fototransistor yang diperbuat daripada bahan semikonduktor ultranipis yang dikenali sebagai molibdenum disulfida. Phototransistor yang mereka gunakan mempunyai beberapa keadaan perangkap cas yang boleh memerangkap atau melepaskan elektron dalam saluran pada voltan get yang berbeza.


Ultimately, these states allow researchers to dynamically tune the conductance of their devices. This, in turn, allowed them to artificially simulate the dark- and light-adaptive mechanisms of the human retina, thereby expanding the range of their sensor's perception of different lighting conditions.


"Our bionic vision sensor has several advantages and features," said Yang Chai. "First, the visual adaptation function is implemented in a single device, which greatly reduces the footprint. Second, multiple functions can be implemented on a single device. , including light sensing, memory, and processing. Finally, dark and light adaptation under different light intensities can be achieved by controlling its gate voltage."


Yang Chai dan rakan-rakannya menilai sensor penglihatan bionik dalam satu siri ujian dan mendapati ia boleh meniru fungsi retina manusia secara berkesan, mencapai hasil yang luar biasa dalam kedua-dua penyesuaian gelap dan terang. Tambahan pula, ia mempunyai julat persepsi yang jauh lebih tinggi (199 dB) berbanding penyelesaian yang dicadangkan sebelum ini.


"Our vision sensor can enrich machine vision functions, reduce hardware complexity, and achieve high image recognition efficiency," said Yang Chai, "All these advantages are available in areas such as autonomous driving, face recognition, and industrial manufacturing in complex lighting environments. great application prospects."


Dalam kajian akan datang, penyelidik merancang untuk meningkatkan lagi prestasi penderia penglihatan, sambil turut menggunakannya untuk mereka-sistem berskala besar yang terdiri daripada tatasusunan penderia. Sebaik-baiknya, mereka mahu membina tatasusunan sensor ini pada substrat yang fleksibel atau hemisfera untuk membolehkan medan pandangan yang lebih luas.


"One area that needs improvement is the adaptation time of our vision sensor, as it is still not enough to support machine vision applications." Yang Chai added, "Our goal is to reduce the adaptation time to the microsecond level. In addition, the vision sensor array scale Further improvements are also needed. Our near-term target for array size is greater than 100 x 100 pixels. Finally, the heterogeneous integration of vision sensors and post-processing units, including silicon-based control circuits, is a very important step toward practical applications."

5050 ir led

Teknologi GMKJ terlibat secara mendalam dalam sumber cahaya yang sihat dan pintar, menyediakan rangkaian penuh UVA UVB UVC LED, produk VCSEL LED IR inframerah dan penyelesaian kepada pasaran. Ia mempunyai ratusan rakan kongsi-berkualiti tinggi dalam pasaran domestik dan asing untuk bersama-sama mempromosikan penggunaan teknologi ringan untuk mencipta kehidupan yang sihat dan pintar. .