پژوهشگران دانشگاه نانجینگ تراشه‌ی حسگر بینایی فوق کم‌مصرف LightTok را توسعه داده‌اند. پردازنده‌ی یادشده سیگنال‌های نوری را درون خود حسگر به توکن‌های آماده برای هوش مصنوعی تبدیل می‌کند و مصرف انرژی ناشی از انتقال داده‌های حجیم را کاهش می‌دهد.

توکن‌های تولیدشده در این سخت‌افزار به صورت مستقیم به رمزگذار Transformer برای بازشناسی تصویر ارسال می‌شوند. ساختار پردازشی‌ای که مراحل متعددی مانند تبدیل سیگنال آنالوگ به دیجیتال، بافر داده و بخش‌بندی تصاویر دیجیتال را حذف می‌کند.

پخش از رسانه

میائو فنگ، مدیر مؤسسه‌ی هوش مصنوعی در دانشگاه نانجینگ، می‌گوید: «ایده‌ی طراحی ما انتقال فرایند تولید توکن به درون خود حسگر بود؛ رویکردی که به تراشه اجازه می‌دهد با رسیدن نور، مستقیما توکن‌های قابل پردازش برای مدل‌های هوش مصنوعی تولید کند. توکن‌های حاصل حاوی اطلاعات کامل تصویر هستند.»

فناوری هوش مصنوعی فیزیکی نیازمند دریافت اطلاعات بصری از محیط واقعی و تبدیل آن‌ها به داده‌های ساختاریافته است. تراشه‌ی LightTok با بهره‌گیری از آرایه‌ی حافظه‌ی حساس به نور ساخته‌شده از فتوترانزیستورهای گیت شناور دی‌سولفید مولیبدن (MoS₂) تک‌لایه کار می‌کند و هر پیکسل آن توانایی ثبت نور، ذخیره‌سازی اطلاعات و اجرای محاسبات آنالوگ را دارد.

نمونه‌ی اولیه‌ی این حسگر دارای وضوح ۳۲×۳۲ پیکسل معادل ۱٬۰۲۴ پیکسل حساس به نور است که با فرایندهای تولید CMOS سازگاری دارد. پژوهش یادشده با همکاری پژوهشگران دانشگاه ملی سنگاپور انجام و نتایج آن در ژورنال بین‌المللی Nature Sensors منتشر شده است.