حلقه هوشمند SpellRing: پلی بین زبان اشاره و دنیای دیجیتال

حلقه هوشمند مجهز به هوش مصنوعی، زبان اشاره را به متن تبدیل می‌کند:

پژوهشگران دانشگاه کرنل یک حلقه هوشمند مجهز به هوش مصنوعی توسعه داده‌اند که می‌تواند زبان اشاره آمریکایی را به متن تبدیل کند و با دستگاه‌هایی مانند گوشی‌های هوشمند و کامپیوترها ارتباط برقرار کند. این دستگاه با استفاده از فناوری میکرو-سونار، به‌صورت هم‌زمان و در لحظه، حرکات انگشتان را برای اجرای حروف‌نویسی (Fingerspelling) در زبان اشاره آمریکایی ردیابی می‌کند. این روش به کاربران اجازه می‌دهد تا واژه‌هایی را که معادل مشخصی در زبان اشاره ندارند، مانند نام‌های خاص و اصطلاحات فنی، به‌صورت حروف‌نویسی وارد کنند.

مکانیزم عملکرد حلقه هوشمند

این حلقه هوشمند که با نام "SpellRing" شناخته می‌شود، روی انگشت شست قرار گرفته و مجهز به یک میکروفون و یک بلندگو است. این دو مؤلفه، امواج صوتی نامرئی را ارسال و دریافت کرده و با تحلیل بازتاب آن‌ها، حرکات دست و انگشتان کاربر را ردیابی می‌کنند. علاوه بر این، یک ژیروسکوپ کوچک برای تشخیص حرکات کلی دست درون یک قاب چاپ سه‌بعدی تعبیه شده است. به گفته پژوهشگران، ابعاد این حلقه از یک سکه استاندارد آمریکایی فراتر نمی‌رود. سپس، یک الگوریتم یادگیری عمیق تصاویر سونار را پردازش کرده و در لحظه حروف زبان اشاره آمریکایی را شناسایی و پیش‌بینی می‌کند.

دقت بالا در ترجمه زبان اشاره

نتایج آزمایش‌های انجام‌شده توسط پژوهشگران دانشگاه کرنل، دانشگاه کارنگی ملون و دانشگاه استونی بروک نشان می‌دهد که دقت این حلقه هوشمند در تبدیل زبان اشاره آمریکایی به متن بین ۸۲ تا ۹۲ درصد متغیر است. این آزمایش با مشارکت ۲۰ فرد مسلط و غیرمسلط به زبان اشاره انجام شد و طی آن بیش از ۲۰,۰۰۰ واژه با طول‌های مختلف توسط کاربران حروف‌نویسی شد.

تیم پژوهشی همچنان در حال بهینه‌سازی این فناوری است تا بتواند تمامی ۲۶ شکل دستی مربوط به حروف الفبای زبان اشاره آمریکایی را به‌طور دقیق تشخیص دهد. تفاوت‌های ظریف میان این حرکات، فرآیند شناسایی را پیچیده می‌کند، اما پژوهشگران با تلاش مستمر در پی بهبود این فناوری هستند. در صورت تکمیل توسعه، این حلقه هوشمند می‌تواند نه‌تنها حروف، بلکه کلمات و جملات کامل را نیز ترجمه کند. هنوز اطلاعاتی درباره‌ی زمان عرضه‌ی تجاری این محصول منتشر نشده است.