گوگل در سری جدید گوشیهای Pixel 11 خود، قابلیت نوآورانهای برای ترجمه زبان اشاره به متن (sign-to-text) معرفی کرده است. این ویژگی که با همکاری جامعه ناشنوایان توسعه یافته، به کاربران امکان میدهد تا زبان اشاره آمریکایی (ASL) را بهصورت آنی به متن انگلیسی تبدیل کنند. این فناوری از یک مدل ترجمه چندزبانه زبان اشاره به متن (SL2T) قدرت میگیرد.
این سیستم با تحلیل شکل دستها، حالتهای چهره و حرکات بدن، زبان اشاره را پردازش کرده و آن را به جملات مکتوب انگلیسی تبدیل میکند. این قابلیت از هر دو حالت اشاره با یک دست یا دو دست پشتیبانی میکند و کاربران میتوانند از آن در ابزارهایی مانند Live Transcribe یا در سراسر سیستمعامل از طریق Gboard استفاده کنند.
نحوه استفاده از قابلیت ترجمه زبان اشاره در Pixel 11
برای استفاده از این ویژگی در دستگاههای Pixel 11، کاربران باید گزینه sign-to-text را به نوار ابزار Gboard خود اضافه کنند و سپس مقابل دوربین جلو به زبان اشاره (ASL) صحبت کنند. ترجمه حاصل بهصورت همزمان روی نمایشگر بیرونی دستگاه نشان داده خواهد شد. سری گوشیهای Pixel 11 هماکنون در بازار عرضه شدهاند.