گوگل روی دو ویژگی جدید و کاربردی Gboard با کمک دوربین گوشی و هوش مصنوعی کار می‌کند

گوگل در حال توسعه یک ویژگی جدید برای کیبورد Gboard است که می‌تواند زبان اشاره را با کمک هوش مصنوعی به متن تبدیل کند.

این قابلیت که با نام Sign-to-text شناخته می‌شود، از دوربین گوشی برای دریافت حرکات زبان اشاره استفاده می‌کند و در صورت عرضه، امکان استفاده از متن ترجمه‌شده در پیام‌ها، ایمیل‌ها، جست‌وجوهای وب و بخش‌های دیگر اندروید را فراهم خواهد کرد.

به نقل از Android Authority این قابلیت هنوز به‌صورت عمومی منتشر نشده و نشانه‌های مربوط به آن در نسخه بتای Gboard 17.8.3.939743344-beta-arm64-v8a مشاهده شده است. علاوه بر Sign-to-text، گوگل ظاهراً قابلیت دیگری را نیز برای کنترل فاصله خودکار پس از انتخاب کلمات پیشنهادی در Gboard آزمایش می‌کند.

ویژگی جدید Sign-to-text در Gboard به‌گونه‌ای طراحی شده است که با استفاده از دوربین گوشی، ویدیویی از حرکات زبان اشاره کاربر ثبت کرده و سپس با کمک هوش مصنوعی آن‌ها را به متن تبدیل کند.

بر اساس توضیحات کشف‌شده درباره این ویژگی، متن تولیدشده می‌تواند در کاربردهای مختلفی مانند ارسال پیام، نوشتن ایمیل و جست‌وجوی وب مورد استفاده قرار گیرد. به این ترتیب، کاربران واجد شرایط می‌توانند به‌جای تایپ مستقیم، از زبان اشاره به‌عنوان یکی از روش‌های ورود متن در اندروید استفاده کنند.

البته این قابلیت هنوز در مرحله توسعه قرار دارد و جزئیات مربوط به نحوه عملکرد نسخه نهایی یا دستگاه‌هایی که از آن پشتیبانی خواهند کرد، مشخص نشده است.

یکی از نکات مهم درباره قابلیت تبدیل زبان اشاره به متن با هوش مصنوعی، نحوه پردازش ویدیوی کاربران است. طبق توضیحات گوگل، ویدیوی اصلی که با دوربین گوشی ضبط می‌شود، هرگز از دستگاه کاربر خارج نخواهد شد.

این ویدیو ابتدا روی خود دستگاه پردازش می‌شود تا حرکات و کلماتی که کاربر با زبان اشاره بیان می‌کند از محتوای ویدیو تفکیک شوند. سپس داده‌های مربوط به این حرکات و کلمات برای پردازش و تحلیل به گوگل ارسال خواهند شد.

گوگل اعلام کرده است این داده‌ها پس از آنکه دیگر برای پردازش مورد نیاز نباشند، حذف می‌شوند. این رویکرد باعث می‌شود فایل ویدیویی اصلی کاربر مستقیماً برای پردازش به سرورهای گوگل ارسال نشود.

در بررسی کدهای مرتبط با قابلیت جدید Gboard، یک رشته متنی نیز مشاهده شده که نشان می‌دهد سیستم می‌تواند نامناسب بودن شرایط نوری را تشخیص دهد.

«نور ضعیف است. سعی کنید به مکان روشن‌تری بروید.»

وجود چنین پیامی نشان می‌دهد کیفیت تصویر دوربین نقش مهمی در تشخیص صحیح حرکات زبان اشاره خواهد داشت. در صورت کافی نبودن نور محیط، Gboard احتمالاً از کاربر می‌خواهد شرایط تصویربرداری را بهبود دهد تا حرکات با دقت بیشتری ثبت و پردازش شوند.

در حال حاضر مشخص نیست قابلیت Sign-to-text گوگل در زمان عرضه از کدام زبان‌ها یا استانداردهای زبان اشاره پشتیبانی خواهد کرد.

متن اصلی به احتمال پشتیبانی از زبان اشاره آمریکایی (American Sign Language یا ASL) اشاره می‌کند، اما این موضوع هنوز به‌صورت رسمی از سوی گوگل تأیید نشده است. با توجه به وجود زبان‌های اشاره مختلف در کشورهای گوناگون، پشتیبانی زبانی یکی از مهم‌ترین جزئیات نامشخص این قابلیت محسوب می‌شود.

بنابراین تا زمان انتشار اطلاعات رسمی، نمی‌توان با قطعیت گفت که Sign-to-text هنگام عرضه از ASL یا چه تعداد زبان اشاره دیگر پشتیبانی خواهد کرد.

در کنار تبدیل زبان اشاره به متن، گوگل تغییر کاربردی دیگری را نیز برای کیبورد Gboard آزمایش می‌کند. این تغییر به نحوه اضافه شدن فاصله پس از انتخاب یک کلمه از نوار پیشنهادها و تصحیح خودکار مربوط می‌شود.

در حالت معمول، وقتی کاربر یکی از کلمات پیشنهادی را انتخاب می‌کند، Gboard به‌صورت خودکار یک فاصله بعد از آن قرار می‌دهد. این رفتار هنگام تایپ یک جمله مفید است، اما زمانی که کاربر قصد دارد بلافاصله علامت نگارشی یا کاراکتر دیگری را به کلمه اضافه کند، ممکن است مطلوب نباشد.

گزینه جدیدی با عنوان Auto-space after suggestions در تنظیمات Corrections & suggestions مشاهده و فعال شده است.

عملکرد این گزینه ساده است:

• در حالت فعال: پس از انتخاب کلمه پیشنهادی، Gboard به‌صورت خودکار یک فاصله اضافه می‌کند.
• در حالت غیرفعال: فاصله خودکار پس از کلمه پیشنهادی اضافه نمی‌شود و کاربر کنترل بیشتری برای وارد کردن علائم نگارشی یا کاراکترهای بعدی دارد.

آزمایش انجام‌شده روی این قابلیت نشان داده است که گزینه مذکور پس از فعال‌سازی کار می‌کند؛ بااین‌حال، در دسترس بودن آن در نسخه آزمایشی به معنی عرضه قطعی برای همه کاربران نیست.

در حال حاضر، گوگل زمان مشخصی برای عرضه عمومی Sign-to-text در Gboard اعلام نکرده است. این ویژگی از طریق بررسی نسخه بتای Gboard شناسایی شده و هنوز اطلاعاتی درباره فهرست گوشی‌های سازگار، زبان‌های اشاره پشتیبانی‌شده یا زمان انتشار نهایی آن وجود ندارد.

بیشتر بخوانید: با چند تغییر ساده در Gboard، سرعت تایپ خود را دو برابر کنید

جی‌بورد کیبورد پیش‌فرض بسیاری از گوشی‌های اندرویدی است؛ بنابراین در صورت عرضه گسترده Sign-to-text، قابلیت تبدیل زبان اشاره به متن می‌تواند مستقیماً در یکی از پرکاربردترین ابزارهای ورود متن در اکوسیستم اندروید در دسترس قرار گیرد.

گوگل در حال توسعه دو قابلیت جدید برای کیبورد Gboard است که مهم‌ترین آن‌ها تبدیل زبان اشاره به متن با کمک هوش مصنوعی است. قابلیت Sign-to-text با استفاده از دوربین گوشی حرکات زبان اشاره را دریافت می‌کند و با پردازش مبتنی بر هوش مصنوعی، امکان تبدیل آن‌ها به متن را فراهم خواهد کرد؛ درحالی‌که ویدیوی اصلی کاربر روی دستگاه باقی می‌ماند. در کنار آن، امکان کنترل فاصله خودکار پس از انتخاب کلمات پیشنهادی نیز می‌تواند تجربه تایپ با Gboard را انعطاف‌پذیرتر کند. بااین‌حال، هر دو قابلیت در مرحله آزمایش و توسعه قرار دارند و هنوز زمان عرضه عمومی آن‌ها مشخص نشده است.

نظر شما درباره قابلیت Sign-to-text چیست؟ آیا تبدیل مستقیم زبان اشاره به متن می‌تواند به یکی از مهم‌ترین قابلیت‌های دسترس‌پذیری Gboard و اندروید تبدیل شود؟