مدقّق التعرّف على الإيماءات وإشارات اليد الافتراضية

هذه هي قواعد التصنيف الفعلية الخاصة بهذه الأداة نفسها، وتُطبَّق مباشرة على 21 نقطة معلمية لليد يتم تتبّعها في كل إطار.

1. انقر على "ابدأ" واسمح بالوصول إلى الكاميرا عند الطلب.
2. ارفع يدك بوضوح داخل الإطار.
3. جرّب كل إيماءة من الإيماءات الخمس المعروفة لترى مدى موثوقية اكتشاف كل منها في ظل الإضاءة الحالية لديك.
4. اضبط الإضاءة أو وضع اليد إذا شعرت بأن الاكتشاف غير متسق — الإضاءة الواضحة والمتساوية على يدك هي الأكثر فائدة.

تشغّل هذه الأداة MediaPipe Hands، وهو نموذج تتبّع يد دربته Google خصيصًا للاستخدام في الوقت الفعلي على الجهاز، بالكامل داخل متصفحك عبر WebAssembly وWebGL. لا يُرسَل شيء إلى خادم — يُنزَّل النموذج مرة واحدة، ويُعالَج كل إطار بعد ذلك محليًا.

في كل إطار، يُرجع النموذج 21 نقطة معلمية لكل يد مكتشفة: الرسغ، وثلاث مفاصل بالإضافة إلى طرف لكل إصبع من الأصابع الخمسة. تصنيف الإيماءة نفسه هندسة بسيطة مبنية على تلك النقاط، وليس مصنّف إيماءات مدرَّبًا بشكل منفصل — يُعدّ الإصبع ممدودًا عندما يكون طرفه أبعد بشكل ملحوظ عن الرسغ مقارنةً بمفصله الأوسط. خمسة أصابع ممدودة تُقرأ كراحة يد مفتوحة؛ والإبهام وحده يُقرأ كإبهام لأعلى؛ وهكذا.

تتضمّن قائمة التفاعلات في Zoom إيماءة فعلية لـرفع اليد تكتشفها عملاء سطح المكتب الحديثة تلقائيًا عند تشغيل الكاميرا — رفع راحة يد مفتوحة بالقرب من وجهك يُفعّل نفس التفاعل الذي يُفعّله النقر على الزر. لدى Teams تفاعل رفع يد مماثل، رغم أن الاكتشاف التلقائي القائم على الإيماءات ينتشر تدريجيًا عبر إصدارات العملاء أكثر مما هو عليه في Zoom.

لا يملك Discord اكتشافًا أصليًا للإيماءات، لكن إيماءات اليد لا تزال مهمة إذا كنت تستخدم OBS أو إضافة Elgato Stream Deck التي تُفعّل طبقات أو تأثيرات على الشاشة من إيماءة عبر كاميرا الويب — تعتمد تلك الإضافات تمامًا على النوع نفسه من تتبّع النقاط المعلمية النظيف والمُضاء جيدًا الذي تتحقق منه هذه الأداة.

أبقِ يدك بالكامل داخل الإطار وقريبة بشكل معقول من الكاميرا — يتدهور تتبّع النقاط المعلمية بسرعة بمجرد أن تصغر اليد عن نحو عُشر عرض الإطار. الإضاءة الخلفية هي وضع الفشل الأكثر شيوعًا: نافذة مضيئة خلفك تجعل يدك ظلًا معتمًا، ولا يستطيع النموذج بعدها تمييز مفاصل الأصابع الفردية من مخطط داكن.

معدّل الإطارات مهم أيضًا. الكاميرا التي تواجه صعوبة في الحفاظ على 30 إطارًا في الثانية، سواء بسبب قيود عرض النطاق الترددي لمنفذ USB أو مشكلات في برنامج التشغيل، تمنح نموذج التتبّع إطارات أقل لتثبيت إيماءة، وهو ما يظهر كوميض أو اكتشافات فائتة بدلاً من فشل تام.