American Sign Language Recognition Using Sensory Glove and Neural Network
تمييز لغة الاشارة الامريكية باستخدام القفاز المتحسس والشبكة العصبية
Keywords:
لغة الاشارة الامريكية، الشبكة العصبية الاصطناعية، الكينماتيكية بأتجاه الامام، الكينماتيكية باتجاه معاكس، الاصم، درجات الحرية.Abstract
a system was designed to recognize
the Human hand manual alphabet of
the American Sign Language utilizing
artificial neural network that implemented to convert the (ASL) finger spilling
alphabet into printed letters and using
matlab to implement program that converting printed letters into animated
(ASL) .the hardware system uses flex
sensors these sensors were positioned
on gloves to obtained The finger joint
angle data when represent each letter
of (ASL) and DAQ NI-6212 which was
the interface between the sensors and
the pc.DAQ produce 1000 readings
per second the average of this readings is taken and normalization process
is performed on the data and then applied to trained neural network to recognize which letter was performed by
the hand and print it on the screen. On
the other hand a matlab program was
build using forward and inverse kinematics equations of human hand this
program take normal language letters
as input and produce an animated
(ASL) letter as output. The hardware
system have been trained and tested
تم تصميم نظام لتمييز الابجدية اليدوية المستخدمه في لغة الاشارة الامريكية باستخدام الشبكة العصبيه الاصطناعية التي صممت لتحويل لغة الاشارة الامريكية الى حروف مطبوعة .وتم استخدام برنامج (MATLAB) لتصميم برنامج يقوم بتحويل الحروف الابجدية الانكليزية الى اشكال الحروف في لغة الاشارة الامريكية .في الجزء العملي والخاص بتحويل لغة الاشارة الى حروف مطبوعه تم استخدام مستشعرات المرونة التي ثبتت على قفاز يتم ارتدائه من قبل الشخص الاصم هذه المستشعرات تقوم بقياس مقدار انحناء كل جزء في الاصبع عند تمثيل كل حرف من احرف لغة الاشارة الامريكية وارسال هذه القياسات الى الحاسبة عن طريق المعالج (DAQ 6212) الذي يقوم بتسجيل 1000 قراءة في الثانية يتم اخذ متوسط هذه القرائات واجراء عملية التسوية عليها ومن ثم ادخالها على الشبكة العصبية الاصطناعية المدربة للتعرف على الحرف الذي تم تمثيله باليد التي ترتدي القفاز وتقوم بتحويله الى حرف انكليزي مطبوع .من ناحية اخرى تم بناء برنامج باستخدام ال(MATLAB) هذا البرنامج يستخدم المعادلات الكينماتيكية باتجاه الامام والمعادلات الكينماتيكية بااتجاه المعاكس المشتقة من تحليل يد الانسان ,هذا البرنامج يقوم بتحويل احرف اللغة الانكليزية المكتوبه الى اشكال الاحرف في لغة الاشارة الامريكية.
