رؤية مجسمة حاسوبية
الرؤية المجسمة الحاسوبية هي استخلاص المعلومات ثلاثية الأبعاد من الصور الرقمية، مثل تلك التي تلتقطها كاميرا CCD . من خلال مقارنة المعلومات المتعلقة بمشهد ما من زاويتين مختلفتين، يمكن استخلاص المعلومات ثلاثية الأبعاد بفحص المواضع النسبية للأجسام في اللوحتين. وهذا يشبه عملية الرؤية المجسمة البيولوجية .
مخطط تفصيلي
في الرؤية المجسمة التقليدية، تُستخدم كاميرتان، متباعدتان أفقيًا، للحصول على رؤيتين مختلفتين للمشهد، بطريقة مشابهة للرؤية الثنائية لدى الإنسان . وبمقارنة هاتين الصورتين، يمكن الحصول على معلومات العمق النسبي على شكل خريطة تباين ، تُشفّر الفرق في الإحداثيات الأفقية لنقاط الصورة المتناظرة . وتتناسب قيم خريطة التباين هذه عكسيًا مع عمق المشهد عند موقع البكسل المقابل.
لكي يتمكن الإنسان من مقارنة الصورتين، يجب أن يتم وضعهما فوق بعضهما البعض في جهاز مجسم، حيث يتم عرض الصورة من الكاميرا اليمنى على العين اليمنى للمشاهد والصورة من الكاميرا اليسرى على العين اليسرى.
يتطلب نظام رؤية الحاسوب عدة خطوات معالجة مسبقة. [ 1 ]
- يجب أولاً تصحيح الصورة وإزالة التشوهات الناتجة عن العدسة، مثل تشوه البرميل والتشوه المماسي . وهذا يضمن تطابق الصورة المرصودة مع إسقاط كاميرا ذات ثقب مثالي .
- يجب إسقاط الصورة مرة أخرى على مستوى مشترك للسماح بمقارنة أزواج الصور، وهو ما يُعرف بتصحيح الصورة .
- يتم تقليل مقياس المعلومات الذي يقارن بين الصورتين. وهذا يعطي أفضل تقدير لموقع الميزات في الصورتين، وينشئ خريطة تباين.
- يمكن، اختيارياً، إسقاط خريطة التباين المستلمة إلى سحابة نقاط ثلاثية الأبعاد . وباستخدام معلمات الإسقاط الخاصة بالكاميرات، يمكن حساب سحابة النقاط بحيث توفر قياسات بمقياس معروف.
الرؤية المجسمة النشطة
الرؤية المجسمة النشطة هي شكل من أشكال الرؤية المجسمة التي تستخدم الضوء بشكل فعال، مثل الليزر أو الضوء المنظم، لتبسيط عملية مطابقة الصور المجسمة. أما المصطلح المقابل فهو الرؤية المجسمة السلبية.
- تستخدم تقنية الرؤية الضوئية المهيكلة التقليدية ضوءًا مهيكلًا أو ليزرًا، وتجد توافقات بين جهاز العرض والكاميرا. [ 2 ] [ 3 ]
- تستخدم الرؤية المجسمة النشطة التقليدية ضوءًا منظمًا أو ليزرًا، ومع ذلك، يتم إجراء مطابقة المجسم فقط لتطابقات الكاميرات، بنفس طريقة الرؤية المجسمة السلبية.
- تقنية التصوير المجسم بالضوء المنظم (SLS) هي تقنية هجينة تستخدم كلاً من التوافق بين الكاميرات والتوافق بين جهاز العرض والكاميرا. [ 4 ]
التطبيقات
تُستخدم شاشات العرض المجسمة ثلاثية الأبعاد على نطاق واسع في مجالات الترفيه ونقل المعلومات والأنظمة الآلية. وتُعدّ الرؤية المجسمة بالغة الأهمية في مجالات مثل الروبوتات لاستخلاص معلومات حول الموقع النسبي للأجسام ثلاثية الأبعاد في محيط الأنظمة المستقلة. ومن التطبيقات الأخرى في مجال الروبوتات التعرف على الأجسام ، [ 5 ] حيث تُمكّن معلومات العمق النظام من فصل مكونات الصورة المتداخلة، مثل كرسي أمام آخر، والتي قد لا يتمكن الروبوت من تمييزها كجسم منفصل باستخدام أي معايير أخرى.
تشمل التطبيقات العلمية للرؤية المجسمة الرقمية استخراج المعلومات من المسوحات الجوية ، لحساب خرائط الكنتور أو حتى استخراج الهندسة لرسم خرائط المباني ثلاثية الأبعاد، ورسم الخرائط التصويرية الفضائية، أو حساب المعلومات الهيليوغرافية ثلاثية الأبعاد مثل تلك التي تم الحصول عليها من خلال مشروع STEREO التابع لناسا .
تعريف مفصل

يسجل البكسل اللون في موضع معين. ويتم تحديد هذا الموضع من خلال موقعه في شبكة البكسلات (x، y) وعمقه بالنسبة للبكسل ( z).
تُتيح الرؤية المجسمة الحصول على صورتين للمشهد نفسه، من موقعين مختلفين. في الرسم التوضيحي المجاور، ينتقل الضوء من النقطة A عبر فتحات كاميرات الثقب عند B و D ، إلى شاشات العرض عند E و H.
في الرسم التوضيحي المرفق، المسافة بين مركزي عدستي الكاميرا هي BD = BC + CD . المثلثان متشابهان.
- ACB و BFE
- ACD و DGH
- k = BD BF
- z = AC هي المسافة من مستوى الكاميرا إلى الجسم.
بافتراض أن الكاميرات مستوية، وأن مستويات الصورة مسطحة على نفس المستوى، فإن الإزاحة على المحور y بين نفس البكسل في الصورتين هي:
حيث k هي المسافة بين الكاميرتين مضروبة في المسافة من العدسة إلى الصورة.
مكون العمق في الصورتين هوو، مقدمة من،
تسمح هذه الصيغ بحجب وحدات البكسل ، التي تظهر في صورة واحدة على سطح الجسم، بواسطة وحدات البكسل الأقرب التي تظهر في الصورة الأخرى، على سطح الجسم.
تصحيح الصورة
عندما لا تكون مستويات الصورة متحدة المستوى، يلزم تصحيح الصورة لضبطها كما لو كانت متحدة المستوى. ويمكن تحقيق ذلك عن طريق تحويل خطي.
قد تحتاج الصور أيضًا إلى تصحيح لجعل كل صورة مكافئة للصورة الملتقطة من كاميرا ذات ثقب صغير تسقط على مستوى مسطح.
نعومة
النعومة هي مقياس لتشابه الألوان. وبافتراض أن لكل جسم عدد قليل من الألوان، فإن البكسلات ذات الألوان المتشابهة من المرجح أن تنتمي إلى جسم واحد أكثر من انتمائها إلى عدة أجسام.
تعتمد الطريقة المذكورة أعلاه لتقييم السلاسة على نظرية المعلومات، وعلى افتراض أن لون عنصر الصورة يؤثر على لون عناصر الصورة المجاورة له وفقًا للتوزيع الطبيعي للمسافة بين النقاط. ويستند النموذج إلى افتراضات تقريبية حول العالم.
هناك طريقة أخرى تعتمد على افتراضات مسبقة حول السلاسة وهي الارتباط الذاتي.
النعومة خاصية للعالم وليست خاصية جوهرية للصورة. فالصورة المكونة من نقاط عشوائية تفتقر إلى النعومة، وبالتالي فإن الاستدلالات حول النقاط المجاورة ستكون عديمة الجدوى.
من حيث المبدأ، ينبغي تعلم خاصية النعومة، كما هو الحال مع خصائص أخرى للعالم. ويبدو أن هذا ما يفعله نظام الرؤية البشري.
قياس المعلومات
مقياس معلومات المربعات الصغرى
التوزيع الطبيعي هو
يرتبط الاحتمال بمحتوى المعلومات الموصوف بطول الرسالة L ،
لذا،
لأغراض مقارنة الصور المجسمة، لا يهم سوى طول الرسالة النسبي. وبناءً على ذلك، فإن مقياس المعلومات I ، المسمى مجموع مربعات الفروق (SSD)، هو:
أين،
نظراً لتكلفة وقت المعالجة اللازمة لتربيع الأرقام في SSD، تستخدم العديد من التطبيقات مجموع الفروق المطلقة (SAD) كأساس لحساب مقياس المعلومات. بينما تستخدم طرق أخرى الارتباط المتقاطع المعياري (NCC).
مقياس المعلومات للصور المجسمة
يمكن استخدام مقياس المربعات الصغرى لقياس محتوى المعلومات في الصور المجسمة، [ 6 ] بالنظر إلى الأعماق عند كل نقطةأولاً، يتم استخلاص المعلومات اللازمة للتعبير عن صورة ما بدلالة صورة أخرى. وهذا ما يسمى.
يجب استخدام دالة فرق اللون لقياس الفرق بين الألوان بدقة. تُكتب دالة فرق اللون كما يلي. ويُقاس مقدار المعلومات اللازمة لتسجيل تطابق الألوان بين الصورتين كما يلي:
يُفترض هنا افتراضٌ حول سلاسة الصورة. يُفترض أن احتمالية تشابه لون بكسلين تزداد كلما تقاربت وحدات البكسل التي يمثلانها. يهدف هذا المقياس إلى تفضيل تجميع الألوان المتشابهة في نفس العمق. على سبيل المثال، إذا حجب جسمٌ أمامي مساحةً من السماء خلفه، فإن مقياس السلاسة يُرجّح تجميع البكسلات الزرقاء معًا في نفس العمق.
يستخدم المقياس الكلي للنعومة المسافة بين وحدات البكسل ثلاثية الأبعاد كتقدير للانحراف المعياري المتوقع لاختلاف اللون.
إذن، يكون إجمالي محتوى المعلومات هو المجموع،
يجب اختيار قيمة المكون z لكل بكسل بحيث تعطي أقل قيمة ممكنة لمحتوى المعلومات. وهذا سيعطي أكثر الأعماق احتمالاً عند كل بكسل. الحد الأدنى لإجمالي مقياس المعلومات هو:
دوال العمق للصورتين اليسرى واليمنى هي الزوج،
أساليب التنفيذ
تُعدّ مسألة التصغير مسألةً معقدةً من فئة NP-complete ، ما يعني أن التوصل إلى حل عام لها سيستغرق وقتًا طويلًا. مع ذلك، توجد طرق حاسوبية تعتمد على الاستدلالات التقريبية تُقارب النتيجة في وقت معقول. كما توجد طرق أخرى تعتمد على الشبكات العصبية . [ 7 ] ويُعدّ التنفيذ الفعال للرؤية المجسمة مجالًا بحثيًا نشطًا.
انظر أيضاً
- إعادة بناء ثلاثية الأبعاد من صور متعددة
- الماسح الضوئي ثلاثي الأبعاد
- التصوير المجسم التلقائي
- رؤية الحاسوب
- الهندسة الإبيبولارية
- المطابقة شبه العالمية
- هيكل من الحركة
- كاميرا ستيريو
- التصوير المجسم
- الرؤية المجسمة
- عرض العمق المجسم
- ستيكسل
- موتر ثلاثي البؤرة - للتصوير المجسم ثلاثي البؤرة (باستخدام ثلاث صور بدلاً من اثنتين)
مراجع
- ↑ برادسكي، غاري؛ كاهلر، أدريان. تعلم OpenCV: رؤية الحاسوب باستخدام مكتبة OpenCV . أورايلي.
- ↑ جي، تشانغسو؛ لي، سانغ ووك؛ بارك، راي هونغ (2004). "نمط شريطي ملون عالي التباين للتصوير السريع للمدى باستخدام الضوء المهيكل". رؤية الحاسوب - المؤتمر الأوروبي لرؤية الحاسوب 2004. سلسلة محاضرات في علوم الحاسوب. المجلد 3021. الصفحات 95-107 . arXiv : 1508.04981 . doi : 10.1007/978-3-540-24670-1_8 . ISBN 978-3-540-21984-2. S2CID 13277591 .
- ↑ جي، تشانغسو؛ لي، سانغ ووك؛ بارك، راي هونغ (2012). "نمط تبديل الشرائط الملونة للتصوير السريع للمدى باستخدام الضوء المهيكل" . اتصالات البصريات . 285 (9): 2320-2331 . Bibcode : 2012OptCo.285.2320J . doi : 10.1016/j.optcom.2012.01.025 .
- ↑ جانغ، وونكوي؛ جي، تشانغسو؛ سيو، يونغدويك؛ لي، سانغ ووك (2013). "التصوير المجسم بالضوء المهيكل: تحليل مقارن وتكامل بين التصوير المجسم بالضوء المهيكل والتصوير المجسم النشط لقياس الشكل الديناميكي" . البصريات والليزر في الهندسة . 51 (11): 1255-1264 . Bibcode : 2013OptLE..51.1255J . doi : 10.1016/j.optlaseng.2013.05.001 .
- ↑ سومي، ياسوشي؛ كاواي، يوشيهيرو؛ يوشيمي، تاكاشي؛ توميتا، فومياكي (2002). "التعرف على الأجسام ثلاثية الأبعاد في البيئات المزدحمة باستخدام الرؤية المجسمة القائمة على القطاعات" . المجلة الدولية لرؤية الحاسوب . 46 (1): 5-23 . doi : 10.1023/A:1013240031067 . S2CID 22926546 .
- ^ لازاروس، نالبانتيديس. سيراكوليس، جورجيوس كريستو؛ جاستيراتوس 1، أنطونيوس (2008). "مراجعة خوارزميات الرؤية المجسمة: من البرامج إلى الأجهزة" . المجلة الدولية للبصريات . 2 (4): 435-462 . دوى : 10.1080/15599610802438680 . S2CID 18115413 .
{{cite journal}}: صيانة CS1: الأسماء الرقمية: قائمة المؤلفين ( رابط ) - ↑ وانغ، جونغ هوا؛ شياو، تشي بينغ (1999). "حول مطابقة التباين في الرؤية المجسمة عبر إطار عمل الشبكة العصبية". وقائع المجلس الوطني للعلوم، جمهورية الصين ، 23 (5): 665-678 . CiteSeerX 10.1.1.105.9067 .
روابط خارجية
- تطبيقات رؤية الحاسوب
- الهندسة في مجال رؤية الحاسوب
- رؤية
- التصوير المجسم
- التصوير المجسم
