معالجة المستندات
معالجة المستندات مجال بحثي ومجموعة من عمليات الإنتاج التي تهدف إلى تحويل المستندات التناظرية إلى مستندات رقمية. لا تقتصر معالجة المستندات على تصويرها أو مسحها ضوئيًا للحصول على صورة رقمية ، بل تشمل أيضًا جعلها قابلة للفهم رقميًا. يتضمن ذلك استخراج بنية المستند أو تصميمه ، ثم محتواه الذي قد يكون نصًا أو صورًا. قد تتضمن هذه العملية خوارزميات رؤية حاسوبية تقليدية ، أو شبكات عصبية التفافية، أو العمل اليدوي. ترتبط المشكلات التي تتناولها هذه المعالجة بالتجزئة الدلالية ، واكتشاف الكائنات ، والتعرف الضوئي على الأحرف (OCR) ، والتعرف على النصوص المكتوبة بخط اليد (HTR) ، وبشكل أوسع، النسخ ، سواء كان آليًا أم لا. [ 1 ] قد يشمل المصطلح أيضًا مرحلة رقمنة المستند باستخدام الماسح الضوئي، ومرحلة تفسير المستند، على سبيل المثال باستخدام معالجة اللغة الطبيعية (NLP) أو تقنيات تصنيف الصور . تُطبق هذه التقنية في العديد من المجالات الصناعية والعلمية لتحسين العمليات الإدارية، ومعالجة البريد، ورقمنة الأرشيفات التناظرية والوثائق التاريخية.
خلفية
كانت معالجة المستندات في البداية، ولا تزال إلى حد ما، نوعًا من أعمال خط الإنتاج التي تتعامل مع معالجة المستندات ، مثل الرسائل والطرود، بهدف فرز البيانات واستخراجها أو استخراجها بكميات كبيرة. ويمكن تنفيذ هذا العمل داخليًا أو من خلال الاستعانة بمصادر خارجية لإدارة العمليات التجارية . [ 2 ] [ 3 ] وقد تتضمن معالجة المستندات بالفعل نوعًا من العمل اليدوي الخارجي، مثل العمل عبر منصة Mechanical Turk .
كمثال على معالجة المستندات اليدوية، في عام 2007، [ 4 ] كانت معالجة المستندات لـ "ملايين طلبات التأشيرة والجنسية" تتعلق باستخدام "حوالي 1000 عامل متعاقد" يعملون على "إدارة غرفة البريد وإدخال البيانات ".
بينما كانت معالجة المستندات تتضمن إدخال البيانات عبر لوحة المفاتيح قبل استخدام فأرة الحاسوب أو الماسح الضوئي ، ذكرت مقالة نُشرت عام ١٩٩٠ في صحيفة نيويورك تايمز، والتي تناولت ما أسمته " المكتب اللاورقي "، أن "معالجة المستندات تبدأ بالماسح الضوئي". [ ٥ ] وفي هذا السياق، أبدى بول ستراسمان ، نائب الرئيس السابق لشركة زيروكس ، رأيًا نقديًا، قائلًا إن أجهزة الحاسوب تزيد من حجم الورق في المكاتب بدلًا من تقليله. [ ٥ ] وقيل إن وثائق الهندسة والصيانة الخاصة بالطائرة تزن "أكثر من وزن الطائرة نفسها" .
معالجة المستندات الآلية
مع تقدم أحدث التقنيات ، تحولت معالجة المستندات إلى التعامل مع "مكونات المستندات ... ككيانات قاعدة بيانات". [ 6 ]
ظهرت تقنية تُعرف باسم معالجة المستندات الآلية، أو أحيانًا معالجة المستندات الذكية (IDP)، كشكلٍ مُحدد من أشكال أتمتة العمليات الذكية (IPA)، حيث تجمع بين الذكاء الاصطناعي ، مثل التعلم الآلي (ML) ومعالجة اللغة الطبيعية (NLP) والتعرف الذكي على الأحرف (ICE)، لاستخراج البيانات من أنواعٍ مُتعددة من المستندات. [ 7 ] [ 8 ] وقد ساهمت التطورات في معالجة المستندات الآلية، والتي تُسمى أيضًا معالجة المستندات الذكية، في تحسين القدرة على معالجة البيانات غير المُهيكلة مع تقليل الأخطاء وزيادة السرعة. [ 9 ]
التطبيقات
تُطبَّق معالجة المستندات الآلية على نطاق واسع من المستندات، سواء كانت مُهيكلة أم لا. فعلى سبيل المثال، في عالم الأعمال والتمويل، تُستخدم التقنيات لمعالجة الفواتير الورقية، والنماذج، وأوامر الشراء، والعقود، وسندات الصرف. [ 10 ] وتستخدم المؤسسات المالية معالجة المستندات الذكية لمعالجة كميات كبيرة من النماذج، مثل النماذج التنظيمية أو مستندات القروض. وتستخدم تقنية الهوية الرقمية الذكاء الاصطناعي لاستخراج البيانات من المستندات وتصنيفها، ما يُغني عن إدخال البيانات يدويًا. [ 11 ]
في المجال الطبي، طُوّرت أساليب معالجة الوثائق لتسهيل متابعة المرضى وتبسيط الإجراءات الإدارية، لا سيما من خلال رقمنة تقارير التحاليل الطبية أو المختبرية. والهدف أيضاً هو توحيد قواعد البيانات الطبية. [ 12 ] كما تُستخدم الخوارزميات مباشرةً لمساعدة الأطباء في التشخيص الطبي، على سبيل المثال من خلال تحليل صور الرنين المغناطيسي ، [ 13 ] [ 14 ] أو الصور المجهرية . [ 15 ]
تُستخدم معالجة الوثائق على نطاق واسع في العلوم الإنسانية والعلوم الإنسانية الرقمية ، لاستخراج البيانات التاريخية الضخمة من الأرشيفات أو المجموعات التراثية. وقد طُوّرت مناهج محددة لمصادر متنوعة، تشمل الوثائق النصية، مثل أرشيفات الصحف، [ 16 ] وكذلك الصور، [ 17 ] أو الخرائط. [ 18 ] [ 19 ]
التقنيات
إذا كانت خوارزميات رؤية الحاسوب التقليدية قد استخدمت على نطاق واسع لحل مشاكل معالجة المستندات منذ ثمانينيات القرن الماضي، [ 20 ] [ 21 ] فقد تم استبدالها تدريجياً بتقنيات الشبكات العصبية في العقد الثاني من القرن الحادي والعشرين. [ 22 ] ومع ذلك، لا تزال تقنيات رؤية الحاسوب التقليدية مستخدمة، أحيانًا بالاقتران مع الشبكات العصبية، في بعض القطاعات.
تدعم العديد من التقنيات تطوير معالجة المستندات، ولا سيما تقنية التعرف الضوئي على الحروف (OCR) وتقنية التعرف على النصوص المكتوبة بخط اليد (HTR)، مما يسمح بنسخ النص تلقائيًا. ويتم تحديد أجزاء النص باستخدام خوارزميات الكشف عن العناصر أو الكائنات ، والتي يمكن استخدامها أحيانًا للكشف عن بنية المستند. كما تُستخدم خوارزميات التجزئة الدلالية أحيانًا لحل هذه المشكلة الأخيرة.
غالبًا ما تُشكّل هذه التقنيات جوهر معالجة المستندات. مع ذلك، قد تتدخل خوارزميات أخرى قبل هذه العمليات أو بعدها. في الواقع، تُستخدم أيضًا تقنيات رقمنة المستندات ، سواءً كانت مسحًا ضوئيًا تقليديًا أو ثلاثي الأبعاد. [ 23 ] ويمكن لرقمنة المستندات ثلاثية الأبعاد، على وجه الخصوص، الاستعانة بمشتقات التصوير المساحي . في بعض الأحيان، يجب تطوير ماسحات ضوئية ثنائية الأبعاد مُخصصة لتناسب حجم المستندات أو لأسباب تتعلق براحة المستخدم أثناء المسح. [ 17 ] كما تعتمد معالجة المستندات على ترميزها الرقمي بتنسيق ملف مناسب . علاوة على ذلك، يمكن أن تعتمد معالجة قواعد البيانات غير المتجانسة على تقنيات تصنيف الصور .
وفي الطرف الآخر من هذه السلسلة توجد خوارزميات متنوعة لإكمال الصور، أو الاستقراء، أو تنظيف البيانات. أما بالنسبة للمستندات النصية، فيمكن استخدام تقنيات معالجة اللغة الطبيعية (NLP) في عملية التفسير.
انظر أيضاً
مراجع
- ↑ لين أسبري؛ مايكل ميدلتون (2003). إدارة الوثائق والمحتوى المتكاملة: استراتيجيات لاستغلال معارف المؤسسة . مجموعة آيديا (IGI). رقم ISBN 9781591400554.
- ↑ فينود ف. سوبل (25-05-2009). الاستعانة بمصادر خارجية لعمليات الأعمال: سلسلة توريد الخبرات . دار نشر PHI Learning Pvt. Ltd. رقم ISBN 978-8120338159.
- ↑ مارك كوباياشي-هيلاري (5 ديسمبر 2005). الاستعانة بمصادر خارجية في الهند: ميزة العمل في الخارج . سبرينغر ساينس آند بيزنس ميديا. ISBN 9783540247944.
- ↑ جوليا بريستون (2 ديسمبر 2007). "مقاول الهجرة يخفض الأجور" . صحيفة نيويورك تايمز .
- 1 2 لورانس م. فيشر (7 يوليو 1990). "الورق، الذي تم اعتباره مهملاً، يحتفظ بمكان في المكتب" . صحيفة نيويورك تايمز .
- ↑ آل يونغ؛ دايل وولستين؛ جاي جونسون (فبراير 1996). "عنوان غير معروف". مجلة أوبجكت . ص 51.
- ↑ "معالجة المستندات الذكية" (ملف PDF) . قسم علوم الحاسوب - جامعة باري . 7 أبريل 2005. تاريخ الاطلاع: 8 سبتمبر 2018 .
- ↑ فلوريانا إسبوزيتو ، ستيفانو فيريلي، تيريزا إم إيه بازيل، نيكولا دي ماورو (1 أبريل 2005). "معالجة المستندات الذكية" في وقائع المؤتمر الدولي الثامن لتحليل المستندات والتعرف عليها، سيول، كوريا الجنوبية، 2005، الصفحات 1100-1104. doi : 10.1109 / ICDAR.2005.144 . S2CID 17302169 .
{{cite book}}: صيانة CS1: أسماء متعددة: قائمة المؤلفين ( رابط ) - ↑ "معالجة المستندات الذكية (IDP)" . keymarkinc.com . تم الاطلاع عليه بتاريخ 12-07-2024 .
- ↑ براءة اختراع أمريكية نشطة رقم US7873576B2 ، جون إي. جونز؛ ويليام جيه. جونز وفرانك إم. كسولتيس، "نظام معالجة المستندات المالية"، نُشرت في 18 يناير 2011، وصدرت في 18 يناير 2011
- ↑ بريدج ووتر، أدريان. "أبيان تضيف ذكاء جوجل السحابي إلى مزيج أتمتة البرمجة منخفضة الكود" . فوربس . تم الاسترجاع في 21 أبريل 2021 .
- ^ أدامو ، فرانشيسكو. أتفيسيمو، فيليبو؛ دي نيسيو، أتيليو؛ سبادافيكيا ، ماوريتسيو (فبراير 2015). "نظام معالجة المستندات آليًا لاستخراج البيانات الطبية" . القياس . 61 : 88– 99. بيب كود : 2015Meas...61...88A . دوى : 10.1016/j.measurement.2014.10.032 . تم الاسترجاع في 31 يناير 2021 .
- ↑ تشانغوان، كيم؛ سيونغ-إيل، لي؛ وون جون، تشو (سبتمبر 2020). "التقييم الحجمي للبروز في تمزقات الجذر الخلفي للغضروف الهلالي الإنسي من خلال التجزئة شبه الآلية على صور الرنين المغناطيسي ثلاثي التسلا" . جراحة العظام والرضوض: الجراحة والبحث . 101 (5): 963-968 . doi : 10.1016/j.rcot.2020.06.003 . S2CID 225215597. تم الاسترجاع في 31 يناير 2021 .
- ↑ ديسبوتوفيتش، إيفانا؛ بارت، غوسينز؛ ويلفريد، فيليبس (1 مارس 2015). "تجزئة الدماغ البشري باستخدام التصوير بالرنين المغناطيسي: التحديات والأساليب والتطبيقات" . تقنيات الذكاء الحسابي في الطب . 2015 : 963-968 . doi : 10.1155/2015/450341 . PMC 4402572. PMID 25945121 .
- ^ بوتزوا، لورينزو؛ كاوتشي، جيوفاني؛ دي روبرتوا ، سيسيليا (نوفمبر 2014). "تصنيف كريات الدم البيضاء للكشف عن سرطان الدم باستخدام تقنيات معالجة الصور" . الذكاء الاصطناعي في الطب . 63 (3): 179-191 . دوى : 10.1016/j.artmed.2014.09.002 . اتش دي ال : 11584/94592 . بميد 25241903 .
- ↑ إيرمان، مود؛ رومانييلو، ماتيو؛ كليماتيد، سيمون؛ ستروبل، فيليب؛ بارمان، رافائيل (2020). "موارد اللغة للصحف التاريخية: مجموعة إمبريسو" . وقائع المؤتمر الثاني عشر لموارد اللغة وتقييمها . مرسيليا، فرنسا. ص 958-968 .
- 1 2 سيغوين، بينوا؛ كوستينر، ليساندرا؛ دي ليناردو، إيزابيلا؛ كابلان، فريدريك (1 أبريل 2018). "تقنيات جديدة لرقمنة الأرشيفات الفوتوغرافية التاريخية الفنية - حالة مؤسسة سيني في البندقية" . البرنامج النهائي ووقائع مؤتمر الأرشفة 2018. جمعية علوم وتكنولوجيا التصوير. الصفحات 1-5 . doi : 10.2352/issn.2168-3204.2018.1.0.2 .
- ↑ آريس أوليفيرا، صوفيا؛ دي ليناردو، إيزابيلا؛ تورينك، باستيان؛ كابلان، فريدريك (11 يوليو 2019). نهج التعلم العميق للحوسبة المساحية . مؤتمر العلوم الإنسانية الرقمية. أوتريخت، هولندا.
- ↑ بيتي بيير، ريمي (يوليو 2020). الشبكات العصبية للتجزئة الدلالية لخرائط المدن التاريخية: الأداء عبر الثقافات وتأثير التنوع التصويري (رسالة ماجستير). arXiv : 2101.12478 . doi : 10.13140/RG.2.2.10973.64484 .
- ↑ فوجيساوا، هـ.؛ ناكانو، ي.؛ كورينو، ك. (يوليو 1992). "أساليب التجزئة للتعرف على الأحرف: من التجزئة إلى تحليل بنية المستند". وقائع معهد مهندسي الكهرباء والإلكترونيات . 80 (7): 1079-1092 . doi : 10.1109/5.156471 .
- ↑ تانغ، يوان ي.؛ لي، سيونغ-هوان؛ سوين، تشينغ ي. (1996). "المعالجة الآلية للمستندات: دراسة استقصائية" . التعرف على الأنماط . 29 (12): 1931-1952 . Bibcode : 1996PatRe..29.1931T . doi : 10.1016/S0031-3203(96)00044-1 . تاريخ الاسترجاع : 3 فبراير 2021 .
- ↑ آريس أوليفيرا، صوفيا؛ سيغوين، بينوا؛ كابلان، فريدريك (5-8 أغسطس 2018). dhSegment: منهج عام للتعلم العميق لتقسيم المستندات . المؤتمر الدولي السادس عشر لعام 2018 حول آفاق التعرف على الكتابة اليدوية (ICFHR). شلالات نياجرا، نيويورك، الولايات المتحدة الأمريكية: IEEE. arXiv : 1804.10371 . doi : 10.1109/ICFHR-2018.2018.00011 .
- ↑ "تقنية المسح الضوئي الثورية للفن" . Artmyn . تم الاطلاع عليه بتاريخ 3 فبراير 2021 .
- التعرف التلقائي على البيانات والتقاطها
- التنقيب التطبيقي في البيانات
- تطبيقات رؤية الحاسوب
