نموذج الكتل العشوائي
يُعدّ نموذج الكتلة العشوائية نموذجًا توليديًا للرسوم البيانية العشوائية . يميل هذا النموذج إلى إنتاج رسوم بيانية تحتوي على مجتمعات ، وهي مجموعات فرعية من العقد تتميز بارتباطها ببعضها البعض بكثافات حواف محددة. على سبيل المثال، قد تكون الحواف أكثر شيوعًا داخل المجتمعات منها بين المجتمعات. طُرحت صياغته الرياضية لأول مرة عام 1983 في مجال تحليل الشبكات الاجتماعية بواسطة بول دبليو هولاند وآخرون [ 1 ] . يُعدّ نموذج الكتلة العشوائية مهمًا في الإحصاء ، والتعلم الآلي ، وعلم الشبكات ، حيث يُستخدم كمعيار مفيد لاستعادة بنية المجتمع في بيانات الرسوم البيانية.
تعريف
يأخذ نموذج الكتلة العشوائية المعلمات التالية:
- الرقممن الرؤوس؛
- تقسيم مجموعة الرؤوسإلى مجموعات فرعية منفصلة، والتي تسمى المجتمعات ؛
- متناظرمصفوفةمن احتمالات الحواف.
ثم يتم اختيار مجموعة الحواف عشوائياً على النحو التالي: أي رأسينويتم ربطها بواسطة حافة باحتماليةمثال على ذلك: إذا كان لدينا رسم بياني مع تستعيد الرؤوس، حيث يتم أخذ عينات من الحواف كما هو موضح، المجموعات .
حالات خاصة

إذا كانت مصفوفة الاحتمالات ثابتة، بمعنى أنللجميع، فالنتيجة هي نموذج إردوس-رينيهذه الحالة متدهورة - يصبح التقسيم إلى مجتمعات غير ذي صلة - لكنها توضح علاقة وثيقة بنموذج إردوش-ريني.
يُعد نموذج التقسيم المزروع حالة خاصة تكون فيها قيم مصفوفة الاحتمالثابتةعلى القطر وثابت آخرخارج القطر. وبالتالي، يشترك رأسان داخل نفس المجموعة في حافة باحتماليةبينما يشترك رأسان في مجتمعين مختلفين في حافة باحتماليةأحيانًا يُطلق على هذا النموذج المقيد اسم نموذج الكتلة العشوائية. الحالة التييُطلق عليه نموذج التجميع ، بينما الحالةيُطلق عليه اسم "غير متجانس ".
بالعودة إلى نموذج الكتلة العشوائية العام، يُطلق على النموذج اسم النموذج التجميعي القوي إذاحينماجميع العناصر القطرية تهيمن على جميع العناصر غير القطرية. يُطلق على النموذج اسم "ضعيف التجميع" إذا كانحينما[ 2 ] يُشترط في كل عنصر قطري أن يُهيمن فقط على باقي عناصر صفه وعموده. [ 2] توجد أشكال غير متجانسة لهذا المصطلح، وذلك بعكس جميع المتباينات. بالنسبة لبعض الخوارزميات، قد يكون الاسترداد أسهل بالنسبة لنماذج الكتل ذات الشروط المتجانسة أو غير المتجانسة من هذا الشكل. [ 2 ]
المهام الإحصائية النموذجية
تتناول معظم الأدبيات المتعلقة بالكشف الخوارزمي عن المجتمعات ثلاث مهام إحصائية: الكشف، والاسترداد الجزئي، والاسترداد الدقيق.
كشف
يهدف خوارزميات الكشف ببساطة إلى تحديد ما إذا كان الرسم البياني المأخوذ عينة منه يحتوي على بنية مجتمعية كامنة. وبشكل أدق، يمكن توليد الرسم البياني، باحتمالية مسبقة معروفة، من نموذج كتل عشوائي معروف، أو من نموذج إردوس-ريني مشابه . وتتمثل مهمة الخوارزمية في تحديد أي من هذين النموذجين الأساسيين قد ولّد الرسم البياني بشكل صحيح. [ 3 ]
تعافي جزئي
في عملية الاستعادة الجزئية، يتمثل الهدف في تحديد التقسيم الكامن إلى المجتمعات بشكل تقريبي، بمعنى إيجاد تقسيم يرتبط بالتقسيم الحقيقي بشكل أفضل بكثير من التخمين العشوائي. [ 4 ]
التعافي التام
في عملية الاستعادة الدقيقة، يتمثل الهدف في استعادة التقسيم الكامن إلى مجموعات بدقة. قد تكون أحجام المجموعات ومصفوفة الاحتمالات معروفة [ 5 ] أو غير معروفة [ 6 ] .
الحدود الدنيا الإحصائية وسلوك العتبة
تُظهر نماذج الكتل العشوائية تأثير عتبة حادًا يُذكّر بعتبات الترشيح . [ 7 ] [ 3 ] [ 8 ] لنفترض أننا نسمح بالحجمينمو الرسم البياني مع الحفاظ على أحجام المجتمعات بنسب ثابتة. إذا ظلت مصفوفة الاحتمالات ثابتة، تصبح مهام مثل الاسترداد الجزئي والكامل ممكنة لجميع إعدادات المعلمات غير المنحلة. ومع ذلك، إذا قمنا بتقليص مصفوفة الاحتمالات بمعدل مناسب كمامع زيادة القيم، نلاحظ انتقالًا حادًا في الطور: بالنسبة لبعض إعدادات المعلمات، سيصبح من الممكن تحقيق التعافي باحتمالية تقترب من 1، بينما على الجانب الآخر من عتبة المعلمة، فإن احتمالية التعافي تقترب من 0 بغض النظر عن الخوارزمية المستخدمة.
لتحقيق التعافي الجزئي، فإن المقياس المناسب هو اتخاذللثابتمما ينتج عنه رسوم بيانية ذات درجة متوسطة ثابتة. في حالة وجود مجموعتين متساويتين في الحجم، في نموذج التقسيم المزروع المتجانس مع مصفوفة الاحتمالية التعافي الجزئي ممكن [ 4 ] باحتماليةحينما، في حين أن أي مقدر يفشل [ 3 ] في الاستعادة الجزئية باحتماليةحينما.
للحصول على تعافي دقيق، يجب اتخاذ المقياس المناسبمما ينتج عنه رسوم بيانية ذات درجة متوسطة لوغاريتمية. يوجد هنا عتبة مماثلة: لنموذج التقسيم المزروع التجميعي معفي المجتمعات متساوية الحجم، تقع العتبة عندفي الواقع، إن عتبة التعافي الدقيقة معروفة لنموذج الكتلة العشوائية العام بالكامل. [ 5 ]
الخوارزميات
من حيث المبدأ، يمكن حل مسألة الاستعادة الدقيقة ضمن نطاقها الممكن باستخدام طريقة الاحتمال الأقصى ، لكن هذا يُعادل حل مسألة قطع مقيدة أو منتظمة، مثل مسألة التنصيف الأدنى، وهي عادةً مسألة NP-كاملة . لذا، لا توجد خوارزميات فعالة معروفة قادرة على حساب تقدير الاحتمال الأقصى بشكل صحيح في أسوأ الحالات.
مع ذلك، تُحقق مجموعة واسعة من الخوارزميات أداءً جيدًا في الحالة المتوسطة، وقد ثبتت العديد من ضمانات الأداء عالية الاحتمالية للخوارزميات في كلٍ من حالات الاستعادة الجزئية والكاملة. تشمل الخوارزميات الناجحة التجميع الطيفي للرؤوس، [ 9 ] [ 4 ] [ 5 ] [ 10 ] والبرمجة شبه المحددة ، [ 2 ] [ 8 ] وأشكال نشر المعتقدات ، [ 7 ] [ 11 ] واكتشاف المجتمعات، [ 12 ] وغيرها.
المتغيرات
توجد عدة صيغ مختلفة لهذا النموذج. إحدى التعديلات الطفيفة تُخصّص الرؤوس للمجتمعات عشوائيًا، وفقًا لتوزيع فئوي ، بدلًا من تقسيم ثابت. [ 5 ] تشمل الصيغ الأكثر أهمية نموذج الكتلة العشوائية المصحح بالدرجة، [ 13 ] ونموذج الكتلة العشوائية الهرمي، [ 14 ] ونموذج الكتلة الهندسية، [ 15 ] ونموذج الكتلة الخاضعة للرقابة، ونموذج الكتلة ذي العضوية المختلطة. [ 16 ]
نماذج المواضيع
يُعتبر نموذج الكتلة العشوائية نموذجًا موضوعيًا في الشبكات ثنائية الأجزاء. [ 17 ] في شبكة من المستندات والكلمات، يستطيع نموذج الكتلة العشوائية تحديد المواضيع: وهي مجموعات من الكلمات ذات المعنى المتشابه.
امتدادات للرسوم البيانية الموقعة
تسمح الرسوم البيانية الموقعة بوجود علاقات إيجابية وسلبية على حد سواء، وتُعدّ نموذجًا شائعًا للعديد من تطبيقات تحليل البيانات، مثل تجميع الارتباطات. ويمكن توسيع نموذج الكتلة العشوائية بسهولة ليشمل الرسوم البيانية الموقعة عن طريق تعيين أوزان موجبة وسالبة للحواف، أو بشكل مكافئ باستخدام الفرق بين مصفوفات التجاور لنموذجين من نماذج الكتلة العشوائية. [ 18 ]
تحدي داربا/معهد ماساتشوستس للتكنولوجيا/أمازون ويب سيرفيس للرسوم البيانية: تقسيم الكتل العشوائي المتدفق
تشجع مبادرة GraphChallenge [ 19 ] على اتباع نهج مجتمعي لتطوير حلول جديدة لتحليل الرسوم البيانية والبيانات المتفرقة المستمدة من وسائل التواصل الاجتماعي، وبيانات أجهزة الاستشعار، والبيانات العلمية، وذلك لتمكين اكتشاف العلاقات بين الأحداث أثناء تطورها ميدانيًا. ويُعدّ تقسيم الكتل العشوائي المتدفق أحد التحديات المطروحة منذ عام 2017. [ 20 ] وقد أظهر التجميع الطيفي أداءً متميزًا مقارنةً بالخوارزمية الأساسية الأصلية، بل وحتى المحسّنة [ 21 ] ، إذ يُضاهي جودة مجموعاتها مع كونه أسرع منها بعدة مراتب. [ 22 ] [ 23 ]
انظر أيضاً
- نمذجة الكتل
- خوارزمية جيرفان-نيومان – خوارزمية الكشف عن المجتمعات
- معيار لانشينيتي-فورتوناتو-راديتشي – صفحات الخوارزمية التي تعرض أوصافًا مختصرة بدون مسافات لإنشاء شبكات معيارية مع مجتمعات
مراجع
- ↑ هولاند، بول دبليو؛ لاسكي، كاثرين بلاكموند؛ لينهارت، صموئيل (1983). "نماذج الكتل العشوائية: الخطوات الأولى". الشبكات الاجتماعية . 5 (2): 109-137 . doi : 10.1016/0378-8733(83)90021-7 . ISSN 0378-8733 . S2CID 34098453 .
- 1 2 3 أميني، أراش أ.؛ ليفينا، إليزافيتا (يونيو 2014). "حول الاسترخاءات شبه المحددة لنموذج الكتلة". arXiv : 1406.5647 [ cs.LG ].
- 1 2 3 موسيل، إلشانان؛ نعمان، جو؛ سلاي، آلان (فبراير 2012). "نماذج الكتل العشوائية وإعادة البناء". arXiv : 1202.1499 [ math.PR ].
- 1 2 3 ماسولي، لوران (نوفمبر 2013). "عتبات الكشف عن المجتمعات وخاصية رامانوجان الضعيفة". arXiv : 1311.3085 [ cs.SI ].
- 1 2 3 4 آبي، إيمانويل؛ ساندون، كولين (مارس 2015). "الكشف عن المجتمعات في نماذج الكتل العشوائية العامة: الحدود الأساسية وخوارزميات الاستعادة الفعالة". arXiv : 1503.00609 [ math.PR ].
- ↑ آبي، إيمانويل؛ ساندون، كولين (يونيو 2015). "استعادة المجتمعات في نموذج الكتلة العشوائية العامة دون معرفة المعلمات". arXiv : 1506.03729 [ math.PR ].
- 1 2 ديسيل، أوريليان؛ كرزاكالا، فلورنت؛ مور، كريستوفر؛ زديبوروفا، لينكا (سبتمبر 2011). "التحليل التقاربي لنموذج الكتلة العشوائي للشبكات المعيارية وتطبيقاته الخوارزمية". مجلة Physical Review E. 84 ( 6) 066106. arXiv : 1109.3041 . Bibcode : 2011PhRvE..84f6106D . doi : 10.1103/PhysRevE.84.066106 . PMID 22304154. S2CID 15788070 .
- 1 2 آبي، إيمانويل؛ بانديرا، أفونسو س.؛ هول، جورجينا (مايو 2014). "الاستعادة الدقيقة في نموذج الكتلة العشوائية". arXiv : 1405.3267 [ cs.SI ].
- ↑ كرزاكالا، فلورنت؛ مور، كريستوفر؛ موسيل، إلشانان؛ نيمان، جو؛ سلاي، آلان؛ لينكا، لينكا؛ تشانغ، بان (أكتوبر 2013). "الخلاص الطيفي في تجميع الشبكات المتفرقة" . وقائع الأكاديمية الوطنية للعلوم . 110 (52): 20935-20940 . arXiv : 1306.5550 . Bibcode : 2013PNAS..11020935K . doi : 10.1073 / pnas.1312486110 . PMC 3876200. PMID 24277835 .
- ↑ لي، جينغ؛ رينالدو، أليساندرو (فبراير 2015). "اتساق التجميع الطيفي في نماذج الكتل العشوائية". حوليات الإحصاء . 43 (1): 215-237 . arXiv : 1312.2050 . doi : 10.1214/14-AOS1274 . ISSN 0090-5364 . S2CID 88519551 .
- ↑ موسيل، إلشانان؛ نيمان، جو؛ سلاي، آلان (سبتمبر 2013). "نشر المعتقدات، وإعادة البناء القوية، والاستعادة المثلى لنماذج الكتل". حوليات الاحتمالات التطبيقية . 26 (4): 2211-2256 . arXiv : 1309.1380 . Bibcode : 2013arXiv1309.1380M . doi : 10.1214/15-AAP1145 . S2CID 184446 .
- ↑ فتحي، رضا (أبريل 2019). "الكشف الفعال عن المجتمعات الموزعة في نموذج الكتلة العشوائية". arXiv : 1904.07494 [ cs.DC ].
- ↑ كارير، برايان؛ نيومان، مارك إي جيه (2011). "نماذج الكتل العشوائية وبنية المجتمع في الشبكات" . مجلة Physical Review E. 83 ( 1) 016107. arXiv : 1008.3926 . Bibcode : 2011PhRvE..83a6107K . doi : 10.1103/PhysRevE.83.016107 . PMID 21405744. S2CID 9068097. مؤرشف من الأصل في 2023-02-04 . تم الاسترجاع في 2021-06-16 .
- ↑ بيكسوتو، تياجو (2014). "الهياكل الكتلية الهرمية واختيار النموذج عالي الدقة في الشبكات الكبيرة" . مجلة Physical Review X. 4 ( 1) 011047. arXiv : 1310.4377 . Bibcode : 2014PhRvX...4a1047P . doi : 10.1103/PhysRevX.4.011047 . S2CID 5841379. مؤرشف من الأصل بتاريخ 24-06-2021 . تم الاطلاع عليه بتاريخ 16-06-2021 .
- ^ جالهوترا، سينيام؛ مازومدار، آريا؛ بال، سوميابراتا؛ ساها ، بارنا (فبراير 2018). “نموذج الكتلة الهندسية”. AAAI . 32 . أرخايف : 1709.05510 . دوى : 10.1609/aaai.v32i1.11905 . S2CID 19152144 .
- ↑ أيرولدي، إدواردو ؛ بلي، ديفيد؛ فاينبرغ، ستيفن؛ شينغ، إريك (مايو 2007). "نماذج الكتل العشوائية ذات العضوية المختلطة" . مجلة أبحاث تعلم الآلة . 9 : 1981-2014 . arXiv : 0705.4485 . Bibcode : 2007arXiv0705.4485A . PMC 3119541. PMID 21701698 .
- ↑ مارتن جيرلاش؛ تياجو بيكسوتو؛ إدواردو ألتمان (2018). "نهج شبكي لنماذج المواضيع" . مجلة ساينس أدفانسز . 4 (7) eaaq1360. arXiv : 1708.01677 . Bibcode : 2018SciA....4.1360G . doi : 10.1126 / sciadv.aaq1360 . PMC 6051742. PMID 30035215 .
- ↑ أليسون فوكس؛ جيفري ساندرز؛ أندرو كنيازيف (2018). "دراسة التجميع الطيفي لتمثيلات مصفوفة الرسم البياني الموقّع". مؤتمر IEEE للحوسبة المتطرفة عالية الأداء (HPEC) لعام 2018. الصفحات 1-7 . doi : 10.1109/HPEC.2018.8547575 . ISBN 978-1-5386-5989-2. اوستي 1476177 . S2CID 54443034 .
- ↑مؤرشف بتاريخ 4 فبراير 2023 في أرشيف الإنترنت (Wayback Machine ) - تحدي الرسم البياني المشترك بين داربا/معهد ماساتشوستس للتكنولوجيا/أمازون ويب سيرفيسز
- ↑مؤرشف بتاريخ 4 فبراير 2023 في أرشيف الإنترنت (Wayback Machine ) - أبطال تحدي الرسم البياني المشترك بين داربا/معهد ماساتشوستس للتكنولوجيا/أمازون ويب سيرفيسز
- ↑ أ. ج. أوبال؛ ج. تشوي؛ ت. ب. رولينجر؛ هـ. هاوي هوانغ (2021). "تقسيم كتل عشوائي أسرع باستخدام دمج أولي مكثف، وتمثيل مضغوط، والتحكم في التوازي". مؤتمر IEEE للحوسبة المتطرفة عالية الأداء (HPEC) لعام 2021. الصفحات 1-7 . doi : 10.1109/HPEC49654.2021.9622836 . ISBN 978-1-6654-2369-4. S2CID 244780210 .
- ↑ ديفيد جوزوناشفيلي؛ أندرو كنيازيف (2017). "التجميع الطيفي المُهيأ مسبقًا لتحدي الرسم البياني المتدفق بتقسيم الكتل العشوائي (نسخة أولية على arXiv)". مؤتمر IEEE للحوسبة عالية الأداء والمتطرفة (HPEC) لعام 2017. الصفحات 1-6 . arXiv : 1708.07481 . doi : 10.1109/HPEC.2017.8091045 . ISBN 978-1-5386-3472-1. S2CID 19781504 .
- ↑ ليزا دوربيك؛ بيتر أثاناس (2020). "تقسيم الرسم البياني المتدفق التزايدي". مؤتمر IEEE للحوسبة عالية الأداء والمتطرفة (HPEC) لعام 2020. الصفحات 1-8 . doi : 10.1109/HPEC43674.2020.9286181 . ISBN 978-1-7281-9219-2. S2CID 229376193 .
- الرسوم البيانية العشوائية
- الشبكات
- نمذجة الكتل
