Wget

صُمم برنامج Wget ليكون فعالاً حتى مع اتصالات الشبكة البطيئة أو غير المستقرة. فإذا لم يكتمل التنزيل بسبب مشكلة في الشبكة ، سيحاول Wget تلقائيًا استئناف التنزيل من حيث توقف، ويكرر هذه العملية حتى يتم تنزيل الملف بالكامل. وكان من أوائل برامج التنزيل التي استخدمت Rangeرأس HTTP الجديد آنذاك لدعم هذه الميزة.

يمكن لبرنامج Wget، عند الحاجة، العمل كبرنامج زحف ويب، وذلك باستخراج الموارد المرتبطة بصفحات HTML وتنزيلها بالتسلسل، مع تكرار العملية بشكل متكرر حتى يتم تنزيل جميع الصفحات أو الوصول إلى أقصى عمق تكرار يحدده المستخدم. تُحفظ الصفحات التي تم تنزيلها في بنية دليل مشابهة لتلك الموجودة على الخادم البعيد. يُمكّن هذا "التنزيل المتكرر" من نسخ مواقع الويب جزئيًا أو كليًا عبر بروتوكول HTTP. يمكن تعديل الروابط في صفحات HTML التي تم تنزيلها لتشير إلى المواد التي تم تنزيلها محليًا لعرضها دون اتصال بالإنترنت . عند إجراء هذا النوع من النسخ التلقائي لمواقع الويب، يدعم Wget معيار استبعاد الروبوتات (ما لم يتم استخدام الخيار ).-e robots=off

يدعم التنزيل المتكرر بروتوكول نقل الملفات (FTP) أيضًا، حيث يُصدر برنامج Wget LISTالأمر لتحديد الملفات الإضافية المراد تنزيلها، ويكرر هذه العملية للمجلدات والملفات الموجودة ضمن المجلد المحدد في عنوان URL الرئيسي . ويدعم البرنامج استخدام الأحرف البديلة (البدل ) عند طلب تنزيل عناوين URL الخاصة ببروتوكول نقل الملفات (FTP).

عند التنزيل المتكرر عبر بروتوكول HTTP أو FTP ، يمكن توجيه Wget لفحص الطوابع الزمنية للملفات المحلية والبعيدة، وتنزيل الملفات البعيدة الأحدث من الملفات المحلية المقابلة لها فقط. يتيح هذا نسخ مواقع HTTP و FTP بسهولة ، ولكنه يُعتبر غير فعال وأكثر عرضة للأخطاء مقارنةً بالبرامج المصممة خصيصًا للنسخ، مثل rsync . من ناحية أخرى، لا يتطلب Wget برامج خادم خاصة لهذه المهمة.

برنامج Wget غير تفاعلي، بمعنى أنه بمجرد تشغيله، لا يتطلب أي تدخل من المستخدم ولا يحتاج إلى التحكم في طرفية (TTY) ، إذ يسجل تقدمه في ملف منفصل لمراجعته لاحقًا. يمكن للمستخدمين تشغيل Wget وتسجيل الخروج منه ، تاركين البرنامج يعمل دون مراقبة. على النقيض من ذلك، تتطلب معظم متصفحات الويب ذات واجهة المستخدم الرسومية أو النصية من المستخدم البقاء مسجلاً الدخول وإعادة تشغيل التنزيلات الفاشلة يدويًا، مما قد يشكل عائقًا كبيرًا عند نقل كميات كبيرة من البيانات.

كُتب برنامج Wget بلغة C بأسلوب قابل للنقل بسهولة، ويعتمد بشكل كبير على مكتبات خارجية، ولا يتطلب سوى مُصرّف C وواجهة شبيهة بواجهة BSD لشبكات TCP/IP . صُمم البرنامج في الأصل كبرنامج Unix يُستدعى من سطر أوامر Unix ، وقد نُقل إلى العديد من بيئات وأنظمة Unix، بما في ذلك Microsoft Windows عبر Cygwin و macOS . كما يتوفر أيضًا كبرنامج أصلي لنظام Microsoft Windows ضمن حزم GnuWin .

• يدعم Wget التنزيل عبر الخوادم الوكيلة ، والتي يتم نشرها على نطاق واسع لتوفير الوصول إلى الويب داخل جدران الحماية الخاصة بالشركات ولتخزين المحتوى الذي يتم الوصول إليه بشكل متكرر وتسليمه بسرعة.
• يستخدم هذا النظام اتصالات HTTP الدائمة حيثما كانت متاحة.
• يدعم بروتوكول IPv6 الأنظمة التي تتضمن الواجهات المناسبة.
• يتم دعم بروتوكول SSL/TLS للتنزيلات المشفرة باستخدام مكتبة OpenSSL أو GnuTLS .
• يتم دعم الملفات التي يزيد حجمها عن 2 جيجابايت على أنظمة 32 بت التي تتضمن الواجهات المناسبة.
• قد يتم تقليل سرعة التنزيل لتجنب استهلاك كل النطاق الترددي المتاح .
• يمكن حفظ مخرجاته بتنسيق WARC القياسي لأرشفة الويب ، مع إزالة التكرارات من ملف CDX المرتبط حسب الحاجة. ^{[ 3 ]}

يُوزَّع برنامج GNU Wget بموجب شروط رخصة جنو العمومية العامة ، الإصدار 3 أو أحدث، مع استثناء خاص يسمح بتوزيع الملفات الثنائية المرتبطة بمكتبة OpenSSL . فيما يلي نص الاستثناء: ^{[ 2 ]}

إذن إضافي بموجب رخصة جنو العمومية العامة الإصدار 3 القسم 7

إذا قمت بتعديل هذا البرنامج، أو أي عمل مشمول، عن طريق ربطه أو دمجه مع مكتبة OpenSSL التابعة لمشروع OpenSSL (أو نسخة معدلة منها)، والتي تحتوي على أجزاء مشمولة بشروط تراخيص OpenSSL أو SSLeay، فإن مؤسسة البرمجيات الحرة تمنحك إذنًا إضافيًا لنقل العمل الناتج. يجب أن يتضمن المصدر المقابل لشكل غير مصدري من هذا الدمج شفرة المصدر لأجزاء OpenSSL المستخدمة، بالإضافة إلى شفرة المصدر للعمل المشمول.

من المتوقع إزالة بند الاستثناء بمجرد تعديل Wget ليرتبط أيضًا بمكتبة GnuTLS .

تُوزَّع وثائق Wget ، على شكل دليل مرجعي لـ Texinfo ، بموجب شروط رخصة جنو للوثائق الحرة ، الإصدار 1.2 أو أحدث. أما صفحة الدليل (man page) التي تُوزَّع عادةً على أنظمة يونكس، فتُنشأ تلقائيًا من جزء من دليل Texinfo وتخضع لشروط الرخصة نفسها.

الطريقة المُفضلة للمساهمة في كود Wget وتوثيقه هي عبر تحديثات المصدر على شكل تصحيحات نصية تُنشئها أداة diff . تُرسل التصحيحات المُراد إدراجها في Wget إلى القائمة البريدية ^{[ 7 ]} حيث يراجعها القائمون على الصيانة. تُثبّت التصحيحات التي تجتاز تدقيق القائمين على الصيانة في المصادر. تتوفر تعليمات إنشاء التصحيحات، بالإضافة إلى إرشادات الأسلوب، على ويكي المشروع. ^{[ 8 ]}

يمكن أيضًا تتبع شفرة المصدر عبر مستودع تحكم إصدارات عن بُعد ، يستضيف سجل المراجعات بدءًا من الإصدار 1.5.3. يعمل المستودع حاليًا بنظام Git . ^{[ 9 ]} قبل ذلك، كانت شفرة المصدر مُستضافة على (بالترتيب العكسي): Bazaar ، ^{[ 10 ]} Mercurial ، Subversion ، وعبر CVS .

تمثل الإصدارات التالية محطات بارزة في تطوير برنامج Wget. تم اختصار الميزات المذكورة بجانب كل إصدار، ولا تُشكل معلومات شاملة عنه، والتي تتوفر في ملف NEWS الموزع مع برنامج Wget. ^{[ 4 ]}

• كان برنامج Geturl 1.0، الذي صدر في يناير 1996، أول إصدار متاح للجمهور. ويمكن تتبع أول إعلان باللغة الإنجليزية إلى منشور إخباري على يوزنت، والذي يُرجح أنه يشير إلى Geturl 1.3.4 الذي صدر في يونيو. ^{[ 11 ]}
• كان الإصدار Wget 1.4.0، الذي صدر في نوفمبر 1996، أول إصدار يستخدم اسم Wget . وكان أيضًا أول إصدار يتم توزيعه بموجب شروط رخصة جنو العمومية العامة (GPL) ، بينما تم توزيع برنامج Geturl بموجب ترخيص مخصص بدون ضمان .
• كان Wget 1.4.3، الذي صدر في فبراير 1997، هو الإصدار الأول الذي تم إصداره كجزء من مشروع GNU مع حقوق الطبع والنشر المخصصة لمؤسسة البرمجيات الحرة (FSF) .
• شكّل إصدار Wget 1.5.3، الذي صدر في سبتمبر 1998، علامة فارقة في انتشار البرنامج. وقد تم تضمين هذا الإصدار مع العديد من توزيعات لينكس ، مما ساهم في تعريف جمهور أوسع بكثير بالبرنامج.
• تم تضمين Wget 1.6، الذي صدر في ديسمبر 1999، العديد من إصلاحات الأخطاء للإصدار 1.5.3 (الذي أصبح قديمًا آنذاك)، ويعود الفضل في ذلك إلى حد كبير إلى جهود دان هاركليس.
• قدم الإصدار 1.7 من برنامج Wget، الذي صدر في يونيو 2001، دعم SSL وملفات تعريف الارتباط والاتصالات الدائمة .
• أضافت النسخة 1.8 من برنامج Wget، التي صدرت في ديسمبر 2001، ميزة تقييد عرض النطاق الترددي ، ومؤشرات التقدم الجديدة، واجتياز الرسم البياني للارتباط التشعبي بالعرض أولاً .
• تضمنت النسخة 1.9 من برنامج Wget، التي صدرت في أكتوبر 2003، دعمًا تجريبيًا لبروتوكول IPv6 ، والقدرة على إرسال البيانات إلى خوادم HTTP باستخدام POST.
• أضاف الإصدار 1.10 من برنامج Wget، الذي صدر في يونيو 2005، دعمًا للملفات الكبيرة ، ودعمًا لبروتوكول IPv6 على الأنظمة ثنائية العائلة، ومصادقة NTLM ، وتحسينات على بروتوكول SSL . وتولى ماورو تورتونيسي مسؤولية صيانة البرنامج.
• انتقل برنامج Wget 1.11، الذي صدر في يناير 2008، إلى الإصدار الثالث من رخصة جنو العمومية العامة ، وأضاف دعمًا أوليًا لرأس Content-Dispositionالملف، الذي غالبًا ما تستخدمه برامج CGI النصية للإشارة إلى اسم الملف المراد تنزيله. كما أُجريت تحسينات أمنية على رمز مصادقة HTTP. وتولى ميكا كوان مسؤولية صيانة المشروع.
• أضافت النسخة 1.12 من برنامج Wget، التي صدرت في سبتمبر 2009، دعمًا لتحليل عناوين URL من محتوى CSS على الويب، وللتعامل مع معرفات الموارد الدولية .
• يدعم الإصدار 1.13 من برنامج Wget، الذي صدر في أغسطس 2011، بروتوكول HTTP/1.1، وقد عالج بعض مشكلات قابلية النقل، واستخدم مكتبة GnuTLS افتراضيًا للاتصالات الآمنة. ^{[ 12 ]}
• قام الإصدار Wget 1.14، الذي صدر في أغسطس 2012، بتحسين دعم TLS وإضافة دعم لمصادقة الوصول إلى ملخص RFC 2617 . 
• أضافت النسخة 1.15 من برنامج Wget، التي صدرت في يناير 2014، --https-onlyدعمًا Perfect-Forwardللسرية.
• قام Wget 1.16، الذي تم إصداره في أكتوبر 2014، بتغيير إخراج شريط التقدم الافتراضي، وإغلاق CVE - 2014-4877 ، وإضافة دعم لـ libpsl للتحقق من نطاقات ملفات تعريف الارتباط، وتقديم --start-pos للسماح ببدء التنزيلات من موضع محدد.
• قام برنامج Wget 1.17، الذي تم إصداره في نوفمبر 2015، بإزالة خاصية التبديل السلبي إلى النشط في بروتوكول نقل الملفات (FTP) بسبب مخاوف تتعلق بالخصوصية، وأضاف دعمًا لبروتوكول FTPS و --if-modified-since.
• قام الإصدار Wget 1.18، الذي صدر في يونيو 2016، بحل مشكلة CVE - 2016-4971 ، وأضاف الخيارات و .--bind-dns-address--dns-servers
• أضاف الإصدار 1.19 من Wget، الذي صدر في فبراير 2017، خيارات جديدة لمعالجة ملف Metalink؛ وأضاف الإصدار 1.19.1 خيار --retry-on-http-errorإعادة محاولة التنزيل إذا استجاب خادم الويب برمز حالة HTTP معين.
• تمت إضافة Wget 1.20، الذي تم إصداره في نوفمبر 2018، --retry-on-host-errorلمزيد من الموثوقية --accept-regexوخيارات --reject-regexلعمليات استرجاع FTP المتكررة.

GWget هو برنامج مجاني بواجهة مستخدم رسومية لبرنامج Wget. تم تطويره بواسطة ديفيد سيدينو فرنانديز بالاعتماد على حزمة برامج جنوم . يدعم GWget جميع الميزات الرئيسية التي يوفرها Wget، بالإضافة إلى التنزيلات المتوازية. ^{[ 16 ]}

كليجيت هو برنامج تنزيل إضافات مفتوح المصدر لمتصفح فايرفوكس ، يستخدم مكتبات Curl وWget وAria2. وقد طوّره زيد عبد الله. ^{[ 17 ] [ 18 ] [ 19 ]}