هو مكتوب
ومفكك 100٪ في بيثون ويمكن استخدامها لاستخراج البيانات بسيط، لمراقبة الصفحة ومحركات البحث على شبكة الإنترنت، وحتى لاختبار التعليمات البرمجية.
Scrapy ليس محرك بحث في المعنى الحقيقي للكلمة، ولكنه يتصرف وكأنه واحد (بدون جزء الفهرسة). ومع ذلك Scrapy يمكن أن يكون أداة رائعة لبناء محرك البحث المنطق على.
القوة الحقيقية لهذا الإطار تعتمد في براعة جوهرها، وScrapy كونه نظام لبناء العناكب البحث عامة أو مخصصة (الزواحف) جرا.
في حين أن هذا قد يبدو معقدا جدا إلى المستخدمين غير التقنيين، مع نظرة سريعة على وثائق والبرامج التعليمية المتاحة، انها بسيطة جدا لمعرفة كيف تمكنت Scrapy لاخراج كل العمل الشاق للخروج من هذا ويقلل من العملية برمتها للتو بضعة أسطر من التعليمات البرمجية (لتسهيل، والزواحف الصغيرة)
ما هو الجديد في هذا الإصدار:.
مسار طلب نهاية الاقتباس قبل تمرير إلى FTPClient، فإنه الهرب بالفعل المسارات.
وتشمل الاختبارات / إلى مصدر التوزيع في MANIFEST.in.
ما هو الجديد في الإصدار 1.0.1:
مسار طلب نهاية الاقتباس قبل تمرير إلى FTPClient، فإنه الهرب بالفعل المسارات.
وتشمل الاختبارات / إلى مصدر التوزيع في MANIFEST.in.
ما هو الجديد في الإصدار 0.24.6:
إضافة رأس ترميز UTF8 على القوالب
وحدة التحكم التلنت يربط الآن إلى 127.0.0.1 افتراضيا
تحديث ديبيان / أوبونتو تثبيت تعليمات
تعطيل سلاسل الذكية في التقييمات كسباث lxml
استعادة الملفات ذاكرة التخزين المؤقت بناء كما الافتراضي لذاكرة التخزين المؤقت HTTP الوسيطة
فضح الزاحف الحالية في Scrapy قذيفة
تحسين testsuite مقارنة CSV والمصدرين XML
بعيدا عن الجديد / تصفيتها وخارج الموقع / احصائيات المجالات
process_links الدعم على النحو مولد في CrawlSpider
ما هو الجديد في الإصدار 0.24.5:
إضافة رأس ترميز UTF8 على القوالب
وحدة التحكم التلنت يربط الآن إلى 127.0.0.1 افتراضيا
تحديث ديبيان / أوبونتو تثبيت تعليمات
تعطيل سلاسل الذكية في التقييمات كسباث lxml
استعادة الملفات ذاكرة التخزين المؤقت بناء كما الافتراضي لذاكرة التخزين المؤقت HTTP الوسيطة
فضح الزاحف الحالية في Scrapy قذيفة
تحسين testsuite مقارنة CSV والمصدرين XML
بعيدا عن الجديد / تصفيتها وخارج الموقع / احصائيات المجالات
process_links الدعم على النحو مولد في CrawlSpider
ما هو الجديد في الإصدار 0.22.0:
إعادة تسمية scrapy.spider.BaseSpider إلى scrapy.spider.Spider
تعزيز المعلومات بدء التشغيل على الإعدادات والوسيطة إلى مستوى INFO
جزئيات الدعم في get_func_args UTIL
تسمح بتشغيل الاختبارات indiviual عبر توكس
ملحقات التحديث تجاهلها من قبل صناع صلة
محددات تسجيل النطاقات EXSLT افتراضيا
توحيد رافعات البند مشابهة لمحددات إعادة تسمية
جعل الطبقة RFPDupeFilter subclassable بسهولة
تحسين التغطية اختبار والقادم دعم بيثون 3
ما هو الجديد في الإصدار 0.20.1: مطلوب
include_package_data لبناء عجلات من مصادر منشورة.
ما هو الجديد في الإصدار 0.18.4:
الثابتة AlreadyCalledError استبدال الطلب في قيادة قذيفة.
start_requests الثابتة lazyness وتوقف في وقت مبكر.
ما هو الجديد في الإصدار 0.18.1:
إزالة استيراد إضافية أضيفت من قبل الكرز التقطت التغييرات.
الثابتة الزحف الاختبارات تحت الملتوية قبل 11.0.0.
py26 لا يمكن تنسيق حقول طول صفري {}.
أخطاء اختبار PotentiaDataLoss على استجابات غير منضم.
علاج الردود دون بطول المحتوى أو تحويل ترميز كما استجابات جيدة.
هل لا تشمل ResponseFailed إذا http11 لم يتم تمكين معالج.
المتطلبات:
بيثون 2.7 أو أعلى
الملتوية 2.5.0 أو أعلى
libxml2 2.6.28 أو أعلى
pyOpenSSL
لم يتم العثور على التعليقات