scrapy

5गर्मी

1उत्तर

यह Scrapy ट्यूटोरियल से BaseSpider उदाहरण है: from scrapy.spider import BaseSpider from scrapy.selector import HtmlXPathSelector from dmoz.items import DmozItem class DmozSpider(BaseSpider):

9गर्मी

4उत्तर

स्केपर SgmlLinkExtractor प्रश्न

मैं SgmlLinkExtractor को काम करने की कोशिश कर रहा हूं। , मैं प्रवेश rules = (Rule(SgmlLinkExtractor(allow=("/aadler/",)), callback='parse'),) तो, प्रारंभिक यूआरएल 'http://www.whitecase.com/jacevedo/

10गर्मी

1उत्तर

स्केपर SgmlLinkExtractor अनुमत लिंक को अनदेखा कर रहा है

कृपया स्प्रैप दस्तावेज़ों में this spider example पर एक नज़र डालें। स्पष्टीकरण है: यह स्पाइडर example.com के होम पेज को क्रॉल करना शुरू कर देगा, श्रेणी लिंक एकत्र करेगा, और आइटम लिंक, बाद में parse_it

12गर्मी

4उत्तर

कई वेबसाइटों

मैं एक उपयोगकर्ता विन्यास वेब मकड़ी/क्रॉलर बनाने की जरूरत के लिए एक Scrapy मकड़ी का उपयोग करना, और मैं Scrapy उपयोग करने के बारे में सोच रहा हूँ। लेकिन, मैं डोमेन को हार्ड-कोड नहीं कर सकता और यूआरएल r

24गर्मी

2उत्तर

जावास्क्रिप्ट ऑनक्लिक के साथ एक लिंक पर क्लिक करने के लिए स्क्रैप से क्रॉलस्पीडर का उपयोग कैसे करें?

मैं scrapy पेजों को क्रॉल करना चाहते हैं जहां अगले लिंक करने के लिए चल रहा है इस तरह दिखता है: <a href="#" onclick="return gotoPage('2');"> Next </a> कि जावास्क्रिप्ट कोड की व्याख्या करने में सक्षम