Articles of स्क्रीन स्क्रैपिंग

JQuery का सरल स्क्रीन स्क्रैपिंग

मैं jQuery का उपयोग कर एक सरल स्क्रीन-खुरचनी का उपयोग करने के विचार के साथ खेल रहा हूं और मैं सोच रहा हूं कि निम्नलिखित संभव है। मेरे पास सरल HTML पृष्ठ है और मैं किसी अन्य पेज से सभी सूची आइटमों की सामग्री को पकड़ने के लिए एक प्रयास (यदि यह संभव है) बना […]

स्क्रैप वेब पृष्ठ सामग्री

मैं एक परियोजना विकसित कर रहा हूं, जिसके लिए मैं पृष्ठभूमि में किसी वेबसाइट की सामग्री को परिमार्जन करना चाहता हूं और उस स्क्रैप की वेबसाइट से कुछ सीमित सामग्री प्राप्त करना चाहता हूं। उदाहरण के लिए, अपने पृष्ठ में मेरे पास "userid" और "password" फ़ील्ड हैं, उन का उपयोग करके, मैं अपने मेल को […]

अजगर का उपयोग करते हुए HTML पृष्ठ स्रोत से छवि फ़ाइल डाउनलोड करें?

मैं एक खुरचक लिख रहा हूं जो सभी छवि फ़ाइलों को एक HTML पृष्ठ से डाउनलोड करता है और उन्हें एक विशिष्ट फ़ोल्डर में सहेजता है। सभी छवियाँ HTML पृष्ठ का हिस्सा हैं।

पीएचपी में एचटीएमएल स्क्रैपिंग

मैं नियमित अभिव्यक्तियों का उपयोग कर PHP में कुछ HTML स्क्रैपिंग कर रहा हूं। यह काम करता है, लेकिन इसका परिणाम नकचढ़ा और नाजुक है। क्या किसी ने ऐसे किसी भी पैकेज का उपयोग किया है जो एक अधिक मजबूत समाधान प्रदान करता है? एक कॉन्फ़िग संचालित समाधान आदर्श होगा, लेकिन मैं पिक नहीं रहा […]

जावास्क्रिप्ट समर्थन के साथ स्क्रू-स्क्रैप का एक अच्छा उपकरण क्या है?

जावास्क्रिप्ट समर्थन के साथ – क्या एक अच्छा परीक्षण सूट या उपकरण सेट है जो वेबसाइट नेविगेशन को स्वचालित कर सकता है – और पृष्ठों से HTML जमा कर सकता है? बेशक मैं सुंदर एसप के साथ सीधे एचटीएमएल स्क्रैप कर सकता हूँ। लेकिन यह मुझे साइटों के लिए अच्छा नहीं है जिनके लिए जावास्क्रिप्ट […]

वेब स्क्रैपिंग शिष्टाचार

मैं एक ऐसी वेबसाइट से जानकारी निकालने के लिए एक साधारण वेब स्क्रैपिंग एप्लिकेशन लिखने पर विचार कर रहा हूं जो विशेष रूप से इस पर निषेध नहीं करता है इस जानकारी के लिए मैंने अन्य विकल्प (जैसे आरएसएस, वेब सेवा) की जांच की है, लेकिन इस स्तर पर कोई भी उपलब्ध नहीं है। इसके […]

गतिशील सामग्री को लोड करने के लिए Phantomjs के साथ कैसे स्क्रॉल करें

मैं एक पृष्ठ से लिंक स्क्रैप करने की कोशिश कर रहा हूं जो गतिशील सामग्री उत्पन्न करता है क्योंकि उपयोगकर्ता नीचे स्क्रॉल करते हैं (अनंत स्क्रॉलिंग)। मैंने फोंटोंज के साथ अलग-अलग चीज़ें करने की कोशिश की है, लेकिन पहले पेज के बाहर लिंक इकट्ठा करने में सक्षम नहीं है। मान लीजिए कि नीचे के तत्व […]

क्या पर्ल के WWW :: मैकेनाइजेट के एक PHP समकक्ष है?

मैं एक ऐसी पुस्तकालय की तलाश कर रहा हूं जो कि पर्ल के WWW :: मैकेनाइज के समान कार्यशीलता है, लेकिन PHP के लिए असल में, मुझे एक सरल सिंटैक्स के साथ HTTP GET और POST अनुरोध सबमिट करने की अनुमति दी जानी चाहिए, और उसके परिणामस्वरूप पेज को पार्स करना और पृष्ठ पर सभी […]

अजगर के साथ जावास्क्रिप्ट द्वारा जेनरेट किया गया स्क्रैप HTML

मुझे अजगर के साथ एक साइट को परिमार्जन करने की आवश्यकता है मैं urlib मॉड्यूल के साथ स्रोत HTML कोड प्राप्त करता हूं, लेकिन मुझे जावास्क्रिप्ट फ़ंक्शन (जो कि html स्रोत में शामिल है) द्वारा उत्पन्न कुछ HTML कोड को परिमार्जन करने की आवश्यकता है। यह फ़ंक्शन "साइट" में क्या होता है कि जब आप […]

हेडलेस ब्राउज़र पायथन के लिए (जावास्क्रिप्ट समर्थन की आवश्यकता है!)

मुझे बिना हेडलेस ब्राउज़र की आवश्यकता है जो उपयोग करने में काफी आसान है (मैं अभी भी पायथन और सामान्य रूप में प्रोग्रामिंग के लिए नया हूँ) जो मुझे एक पृष्ठ पर नेविगेट करने की अनुमति देगा, एक ऐसे फॉर्म में प्रवेश करें जिसके लिए जावास्क्रिप्ट की आवश्यकता होती है, और उसके बाद परिणामी वेब […]

दिलचस्प पोस्ट
क्यों सादे कार्यों से कंपाइलर द्वारा लम्ब्दास को बेहतर अनुकूलित किया जा सकता है? Android में ImageButton में फ़िट छवि विज़ुअल स्टूडियो 2010 हमेशा सोचता है कि परियोजना पुरानी है, लेकिन कुछ भी नहीं बदला है मैं सी # asp.Net में एक डीटीओ को काफी जटिल जेसन रिस्पांस से कैसे बनाऊं? LINQ में डायनेमिक WHERE क्लॉज क्या एंड्रॉइड पर अजगर चलाने का कोई तरीका है? jqGrid गतिशील रूप से ग्रिड पेजर आईडी को हल करें? अजगर में यूटीसी टाइमस्टैम्प को datetime.date परिवर्तित करना यूनिट टेस्ट बनाम फंक्शनल टेस्ट उपयोगकर्ता की भाषा को कैसे पता लगाया गया पाठ पता लगा सकता है? MVC प्रगति बार थ्रेडिंग कैसे यह एक ImageView में दिखाने के लिए एक BitMap छवि में एक Base64 स्ट्रिंग कन्वर्ट करने के लिए? क्या कारण java.lang.IncompatibleClassChangeError? WPF एक ऑब्जेक्ट के गुणों के लिए बाइंडिंग क्यों करता है, लेकिन फ़ील्ड नहीं? वैरिएबल को मिश्रित दिनांक प्रारूपों में एक प्रारूप में रूपांतरण के रूप में परिवर्तित करें