इस दस्तावेज़ में, Google Transport की कीमत की सटीक जानकारी देने वाले क्रॉलर से आने वाले ट्रैफ़िक के बारे में बताया गया है.
क्वेरी की संख्या के बारे में जानकारी
उदाहरण के लिए, अगर हमने हर दिन 5,000 क्वेरी भेजने का वादा किया है, तो इसका मतलब है कि हमारा क्रॉलर हर दिन 5,000 बार (पूरे दिन में बराबर सेट किया गया, यानी हर 17 सेकंड में एक बार) इनमें से सभी कार्रवाइयां करता है, जो कोई सामान्य उपयोगकर्ता करता है:
Google Search पर जाएं और पार्टनर लिंक पर क्लिक करें
यात्रा की योजना चुनें (अगर पहले से नहीं चुनी गई है)
'जारी रखें' पर तब तक क्लिक करें, जब तक वह उस पेज पर न पहुंच जाए जहां उपयोगकर्ता को अपनी निजी / पेमेंट की जानकारी डालनी होगी
पेज पर जाकर, किराये की जानकारी देखना
फ़ेच किए गए रिसॉर्स को क्रॉलर फ़िल्टर करता है
क्रॉलर सिर्फ़ उन संसाधनों को फ़ेच करता है जिनकी ज़रूरत हमें कीमत और खरीदारी के लिए उपलब्धता की जानकारी पाने के लिए होती है. इसका मतलब है कि आम तौर पर, यह सिर्फ़ पार्टनर वेबसाइट से संसाधन फ़ेच करता है. इसका मतलब है कि हम सिर्फ़ उसी डोमेन के यूआरएल को अनुमति देते हैं. साथ ही, हम ऐसे किसी भी संसाधन को फ़ेच करने से बचते हैं जो कीमत के सही डेटा को पढ़ने के लिए ज़रूरी नहीं है. जैसे, इमेज.
इसका मतलब है कि क्रॉलर, तीसरे पक्ष (Google Analytics, Facebook, Criteo वगैरह) की स्क्रिप्ट को लोड और लागू नहीं करता. इसलिए, क्रॉलर ट्रैफ़िक को उन आंकड़ों से बाहर रखा जाना चाहिए.
कैश मेमोरी में सेव करना
पार्टनर वेबसाइट पर लोड कम करने के लिए, आम तौर पर हमारे क्रॉलर को रिस्पॉन्स में मौजूद सभी स्टैंडर्ड एचटीटीपी कैश मेमोरी में सेव करने वाले हेडर का ध्यान रखने के लिए कॉन्फ़िगर किया जाता है. इसका मतलब है कि सही तरीके से कॉन्फ़िगर की गई वेबसाइटों के लिए, हम ऐसे कॉन्टेंट को बार-बार फ़ेच करने से बचते हैं जो शायद ही कभी बदलता हो. जैसे, JavaScript लाइब्रेरी.
समस्या का हल
क्रॉलर नेटवर्क की क्वालिटी जांच सही तरीके से काम करे, इसके लिए ज़रूरी है कि पार्टनर की वेबसाइट का ऐक्सेस हो. इसके बारे में ज़्यादा जानकारी पाने के लिए, सहायता केंद्र का यह लेख पढ़ें.