Dokumen ini dimaksudkan untuk menjelaskan traffic dari crawler akurasi harga Google Transport.
Catatan tentang jumlah kueri
Misalnya, jika kita setuju untuk mengirim 5.000 kueri per hari, artinya 5.000 kali per hari (disebarkan secara merata sepanjang hari, yaitu sekitar satu kali setiap 17 detik), crawler kami akan melakukan semua tindakan berikut yang akan dilakukan pengguna reguler:
mulai dari Google Penelusuran, lalu klik link partner
pilih itinerari perjalanan yang diinginkan (jika belum dipilih)
klik 'lanjutkan' hingga mencapai halaman tempat pengguna harus memasukkan detail pribadi / pembayaran
membaca detail harga akhir dari halaman
Crawler memfilter resource yang diambil
Crawler hanya mengambil resource yang diperlukan untuk mendapatkan informasi yang kita minati tentang detail harga dan ketersediaan. Secara khusus, hal ini berarti bahwa biasanya hanya mengambil resource dari situs partner (yaitu kami hanya memberikan otorisasi URL dari domain yang sama). Selain itu, kami menghindari pengambilan resource apa pun yang tidak diperlukan untuk membaca data harga yang benar seperti gambar.
Secara khusus, hal ini berarti crawler tidak memuat dan menjalankan skrip dari pihak ketiga (Google Analytics, Facebook, Criteo...), sehingga traffic crawler harus dikecualikan dari analisis tersebut.
Menyimpan ke cache
Untuk mengurangi beban di situs partner, crawler kami umumnya dikonfigurasi untuk mematuhi semua header cache http standar yang ada dalam respons. Artinya, untuk situs yang dikonfigurasi dengan benar, kami menghindari pengambilan konten yang jarang berubah (misalnya, library JavaScript) berulang kali.
Pemecahan masalah
Pengoperasian pemeriksaan kualitas jaringan crawler kami yang benar bergantung pada akses ke situs partner. Informasi untuk melakukannya dapat ditemukan di artikel pusat bantuan ini.