Google'ın web taraması hakkında bilinmesi gerekenler
Google, 30 yılı aşkın süredir açık web'i tarar ve web tarayıcılarımızın işleyiş şekli hakkında düzenli olarak sorular alırız. Bu sorulardan bazılarını yanıtlamak için Google tarayıcıları ve bu tarayıcıların, dünyadaki bilgileri düzenleyerek insanları web'deki içeriklere bağlamamıza nasıl yardımcı olduğuyla ilgili birkaç bilgiyi aşağıda bulabilirsiniz.
Tarama nedir? Tarama kısaca Google'ın web'i "görme" şeklidir
Tarama, yeni web sayfalarını keşfetmek ve bunları anlamak için otomatik yazılım kullanma işlemidir. Bu sayede, bir web sayfasını bulmak için Google'a geldiğinizde bu sayfanın var olduğunu biliriz ve arama sonuçlarınıza dahil edebiliriz. Tüm arama motorları, hangi sayfaların ve bilgilerin mevcut olduğunu öğrenmek için taramayı kullanır. Daha fazla bilgi edinmek için Google Arama'nın sayfaları tarama şekli hakkındaki videomuzu izleyebilirsiniz.
Her biri önemli görevlere sahip birçok tarayıcımız vardır
Googlebot, en fazla bilinen tarayıcımızdır ve Google Arama'daki sonuçları güncel tutmak için kullanılır. Google Görseller ve Google Alışveriş gibi diğer platformlarımıza özel tarayıcılarımız da vardır. En sık kullandığımız tarayıcılar ve bunların kullanım amacı hakkında eksiksiz dokümanlar sunarız. Tarayıcılarımız kolayca tanımlanabilen kullanıcı aracısı adlarını ve bilinen internet adreslerini kullanır. Bu sayede site sahipleri, gördükleri Google tarayıcılarının meşru olduğunu doğrulayabilir.
En son güncellemeleri bulmak ve en yeni arama sonuçlarını sağlamak için tekrar tekrar tarama yaparız
Son dakika haber makalelerini takip etmek için haber ana sayfalarını birkaç dakikada bir yeniden tarayabiliriz. Diğer durumlarda ise yıllardır hiçbir değişik olmadığını fark etmiş olabilir, bu nedenle yeniden taramak için bir ay bekleyebiliriz. Site sahipleri, yeni ve güncellenmiş sayfalar hakkında bilgi veren site haritası dosyalarını kullanarak yeniden taramanın gerçekleşme sıklığını etkileyebilir.
Sık tarama iyiye işarettir
Sitenizin çok sık taranması, sayfalarınızda kullanıcıların bulmak istediği yeni veya son derece alakalı içerikler olduğunu ve sistemlerimizin bu talebi fark ettiğini gösterir. Online alışveriş buna iyi bir örnektir. Sonuçlarımızda perakendecilerin en güncel fiyatları, promosyonları ve stok durumu gösterilebilmesi için e-ticaret sitelerini sık sık tararız.
Sayfalar daha karmaşık hale geldikçe Google'ın tarama sürecinin kapsamı zaman içinde genişledi
Sık sık yeniden taramamızın bir diğer nedeni de bir web sayfasının zenginliğini ve sunduklarını tam olarak anlamaktır. Tarayıcılarımız, bir sayfayı gerçek kişi gibi "görmek" için siteyi tam olarak yükleyen oluşturma adlı tekniği kullanır. Web sayfaları yıllar içinde daha karmaşık hale geldi. Ortalama mobil sayfa boyutu 816 kilobayttan 2,3 megabayta yükseldi ve artık resimlerden etkileşimli bileşenlere kadar yüklenmesi gereken 60'tan fazla farklı dosya içeriyor. Bu nedenle, bir web sayfasının temsili anlık görüntüsünü tüm ihtişamıyla elde etmek için aynı sayfayı birkaç kez veya yeni öğeler sürekli olarak eklendiğinden daha fazla taramamız gerekebilir.
Tarama işlemini otomatik olarak optimize ederiz
Tarayıcılarımız verimlilik için tasarlanmış olup site sahipleri üzerindeki etkiyi en aza indirmek için kendilerini ayarlar. Örneğin, bir site yavaşladığında veya hata döndürdüğünde, sitenin sunucularında aşırı yüklenmeye neden olmamak için tarama hızımız otomatik olarak değişir. Taranan içeriği önbelleğe alarak gereksiz taramaları sınırlandırmaya çalışırız. Tarayıcılarımız bir web sitesinin daha fazla bölümünü keşfettikçe daha az taramayla ele alınabilecek bölümleri de tanıyabilir. Örneğin, 9999 yılına kadar olan takvimlerin tamamının taranması muhtemelen gerekli değildir. Site sahipleri, taranması gerekmeyen içerikleri tanımlayarak yardımcı olabilir. Bu sayede, altyapı maliyetleri düşen web siteleri paradan tasarruf eder ve internet bir bütün olarak daha verimli hale gelir.
Google tarayıcıları, ödeme duvarı veya abonelik içeriğine asla izinsiz girmez
Varsayılan olarak, açık web'de erişilemeyen bir sayfaya (örneğin, içerik bir giriş sayfasının arkasındaysa) tarayıcılarımız da erişemez. Google'a, abonelik sayfalarına erişim için açıkça izin vermek isteyen site sahiplerine (ör. Google'ın kullanıcıları bu içeriğe yönlendirebilmesi için) yönelik özel rehberliğimiz mevcuttur. Tarayıcılarımıza abonelik erişimi sağlamayı tercih ederseniz yapılandırılmış verileri kullanarak insan ziyaretçilere giriş ekranı göstermeye devam edebilirsiniz. Bu durumda spam ile ilgili kurallarımız tetiklenmez. Ayrıca, önizleme kontrollerinden yararlanarak abonelik içeriğinin sayfa önizlemelerinde görünmesini engelleyebilirsiniz.
Site sahipleri, hangi içeriklerin nasıl taranacağını kontrol edebilir
Site sahiplerinin, bizimki gibi tarayıcıların sayfalarıyla nasıl etkileşim kurması gerektiğini bildirmesine olanak tanıyan basit bir metin dosyası olan robots.txt gibi açık web standartlarına uyarız. Robots.txt, robots meta etiketleriyle birlikte web sitelerinin Google'a ve diğer hizmetlere, içeriklerine nasıl erişileceğini kolayca bildirmesini sağlar. Sayfaların Arama'da görünmesini engelleyebilirler. Site haritalarını kullanarak taranmasını istedikleri yeni içerikler hakkında bize bilgi verebilirler. Ayrıca, tarama bütçeleri aracılığıyla sitelerini tarama sıklığımızı da yönetebilirler.
Standart tarayıcılarımız, web sitelerinin içeriklerine nasıl erişileceği ve içeriklerinin nasıl kullanılacağıyla ilgili tercihlerine her zaman saygı gösterir
Tarama işleminden sonra sitelerde gereksiz tekrar isteklerinin gönderilmesini önlemek için taranan verileri birden fazla kez kullanabiliriz. Bu verileri yeniden kullandığımızda bile sitelerin, robots.txt aracılığıyla yaptığı seçimlere ve bu açık web protokolü aracılığıyla sunduğumuz kontrollere saygı duymaya devam ederiz. Örneğin, siteler robots.txt dosyasında Google-Extended'ı kullanarak içeriklerinin, Gemini modellerinin gelecekteki sürümlerinin eğitilmesine yardımcı olup olmayacağını ve daha pek çok şeyi kontrol edebilir. Google-Extended'ı kullanmak, bir sitenin Arama'ya dahil edilmesini etkilemez. Ayrıca, Google-Extended'ı Arama'da sıralama sinyali olarak kullanmayız.
Site sahiplerinin, Google tarama deneyimlerini yönetebilmeleri için Google Search Console da dahil olmak üzere birçok araç sunarız. Bu araçlar, site sahiplerine ücretsiz olarak sunulur. Ne kadar tarama yaptığımız ve bunun nedenleri hakkında bilgi sağlar. Sitelerin, sunucu kapalı kalma süresi veya hız sorunları gibi problemleri teşhis etmesine de yardımcı olur. Ayrıca Search Console, bir sitenin sayfalarının Arama'da nasıl göründüğü ve kullanıcıların bu sayfalarla nasıl etkileşim kurduğu hakkında kapsamlı bilgiler sağlar.
Tarayıcılarımız, kullanıcıları internetin en iyi içerikleriyle buluşturmaya yardımcı olur. Biz de sürekli tarayıcılarımızı daha yetenekli ve verimli hale getirmenin yollarını ararız.