Tarama Bütçesi Nedir ve SEO’lar Bu Konuda Endişelenmeli mi?


Tarama bütçesi, bir arama motorunun sitenizde ne kadar hızlı ve kaç sayfa taramak istediğidir. Bir tarayıcının sitenizde kullanmak istediği kaynak miktarından ve sunucunuzun desteklediği tarama miktarından etkilenir.

Daha fazla tarama, daha iyi sıralanacağınız anlamına gelmez, ancak sayfalarınız taranmazsa ve dizine eklenmezse, hiç sıralanmayacaktır.

Çoğu sitenin tarama bütçesi konusunda endişelenmesine gerek yoktur, ancak bir göz atmak isteyebileceğiniz birkaç durum vardır. Bu vakalardan bazılarına bakalım.

Tarama bütçesi konusunda ne zaman endişelenmelisiniz?

Genellikle popüler sayfalarda tarama bütçesi konusunda endişelenmenize gerek yoktur. Genellikle daha yeni olan, iyi bağlanmamış veya fazla değişmeyen, sık taranmayan sayfalardır.

Tarama bütçesi, özellikle çok sayıda sayfası olan yeni siteler için endişe kaynağı olabilir. Sunucunuz daha fazla taramayı destekleyebilir, ancak siteniz yeni olduğundan ve muhtemelen henüz çok popüler olmadığından, bir arama motoru sitenizi çok fazla taramak istemeyebilir. Bu çoğunlukla beklentilerdeki bir kopukluktur. Sayfalarınızın taranmasını ve dizine eklenmesini istiyorsunuz ancak Google, sayfalarınızı dizine eklemeye değer olup olmadığını bilmiyor ve istediğiniz kadar çok sayfayı taramak istemeyebilir.

Tarama bütçesi, milyonlarca sayfaya sahip daha büyük siteler veya sık sık güncellenen siteler için de endişe kaynağı olabilir. Genel olarak, taranmayan veya istediğiniz sıklıkta güncellenmeyen çok sayıda sayfanız varsa, taramayı hızlandırmak isteyebilirsiniz. Bunun nasıl yapılacağı hakkında daha sonra makalede konuşacağız.

Tarama etkinliği nasıl kontrol edilir

Google tarama etkinliğine ve belirledikleri sorunlara ilişkin bir genel bakış görmek istiyorsanız, bakmanız gereken en iyi yer Google Arama Konsolu’ndaki Tarama İstatistikleri raporudur.

Burada, tarama davranışındaki değişiklikleri, taramayla ilgili sorunları belirlemenize yardımcı olacak ve Google’ın sitenizi nasıl taradığı hakkında size daha fazla bilgi verecek çeşitli raporlar bulunmaktadır.

Burada gösterilenler gibi işaretlenmiş tarama durumlarına kesinlikle bakmak istersiniz:

Sayfaların en son ne zaman tarandığını gösteren zaman damgaları da vardır.

Tüm botlardan ve kullanıcılardan gelen isabetleri görmek istiyorsanız, günlük dosyalarınıza erişmeniz gerekir. Barındırma ve kuruluma bağlı olarak, cPanel ile paylaşılan bir ana bilgisayarda burada görüldüğü gibi Awstats ve Webalizer gibi araçlara erişiminiz olabilir. Bu araçlar, günlük dosyalarınızdan bazı toplu verileri gösterir.

Daha karmaşık kurulumlar için, muhtemelen birden çok kaynaktan gelen ham günlük dosyalarından verilere erişmeniz ve bunları depolamanız gerekir. gibi daha büyük projeler için özel araçlara da ihtiyacınız olabilir. ELK (elasticsearch, logstash, kibana) günlük dosyalarının depolanmasına, işlenmesine ve görselleştirilmesine izin veren yığın. Splunk gibi log analiz araçları da vardır.

Tarama bütçesinde neler önemlidir?

Tüm URL’ler ve istekler, tarama bütçenize dahil edilir. Bu, aşağıdaki gibi alternatif URL’leri içerir: AMP veya m-nokta sayfaları, hreflang, CSS, ve JavaScript dahil XHR istekler.

Bu URL’ler, sayfaları tarayarak ve ayrıştırarak veya site haritaları dahil olmak üzere çeşitli diğer kaynaklardan bulunabilir. RSS beslemeler, Google Search Console’da dizine eklemek için URL’ler göndermek veya dizine eklemeyi kullanmak API.

Tarama bütçesini paylaşan birden çok Googlebot da vardır. Web sitenizi tarayan çeşitli Googlebot’ların bir listesini şuradaki Tarama İstatistikleri raporunda bulabilirsiniz: GSC.

Google, nasıl taranacaklarını ayarlar

Her web sitesi, birkaç farklı girdiden oluşan farklı bir tarama bütçesine sahip olacaktır.

Tarama talebi

Tarama talebi, Google’ın web sitenizde ne kadar taramak istediğidir. Daha popüler sayfalar ve önemli değişiklikler yaşayan sayfalar daha fazla taranacaktır.

Popüler sayfalar veya bunlara daha fazla bağlantısı olan sayfalar genellikle diğer sayfalara göre öncelik kazanır. Google’ın bir şekilde tarama için sayfalarınıza öncelik vermesi gerektiğini ve bağlantıların sitenizdeki hangi sayfaların daha popüler olduğunu belirlemenin kolay bir yolu olduğunu unutmayın. Bununla birlikte, yalnızca siteniz değil, Google’ın nasıl öncelik vereceğini bulması gereken, internetteki tüm sitelerdeki tüm sayfalardır.

kullanabilirsiniz Bağlantılara göre en iyisi Hangi sayfaların daha sık taranacağının bir göstergesi olarak Site Gezgini’nde rapor edin. Ayrıca Ahrefs’in sayfalarınızı en son ne zaman taradığını da gösterir.

Bir de durgunluk kavramı var. Google, bir sayfanın değişmediğini görürse, sayfayı daha az sıklıkta tarar. Örneğin, bir sayfayı tararlar ve bir gün sonra herhangi bir değişiklik görmezlerse, tekrar taramadan önce üç gün, bir sonraki sefer on gün, 30 gün, 100 gün vb. bekleyebilirler. Taramalar arasında bekleyecekleri belirli bir süre yoktur, ama zamanla daha seyrek hale gelecektir. Bununla birlikte, Google sitenin tamamında veya bir sitenin taşınmasında büyük değişiklikler görürse, tarama hızını en azından geçici olarak artıracaktır.

Tarama hızı sınırı

Tarama hızı sınırı, web sitenizin ne kadar taramayı destekleyebileceğidir. Web sitelerinin, sunucunun kararlılığıyla ilgili yavaşlamalar veya hatalar gibi sorunlar yaşamadan önce alabilecekleri belirli bir miktarda tarama vardır. Çoğu tarayıcı, siteye zarar vermemek için bu sorunları görmeye başlarsa taramayı durdurur.

Google, sitenin tarama durumuna göre ayarlama yapacaktır. Site daha fazla tarama ile iyiyse, sınır artacaktır. Sitede sorun varsa, Google tarama hızını yavaşlatır.

Google’ın daha hızlı taranmasını istiyorum

Sitenizin ek taramayı destekleyebilmesini ve sitenizin tarama talebini artırabilmesini sağlamak için yapabileceğiniz birkaç şey vardır. Bu seçeneklerden bazılarına bakalım.

Sunucunuzu hızlandırın / kaynakları artırın

Google’ın sayfaları tarama şekli, temel olarak kaynakları indirmek ve ardından bunları işlemek içindir. Bir kullanıcının algıladığı gibi sayfa hızınız tamamen aynı değil. Tarama bütçesini etkileyecek olan şey, Google’ın sunucu ve kaynaklarla daha çok ilgisi olan kaynakları ne kadar hızlı bağlayabileceği ve indirebileceğidir.

Daha fazla bağlantı, harici &

Tarama talebinin genellikle popülerliğe veya bağlantılara dayalı olduğunu unutmayın. Dış linklerin ve/veya iç linklerin miktarını artırarak bütçenizi artırabilirsiniz. Siteyi kontrol ettiğiniz için dahili bağlantılar daha kolaydır. Önerilen dahili bağlantıları şurada bulabilirsiniz: Bağlantı Fırsatları Nasıl çalıştığını açıklayan bir öğretici de içeren Site Denetiminde rapor.

Bozuk ve yönlendirilen bağlantıları düzeltin

Sitenizdeki bozuk veya yeniden yönlendirilen sayfaların bağlantılarını aktif tutmanın, tarama bütçesi üzerinde küçük bir etkisi olacaktır. Tipik olarak, buraya bağlanan sayfalar, muhtemelen bir süredir değişmedikleri için oldukça düşük bir önceliğe sahip olacaktır, ancak herhangi bir sorunu temizlemek genel olarak web sitesi bakımı için iyidir ve tarama bütçenize biraz yardımcı olacaktır.

Sitenizdeki bozuk (4xx) ve yönlendirilmiş (3xx) bağlantıları aşağıdaki adresten kolayca bulabilirsiniz. Dahili sayfalar Site Denetiminde rapor.

Site haritasındaki bozuk veya yeniden yönlendirilmiş bağlantılar için Tüm sorunlar ” için rapor3XX site haritasında yönlendirme” ve “4XX site haritasındaki sayfa ”sorunları.

kullanın ALMAK onun yerine İLETİ nerede yapabilirsin

Bu, içerdiği için biraz daha teknik HTTP İstek yöntemleri. kullanma İLETİ talepler nerede ALMAK çalışmayı talep eder. temelde ALMAK (çek) vs İLETİ (it). İLETİ istekler önbelleğe alınmaz, bu nedenle tarama bütçesini etkilerler, ancak ALMAK istekler önbelleğe alınabilir.

İndekslemeyi Kullan API

Sayfaların daha hızlı taranmasına ihtiyacınız varsa, Google’ın Dizine Ekleme için uygun olup olmadığınızı kontrol edin. API. Şu anda bu, yalnızca iş ilanları veya canlı videolar gibi birkaç kullanım durumu için kullanılabilir.

Bing’in ayrıca bir Dizin Oluşturma özelliği vardır API bu herkes için kullanılabilir.

ne işe yaramaz

İnsanların bazen deneyip tarama bütçenize gerçekten yardımcı olmayacak birkaç şey vardır.

  • Sitede küçük değişiklikler. Sayfaların daha sık taranmasını umarak tarih, boşluk veya noktalama gibi sayfalarda küçük değişiklikler yapmak. Google, değişikliklerin önemli olup olmadığını belirlemede oldukça iyidir, bu nedenle bu küçük değişikliklerin tarama üzerinde herhangi bir etkisi olması muhtemel değildir.
  • robots.txt dosyasında tarama gecikmesi yönergesi. Bu yönerge birçok botu yavaşlatacaktır. Ancak Googlebot bunu kullanmadığı için bir etkisi olmaz. Ahrefs’te buna saygı duyuyoruz, bu nedenle taramamızı yavaşlatmanız gerekirse, robots.txt dosyanıza bir tarama gecikmesi ekleyebilirsiniz.
  • Üçüncü taraf komut dosyalarını kaldırma. Üçüncü taraf komut dosyaları, tarama bütçenize dahil değildir, bu nedenle bunları kaldırmanız yardımcı olmaz.
  • Takip etme. Tamam, bu iffy. Geçmişte nofollow bağlantıları tarama bütçesini kullanmazdı. Ancak, nofollow artık bir ipucu olarak kabul ediliyor, bu nedenle Google bu bağlantıları taramayı seçebilir.

Google’ın daha yavaş taramasını istiyorum

Google’ın daha yavaş gezinmesini sağlamanın yalnızca birkaç iyi yolu vardır. Web sitenizi yavaşlatmak gibi teknik olarak yapabileceğiniz birkaç ayar daha var ama bunlar benim tavsiye edeceğim yöntemler değil.

Yavaş ayar, ancak garantili

Google’ın daha yavaş taramak için bize verdiği ana kontrol, Google Arama Konsolu içindeki bir hız sınırlayıcıdır. Araçla tarama hızını yavaşlatabilirsiniz, ancak etkili olması iki gün kadar sürebilir.

Hızlı ayarlama, ancak risklerle

Daha acil bir çözüme ihtiyacınız varsa, sitenizin sağlığıyla ilgili Google’ın tarama hızı ayarlamalarından yararlanabilirsiniz. Googlebot’a sayfalarda ‘503 Hizmet Kullanılamıyor’ veya ‘429 Çok Fazla İstek’ durum kodu sunarsanız, sayfalar daha yavaş taramaya başlar veya taramayı geçici olarak durdurabilir. Bunu birkaç günden fazla yapmak istemezsiniz, aksi takdirde dizinden sayfalar düşmeye başlayabilir.

Son düşünceler

Tarama bütçesinin çoğu insanın endişeleneceği bir şey olmadığını tekrar belirtmek isterim. Endişeleriniz varsa, umarım bu kılavuz faydalı olmuştur.

Genellikle yalnızca sayfaların taranmaması ve dizine eklenmemesiyle ilgili sorunlar olduğunda, birinin neden bu konuda endişelenmemesi gerektiğini açıklamam gerektiğinde veya Google Arama Konsolu’ndaki tarama istatistikleri raporunda beni ilgilendiren bir şey gördüğümde incelerim. .

Sorularım var? bana haber ver heyecan.



Yorum bırakın

Scroll to Top