Backlink Fiyatları | SEO ve Backlink Paketleri

Robots Meta Etiketi Nedir? Kullanımı ve SEO’ya Etkisi

Yazar: admin SEO
Robots Meta Etiketi Nedir

Robots meta etiketi, arama motoru tarayıcılarına belirli bir HTML sayfasının dizine eklenmesi, sayfadaki bağlantıların takip edilmesi ve içeriğin arama sonuçlarında nasıl gösterilmesi gerektiği hakkında talimat veren HTML etiketidir.

Etiket genellikle sayfanın <head> alanına eklenir:

<meta name="robots" content="noindex, nofollow">

Bu örnekte arama motorlarından:

  • Sayfayı arama sonuçlarında göstermemeleri
  • Sayfadaki bağlantıları takip etmemeleri

istenmektedir. Robots meta etiketi yalnızca noindex ve nofollow değerlerinden oluşmaz. Arama sonuçlarındaki metin açıklamasını, görsel önizlemesini, video önizlemesini, çeviri seçeneğini ve içeriğin belirli bir tarihten sonra gösterilmesini kontrol eden farklı direktifler de bulunmaktadır.

Google, robots meta etiketinin tek bir HTML sayfasının nasıl dizine ekleneceğini ve arama sonuçlarında nasıl sunulacağını sayfa düzeyinde kontrol etmeye yardımcı olduğunu belirtmektedir. Direktiflerin uygulanabilmesi için arama motoru tarayıcılarının sayfaya erişebilmesi gerekir. SEO, teknik analiz ve dijital görünürlük hizmetlerinin genel kapsamını incelemek için Backlink Fiyatları ana sayfasından yararlanabilirsiniz.

Robots Meta Etiketi Ne İşe Yarar?

Robots meta etiketi bir sayfanın arama motorlarındaki davranışını sayfa bazında yönetmek için kullanılır.

Başlıca kullanım amaçları şunlardır:

  • Bir sayfanın arama sonuçlarında görünmesini engellemek
  • Sayfadaki bağlantıların takip edilmesini sınırlandırmak
  • Arama sonucunda metin açıklaması gösterilmesini engellemek
  • Snippet uzunluğunu sınırlandırmak
  • Büyük görsel önizlemelerine izin vermek veya engellemek
  • Video önizlemesinin süresini belirlemek
  • Sayfadaki görsellerin Google Görseller’de indekslenmesini engellemek
  • Sayfanın belirli bir tarihten sonra arama sonuçlarından kaldırılmasını istemek
  • İçeriğin Google tarafından çevrilmiş sonuçlarla sunulmasını engellemek
  • Belirli bir arama motoru tarayıcısına özel direktif vermek

Robots meta etiketi bir sıralama artırma etiketi değildir. Doğrudan “bu sayfayı üst sıralara çıkar” biçiminde bir talimat vermez. Temel görevi, tarama sonrasında sayfanın dizine eklenmesi ve arama sonuçlarında sunulmasıyla ilgili kontroller sağlamaktır.

Robots Meta Etiketi Nereye Eklenir?

Robots meta etiketi HTML belgesinin <head> alanına yerleştirilmelidir.

Doğru kullanım örneği:

<!DOCTYPE html>
<html lang="tr">
<head>
    <meta charset="UTF-8">
    <title>Örnek Sayfa</title>
    <meta name="robots" content="noindex, follow">
</head>
<body>
    Sayfa içeriği
</body>
</html>

Google, robots meta etiketini HTML gövdesinde görmesi durumunda da değerlendirebilir. Bununla birlikte geçerli ve düzenli bir HTML yapısı için etiketin <head> içerisinde kullanılması doğru yaklaşımdır. Google ayrıca geçersiz HTML öğelerinin <head> alanına yerleştirilmesinin, kendisinden sonra gelen meta verilerin okunmasını engelleyebileceğini belirtmektedir.

WordPress’te Robots Meta Etiketi Nasıl Eklenir?

WordPress sitelerinde robots meta etiketi genellikle SEO eklentileri üzerinden yönetilebilir.

Sayfa düzenleme ekranında şu seçeneklerle karşılaşabilirsiniz:

  • Arama motorlarının bu içeriği göstermesine izin ver
  • Bu sayfayı indeksleme
  • Bağlantıları takip etme
  • Gelişmiş robots meta ayarları
  • Görsel önizleme boyutu
  • Snippet uzunluğu

Eklentiden yapılan seçimlerin sayfa kaynak koduna doğru yansıyıp yansımadığı mutlaka kontrol edilmelidir.

Kaynak Kodundan Kontrol

Sayfayı tarayıcıda açtıktan sonra:

  • Sağ tıklayın.
  • “Sayfa kaynağını görüntüle” seçeneğini açın.
  • robots ifadesini arayın.
  • Etiketin içerdiği direktifleri kontrol edin.

Örnek:

<meta name="robots" content="index, follow, max-image-preview:large">

Sayfanın JavaScript veya eklenti üzerinden ürettiği son HTML ayrıca tarayıcı geliştirici araçları ve Search Console URL Denetleme aracıyla kontrol edilebilir.

Robots Meta Etiketi Direktifleri Nelerdir?

Google tarafından desteklenen temel robots meta direktifleri aşağıdaki tabloda gösterilmiştir.

Direktif Temel Görevi
all İndeksleme ve sunum açısından kısıtlama uygulamaz
noindex Sayfanın arama sonuçlarında gösterilmesini engeller
nofollow Sayfadaki bağlantıların takip edilmemesini ister
none noindex, nofollow ile aynı anlama gelir
nosnippet Metin snippet’i ve video önizlemesini engeller
indexifembedded noindex sayfanın başka sayfaya gömüldüğünde indekslenmesine izin verir
max-snippet Metin snippet’inin azami karakter sayısını belirler
max-image-preview Görsel önizlemesinin azami boyutunu belirler
max-video-preview Video önizlemesinin azami süresini belirler
notranslate Arama sonucunda çeviri seçeneği sunulmasını engeller
noimageindex Sayfadaki görsellerin indekslenmesini engeller
unavailable_after Belirli bir tarihten sonra sayfanın gösterilmemesini ister

Birden fazla direktif virgülle ayrılarak aynı etiket içerisinde kullanılabilir. Çelişen kurallarda Google daha kısıtlayıcı olan direktifi uygulayabilir. Örneğin max-snippet:50 ile nosnippet birlikte kullanılırsa nosnippet geçerli olur.

All Direktifi Nedir?

all, sayfanın indekslenmesi veya arama sonuçlarında sunulması açısından ek bir kısıtlama bulunmadığını belirtir.

<meta name="robots" content="all">

all varsayılan davranıştır. Bu nedenle etiketi açıkça yazmak zorunlu değildir.

Aşağıdaki iki kullanım Google açısından genel olarak aynı amaca sahiptir:

<meta name="robots" content="all">

ve robots meta etiketinin hiç kullanılmaması.

Google, all direktifinin varsayılan değer olduğunu ve açıkça kullanıldığında ek bir etki oluşturmadığını belirtmektedir.

Index ve Follow Direktifleri Gerekli midir?

Birçok web sitesinde şu kullanım görülür:

<meta name="robots" content="index, follow">

Bu kullanım sayfanın indekslenmesine ve bağlantıların takip edilmesine izin verildiğini ifade etmek amacıyla kullanılmaktadır. Ancak sayfada engelleyici bir direktif bulunmadığında indeksleme ve bağlantı takibi zaten varsayılan davranıştır.

Bu nedenle her indekslenebilir sayfaya zorunlu olarak index, follow eklemek gerekmez.

Aşağıdaki kullanımlar pratikte aynı hedefi taşır:

<meta name="robots" content="index, follow">
<meta name="robots" content="all">
<!-- Robots meta etiketi bulunmuyor -->

Sayfanın gerçekten dizine eklenebilmesi yalnızca bu etikete bağlı değildir. Sayfa:

  • Googlebot tarafından erişilebilir olmalı
  • Başarılı HTTP yanıtı vermeli
  • Yeterli ve özgün içerik sunmalı
  • Başka teknik engeller içermemeli
  • Google politikalarına uygun olmalı

Robots meta etiketinin bulunmaması, sayfanın mutlaka indeksleneceği anlamına gelmez.

Noindex Nedir?

Noindex, arama motorlarına sayfanın arama sonuçlarında gösterilmemesi gerektiğini bildiren direktiftir.

<meta name="robots" content="noindex">

Googlebot sayfayı tarayıp noindex direktifini gördüğünde, URL’yi Google Arama sonuçlarından çıkarabilir. Başka web sitelerinin sayfaya bağlantı vermesi bu kuralı geçersiz kılmaz.

Noindex Hangi Sayfalarda Kullanılabilir?

Noindex kullanımı değerlendirilebilecek sayfalar:

  • Site içi arama sonuçları
  • Kullanıcı hesap sayfaları
  • Sepet ve ödeme adımları
  • Başarı veya teşekkür sayfaları
  • Test ve ön izleme sayfaları
  • Düşük değerli otomatik arşivler
  • Yinelenen ancak yönlendirilemeyen sayfalar
  • Geçici kampanya sayfaları
  • Yalnızca mevcut müşterilere yönelik sayfalar
  • İncelenmesi tamamlanmamış içerikler

Her sayfa türü için otomatik biçimde noindex kullanılmamalıdır. Sayfanın kullanıcıya, organik aramalara ve site mimarisine katkısı ayrı ayrı değerlendirilmelidir.

Noindex Gizlilik Sağlar mı?

Hayır. noindex bir güvenlik veya gizlilik yöntemi değildir.

Noindex kullanılan bir sayfa:

  • URL’yi bilen kullanıcılar tarafından açılabilir.
  • Başka sitelerden bağlantı alabilir.
  • Farklı arama motorları tarafından farklı değerlendirilebilir.
  • Sunucuda herkese açık kalmaya devam eder.

Gizli, özel veya kişisel içerikler erişim kontrolü ve parola korumasıyla sınırlandırılmalıdır. Google, özel içeriklerin arama sonuçlarından uzak tutulması için parola korumasını daha güvenli bir yöntem olarak önermektedir.

Noindex ile Robots.txt Birlikte Kullanılır mı?

Bu konu robots meta etiketi kullanımında yapılan en önemli hatalardan biridir.

Bir sayfaya şu etiket eklenmiş olsun:

<meta name="robots" content="noindex">

Aynı URL robots.txt dosyasında engellenmişse:

User-agent: *
Disallow: /ozel-sayfa/

Googlebot URL’yi tarayamadığı için sayfadaki noindex etiketini göremeyebilir. Bu durumda sayfa başka kaynaklardan keşfedilmişse URL, içerik açıklaması olmadan arama sonuçlarında görünebilir.

Noindex direktifinin uygulanabilmesi için sayfanın tarayıcıya erişilebilir olması gerekir. Google, robots.txt tarafından engellenen bir URL’deki robots meta veya X-Robots-Tag kurallarının okunamayacağını açıkça belirtmektedir.

Doğru Yaklaşım

Bir sayfanın arama sonuçlarından çıkarılması isteniyorsa:

  • Robots.txt engeli kaldırılmalı
  • Sayfa taranabilir bırakılmalı
  • noindex uygulanmalı
  • Google’ın sayfayı yeniden taraması beklenmeli

Sayfa indeksten çıktıktan sonra tarama bütçesi veya erişim yönetimi için farklı yöntemler değerlendirilebilir. Ancak süreç teknik olarak planlanmalıdır. Robots.txt, indeksleme ve tarama kontrollerinin birlikte değerlendirilmesi için Teknik SEO rehberini inceleyebilirsiniz.

Noindex ile Canonical Arasındaki Fark Nedir?

Noindex ve canonical aynı amaçla kullanılmaz.

Özellik Noindex Canonical
Temel amaç Sayfayı arama sonuçlarından çıkarmak Benzer sayfalar arasından tercih edilen URL’yi belirtmek
Sayfa indekslenebilir mi? Hayır Google kararına göre indekslenebilir
Yinelenen içerikte kullanım Sayfanın tamamen görünmemesi isteniyorsa Sinyallerin ana URL’de birleştirilmesi isteniyorsa
Alternatif URL’ye yönlendirme Yapmaz Tercih edilen URL’yi işaret eder
Kesinlik Sayfa taranırsa güçlü bir kuraldır Google tarafından sinyal olarak değerlendirilir

Bir sayfa başka bir URL’nin yinelenen veya çok benzer sürümüyse çoğunlukla rel="canonical" kullanımı daha uygundur. Google, aynı site içerisindeki canonical sayfanın seçimini engellemek amacıyla noindex kullanılmasını önermemekte; bunun yerine canonical bağlantı etiketini tavsiye etmektedir.

Nofollow Robots Meta Direktifi Nedir?

Sayfa düzeyindeki nofollow, Google’a sayfa üzerindeki bağlantıları takip etmemesi gerektiğini bildirir.

<meta name="robots" content="nofollow">

Bu direktif sayfanın kendisini otomatik olarak indeks dışı bırakmaz. Sayfa arama sonuçlarında görünebilir ancak üzerindeki bağlantılar takip edilmemesi yönünde işaretlenmiş olur.

Noindex ve Nofollow Birlikte

<meta name="robots" content="noindex, nofollow">

Bu kullanım:

  • Sayfanın arama sonuçlarında gösterilmemesini
  • Sayfadaki bağlantıların takip edilmemesini

ister.

Aynı amaç none ile de ifade edilebilir:

<meta name="robots" content="none">

Google’ın güncel belgelerine göre none, noindex, nofollow ile eş değerdir.

Sayfa Düzeyindeki Nofollow ile Link Nofollow Farkı

Robots meta etiketindeki nofollow, sayfadaki bütün bağlantılar için sayfa düzeyinde uygulanır.

<meta name="robots" content="nofollow">

Tek bir bağlantıya eklenen rel="nofollow" ise yalnızca ilgili bağlantıyı niteler:

<a href="https://www.ornek.com/" rel="nofollow">
    Örnek bağlantı
</a>
Kullanım Etki Alanı
Robots meta nofollow Sayfadaki bütün bağlantılar
Link rel="nofollow" Yalnızca ilgili bağlantı
rel="sponsored" Ücretli veya sponsorlu bağlantı
rel="ugc" Kullanıcı tarafından oluşturulan bağlantı

Bağlantı niteliğiyle ilgili ayrıntılar için Nofollow Backlink Nedir? rehberini inceleyebilirsiniz. Standart bağlantıların yapısı için Dofollow Backlink Nedir? içeriğinden yararlanabilirsiniz.

Noindex, Follow Kullanımı Doğru mudur?

Sık kullanılan örneklerden biri şöyledir: <meta name="robots" content="noindex, follow">

Bu kullanım sayfanın arama sonuçlarında gösterilmemesini ancak bağlantıların takip edilebilmesini istemek amacıyla uygulanır.

Bununla birlikte uzun süre noindex kalan bir sayfanın Google tarafından düzenli biçimde taranacağı ve bağlantılarının sürekli değerlendirileceği varsayılmamalıdır. Arama sonuçlarında bulunmayan ve zaman içerisinde daha az taranan sayfalardan güçlü bir iç link etkisi beklemek doğru değildir.

Bir sayfanın bağlantıları önemliyse daha iyi çözümler şunlar olabilir:

  • Önemli hedeflere başka indekslenebilir sayfalardan bağlantı vermek
  • Sayfayı kaliteli ve indekslenebilir hâle getirmek
  • Gereksiz sayfayı uygun URL’ye yönlendirmek
  • Site mimarisini yeniden düzenlemek

İç bağlantı yapısının nasıl planlanması gerektiği hakkında İç Linkleme Nedir? rehberinden yararlanabilirsiniz.

Nosnippet Direktifi Nedir?

Nosnippet, Google’ın arama sonucunda sayfaya ait metin açıklaması veya video önizlemesi göstermemesini ister.

<meta name="robots" content="nosnippet">

Sayfanın başlığı ve URL’si arama sonucunda görünebilir ancak açıklama alanı gösterilmeyebilir.

Google’a göre nosnippet:

  • Web arama sonuçlarındaki metin snippet’ini engeller
  • Video önizlemesini engeller
  • Google Görseller, Discover, AI Overviews ve AI Mode gibi farklı sonuç biçimlerinde uygulanır
  • İçeriğin AI Overviews ve AI Mode için doğrudan girdi olarak kullanılmasını engeller

Statik bir görsel küçük resmi bazı durumlarda yine gösterilebilir.

Nosnippet Kullanırken Dikkat Edilmeli

Nosnippet, arama sonucundaki açıklamayı tamamen kaldırabileceği için tıklama oranını olumsuz etkileyebilir. Kullanıcı sayfanın ne sunduğunu yalnızca başlık ve URL üzerinden anlamak zorunda kalabilir.

Bütün sayfaya nosnippet uygulamak yerine yalnızca belirli bir içeriğin snippet’te kullanılmasını engellemek için data-nosnippet tercih edilebilir.

Data-Nosnippet Nedir?

data-nosnippet, sayfadaki belirli metin bölümlerinin Google arama sonucu açıklamalarında kullanılmasını engelleyen HTML niteliğidir.

<p>
    Bu metin snippet içerisinde kullanılabilir.
    <span data-nosnippet>
        Bu bölüm snippet içerisinde kullanılmamalıdır.
    </span>
</p>

data-nosnippet şu HTML öğelerinde kullanılabilir:

  • span
  • div
  • section

Örnek:

<div data-nosnippet>
    Üyelere özel fiyat bilgisi
</div>

Bu özellik aşağıdaki durumlarda kullanılabilir:

  • Üyelere özel içerikler
  • Sayfayla ilgisi düşük menü metinleri
  • Kullanıcı yorumlarının belirli bölümleri
  • Yasal uyarılar
  • Fiyat veya stok bilgilerinin belirli alanları
  • Snippet içerisinde görünmesi istenmeyen dinamik metinler

Google, data-nosnippet niteliğinin geçerli HTML üzerinde kullanılmasını ve JavaScript aracılığıyla sonradan eklenip kaldırılmamasını önermektedir.

Max-Snippet Direktifi Nedir?

max-snippet, Google arama sonucunda gösterilebilecek metin snippet’inin azami karakter sayısını belirtir.

<meta name="robots" content="max-snippet:160">

Bu örnekte Google’dan en fazla 160 karakterlik bir metin snippet’i kullanması istenir.

Özel değerler:

Değer Anlamı
max-snippet:0 Metin snippet’i gösterilmez; nosnippet ile eş değerdir
max-snippet:-1 Google uygun gördüğü uzunluğu seçebilir
max-snippet:50 En fazla 50 karakterlik snippet kullanılabilir

Google, sayısal değer doğru biçimde yazılmamışsa direktifi yok sayabilir. max-snippet kuralı AI Overviews ve AI Mode için doğrudan kullanılabilecek içerik miktarını da sınırlayabilir.

Meta Açıklama ile Max-Snippet Farkı

Meta açıklama, Google’a sayfanın kısa bir özetini sunar:

<meta name="description" content="Robots meta etiketlerinin kullanımını öğrenin.">

Max-snippet ise Google’ın gösterebileceği metin uzunluğunu sınırlar:

<meta name="robots" content="max-snippet:120">

Google, arama sonucu snippet’ini meta açıklamadan veya sayfadaki içerikten otomatik olarak oluşturabilir. Aynı sayfa farklı sorgularda farklı snippet’lerle gösterilebilir.

Max-Image-Preview Direktifi Nedir?

max-image-preview, Google’ın arama sonuçlarında kullanabileceği görsel önizlemesinin azami boyutunu belirler.

Kullanılabilecek değerler:

Değer Açıklama
none Görsel önizlemesi gösterilmez
standard Standart boyutta önizleme gösterilebilir
large Geniş görsel önizlemesine izin verilir

Örnek:

<meta name="robots" content="max-image-preview:large">

Geniş ve kaliteli görseller kullanan blog, haber ve içerik sitelerinde max-image-preview:large faydalı olabilir.

Google Discover görünürlüğü hedefleyen içeriklerde büyük görsel önizlemelerine izin verilmesi önem taşıyabilir. Discover içerik ve görsel optimizasyonunun ayrıntıları için Google Discover rehberini inceleyebilirsiniz.

Google, max-image-preview direktifinin web arama, Google Görseller, Discover ve diğer desteklenen sonuçlarda uygulanabildiğini belirtmektedir.

Max-Video-Preview Direktifi Nedir?

max-video-preview, arama sonuçlarında gösterilebilecek video önizlemesinin azami süresini saniye cinsinden belirler.

<meta name="robots" content="max-video-preview:30">

Özel değerler:

Değer Anlamı
0 Hareketli video önizlemesi yerine en fazla statik görsel kullanılabilir
-1 Video önizlemesi için süre sınırı uygulanmaz
Pozitif sayı Azami önizleme süresini saniye olarak belirtir

Örnek:

<meta name="robots" content="max-video-preview:-1">

Video içeriği sunan sayfalarda video önizleme, thumbnail, yapılandırılmış veri ve sayfa içeriği birlikte değerlendirilmelidir.

Video görünürlüğünün geliştirilmesi için YouTube SEO rehberinden yararlanabilirsiniz.

Noimageindex Direktifi Nedir?

noimageindex, ilgili sayfadaki görsellerin Google tarafından indekslenmesini engellemek amacıyla kullanılır.

<meta name="robots" content="noimageindex">

Bu direktif değerlendirilebilecek durumlar:

  • Lisanslı ve sınırlı kullanımlı görseller
  • Kullanıcı hesabına özel görüntüler
  • Google Görseller’de gösterilmesi istenmeyen görsel arşivleri
  • Belirli bir sayfadaki görsellerin arama görünürlüğünün sınırlandırılması

Ancak aynı görsel farklı ve indekslenebilir bir sayfada da kullanılıyorsa Google görseli o sayfa üzerinden keşfedebilir. Görsel erişiminin tamamen sınırlandırılması gerekiyorsa dosya düzeyinde teknik kontroller uygulanmalıdır.

Notranslate Direktifi Nedir?

notranslate, Google’ın arama sonucunda sayfayı çevrilmiş biçimde sunma seçeneğini göstermemesini ister.

<meta name="robots" content="notranslate">

Bu direktif şu durumlarda değerlendirilebilir:

  • Hukuki metinlerde anlam kaybı riski
  • Yalnızca belirli bir dilde sunulabilen hizmetler
  • Otomatik çevirinin yanlış sonuç üretebileceği teknik içerikler
  • Dil sürümleri ayrı ayrı yönetilen web siteleri

Her çok dilli sitede notranslate kullanmak gerekli değildir. Çoğu projede doğru hreflang yapısı ve kaliteli yerelleştirilmiş içerikler daha uygun bir çözümdür.

Unavailable-After Direktifi Nedir?

unavailable_after, sayfanın belirli bir tarih ve saatten sonra Google arama sonuçlarında gösterilmemesini ister.

<meta name="robots" content="unavailable_after: 2026-12-31">

Kullanım alanları:

  • Süresi dolan etkinlik sayfaları
  • Geçici kampanyalar
  • Zaman sınırlı teklifler
  • Yayın hakkı sona eren içerikler
  • Belirli bir tarihten sonra geçersiz olacak duyurular

Google, belirtilen tarihten sonra URL’nin taranma sıklığını önemli ölçüde azaltabilir. Tarih geçersiz biçimde yazılırsa direktif yok sayılabilir.

Süresi dolan bir sayfayı otomatik biçimde arama sonuçlarından kaldırmak her zaman en iyi çözüm olmayabilir. Sayfa geçmiş değer taşıyorsa güncellenebilir, arşivlenebilir veya yeni sürüme yönlendirilebilir.

Indexifembedded Direktifi Nedir?

indexifembedded, noindex kullanılan bir sayfanın iframe veya benzer bir yöntemle başka bir sayfaya yerleştirildiğinde indekslenmesine izin verir.

<meta name="googlebot" content="noindex, indexifembedded">

Bu direktif özellikle:

  • Gömülü video sayfaları
  • Medya oynatıcıları
  • Gömülü widget içerikleri
  • Başka sayfalarda sunulan özel içerik bileşenleri

için kullanılabilir. indexifembedded yalnızca noindex ile birlikte kullanıldığında etkilidir.

Noarchive Etiketi Hâlâ Kullanılıyor mu?

noarchive, geçmişte Google’ın arama sonuçlarında önbelleğe alınmış sayfa bağlantısını göstermesini engellemek için kullanılıyordu.

<meta name="robots" content="noarchive">

Google Arama’daki önbellek bağlantısı özelliği kaldırıldığı için noarchive artık Google tarafından bu amaçla kullanılmamaktadır.

Aynı şekilde:

  • nocache
  • nositelinkssearchbox

direktifleri de Google Arama tarafından kullanılmamaktadır. Google bu değerleri tarihsel veya kullanılmayan kurallar arasında listelemektedir.

Robots Meta Etiketi ile Robots.txt Arasındaki Fark

Robots meta etiketi ve robots.txt birbirinin yerine geçen araçlar değildir.

Özellik Robots Meta Etiketi Robots.txt
Kullanım yeri HTML sayfanın içinde Alan adının kök dizininde
Temel amaç İndeksleme ve arama sonucu sunumunu kontrol etmek Tarayıcının URL isteğini yönetmek
Sayfa bazlı kontrol Evet URL kalıpları üzerinden
Noindex desteği Evet Google için önerilen yöntem değildir
Tarama engelleme Hayır Evet
PDF gibi dosyalar Meta etiketi kullanılamaz Tarama yönetilebilir
Direktifin okunması Sayfanın taranması gerekir Tarama öncesinde okunur

Örnek Robots.txt

User-agent: *
Disallow: /yonetim/

Örnek Robots Meta

<meta name="robots" content="noindex">

Robots.txt taramayı, robots meta etiketi ise ağırlıklı olarak indeksleme ve sunum davranışını yönetir.

Robots Meta Etiketi ile X-Robots-Tag Arasındaki Fark

Robots meta etiketi HTML belgeleri içerisinde kullanılır. PDF, görsel, video veya başka HTML dışı kaynaklarda meta etiketi eklenemeyeceği için X-Robots-Tag HTTP başlığı kullanılabilir.

Özellik Robots Meta X-Robots-Tag
Uygulama alanı HTML sayfalar HTML ve HTML dışı dosyalar
Yerleşim HTML <head> alanı HTTP yanıt başlığı
Sunucu erişimi Her zaman gerekmez Genellikle gerekir
PDF kontrolü Uygulanamaz Uygulanabilir
Toplu dosya kuralı CMS’ye göre değişir Sunucu kurallarıyla uygulanabilir

PDF dosyasını indeks dışı bırakma örneği:

HTTP/1.1 200 OK
Content-Type: application/pdf
X-Robots-Tag: noindex

Apache örneği:

<FilesMatch "\.pdf$">
    Header set X-Robots-Tag "noindex"
</FilesMatch>

NGINX örneği:

location ~* \.pdf$ {
    add_header X-Robots-Tag "noindex";
}

Google, robots meta etiketinde kullanılabilen kuralların X-Robots-Tag HTTP başlığında da kullanılabileceğini ve HTML dışı dosyalar için bu yöntemin tercih edilmesi gerektiğini belirtmektedir.

Robots Meta Etiketi ile Canonical Karşılaştırması

Durum Kullanılması Gereken Yöntem
Sayfa arama sonuçlarında hiç görünmemeli noindex
Yinelenen sayfanın ana sürümü belirtilmeli rel="canonical"
Eski URL kalıcı olarak taşındı 301 yönlendirmesi
Tarayıcının URL’yi istemesi engellenmeli Robots.txt
PDF dosyası indeks dışı bırakılmalı X-Robots-Tag
Belirli metin snippet’te görünmemeli data-nosnippet
Sayfa özel ve gizli olmalı Parola veya erişim kontrolü

Doğru yöntem, sayfanın neden sınırlandırılmak istendiğine göre seçilmelidir.

Robots Meta Etiketi AI Overviews ve AI Mode’u Etkiler mi?

Evet. Google’ın robots meta ve snippet kontrolleri AI Overviews ile AI Mode sonuçlarında da uygulanabilir.

Google’a göre:

  • noindex, sayfanın arama sonuçlarında gösterilmesini engeller.
  • nosnippet, içeriğin AI Overviews ve AI Mode için doğrudan girdi olarak kullanılmasını engeller.
  • max-snippet, AI özelliklerinde doğrudan kullanılabilecek içerik miktarını sınırlandırabilir.
  • data-nosnippet, belirli metin bölümlerinin snippet ve AI sunumlarında kullanılmasını sınırlandırabilir.

Google, yapay zekâ özelliklerini arama sisteminin bir parçası olarak değerlendirmekte ve içerik kontrolleri için robots.txt, noindex, nosnippet, data-nosnippet ve max-snippet araçlarının kullanılabileceğini belirtmektedir.

Yapay zekâ destekli aramalara yönelik teknik ve içerik çalışmalarının ayrıntıları için AI SEO Nedir? rehberini inceleyebilirsiniz. Yanıt motorlarına uygun içerik yapısı için AEO Nedir? içeriğinden yararlanabilirsiniz.

Robots Meta Etiketi Search Console’da Nasıl Kontrol Edilir?

Robots meta uygulamalarını kontrol etmek için Google Search Console kullanılabilir.

URL Denetleme Aracı

URL Denetleme aracıyla:

  • Google’ın URL’yi indeksleyip indekslemediği
  • Sayfanın taranmasına izin verilip verilmediği
  • Googlebot’un gördüğü HTML
  • Noindex direktifinin algılanıp algılanmadığı
  • Kullanıcı tarafından belirtilen canonical
  • Google tarafından seçilen canonical

incelenebilir.

Canlı URL Testi

Etiket yakın zamanda değiştirildiyse canlı URL testiyle güncel sayfa kontrol edilebilir.

Sayfa İndeksleme Raporu

Raporda şu durum görülebilir:

noindex etiketi tarafından hariç tutuldu

Bu durum bilinçli olarak noindex uygulanan sayfalarda hata değildir. Önemli bir sayfa yanlışlıkla noindex olduysa kritik bir SEO problemi olarak değerlendirilmelidir.

Google, noindex uygulamasının doğruluğunu kontrol etmek için URL Denetleme aracının ve noindex tespit edilen sayfaları izlemek için Sayfa İndeksleme raporunun kullanılmasını önermektedir. Search Console raporlarının kullanımı için Google Search Console rehberini inceleyebilirsiniz.

Robots Meta Etiketi Denetimi Nasıl Yapılır?

Kapsamlı bir teknik denetimde robots meta etiketleri URL bazında taranmalıdır.

Kontrol edilecek alanlar:

Kontrol Beklenen Sonuç
Önemli hizmet sayfaları noindex bulunmamalı
Ürün ve kategori sayfaları Stratejiye göre indekslenebilir olmalı
Sepet ve ödeme sayfaları Genellikle noindex değerlendirilebilir
Site içi arama sonuçları Çoğunlukla noindex değerlendirilir
Filtre URL’leri Site mimarisine göre ayrı planlanmalı
PDF dosyaları Gerekirse X-Robots-Tag kontrol edilmeli
Test ortamı Parola koruması ve noindex kontrol edilmeli
Eski kampanya sayfaları Güncelleme, yönlendirme veya noindex kararı verilmeli
AI kontrolleri Nosnippet ve max-snippet kullanımları incelenmeli

Teknik denetim sırasında robots meta etiketi tek başına değerlendirilmemelidir. Şu unsurlar birlikte incelenmelidir:

  • Robots.txt
  • HTTP durum kodları
  • Canonical
  • XML site haritası
  • İç bağlantılar
  • X-Robots-Tag
  • JavaScript tarafından eklenen meta etiketler
  • Search Console indeksleme verileri

Kapsamlı denetim adımları için SEO Audit Nedir? rehberinden yararlanabilirsiniz.

XML Site Haritasında Noindex Sayfalar Bulunmalı mı?

Genellikle hayır. XML site haritasında, arama motorları tarafından indekslenmesini istediğiniz canonical URL’ler bulunmalıdır.

Bir URL’de aynı anda:

<meta name="robots" content="noindex">

bulunması ve URL’nin sitemap içerisinde yer alması çelişkili sinyaller oluşturur.

Site haritası:

Bu URL önemli ve indekslenmesini istiyorum.

Noindex:

Bu URL arama sonuçlarında gösterilmesin.

Bu nedenle noindex sayfalar XML site haritasından çıkarılmalıdır.

Site haritasının oluşturulması ve hatalı URL’lerin temizlenmesi için Site Haritası Nedir? içeriğini inceleyebilirsiniz.

Robots Meta Etiketinde Yapılan Hatalar

Önemli Sayfalara Yanlışlıkla Noindex Eklemek

Tema, SEO eklentisi veya toplu şablon ayarı nedeniyle hizmet ve kategori sayfaları indeks dışı kalabilir.

Noindex Sayfayı Robots.txt ile Engellemek

Googlebot sayfaya erişemediği için noindex direktifini göremeyebilir.

Noindex Etiketini Gizlilik Yöntemi Sanmak

Noindex URL’ye erişimi engellemez. Özel içerikler parola veya kullanıcı yetkilendirmesiyle korunmalıdır.

Canonical Yerine Noindex Kullanmak

Yinelenen sayfaların sinyallerini bir ana URL’de toplamak için canonical daha uygun olabilir.

Bütün Linklere Sayfa Düzeyinde Nofollow Uygulamak

Önemli iç bağlantıların keşfedilmesini ve site mimarisinin anlaşılmasını zorlaştırabilir.

Noindex Sayfaları Sitemap’e Eklemek

Arama motorlarına çelişkili sinyal gönderir.

JavaScript ile Geç Meta Etiketi Eklemek

Google JavaScript oluşturabilse de etiketlerin ilk ve geçerli HTML içerisinde bulunması daha güvenilir bir uygulamadır.

Birbiriyle Çelişen Etiketler Kullanmak

Örnek:

<meta name="robots" content="max-snippet:100">
<meta name="googlebot" content="nosnippet">

Googlebot için daha kısıtlayıcı nosnippet uygulanabilir.

Noarchive Kullanarak Önbelleği Kontrol Etmeye Çalışmak

Google’ın önbellek bağlantısı kaldırıldığı için noarchive artık bu amaçla kullanılmamaktadır.

Değişiklik Sonrasında Kontrol Yapmamak

Etiket kaldırılmış olsa bile Google’ın URL’yi yeniden taraması zaman alabilir. Search Console üzerinden yeniden tarama talep edilebilir.

Robots Meta Etiketi Kontrol Listesi

  • Önemli sayfalarda yanlış noindex var mı?
  • Noindex sayfalar robots.txt ile engelleniyor mu?
  • Noindex URL’ler sitemap içerisinde bulunuyor mu?
  • Canonical ile robots direktifleri uyumlu mu?
  • Sayfa düzeyinde gereksiz nofollow kullanılıyor mu?
  • X-Robots-Tag HTTP başlıkları kontrol edildi mi?
  • PDF ve görsel dosyaların indeks durumu planlandı mı?
  • Snippet kontrolleri bilinçli biçimde kullanılıyor mu?
  • nosnippet tıklama oranını etkileyebilir mi?
  • max-snippet değerleri doğru yazılmış mı?
  • Büyük görseller için max-image-preview:large uygun mu?
  • Video sayfalarında max-video-preview kontrol edildi mi?
  • data-nosnippet geçerli HTML öğelerinde mi?
  • Eski noarchive ve nocache direktifleri temizlendi mi?
  • JavaScript ile eklenen meta etiketler doğru çalışıyor mu?
  • WordPress eklentisi ayarları kaynak koduna yansıyor mu?
  • Search Console URL Denetleme aracı kullanıldı mı?
  • Canlı URL testi yapıldı mı?
  • Robots meta değişikliğinden sonra yeniden tarama istendi mi?
  • Teknik değişiklikler raporlandı mı?

Robots Meta Etiketi Hakkında Sıkça Sorulan Sorular

Robots Meta Etiketi Nedir?

Robots meta etiketi, arama motorlarına bir HTML sayfasının dizine eklenmesi, bağlantılarının takip edilmesi ve arama sonuçlarında nasıl gösterilmesi gerektiği hakkında talimat veren meta etikettir.

Robots Meta Etiketi Nereye Yazılır?

HTML belgesinin <head> alanına eklenmelidir:

<meta name="robots" content="noindex">

Noindex Ne İşe Yarar?

Noindex, sayfanın arama sonuçlarında gösterilmemesini sağlar. Googlebot’un etiketi görebilmesi için sayfanın taranabilir olması gerekir.

Noindex Sayfa Google Tarafından Taranır mı?

Evet. Google’ın noindex etiketini görebilmesi için sayfayı taraması gerekir. Google, sayfanın noindex olduğunu gördükten sonra URL’yi arama sonuçlarından çıkarabilir.

Robots.txt ile Noindex Aynı mı?

Hayır. Robots.txt taramayı, noindex ise sayfanın arama sonuçlarında gösterilmesini kontrol eder.

Robots.txt İçerisinde Noindex Yazılır mı?

Google için önerilen bir kullanım değildir. Noindex, HTML meta etiketi veya X-Robots-Tag HTTP başlığıyla uygulanmalıdır.

Noindex ve Nofollow Birlikte Kullanılır mı?

Evet:

<meta name="robots" content="noindex, nofollow">

Ancak bağlantıların takip edilmesinin gerçekten engellenmesi gerekip gerekmediği ayrıca değerlendirilmelidir.

None Direktifi Ne Anlama Gelir?

none, noindex, nofollow ile aynı anlama gelir.

Index, Follow Yazmak Zorunlu mu?

Hayır. Kısıtlayıcı bir direktif bulunmadığında indeksleme ve bağlantı takibi varsayılan davranıştır.

Noindex Gizli Sayfaları Korur mu?

Hayır. Noindex yalnızca destekleyen arama motorlarında görünürlüğü engeller. URL’ye erişimi sınırlandırmaz.

PDF Dosyasına Robots Meta Etiketi Eklenir mi?

PDF dosyasının HTML <head> alanı bulunmadığı için X-Robots-Tag HTTP başlığı kullanılmalıdır.

Nosnippet Ne İşe Yarar?

Arama sonucunda metin açıklaması ve video önizlemesi gösterilmesini engeller. AI Overviews ve AI Mode kullanımını da etkileyebilir.

Data-Nosnippet Ne İşe Yarar?

Sayfanın yalnızca belirli metin bölümlerinin arama sonucu snippet’inde kullanılmasını engeller.

Max-Snippet Nedir?

Arama sonucu açıklamasında kullanılabilecek azami karakter sayısını belirler.

Noarchive Hâlâ Kullanılıyor mu?

Google Arama’daki önbellek bağlantısı kaldırıldığı için noarchive artık bu özelliği kontrol etmek amacıyla kullanılmamaktadır.

Noindex Değişikliği Ne Zaman Uygulanır?

Googlebot’un sayfayı yeniden taraması gerekir. Süre sitenin tarama sıklığına göre birkaç günden daha uzun sürelere kadar değişebilir. URL Denetleme aracından yeniden tarama talep edilebilir.

Robots Meta Etiketi Sıralamayı Artırır mı?

Doğrudan sıralama artıran bir etiket değildir. Yanlış kullanılması önemli sayfaların indeks dışı kalmasına ve organik trafik kaybına neden olabilir.

Profesyonel Robots Meta Denetimi Neleri Kapsar?

Profesyonel teknik SEO çalışmasında şu kontroller yapılabilir:

  • Bütün indekslenebilir URL’lerin taranması
  • Robots meta etiketlerinin sınıflandırılması
  • Yanlış noindex kullanımının tespit edilmesi
  • Robots.txt ve meta direktiflerinin karşılaştırılması
  • Sitemap ve noindex çakışmalarının bulunması
  • Canonical tutarlılığının kontrolü
  • X-Robots-Tag başlıklarının incelenmesi
  • PDF ve medya dosyalarının kontrolü
  • Snippet ve görsel önizleme ayarlarının analizi
  • AI Overviews ve AI Mode kontrolleri
  • Search Console doğrulaması
  • Önceliklendirilmiş teknik görev listesi
  • Uygulama sonrası yeniden kontrol

Düzenli teknik takip, içerik optimizasyonu ve performans raporlaması için Aylık SEO Hizmeti içeriğini inceleyebilirsiniz. Teknik ve içerik çalışmalarını kapsayan seçenekler için SEO Paketleri sayfasından yararlanabilirsiniz.

Robots meta etiketi, arama motorlarının bir HTML sayfasını nasıl indeksleyeceğini ve arama sonuçlarında nasıl sunacağını kontrol eden temel teknik SEO araçlarından biridir.

noindex, sayfanın arama sonuçlarında gösterilmesini engeller. Ancak Googlebot’un bu etiketi görebilmesi için sayfanın taranabilir olması gerekir. Bu nedenle noindex kullanılan URL’nin robots.txt dosyasıyla engellenmesi istenmeyen sonuçlara yol açabilir.

nofollow, sayfa üzerindeki bağlantıların takip edilmesini sınırlandırır. Bu direktif, tek bir bağlantıda kullanılan rel="nofollow" ile karıştırılmamalıdır.

nosnippet, arama sonuçlarındaki metin açıklamasını ve video önizlemesini engeller. max-snippet, gösterilebilecek metnin azami uzunluğunu; max-image-preview görsel boyutunu; max-video-preview ise video önizleme süresini kontrol eder.

HTML dışındaki PDF, görsel ve video dosyaları için X-Robots-Tag HTTP başlığını kullanın. Yinelenen sayfaları yönetirken noindex yerine canonical veya yönlendirme kullanımının daha uygun olup olmadığını değerlendirin.

Noindex sayfaları XML site haritasında tutmayın. Robots meta, canonical, robots.txt, site haritası ve iç bağlantı kurallarının birbiriyle çelişmediğini düzenli olarak kontrol edin.

Değişiklikleri yalnızca kaynak kodundan değil, Google Search Console URL Denetleme ve Sayfa İndeksleme raporlarından da doğrulayın.

Robots meta etiketini yalnızca sayfaları Google’dan gizleyen basit bir kod olarak değil; indeksleme, snippet, görsel, video ve yapay zekâ destekli arama görünürlüğünü sayfa düzeyinde yöneten kritik bir teknik SEO kontrolü olarak değerlendirin.

Yorum yazın

E-posta adresiniz yayınlanmaz. Gerekli alanlar işaretlendi.