Arama motorları sitenizi üç temel aşamada işler: önce sayfalarınızı keşfedip indirir (tarama), sonra içeriği analiz edip bir veri tabanına ekler (indeksleme) ve son olarak bir kullanıcı arama yaptığında bu veri tabanından en uygun sonuçları seçip sıralar (sıralama). Bu üç aşamanın nasıl çalıştığını anlamak, hangi SEO çalışmasının gerçekten işe yaradığını görmenizi sağlar.
SEO ile uğraşan çoğu kişi anahtar kelime ve içerik üretmeye odaklanır ama işin temelini, yani Google'ın bir sayfayı nasıl bulup nasıl değerlendirdiğini atlar. Oysa Wix, Ikas ya da özel kodlu bir site fark etmeksizin, sayfanız önce keşfedilmeli, sonra dizine eklenmeli ki sıralamaya bile girebilsin. Aşağıda bu mekanizmayı resmi kaynaklara dayanarak adım adım açıyoruz.
Tarama (Crawling) Nasıl Gerçekleşir?
Tarama, sürecin ilk adımıdır. Google Arama Merkezi'ne göre arama, tarama, dizine ekleme ve yayınlama (sıralama) olmak üzere üç aşamada çalışır. Tarama aşamasında, crawler adı verilen otomatik programlar (Google'ın kullandığı program Googlebot'tur) buldukları sayfalardaki metni, görselleri ve videoları indirir.
Peki Googlebot bir sayfayı nasıl bulur? Büyük ölçüde bağlantıları takip ederek. Halihazırda bildiği bir sayfada yeni bir sayfaya giden bir link görürse, o linki izleyip yeni adresi keşfeder. Bu yüzden iç linkleme sadece kullanıcı deneyimi için değil, sayfalarınızın bulunabilmesi için de önemlidir. Yeni bir sayfa hiçbir yerden link almıyorsa, keşfedilmesi gecikebilir.
Burada çoğu kişinin gözden kaçırdığı kritik bir nokta var: tarama her sayfa için garanti değildir. Google açıkça "Googlebot, bulduğu tüm sayfaları taramaz" diyor. Bazı sayfalar tarama dışı bırakılabilir, bazıları ise erişim engelleri yüzünden taranamaz. Yani sitenizde bir sayfa olması, Google'ın onu mutlaka göreceği anlamına gelmez.
Tarama Bütçesi (Crawl Budget)
Özellikle büyük sitelerde "tarama bütçesi" kavramı devreye girer. Bu, Googlebot'un belirli bir süre içinde sitenizde tarayacağı sayfa sayısının pratik bir sınırı gibi düşünülebilir. Binlerce ürün sayfası olan bir e-ticaret sitesinde, gereksiz, yinelenen veya düşük değerli URL'ler tarama bütçesini tüketirse, asıl önemli sayfalarınızın taranması gecikebilir. Küçük ve düzenli sitelerde bu genellikle bir sorun olmaz, ancak sayfa sayısı arttıkça gereksiz URL'leri temizlemek anlamlı hale gelir.
Tarama bütçesini boşa harcayan tipik unsurlar arasında sonsuz filtre kombinasyonları, oturum kimliği taşıyan URL'ler, kırık yönlendirme zincirleri ve sürekli hata dönen adresler bulunur. Googlebot bu adreslere zaman ayırdıkça asıl kazanç getiren kategori ve ürün sayfalarınıza daha az zaman kalır. Bu yüzden büyük sitelerde tarama bütçesini korumak, doğrudan görünürlük kazancına dönüşebilir. Tarama hızını etkileyen başka unsurlar da vardır: sunucunuz yavaşsa veya sık hata veriyorsa, Googlebot siteyi yormamak için tarama temposunu düşürebilir. Yani teknik sağlamlık ile taranma verimliliği el ele gider.
İndeksleme (Indexing) Aşaması
Bir sayfa tarandıktan sonra sıra indekslemeye gelir. Bu aşamada Google sayfanın metnini, başlık etiketlerini, görsellerini ve diğer içerik unsurlarını analiz ederek içeriğin ne hakkında olduğunu anlamaya çalışır ve sonuçları kendi dizinine, yani devasa bir veri tabanına ekler.
Taramada olduğu gibi indekslemede de bir garanti yoktur. Google'ın net ifadesiyle "Sayfaların dizine ekleneceği garanti değildir." İçeriğin kalitesi, teknik sorunlar veya sayfanın robots meta etiketleri indekslenip indekslenmeyeceğini etkiler. Bir sayfa taranmış olabilir ama yine de dizine eklenmemiş olabilir; bu durumda o sayfa hiçbir aramada görünmez.
Yinelenen İçerik ve Canonical
İndekslemede sık karşılaşılan konulardan biri yinelenen (duplicate) içeriktir. Aynı veya çok benzer içeriğe birden fazla URL'den ulaşılabiliyorsa (örneğin filtreli ürün listeleri, www'lu ve www'suz sürümler ya da takip parametreli linkler), Google bunları gruplar ve bir tanesini temel sürüm olarak seçer. Bu seçimi kendiniz yönlendirmek için canonical etiketi kullanırsınız. Doğru canonical kullanımı, sıralama gücünüzün tek bir adreste toplanmasına ve dizinin gereksiz tekrarlarla şişmemesine yardımcı olur. Wix ve Ikas gibi platformlarda bu ayarlar genellikle hazır gelir, ancak kontrol etmekte fayda var.
Sıralama (Ranking) Sinyalleri
Üçüncü aşama, bir kullanıcı arama yaptığında devreye girer. Google bu anda dizininden konuyla en alakalı ve en kaliteli sonuçları seçip sıralar. Aynı resmi kaynakta belirtildiği gibi sıralama otomatiktir ve Google, bir sayfayı daha üst sıraya çıkarmak için ödeme kabul etmez. Sonuçlar dizinden, yüzlerce faktör dikkate alınarak seçilir; bunlara kullanıcının konumu, dili ve cihazı da dahildir.
Bu "yüzlerce faktör" ifadesi önemli. SEO dünyasında sıkça 200'den fazla sıralama sinyalinden bahsedilir. Bunların tam listesi ve ağırlıkları kamuya açık değildir, dolayısıyla kesin sayılar yerine yaklaşımlara odaklanmak daha sağlıklıdır. Genel olarak içeriğin alaka düzeyi, kullanılabilirliği, sayfanın yüklenme deneyimi ve içeriğin güvenilirliği belirleyici unsurlar arasındadır.
Aynı arama her kullanıcı için aynı sonucu vermeyebilir. Konum, dil ve cihaz bağlamı sonuçları değiştirir; örneğin İstanbul'dan yapılan yerel bir arama ile başka bir şehirden yapılan arama farklı işletmeleri öne çıkarabilir. Bu yüzden "benim sitem kaçıncı sırada" sorusunun tek ve sabit bir cevabı yoktur.
E-E-A-T ve İçerik Güvenilirliği
Google'ın kalite değerlendirmesinde sıkça anılan bir çerçeve E-E-A-T'tir: Experience (deneyim), Expertise (uzmanlık), Authoritativeness (otorite) ve Trustworthiness (güvenilirlik). Bu doğrudan bir sıralama "butonu" değildir, ancak içeriğinizin kim tarafından, hangi deneyime dayanarak yazıldığını netleştirmek, özellikle sağlık, finans gibi hassas konularda fark yaratır. Yazar bilgisi, güncelleme tarihi ve kaynak gösterimi gibi sinyaller güveni destekler.
Pratik açıdan bunun anlamı şu: tek başına anahtar kelime doldurmak artık yetmez. Kullanıcının sorusuna gerçekten cevap veren, okunması kolay ve güvenilir bir sayfa, hem klasik sıralamada hem de yapay zeka özetlerinde daha şanslıdır. Sıralamayı tek bir hileyle yukarı çekmeye çalışmak yerine, içeriğin bütününü kullanıcı için değerli hale getirmek daha sürdürülebilir bir yaklaşımdır.
Robots.txt ve Sitemap'in Rolü
Tarama ve indekslemeyi yönlendirirken en çok karıştırılan iki dosya robots.txt ve XML sitemap'tir. İkisinin işlevi farklıdır ve bu farkı bilmemek ciddi hatalara yol açar.
robots.txt'in Gerçek İşlevi
robots.txt'in asıl amacı sitenize gelen tarama trafiğini yönetmektir. Google'ın robots.txt kılavuzuna göre bu dosya, bir web sayfasını Google'ın dizininden uzak tutmak için kullanılan bir mekanizma değildir. Çok kritik bir ayrıntı şu: robots.txt ile taranması engellenen bir URL, başka siteler ona link veriyorsa yine de dizine eklenebilir. Yani "robots.txt ile engelledim, artık Google görmez" düşüncesi yanlıştır.
Bir sayfanın gerçekten arama sonuçlarında çıkmamasını istiyorsanız Google'ın önerdiği yöntem farklıdır: noindex meta etiketi (ya da yanıt başlığı) kullanmak veya sayfayı parola korumasına almak. Bunun ince bir detayı var; noindex etiketinin görülebilmesi için sayfanın taranabilir olması gerekir. Sayfayı hem robots.txt ile engelleyip hem noindex koyarsanız, Google noindex etiketini hiç göremeyebilir. Bu, uygulamada sık yapılan bir hatadır.
XML Sitemap Ne İşe Yarar?
Sitemap, sitenizdeki sayfalar, videolar ve diğer dosyalar ile bunların aralarındaki ilişkiler hakkında bilgi veren bir dosyadır. Google'ın sitemap dokümanına göre bu dosya arama motorlarının sitenizi daha verimli taramasına yardımcı olur. Sitemap, bir sayfanın en son ne zaman güncellendiği (lastmod) ve alternatif dil sürümleri gibi bilgileri de içerebilir.
Sitemap her site için zorunlu değildir. Aynı kaynak, sitemap'in özellikle şu durumlarda faydalı olduğunu belirtir:
- Büyük siteler: Çok sayıda sayfası olan sitelerde, bazı yeni veya güncellenen sayfaların gözden kaçma ihtimali azalır.
- Yeni ve az dış bağlantısı olan siteler: Yeni bir siteye dışarıdan pek link verilmemişse, crawler sayfaları link takibiyle bulamayabilir; sitemap bu sayfaların keşfedilmesini sağlar.
- Zengin medya içeren siteler: Video ve görsel ağırlıklı sitelerde sitemap ek bilgi sunar.
Buna karşılık, sayfaları kendi içinde iyi bağlanmış, görece küçük siteler (yaklaşık 500 sayfa veya daha az) sitemap olmadan da sorunsuz taranabilir. Yine de modern site altyapıları sitemap'i otomatik ürettiği için, oluşturup Google Search Console'a göndermek pratik bir adımdır.
Tarama ve İndeksleme Sorunlarını Teşhis Etmek
Bu mekanizmayı bilmek, sorun çıktığında nereye bakacağınızı da gösterir. Google Search Console, tarama ve indeksleme durumunu görebileceğiniz birincil araçtır. Sayfa indekslenmiş mi, taranmış ama indekslenmemiş mi, yoksa hiç keşfedilmemiş mi; bunları buradan kontrol edebilirsiniz.
Sık karşılaşılan senaryolar şöyledir:
- Sayfa taranmış ama indekslenmemiş: içerik kalitesi, yinelenen içerik veya canonical ayarlarını gözden geçirin.
- Sayfa keşfedilmiş ama henüz taranmamış: tarama bütçesi veya iç linkleme eksikliği olabilir.
- Sayfa robots.txt ile engellenmiş: gerçekten engellemek mi istediğinizi, yoksa kazara mı engellendiğini kontrol edin.
Bu Bilgi SEO Kararlarınızı Nasıl Etkiler?
Üç aşamayı anladığınızda SEO çalışmalarınız tahminden çıkıp mantığa oturur. İşte Wix, Ikas veya özel siteler için uygulanabilir birkaç çıkarım:
- Önce taranabilirlik: Yeni sayfalarınızın iç linklerle bağlandığından ve yanlışlıkla robots.txt'te engellenmediğinden emin olun. Keşfedilmeyen sayfa sıralanamaz.
- İndekslemeyi doğrulayın: Yeni içerik yayınladıktan sonra Search Console'dan indekslenip indekslenmediğine bakın; "yayınladım, bitti" demeyin.
- noindex ve robots.txt'i karıştırmayın: Bir sayfa sonuçlarda çıkmasın istiyorsanız noindex kullanın, robots.txt'e güvenmeyin.
- Yinelenen URL'leri sadeleştirin: Filtre, parametre ve sürüm farklarından doğan kopya URL'leri canonical ile yönetin.
- Sitemap'i güncel tutun: Özellikle büyüyen bir siteniz varsa lastmod bilgileri doğru olan bir sitemap, taramayı verimli kılar.
AI Overviews ve Üretken Arama Çağında Tarama
Arama sonuçlarına yapay zeka özetleri (AI Overviews) ve üretken arama deneyimleri eklendikçe "SEO bitti mi" sorusu sıkça gündeme geliyor. Kısa cevap: hayır. Bu özetler de büyük ölçüde aynı temel üzerine kuruludur. Bir içeriğin yapay zeka tarafından özette kaynak olarak kullanılabilmesi için önce taranabilir ve dizine eklenebilir olması gerekir. Yani tarama ve indeksleme, klasik mavi linklerde olduğu gibi üretken arama görünürlüğünde de kapıyı açan ilk koşuldur.
Bu nedenle GEO (generative engine optimization) veya AEO (answer engine optimization) gibi yeni yaklaşımlar, teknik SEO'nun temelini geçersiz kılmaz; üzerine inşa eder. Net, iyi yapılandırılmış ve erişilebilir içerik, hem geleneksel sıralamada hem de yapay zeka özetlerinde avantaj sağlar.
Özetle
Arama motorları sayfanızı keşfeder (tarama), anlamlandırıp veri tabanına ekler (indeksleme) ve kullanıcı arama yaptığında en uygun sonuçları seçer (sıralama). Ne tarama ne de indeksleme her sayfa için garantilidir, sıralama ise satın alınamaz. Bu zinciri bilmek, çabanızı doğru yere yönlendirmenizi sağlar: önce sayfanın görülmesini, sonra dizine girmesini, en sonunda da iyi sıralanmasını güvence altına alırsınız.
Sitenizin taranma ve indekslenme durumunu düzenli takip etmek istiyorsanız ve teknik SEO'yu Wix veya Ikas üzerinde tek panelden yönetmek size kolaylık sağlayacaksa, VixSEO'nun araçlarına ve hizmetlerine göz atabilirsiniz. Amacımız bu teknik adımları sizin için anlaşılır ve uygulanabilir hale getirmek.