Öncelikle indexleme dediğimiz ingilizce kavramın Türkçe karşılıgı internet sitenizin bir nevi haritasının çıkarılmasıdır.. Bu haritalama işini yapan ise Googlenin internette sürekli dolaşan robot yazılımlarıdırki bu robot yazılımlara Örümcek deniliyor. İnternetin anlamını açıklayan yazımda İnternetin büyük bir örümcek ağı gibi olduğunu açıklamıştım zaten. İşte bu büyük ağda gezinen herkes örümcek oluyor ama Google örümcekleri her insandan her yazılımdan daha çok geziyorlar ve sürekli internetin haritasını güncelliyorlar. İşte bu örümcekler sitenize gelip internet sitenize göz atar ve harinanızı çıkarırsa siteniz indexlenmiş olur.. Bu sitenizin artık Google tarafından görüldüğünün ve sık sık Örümcekler tarafından ziyaret edileceğinin göstergesidir. Bu örümcekler sitenizi ne kadar sık ziyaret ederse sizin google aramalarında üst sıralara çıkma olasılıgınız fazlalaşır. Özellikle sürekli içerik ekleyen siteler için bu çok önemlidir.