Arama Robotu Nedir?
Üretim sektöründe kullanılan endüstriyel robot, hanımların kullandığı mutfak robotu ya da ÖSS’ye hazırlananların baş belası ÖSS Tercih robotu derken nereden çıktı bu Arama Robotu diyeceksiniz? Teknik tüm tanımları bir tarafa atarak şunları hep birlikte tanıyalım.

Bu arama robotları, arama motorlarının (örnek Google) gizli ajanlarıdırlar. Hangi sitede, hangi blogda, hangi forumda yani kısaca internette ne olup bitiyorsa hemen abileri olan arama motoruna yetiştirirler. Dünya böyle müzevirci, laf taşıyıcı ya da dedikoducu varlık görmemiştir. Bunların müzevirini sadece mahalle duymaz dünyanın öbür ucuna lafınız gider. Sabah bir forumda laf edersiniz lafınızı ettikten önce zaman farkından dolayı ABD’den arayan bulur. Böyle merettir bu arama robotu.

Neyse bu kadar dedikodusunu ettik. Bazı olumlu şeyler de söyleyelim bari. Webmastırlar bunları çok sever. Adeta siteme gelsin diye yolunu gözlerler.

Teknik anlamda arama robotu (web robot, search engine robot ya da kısaca webbot) basit bilgisayar yazılımlarıdır. Bunlar siteler arasındaki linklerden, ya da site, blog isimlerinin tutulduğu adreslerden bir şekilde dedikodusunu yapacağı yerleri öğrenerek internet üzerinde bu yerlere düzenli aralıklarla ziyaretlerde bulunan ve içeriği koklamaya çalışan bilgisayar programlarıdırlar. Webmastırlar onların ne zaman geldiğini (tam olarak zamanı bilmemekle beraber) ne kadar aralıklarla uğradıklarını çeşitli istatistiksel araçları kullanmak suretiyle bilirler. Hatta bazı araçlarla onlara açık davette bulunurlar (Örnek Google Sitemaps). Onların işlerini kolaylaştırmak için… Onların işlerini kolaylaştıranları da sever bu zat-ı muhteremler. Bunların görevleri arama motorunun kendilerine verdiği talimata göre internete bağlı her sayfadan bilgi koparmaktır.

Madem bu vatandaşlar arama motorlarıyla aranızdaki tek iletişim aracı eğer arama motorlarında bedava yer kapmak isterseniz bunları niye kullanmayasınız? (bknz. Arama Motorlarının Firmalarımız İçin Önemi) Bazı insanlar birilerine laf iletmek isteyince, dedikoducu insanları kullanırlar. ‘Ya şu falanca bugün şöyle dedi..’. Dedikoducu insan alır bu lafı anında taşır diğerlerine. Bu diğerleri bizim durumumuzda arama robotunun ‘abi’si olan arama motoru. İşte Arama Motoru Optimizasyonu Uzmanı kavramı burada gündeme geliyor. Arama motorlarının dilinden bir şekilde anlayan ve bunları uygun şekilde yemlemekte uzman olan kişilere Arama Motoru Optimizasyonu Uzmanı (SEO Expert) denilebilir.

Bu arama robotları neleri sever, nelerin dedikodusuna bayılır neleri sevmezler kısa bir liste yapayım dedim. Bakalım beğenecek misiniz? Not: Yazdıklarım özellikle Google arama robotları içindir. Onları, sevdikleri ve sevmedikleriyle biraz daha yakından tanımaya çalışalım..

Arama Robotları ve Arama Motorları Ardındaki Gerçekler (dırınınım..)

• İnternetteki PageRank değeri yüksek sitelere, bloglara bayılırlar. PageRank değeri 6-7 üzerinde bir yerde yazınız varsa bunu alırlar anında. O yüzden yazdığınızı dünyanın diğer ucundaki arkadaşınıza başlık vererek söyleyin arama motorundan arar ve ilk sayfada bulur.
• Blogları özellikle yazıları günlük yenilenenleri çok severler. Yanlarından ayrılmazlar.
• Başkalarının çokça link verdiği bir sitenin ya da sayfanın dibinden ayrılmazlar. Acaba ne yapacak ne diyecek diye hazırolda beklerler. Arama motoru ‘Abileri’ onlara adeta emir vermiştir.
• Pek sanatsever değildirler. Onca emek vererek hazırladığınız flash animasyonlara ve içlerindeki bağlantılara ve yazılara hiç ehemmiyet göstermezler.
• İçinde çok fazla bağlantı olan siteleri sevmezler. Hatta arama motoru ‘abi’lerine bildirerek bunların cezalandırılmaları için ellerinden geleni yaparlar. Dedikoducu birisi için eğer çok fazla dedikodu konusu varsa hangisini takip edip bildirecek zor iş değil mi?
• Ha bir de bunlar her dedikoduyu taşımazlar. Ettiğiniz laflarla bağlantılarınızın laflarının birbirleriyle uyum içinde olması gerekir. Örneğin siz inşaat sektöründesiniz sitenizde bir müzikçi arkadaşınıza link verdiniz. Yani onun dedikodusunu yapıyorsunuz. Sizin söylediğinizi kaale almaz.
• Arama robotu hakkında çok güzel bir nokta. Bunları dilerseniz dedikodudan menedebilirsiniz. Dedikoducu insanları engelleyemezsiniz. Ama bunları kesin olarak engelleyebilirsiniz. Yani gözüme gözükme, laf taşıma deme şansınız var. robot.txt dosyasına seni istemiyorum, sitemi dolaşma derseniz çok naziktirler. Kesinlikle sitenizden bir şey taşımazlar. Peki bunları kim istemez. Örneğin, https siteleri, güvenlik gerektiren sayfaları olan bankalar vs. Ayrıca sitemdeki resimleri ya da belli dosyalara ait bilgiyi de taşıma şaklinde kısmi kısıtlar ve yasaklar koyabilirsiniz.
• Bunlar verdiğiniz bağlantıları takip ederek site site dolaşırlar. Çok arsızdırlar. İnternete birşey koyduysanız kullanıcısının ruhu bile duymadan bilgilerini alırlar. Bağlantılarından giderek diğer dostlarının da aynı şekilde bilgilerini alırlar.
• Naziktirler demiştik. Kullanıcı adı ve parolayla korunmuş yerlere girmeye çalışmazlar. Hatta kendilerine izin verilmediğinde konukların girmesine izin verilen yerlere bile girmezler. Bakınız Moodle Kullanımı

Sanki başımda durmuş, post etse de götürsem şu yazıyı diyor gibi geldi..

Çok mu dedikodusunu yaptık ne…