Google İndex Sistemi ve Botları Nasıl Çalışır

İndeksleme; Arama motorlarının sizin sitenizi kendi veritabanına kaydetmesi demektir.
Google arama motorunun bilinen 3 adet  “bot” u vardır. Peki bot nedir? Bot arama motoru yazılımlarının bir parçasıdır. Sitenizin her sayfasına girer, kategorilendirir ve son olarak da veritabanına kaydeder. Google’ın iyi bilinen 3 botu: Adsense Bot, FreshBot ve DeepCrawl…
Adsense : Google’ın webmasterlar için sitelerinde içeriklerine göre reklam yayınlayıp para kazanabilecekleri bir sistemdir. Tahmin edeceğiniz gibi Adsense Botları bu reklamları yayınlayan siteler içindir. Sitenin içeriği değiştikçe veya yenisi eklendikçe Adsense reklamları içeriğe göre reklam yayınlamak için her değişmeden sonra 15 dk. içerisinde gelirler ve yeni yerleri indeksleyip giderler. Fakat bizi asıl ilgilendirenler FreshBot ve DeepCrawl botlarıdır…
Freshbot : sitenizdeki en popüler ve yeni sayfalar ile ilgilenirler. Bunun bir veya binlerce olması önemli değildir. Amazon.com ve CNN.com gibi sitelerin sık sık güncellendiği ve çok talep aldığı Google tarafından fark edildiğinden beri bunun gibi siteleri her 10 dakikada bir ziyaret edip kaydeder. Diğer tipik sitelere bu botun uğrama sıklığı popülerlik ve güncelleme ile orantılı olarak 1 ile 14 gün arasında değişir. Bir FreshBot sitenizi ziyaret ettiğinde sitenizdeki linkleri tek tek gezer ve onları bir veritabanına kaydeder. Bu sayede DeepCrawl sitenize geldiği zaman bu linkler ona yol gösterir ve işini yapmasına yardımcı olur.
DeepCrawl : ise ayda bir sitenize uğrar ve sitenizdeki bütün bilgileri indexler. Bu sitenizdeki yeni bilgilerin Google sonuçlarında neden bir ay sonra çıktığının da göstergesidir.

Kaynak: http://webinyo.com/google-index-sistemi-ve-botlari-nasil-calisir.html#ixzz2rRTMcCSo

Google araştırma ekibinin yeni projesi müziğin son 64 yılına ışık tutuyor

Google 1950′den bu yana müzik endüstrisinin geçtiği önemli mihenk taşlarını hem eğitim hem de çevrim içi müzik satışına katkıda bulunmak adına renkli bir şemada topladı. Google’ın araştırma ekibi tarafından ”Müzik Zaman Tüneli” olarak adlandırılan şemaya bakarak müzik türlerinin 1950′den günümüze dek gelen popülarite grafiğini görmek mümkün oluyor. Bir müzik türünün tarihsel yolculuğunu izleyebilen ziyaretçiler o tür için önemli olarak kabul edilen albümleri de bu grafik üzerinden görebiliyor, hatta satın alabiliyor.

Google’dan yapılan açıklamada verilerin toplanmasında Billboard listeleri yerine Google’ın kendisine ait Play Music servisinde yer alan sanatçı ve albüm verilerinden faydalanıldığı belirtildi. Kısacası bir türün listedeki hakimiyeti konusunda Google Play Music’teki popülaritesi önemli bir rol oynuyor. Şemaya bakıldığı zaman caz gibi müzik türlerinin 1950′lerdeki popülaritesinden uzakta olduğu, rock ve popun ise neredeyse 30 yıldır performans standartlarını koruduğu görülüyor. Google’dan yapılan açıklamada söz konusu projenin müzik keşif grubu tarafından üzerinde çalışılan çok sayıda projenin ilki olduğu da ifade edildi.

katnak: teknoblog 

Google Now masaüstü bildirimleri en son Chrome Canary sürümünde görüldü

Google Now olarak adlandırılan, Türkçe’ye Google Asistan şeklinde çevrilen ancak henüz Türkiye’de tam anlamıyla faaliyete geçmeyen asistan servisinin sunduğu bilgi kartları ve bildirimler Chrome internet tarayıcısına da bir şekilde geliyor.

Masaüstü ve mobil deneyimi daha da yakınlaştırmayı amaçlayan Google, Google Now servisini Chrome Canary’nin en son Mac ve Windows sürümüne ekledi. Canary, Google’ın masaüstü web tarayıcısı için çıkarılan ve yazılımcılara özel olan ön izleme sürümlerini temsil ediyor.
Google Now’ı Chrome’da kullanmak isteyen Canary kullanıcıları adres çubuğuna chrome://flags/#enable-google-now yazarak bunu gerçekleştirebilir. Daha sonra bilgisayarı yeniden başlatmak gerekiyor. Tüm bunların sonunda Google Now uyarıları masaüstü için de kullanılabilir hâle geliyor.
Konuma bağlı olarak hava durumu, spor karşılaşmaları, trafik durumu ve hatırlatıcılar gibi unsurlara ait uyarılar masaüstüne düşüyor. Yazının başında da belirttiğimiz gibi, Google Now Türkiye’de tam anlamıyla faaliyete geçmedi.
Google Now 2012 yazında Android 4.1 Jelly Bean ile kullanıma sunulmuştu. Google’ın Siri’ye bir cevabı olarak geliştirilen bu servis sizin sesli olarak sorduğunuz sorulara anlamlı cevaplar vermesiyle dikkat çekiyor. Google bu işlevi iOS uygulamasına da geçtiğimiz aylarda getirmişti.
Google faaliyete geçirdiği zamandan beri Google Now’a yeni kartlar, uyarılar ve bildirimler eklemeye devam ediyor. Şirket Chrome’a Google Now desteği için çalışmalara geçtiğimiz yaz aylarında başlamıştı.
Chrome Canary’nin bu sürümünün yazılımcılar tarafından test edilmeye başlaması, Chrome’da Google Now desteğinin tüm kullanıcılara sunulmasının fazla uzak olmadığını gösteriyor.


katnak: teknoblog

Gmail kullanıcıları sık e-posta gönderdikleri kişileri yıldızlandırabilecek

Gmail’de e-postalarını sınıflandırırken ”Yıldızlı” klasörünü sıklıkla kullananları sevindirecek bir yenilik kısa bir süre sonra tüm kullanıcılarla buluşacak. Google’dan yapılan açıklamada Gmail kullanıcılarının bundan böyle favori kullanıcılarını yıldızlandırabileceği ve sıklıkla e-posta gönderdikleri adresleri daha kolay takip edebilecekleri ve, tıpkı önemli mesajlar gibi, yıldızlı kişilerden gelen e-postaların da ayrı bir klasöre gönderileceği belirtildi.

Android cihaz sahiplerinin Gmail hesapları üzerinde favorilere ekledikleri kullanıcılar Android cihazlarındaki favoriler sekmesine de otomatik olarak eklenecek. Özelliğin dağıtımı kademeli olarak gerçekleşeceği için tüm kullanıcıların bu özellikten faydalanması biraz zaman alacak.

katnak: teknoblog 

Google kullanıcılarına reklam gösteren eklentileri mağazadan kaldırıyor

Google iki Chrome eklentisini kullanıcılara reklam gösterme biçimleri nedeniyle mağazadan kaldırdı. “Add to Feedly” ve “Tweet this Page” adlı eklentilerin ikisi de Google’ın web tarayıcısına yönelik yararlı eklentiler olarak ortaya çıktı, ancak bir süre sonra kullanıcılara açılır pencereler ve dikkat dağıtıcı reklamlar göstermeye başladı.

Bu eklentilerin kötü yola sapmalarının sebebi ne olabilir? Add to Feedly’nin durumuna baktığımızda, eklentinin geliştiricisinden satın alındığını ve 30 bin kullanıcısına reklam gösterilmeye başlandığının görüyoruz.
Add to Feedly geliştiricisi Amit Agarwal konuyla ilgili olarak kaleme aldığı blog yazısında, oluşturmasının bir saat aldığı bir şey için aldığı dört haneli tekliften bahsetti. Bir e-posta iletisiyle gelen teklife yazılımcı, tahmin edeceğiniz üzere kayıtsız kalamadı. Bir ay sonra da eklentinin yeni sahipleri eklentiyi sessiz sedasız güncelleyerek reklam göstermeye başladı. Agarwal bunların normal banner reklamlar olmadığını, arka planda çalışan ve bağlantıları değiştiren görünmez reklamlar olduğunu söylüyor
Sorun OMG Chrome ve Ars Technica siteleri tarafından herkesin dikkatine taşındı. Üstelik her iki yayın da bu sorunun Add to Feedly ve Tweet this Page eklentileriyle sınırlı olmadığından şüphe duyuyor. Onlara göre reklamcılar düzenli aralıklarla popüler eklentileri satın alıyor ve onları reklam yazılımlarına dönüştürüyor. Popüler Honey eklentisinin geliştiricisi reklam satmasına yönelik benzer bir teklif almış.
Konuyla ilgili haber ve yazıların yayınlanmasından kısa bir süre sonra Google işe yaramaz eklentiler için adım attı. Aralık ayında politikada yaptığı değişiklikler sonucunda web sitelerinde karmaşık değişiklikler yapan eklentiler suçlu ilân edilmişti. Her ne kadar değişiklikler önümüzdeki haziran ayına kadar yürürlüğe girmeyecek olsa da, Google bu kötü amaçlı kullanıma kayıtsız kalmadı.
Bu arada Agarwal, Add to Feedly’yi satmanın kötü bir fikir olabileceğini itiraf edyor ve reklam yazılımından etkilenen kullanıcılardan özür diliyor.

katnak: teknoblog 

Google’ın Ücretsiz SEO Araçları

Web sayfanızın gelişimine yardımcı olabilecek araçların bir çoğu ile tanışmamış olabilirsiniz. Bu yüzden vakit kaybetmeden incelemelerimize başlayalım.


Google Analytics

Fazla söze gerek yok gibi. Dünyanın en büyük web sayacı sistemi aynı zamanda SEO için elinizin altında bulunmak zorunda.

Analytics sayesinde ziyaretçilerinizin davranışlarını takip edebilirsiniz. Hangi sayfa yapıları daha iyi sonuç veriyor, hangi makalenize daha uzun süre ayrılıyor, sosyal medyanın siteniz üzerindeki etkileri neler, reklam yerleşimi için tasarımınızın hangi bölgesi uygun? Bütün bu soruların cevabı Analytics ile elinizin altında. 5 milyon sayfa gösterimi altında olan tüm sitelere ücretsiz olan bu uygulama ile web sayfanız ile Google arasındaki bağlantıyı kuvvetlendirip SEO adımlarınızdan aldığınız karşılığı anlık olarak görüntüleyebilirsiniz.


Google Website Optimizer



DoubleClick Ad Planner



DoubleClick Ad Planner etkili online reklam kampanyaları hazırlamanıza yardımcı olmak için oluşturulan ücretsiz bir araçtır. Ayrıca, sayfa görünümleri ve anahtar kelime trafik istatistikleri takip edip, rakiplerinize üstünlük kurmanızı sağlar.


Google Alerts



Google Alerts, sorgularınızla alakalı Google sonuçlarındaki (web, haberler vb.) en son güncellemelerin e-postayla gönderilmesi hizmetidir.

Takip etmek istediğiniz bir arama sorgusu girin. Alacağınız sonuçların bir önizlemesini göreceksiniz. Google Alerts’ün kullanışlı yönlerinden bazıları şunlardır:
gelişen bir haberi izleme
bir rakip veya sektör hakkında güncel bilgilere sahip olma
bir ünlü veya etkinlikle ilgili en son bilgileri alma
sevdiğiniz takımlarla ilgili gelişmeleri takip etme


Google Page Speed



Google’ın bir diğer sayfa hızı ve optimizesi için oluşturduğu ücretsiz araç. Sayfanızın yavaş açılmasına sebep olan objeleri bulur ve bunları size bildirir. Ayrıca tek tek sayfalarınızı inceleme altına alır ve size detaylı hız sonuçları verir. Bu ücretsiz araç sayesinde sitenizin ortalama hızını öğrenebilir ve hız arttırımı için çalışmalar yapabilirsiniz. Unutmayın ki SEO için hız çok önemlidir.


Merchant Center



Google’da ürün arama işlemini gören Merchant Center ile sitenize ürün verisi yüklemek, müşterilerinizin sitenize hızlıca erişmesini sağlar.


Google Site Map



Bu ücretsiz araç sayesinde site haritalarınızı Google’a bildirebilirsiniz. Oluşturduğunuz bir site haritası göndererek, Google’ın normal tarama işlemiyle keşfedemediği URL’ler dahil olmak üzere sitenizdeki tüm sayfalardan haberdar olmasını sağlayabilirsiniz. Böylece kusursuz bir indexe, beraberinde SEO puanına erişirsiniz. Bu listenin en önemlilerinden biri olan Site Map tüm webmasterların el atması gereken bir konudur. WordPress için otomatik sitemap dosyası oluşturulumu üzerine daha önce konuşmuştuk.

Google+



Google’ın sosyal medya platformu bizler için SEO ve hit aracına dönüştürülebilir. Bu platformda paylaşımlar, beğeniler ve makaleler oluşturarak takipçilerinize sitenizi işaret edebilirsiniz. Ayrıca markanızın çevresini genişleterek PageRank ve backlink değerlerinizi ücretsiz olarak arttırabilirsiniz.


Global Market Finder




Google Global Pazar Fırsatları Aracı ile, dünyadaki 1,9 milyar müşteriye ulaşmanızı sağlayacak fırsatlar elde edebilirsiniz.

Anahtar kelimelerinizi otomatik olarak müşterinizin diline çevirin.
Arnavutluk’tan Zimbabwe’ye kadar, ürününüzün hangi ülkelerdeki/bölgelerdeki müşteriler tarafından arandığını görün.
Farklı diller ve yerler arasındaki maliyet tahminlerini karşılaştırarak reklam bütçenizden mümkün olduğunca fazla faydalanın.


Google Trends



Google Trends, popüler arama terimlerini yayınlar. Ayrıca bu araç sayesinde hiçbir ücret ödemeden birden çok arama terimleri için eğilimleri karşılaştırabilir, ya da birden fazla site için günlük tekil ziyaretçi oranını gösterebilirsiniz. Rakiplerinizin bir adım önde olmak için anahtar kelimeleri dikkatlice takip etmeniz gerekmekte.


Google Webmaster Tools



Google’ın sayfanızı nasıl tanıdığını ve indexlediğini görüntülemenize yarar. Ayrıca indexleme esnasında sitenizde rastlanılan hatalar da siz site yöneticilerine listelenir. Ayrıca sitenize ziyaretçi akışı sağlayan anahtar kelimeleri ve erişilen linkleri yayınlar. En güzel kısmı ise bütün bunların tamamı ücretsiz.


Google Insights for Search



Arama terim ve ifadelerini belirli bölge, kategori ve zaman dilimi için karşılaştırır. Ayrıca keywordleri takip etme ve popüleritelerini inceleme yine Insights aracılığıyla yapılabilen işlemler arasında. Uzun lafın kısası bu ücretsiz araç web sayfanız için potansiyel müşterilerinizi bulmanıza yardımcı olmakta.

Google Sandbox Nedir ve Kurtulma Yolları Nelerdir?

Google artık internet üzerinden bir şeye ulaşmak istediğimizde aradıklarımızın yegane bulucusu. Genelde de google ilk durağımızdır. Elbette, durum bu şekilde olunca birçok kişide bu duraktan faydalanmak için aceleci davranıyor ve yaptığı bazı çalışmaları ile normalde bir sitenin kısa zamanda ulaşamayacağı değerlere sahip oluyor.

Google’da bunu kısa bir süre içerisinde anlıyor ve botları ile birlikte sitenizi takip ediyor. Aşırı kasılan backlinkler, alınan tanıtım yazıları ve SEO namına yapılmış çalışmalar yığınını fark ediyor. Ardından diğer siteler ile eşit stratejiye sahip olmadığınız ve adil olmayan yükselişler yaptığınız için sitenizi cezalandırma şekli olan Google Sandbox’a atıyor.

Google Sandbox’da olan siteler genellikle arama sonuçlarında yeni sorgular ile yer almaz ve bunun yanı sıra yayında olan index’leriniz de birer birer yayından indirilmeye başlanır. En sonunda baktığınızda Google üzerinde herhangi bir şekilde web sitenizin bulunmadığını fark edersiniz işte o zaman Google’ın gazabına uğramış ve cezalandırılmışsınız demektir. 

Robots.txt Yapımı

Bu yazımızda Robots.txt yapımı hakkında siz ziyaretçilerimizi bilgilendireceğim. Robots.txt sitenin ana dizininde bulunan ismi değişmeyen, Google Botları için kılavuz bir dosyadır. Yani Google Botları sitenizi ziyaret ettiğinde, dosyanız varsa ilk Robots.txt dosyasına girecektir, yoksa işiniz zor, Robots.txt dosya içersinde bazı kodlar görecektir ve bu kodlar doğrultusunda nereleri indexleyeceğini, nerelere girmeyeceğini anlayacaktır. Sonuç olarak Robots.txt Google botları için olmazsa olmazlardandır. Şimdi biz de Robots.txt yapımını beraberce öğrenelim.
Yeni bir metin belgesi açalım ismini Robots.txt yapalım. Robots.txt dosyamız içersinde iki farklı değişkenimiz olacak. Bunlar ve anlamları şöyledir:

User-agent: Google Botu’nun adı gelecek
Disallow: Botun izinlerini gireceğimiz komutlar yer alacak
Örnek 1:
User-agent: *
Disallow
Kodlarımızı yorumlayalım. 1. satırdaki kodumuz da bakınız Google Botları’nın isimleri gelecekti fakat “*” işaretini gördünüz. Bunun anlamı, siteniz tüm Google Botları’nca istisnasız indexlenmesine izin vermişsiniz demektir.
Örnek 2:
User-agent: *
Disallow: /
Gördüğünüz gibi birinci satırdaki user-agent kodumuzun anlamı tüm Google Botları’na sitenizi indexlemesi için izin verilmesiydi. Fakat ikinci satırda “/” böyle bir karakter görüyorsunuz. Bu karakterin anlamı site üzerinde tüm dosyaların taranmaması isteniyor.
Yani bu Robots.txt kod bütününden de anlayacağımız şey, bütün Google Botları’nca sitemizin hiçbir dosyası indexlenmeyecek, taranmayacak.
Örnek 2:
User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /tmp/
Disallow: /private/
Bütün google botları, bu 4 dosyayı indexlemeyecektir.
Örnek 3:
User-agent: DeepCrawl
Disallow: /private/
DeepCrawl, bir google botudur. Görevi ise; sitenizi uzun aralıklarla ziyaret edip, indexlenmesi için gerekli bilgileri toplar. Bu kodların anlamı ise, ismi verilen botun ilgili private klasörünü indexlememeli.
Örnek 4:
User-agent: *
Disallow: /directory/dosya.html
Tüm botlar, ilgili dosyayı indexlemeyecektir. Ama directory dizinindeki dosya.html hariç diğer tüm dosyaları tarar ve indexler.
Örnek 5:
User-agent: *
Allow: /dosya1/site.html
Disallow: /dosya1/
Bu kodların anlamı ise, tüm Google Botları dosya dizininde bulunan site.html dosyası hariç diğer tüm dosyaları taramaz ve indexlemeyecektir.

User-agent: Googlebot
Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
User-agent: Googlebot-Image
Disallow: /wp-includes/
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /