bildirgec.org

Robots.txt dosyası arama motorları ve örümceklerin sitenizdeki dosya ve dizinleri kayıt etmeleri için izin veren yada engelleyen dosyadır.Hazırlamak için notepad(not defteri) ı açıp güvenliğinize uygun kodları yazıp Robots.txt adında kaydedip sitenizin ana dizinine koymanız yeterlidir.

Örnek Kullanım:
User-Agent: *
Disallow:/panel/
Allow:/images/

Disallow kayıt altına alınmasını istemediğimiz dosyaları seçmemizi sağlar.
Allow kayıt altına alınmasını istediğimiz dosyaları seçmemizi sağlar.

Örneğim resimleri engellemek istiyorsak görsellerimizi korumak için

1- Siteme YAZARLAR modülü eklemek istiyorum:
Cvp: http://www.katalogum.com/joomla/modColumnists101.zip buradan indirebilirsiniz.

Web sitelerimizde yer alan resimlerin kopyalanmaması için bahsedeceğim çeşitli teknikler uygulanabilir. Bu resim koruma yöntemleri bir takım önlemler olsalar da yine de kopyalanmamayı garanti edemez. En basitinden ekran kopyala (print-screen) tuşu bile resmi kopyalamaya yetecektir.

Resim koruma önlemleri:

1. Sağ tuş kilitleme (disable right click): Resmin üzerinde sağ tıklayıp “resmi kaydet”i önler.
Bakınız: No right click
Ayrıca: jQuery Plugin for no right click

2. Internet Explorer 6 Image Toolbar‘ı kaldırma (Disable IE6 Image Toolbar): Resmin üzerine gelindiğinde otomatik görünen kaydetme seçeneğini kaldırır.

Disable IE6 Image Toolbar

3. Gerçek resmin üzerine boş resim koymak: Bu yöntemde gerçek resminizi “div” etiketi içinde arka plan resmi olarak kullanıyorsunuz. Transparan boşluk resminizi de aynı boyutlarda gerçek resimmiş gibi kullanıyorsunuz. Orijinal resmi gören kişi resmi kaydetmeye çalıştığında “blank-boşluk” resmi kaydetmiş olacaktır.

generators

Tasarlarken veya kodlarken, bazen günlerce uğraşmak zorunda kaldığımız, tasarım öğelerini ve kodlamaları, internet üzerinden birkaç saniye içinde oluşturmamızı sağlayan online araçları, bir araya toplayan generateursweb2.com sitesi 1100 ‘den fazla online aracı listelemiş.

ASCII, css, tasarım, e-mail, favicon, flash, form, eğlence, Htacess, resim, meta tag, alan adı, pdf, text, robot.txt, sitemap gibi, 22 kategori başlığı altında sunulan online araçların listesini buradan görebilir, eğer sizin de böyle bir çalışmanız var ise, buradaki formu doldurarak, liste de yer almasını sağlayabilirsiniz.

bir çok kişi merak etmiştir. hiç bir yere web sitemi eklemediğim halde bu google beni nasıl buluyor ve nasıl sitemi sayfasına ekliyor diye.

sorunun cevabı aslında çok basit. google teknolojisi botlar (robotlar). google botları internet üzerinde var olan tüm IP adreslerini teker teker, sıralı bir algoritmada tarayıp, bu ip adreslerine giriş yapıyorlar. yani google sizin web sitenize websiteniz.com olarak girmiyor, 85.158.77.85 … 85.158.77.86 (sıralı) giriyor. web sitenize giren robot, önce web sitenizde bir robots.txt varmı diye bakar. eğer varsa ona göre hareket eder, yoksa tüm içeriği veritabanına kaydedip google’da yayınlanma kuyruğuna atar. robot web sitenizde geçerken, google tarafından zararlı olarak nitelendirilebilecek bir içeriğe rastlarsa bu notu düşerek veritabanına siteyi kaydeder. olası zararlı içeriğe sahip içerikli siteler, google çalışanları tarafından manuel olarak son kez kontrol edilerek yayınlanır.

Ellerimizle büyüttüğümüz bildirgec.org sitemizi SEO acisindan analiz eden bu haberde, bildirgec.org ‘un arama motorlarındaki ek sonuçları (supplemental index) ve robots.txt dosyası için ipuçları bulunuyor.

Ayrıca Google Resim arama sonuçları içindeki avatar sayısıda şaşırtıcı durumda.

robots.txt dosyasının ne işe yaradığını websitesi olan arkadaşların pek çoğu bilir. Arama motorlarının sitenizdeki, indekslenmesini istemediğiniz dosyaları, klasörleri belirtmenize yarar. Peki Google’ın kendi robots.txt sini görmüşmüydünüz.

rss oluşturuculardan template oluşturuculara, birçok başlık altında web tabanlı robotlara yer veren mükemmel bir arşiv..