Robots.txt Oluşturma

14

Temmuz

Ana Sayfa » Arama Motoru Optimizasyonu » Robots.txt Oluşturma

robots.txt-nedirRobots.txt Nedir? Robats.txt nosıl Oluşturulur?

robots.txt arama motorlarına yol gösterici mahiyette kodların yer aldığı site ana dizinde bulunması gereken bir txt dosyasıdır. Arama motoru robotları siteye ilk girdiklerinde bu txt’ye bakarak hangi dizinleri indexleyip indexlemiyeceklerini anlarlar. Arama motorları siteyi indexlemek için robots.txt dosyasını görmezlerse tüm dizinleri indexlerler. Websitenizin içerisinde gizlilik içeren klasör ve dosyalarınız mevcutsa, arama motorlarının size özel dosyaları index’lememesi için robots.txt oluştururken Disallow olarak belirtirseniz indexlenmesine engel olmuş olursunuz.

Tüm robotların sitenizi indexlemesini istiyorsanız. robots.txt şu şekilde olmalı

User-agent: * Disallow:

Disallow un türkçe karşılığı “izin vermemek” anlamındadır.

Arama motoru robotlarının hangi dizinleri indexlemesini istemiyorsanız.

User-agent: * Disallow: /cgi-bin/ Disallow: /images/private/ Disallow: /wp-content/plugins/

gibi engellenmesini istediğiniz dizinlere belirterek indexlemesini önleyebilirsiniz.

User-agent: xxx.com  kısmına arama motoru sitelerinin isimlerini yazarak arama motorlarının sitenizi indexlemesini engelliyebilirsiniz. robots.txt yi oluştururken dikkatli olmak durumundasınız. yanlış düzenlenen bir robots.txt dosyası sitenizin hiç indexlenmemesine neden olabilir.

wordpress bloğunuz olupta robots.txt nin nasıl düzenlenmesi gerektiği konusunda tereddütleriniz varsa.  “wp-robots-txt” eklentisini wordpress sitesinden indirip eklentilerin içine atıp aktifleştirdikten sonra yönetim panelinden oluşturabilirsiniz.

wordpress robots.txt nin en iyi nasıl olması gerektiği konusunda binlerce döküman bulmak mümkün. Bana göre gizli bir içeriğiniz yoksa bu dosyayı oluşturup oluşturmamanız çok önemli değildir. Sade bırakmakta fayda görüyorum.

1 User-Agent: *
2 Disallow: /wp-content/plugins/

şeklinde oluşturulacak bir wordpress robots.txt dosyası yeterli olabilir. Sadece wordpress sitenizde kullanmış olduğunuz eklentilerin indexlenmesine engel olmuş olursunuz. wp-config php gibi mysql bilgilerinin yer aldığı dosyayıda engelleyebilirsiniz .

Bir önceki yazımız olan Anti SEO nedir başlıklı makalemizde Anti SEO yöntemleri, DDOS Anti SEO ve Google Anti SEO hakkında bilgiler verilmektedir.

Bir önceki yazımızı okumanızı tavsiye ederiz : »
Yazar Hakkında

28.330 views Kişi Okumuş ve 2 Yorum Yapılmış. Arama Motoru Optimizasyonu, Genel, SEO Kategorisine Eklenmiş.

Yorumlar
İsminiz
E-Posta Adresiniz
Yorumunuz

OsmanNuri
18 Temmuz 2013 - 23:02

wp-config.php yi robots.txt ye eklememize gerek varmı acaba.Eklemesek sorun olurmu?

admin
19 Temmuz 2013 - 03:06

Eskiden önemliydi şu an için çok önemli değil eklenmesede olur yeterli önlemler mevcut.

HowardTar
16 Nisan 2019 - 21:10
HowardTar
16 Nisan 2019 - 21:14
HowardTar
16 Nisan 2019 - 22:08
HowardTar
16 Nisan 2019 - 22:17
HowardTar
16 Nisan 2019 - 22:32
HowardTar
16 Nisan 2019 - 23:16
HowardTar
17 Nisan 2019 - 01:00
HowardTar
17 Nisan 2019 - 01:16
HowardTar
17 Nisan 2019 - 02:07
HowardTar
17 Nisan 2019 - 02:12
HowardTar
17 Nisan 2019 - 03:07
HowardTar
17 Nisan 2019 - 03:15

You expressed this superbly.
https://nicktambone.com/
visit poster’s website canadian cialis online pharmacy without prescription [url=http://www.canadianpharmacymsn.com/]top rated canadian pharmacies online[/url]
northwest pharmacy canada
online pharmacies canada
best canadian mail order pharmacies
online pharmacy no prescription
mexican pharmacies
canadian family pharmacy

HowardTar
17 Nisan 2019 - 03:31
HowardTar
17 Nisan 2019 - 04:17
HowardTar
17 Nisan 2019 - 06:04
HowardTar
17 Nisan 2019 - 06:21
QuentinExita
17 Nisan 2019 - 06:29
QuentinExita
17 Nisan 2019 - 07:13
QuentinExita
17 Nisan 2019 - 07:18
QuentinExita
17 Nisan 2019 - 08:24
QuentinExita
17 Nisan 2019 - 08:40
QuentinExita
17 Nisan 2019 - 09:27
QuentinExita
17 Nisan 2019 - 11:18
QuentinExita
17 Nisan 2019 - 11:35
QuentinExita
17 Nisan 2019 - 11:44
QuentinExita
17 Nisan 2019 - 12:31
QuentinExita
17 Nisan 2019 - 12:35
QuentinExita
17 Nisan 2019 - 13:35
QuentinExita
17 Nisan 2019 - 13:44

Kudos. A lot of forum posts!
http://canadianpharmacysilo.com/
discount pharmacy canadian online pharmacies online canadian pharcharmy [url=http://canadianpharmaciescubarx.com/]canada online pharmacies[/url]
no prescription pharmacy
online pharmacy usa
prescription price comparison
buy cialis
canadapharmacy com
canada pharmacy online reviews

QuentinExita
17 Nisan 2019 - 14:01
QuentinExita
17 Nisan 2019 - 14:49
QuentinExita
17 Nisan 2019 - 16:43
QuentinExita
17 Nisan 2019 - 17:01
QuentinExita
17 Nisan 2019 - 17:10
QuentinExita
17 Nisan 2019 - 17:57
QuentinExita
17 Nisan 2019 - 18:02
QuentinExita
17 Nisan 2019 - 19:03
QuentinExita
17 Nisan 2019 - 19:12
QuentinExita
17 Nisan 2019 - 19:29
QuentinExita
17 Nisan 2019 - 20:18
QuentinExita
17 Nisan 2019 - 22:14
QuentinExita
17 Nisan 2019 - 22:32
QuentinExita
17 Nisan 2019 - 22:42
QuentinExita
17 Nisan 2019 - 23:30
QuentinExita
17 Nisan 2019 - 23:35
QuentinExita
18 Nisan 2019 - 00:34
QuentinExita
18 Nisan 2019 - 00:44

You stated that wonderfully.
http://talahicc.com/
canadian prescription london drugs canada canadian pharmacy viagra [url=http://talahicc.com/]global pharmacy canada[/url]
no 1 canadian pharcharmy online
cheap prescription drugs
online pharmacy reviews
medical information online
drugs online
prescription online

QuentinExita
18 Nisan 2019 - 01:01
QuentinExita
18 Nisan 2019 - 01:53
QuentinExita
18 Nisan 2019 - 03:53
QuentinExita
18 Nisan 2019 - 04:12
QuentinExita
18 Nisan 2019 - 04:22
QuentinExita
18 Nisan 2019 - 05:12
QuentinExita
18 Nisan 2019 - 05:17
QuentinExita
18 Nisan 2019 - 06:21
QuentinExita
18 Nisan 2019 - 06:31

Really a lot of valuable knowledge!
http://canadianpharmacyntx.com/
canada drugs online canadian drugs prescription prices comparison [url=http://canadianpharmaciescubarx.com/]london drugs canada[/url]
online pharmacy no prescription
canadian drugstore reviews
global pharmacy canada
canada drug prices
trusted overseas pharmacies
canadian pharmacy no prescription needed

QuentinExita
18 Nisan 2019 - 06:48

With thanks! Very good information!
http://canadianpharmacymim.com/
pharmacy cost comparison canadian online pharmacy pharmacy online store [url=http://canadianpharmaciesnnm.com/]top rated canadian pharmacies online[/url]
24 hour pharmacy
online pharmacies canada
mexican pharmacies online
canadian prescription drugstore
cheap prescription drugs
canada drug pharmacy

  • Takvim

    Temmuz 2019
    P S Ç P C C P
    « Haz    
    1234567
    891011121314
    15161718192021
    22232425262728
    293031  
  • Son Yazılar

  • Son Yorumlar

  • Arşivler

  • Kategoriler

  • Online Ziyaretçiler