• Ana Sayfa
  • Portal
  • Üye Listesi
  • Yönetim Kadrosu
  • Forum İstatistikleri

  • Konuyu Oyla:
    • Toplam: 6 Oy - Ortalama: 2.33
    • 1
    • 2
    • 3
    • 4
    • 5
    Google'da siteniz gözükmesi icin... Robots.txt
    Çevrimdışı

    Root


    <font color=red> Admin
    user avatar


    Kayıt: Jan 2012


    Konu Sayısı : 1,350


    Mesaj Sayısı : 1,476


    Rep Puanı: 5

    Teşekkürler: 0
    0 mesaj içinde 0 teşekkür verildi.
    #1
    Google'da siteniz gözükmesi icin... Robots.txt
    Bu kod bütün siteyi indexler.Buradaki Kod:
    User-agent: *
    parametresi bütün arama örümcekleri sitemi indexlesin demek

    Fakat Robotların admin veya cgi veya images bölümünü indexlemesin diyorsanız
    Arama motorlarında çıkmasın dediginiz dizin varsa Disallow yapmanız gerekir.
    mesela gibi ..
    User-agent: *
    Disallow: /cgi-bin/
    Disallow: /images/


    #
    # robots.txt generated by robot generator
    # Please, we do NOT allow nonauthorized robots any longer.
    #
    User-agent: asterias
    Disallow:
    User-agent: BackDoorBot/1.0
    Disallow:
    User-agent: Black Hole
    Disallow:
    User-agent: BlowFish/1.0
    Disallow:
    User-agent: BotALot
    Disallow:
    User-agent: BuiltBotTough
    Disallow:
    User-agent: Bullseye/1.0
    Disallow:
    User-agent: BunnySlippers
    Disallow:
    User-agent: Cegbfeieh
    Disallow:
    User-agent: CheeseBot
    Disallow:
    User-agent: CherryPicker
    Disallow:
    User-agent: CherryPickerElite/1.0
    Disallow:
    User-agent: CherryPickerSE/1.0
    Disallow:
    User-agent: CopyRightCheck
    Disallow:
    User-agent: cosmos
    Disallow:
    User-agent: Crescent
    Disallow:
    User-agent: Crescent Internet ToolPak HTTP OLE Control v.1.0
    Disallow:
    User-agent: DittoSpyder
    Disallow:
    User-agent: EmailCollector
    Disallow:
    User-agent: EmailSiphon
    Disallow:
    User-agent: EmailWolf
    Disallow:
    User-agent: EroCrawler
    Disallow:
    User-agent: ExtractorPro
    Disallow:
    User-agent: Foobot
    Disallow:
    User-agent: Googlebot
    Disallow:
    User-agent: Gezginbot
    Disallow:
    User-agent: Harvest/1.5
    Disallow:
    User-agent: hloader
    Disallow:
    User-agent: httplib
    Disallow:
    User-agent: humanlinks
    Disallow:
    User-agent: InfoNaviRobot
    Disallow:
    User-agent: JennyBot
    Disallow:
    User-agent: Kenjin Spider
    Disallow:
    User-agent: Keyword Density/0.9
    Disallow:
    User-agent: LexiBot
    Disallow:
    User-agent: libWeb/clsHTTP
    Disallow:
    User-agent: LinkextractorPro
    Disallow:
    User-agent: LinkScan/8.1a Unix
    Disallow:
    User-agent: LinkWalker
    Disallow:
    User-agent: LNSpiderguy
    Disallow:
    User-agent: lwp-trivial
    Disallow:
    User-agent: lwp-trivial/1.34
    Disallow:
    User-agent: Mata Hari
    Disallow:
    User-agent: Microsoft URL Control - 5.01.4511
    Disallow:
    User-agent: Microsoft URL Control - 6.00.8169
    Disallow:
    User-agent: MIIxpc
    Disallow:
    User-agent: MIIxpc/4.2
    Disallow:
    User-agent: Mister PiX
    Disallow:
    User-agent: moget
    Disallow:
    User-agent: moget/2.1
    Disallow:
    User-agent: mozilla/4
    Disallow:
    User-agent: Mozilla/4.0 (compatible; BullsEye; Windows 95)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 95)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 98)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows NT)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows XP)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows 2000)
    Disallow:
    User-agent: Mozilla/4.0 (compatible; MSIE 4.0; Windows ME)
    Disallow:
    User-agent: mozilla/5
    Disallow:
    User-agent: NetAnts
    Disallow:
    User-agent: NICErsPRO
    Disallow:
    User-agent: Offline Explorer
    Disallow:
    User-agent: Openfind
    Disallow:
    User-agent: Openfind data gathere
    Disallow:
    User-agent: ProPowerBot/2.14
    Disallow:
    User-agent: ProWebWalker
    Disallow:
    User-agent: QueryN Metasearch
    Disallow:
    User-agent: RepoMonkey
    Disallow:
    User-agent: RepoMonkey Bait & Tackle/v1.01
    Disallow:
    User-agent: RMA
    Disallow:
    User-agent: SiteSnagger
    Disallow:
    User-agent: SpankBot
    Disallow:
    User-agent: spanner
    Disallow:
    User-agent: suzuran
    Disallow:
    User-agent: Szukacz/1.4
    Disallow:
    User-agent: Teleport
    Disallow:
    User-agent: TeleportPro
    Disallow:
    User-agent: Telesoft
    Disallow:
    User-agent: The Intraformant
    Disallow:
    User-agent: TheNomad
    Disallow:
    User-agent: TightTwatBot
    Disallow:
    User-agent: Titan
    Disallow:
    User-agent: toCrawl/UrlDispatcher
    Disallow:
    User-agent: True_Robot
    Disallow:
    User-agent: True_Robot/1.0
    Disallow:
    User-agent: turingos
    Disallow:
    User-agent: URLy Warning
    Disallow:
    User-agent: VCI
    Disallow:
    User-agent: VCI WebViewer VCI WebViewer Win32
    Disallow:
    User-agent: Web Image Collector
    Disallow:
    User-agent: WebAuto
    Disallow:
    User-agent: WebBandit
    Disallow:
    User-agent: WebBandit/3.50
    Disallow:
    User-agent: WebCopier
    Disallow:
    User-agent: WebEnhancer
    Disallow:
    User-agent: WebmasterWorldForumBot
    Disallow:
    User-agent: WebSauger
    Disallow:
    User-agent: Website Quester
    Disallow:
    User-agent: Webster Pro
    Disallow:
    User-agent: WebStripper
    Disallow:
    User-agent: WebZip
    Disallow:
    User-agent: WebZip/4.0
    Disallow:
    User-agent: Wget
    Disallow:
    User-agent: Wget/1.5.3
    Disallow:
    User-agent: Wget/1.6
    Disallow:
    User-agent: WWW-Collector-E
    Disallow:
    User-agent: Xenu's
    Disallow:
    User-agent: Xenu's Link Sleuth 1.1c
    Disallow:
    User-agent: Zeus
    Disallow:
    User-agent: Zeus 32297 Webster Pro V2.9 Win32
    Disallow:

    Örnek.
    Linkleri görebilmek için Üye Olun veya Giriş Yapın.

    kaynak: Linkleri görebilmek için Üye Olun veya Giriş Yapın.
    f8r22tkp.png
    10-12-2013, 11:18 PM


    Hızlı Menü:


    Şu anda bu konuyu okuyanlar: 1 Ziyaretçi
    Forum Yasal Uyarı

    Türkçe Çeviri: MyBB.Com.Tr
    Forum Yazılımı: MyBB, © 2002-2014 MyBB Group.
    Bu temanın yapımcısı #Pøwér™'dir. Hiç bir meteryal çalınamaz.
    Çalınması halinde gerekli yasak işlem ve hukuki yollara başvurulmaktan çekinilmeyecektir.

    İçerik sağlayıcı paylaşım sitesi olarak hizmet veren forumumuzda 5651 Sayılı Kanun'un 8. Maddesine ve T.C.K' nın 125. Maddesine göre tüm üyelerimiz yaptıkları paylaşımlardan kendileri sorumludur. Forumumuz hakkında yapılacak tüm hukuksal şikayetleri iletisim linkimizden bize ulaşıldıktan en geç 3 (üç) gün içerisinde ilgili kanunlar ve yönetmelikler çerçevesinde tarafımızca incelenerek, gereken işlemler yapılacak ve site yöneticilerimiz tarafından bilgi verilecektir.



    10tl.net Destek Forumu -