robtos.txt

Dieses Thema im Forum "Web-Design" wurde erstellt von Jack_Pot, 02.03.2007.

  1. Jack_Pot

    Jack_Pot Thread Starter MacUser Mitglied

    Beiträge:
    111
    Zustimmungen:
    1
    Mitglied seit:
    06.12.2006
    Ich habe eine Frage: Wenn man für die Suchmaschine
    ein rotobts.txt zur Verfügung stellt, wühlen dann die
    Spam-Crawler auch alles durch? Ist es sinnvoller ohne zu
    arbeiten? (Emailadressen sind alle codiert…)
     
  2. DeineMudda

    DeineMudda unregistriert

    Beiträge:
    958
    Zustimmungen:
    72
    Mitglied seit:
    12.05.2005
    robots.txt enthält nur Empfehlungen für Spider.
    Es muss sich niemand daran halten.

    Ich denke, die Frage ob Spam-Crawler sowas in deinem Sinne auswerten, kannst Du dir selber beantworten ;)
     
  3. Jack_Pot

    Jack_Pot Thread Starter MacUser Mitglied

    Beiträge:
    111
    Zustimmungen:
    1
    Mitglied seit:
    06.12.2006
    Ja danke Mudda, das habe ich mir so gedacht.
     
Die Seite wird geladen...
Ähnliche Themen - robtos txt
  1. wissensdurstig
    Antworten:
    2
    Aufrufe:
    1.016
  2. duth
    Antworten:
    2
    Aufrufe:
    689
  3. stealth-ml
    Antworten:
    4
    Aufrufe:
    701
  4. Difool
    Antworten:
    3
    Aufrufe:
    489