robtos.txt

  1. Jack_Pot

    Jack_Pot Thread StarterMacUser Mitglied

    Mitglied seit:
    06.12.2006
    Beiträge:
    111
    Zustimmungen:
    1
    Ich habe eine Frage: Wenn man für die Suchmaschine
    ein rotobts.txt zur Verfügung stellt, wühlen dann die
    Spam-Crawler auch alles durch? Ist es sinnvoller ohne zu
    arbeiten? (Emailadressen sind alle codiert…)
     
    Jack_Pot, 02.03.2007
  2. DeineMudda

    DeineMuddaunregistriert

    Mitglied seit:
    12.05.2005
    Beiträge:
    852
    Zustimmungen:
    72
    robots.txt enthält nur Empfehlungen für Spider.
    Es muss sich niemand daran halten.

    Ich denke, die Frage ob Spam-Crawler sowas in deinem Sinne auswerten, kannst Du dir selber beantworten ;)
     
    DeineMudda, 02.03.2007
  3. Jack_Pot

    Jack_Pot Thread StarterMacUser Mitglied

    Mitglied seit:
    06.12.2006
    Beiträge:
    111
    Zustimmungen:
    1
    Ja danke Mudda, das habe ich mir so gedacht.
     
    Jack_Pot, 02.03.2007
Die Seite wird geladen...
Ähnliche Themen - robtos txt
  1. wissensdurstig
    Antworten:
    2
    Aufrufe:
    997
  2. duth
    Antworten:
    2
    Aufrufe:
    669
  3. stealth-ml
    Antworten:
    4
    Aufrufe:
    679
    stealth-ml
    04.02.2005
  4. Difool
    Antworten:
    3
    Aufrufe:
    462