1. Foren
  2. Kommentare
  3. Internet
  4. Alle Kommentare zum Artikel
  5. › Cuil startet die größte Suchmaschine…

robots.txt

  1. Thema

Neues Thema Ansicht wechseln


  1. robots.txt

    Autor: einer 28.07.08 - 22:44

    Hallo,

    ich glaube man sollte als Homepagebetreiber eine robots.txt anlegen. - Auf den Seiten, wo ich diese habe kann ich was im cuil-index finden,
    auf URL wo diese Datei fehlt werde ich eben nicht gefunden.

  1. Thema

Neues Thema Ansicht wechseln


Um zu kommentieren, loggen Sie sich bitte ein oder registrieren Sie sich. Sie müssen ausserdem in Ihrem Account-Profil unter Forum einen Nutzernamen vergeben haben. Zum Login

Stellenmarkt
  1. User Experience Research Analyst (m/w/d)
    Elektrophoenix GmbH, Blomberg
  2. Inhouse-Consultant (w/m/d) Finance & Controlling / Anwendungsbetreuer/in SAP FI/CO
    München Klinik gGmbH, München
  3. (Junior) Mathematiker / Aktuar / Analyst (m/w/d) Actuarial Function Non-Life Calculation Unit
    Generali Deutschland AG, Köln
  4. IT-Anwender- und Standort Support (m/w/d)
    Radeberger Gruppe KG, Radeberg

Detailsuche


Golem pur
  • Golem.de ohne Werbung nutzen

Anzeige
Spiele-Angebote
  1. (u. a. Star Wars: The Force Unleashed - Ultimate Sith Edition für 3,99€, Star Wars: The Force...
  2. (u. a. Gears 5 für 9,99€, Forza Horizon 4 für 29,99€)
  3. über 2 Millionen Spar-Deals für Prime-Mitglieder


Haben wir etwas übersehen?

E-Mail an news@golem.de