Abo
  1. Foren
  2. Kommentare
  3. Security
  4. Alle Kommentare zum Artikel
  5. › Suchmaschinen: Internet Archive will…

Suchmaschinen: Internet Archive will künftig Robots.txt-Einträge ignorieren

Das Archiv des Internets will der Robots.txt-Datei einer Webseite künftig keine Bedeutung mehr beimessen. Der Schritt sei notwendig, weil die Datei einer echten Archivierung des Internets aus Nutzersicht entgegenstehe, schreiben die Macher.

Neues Thema Ansicht wechseln


Beiträge

  1. Google ist dann der nächste 12

    Oktavian | 24.04.17 11:15 30.05.17 17:41

  2. Vollidioten (Seiten: 1 2 ) 31

    q0r0 | 24.04.17 10:09 26.04.17 12:42

  3. Wer von Euch liefert das Pflichtexemplar der Website ab? 1

    okidoki | 26.04.17 12:25 26.04.17 12:25

  4. Toll ... (Seiten: 1 2 ) 23

    Icestorm | 24.04.17 09:55 25.04.17 05:40

  5. Inhalt? 9

    bugmenotbugmenot2017 | 24.04.17 09:38 25.04.17 05:26

  6. genial wie sie alle heulen... 3

    Prinzeumel | 24.04.17 21:57 25.04.17 05:19

  7. Wie ist das eigentlich mit dem Copyright? 5

    motzerator | 24.04.17 17:09 24.04.17 22:14

  8. Anarchie? 19

    HansiHinterseher | 24.04.17 11:33 24.04.17 21:51

  9. Kommt leider viel zu spät ... 1

    luarix | 24.04.17 18:29 24.04.17 18:29

  10. Nicht mal mehr darauf kann man vertrauen 8

    GaliMali | 24.04.17 14:02 24.04.17 16:00

  11. Leistungsschutzrecht 3

    EWCH | 24.04.17 12:41 24.04.17 15:03

  12. robots.txt nicht nur um Inhalte zu blocken 12

    FibreFoX | 24.04.17 09:44 24.04.17 14:56

  13. dann wird halt via UA geblockt 8

    Proctrap | 24.04.17 09:41 24.04.17 14:52

  14. Was ist mit generierten Pfaden? 1

    Otto d.O. | 24.04.17 13:19 24.04.17 13:19

  15. Hätten sie von Anfang an machen sollen 1

    Malocher | 24.04.17 12:26 24.04.17 12:26

  16. Re: Vollidioten

    mnementh | 24.04.17 11:13 Das Thema wurde verschoben.

Neues Thema Ansicht wechseln



Stellenmarkt
  1. Universitätsmedizin der Johannes Gutenberg-Universität Mainz, Mainz
  2. ADAC Ostwestfalen-Lippe e.V., Bielefeld
  3. BWI GmbH, Nürnberg, München, deutschlandweit
  4. Gesellschaft für Anlagen- und Reaktorsicherheit (GRS) gGmbH, Köln

Golem pur
  • Golem.de ohne Werbung nutzen

Anzeige
Top-Angebote
  1. (aktuell u. a. Corsair CX750 für 64,90€ + Versand)
  2. 9,99€ (mtl., monatlich kündbar)
  3. 229,99€
  4. (u. a. Death Wish, The Revenant, Greatest Showman)


Haben wir etwas übersehen?

E-Mail an news@golem.de


Raspi-Tastatur und -Maus im Test: Die Basteltastatur für Bastelrechner
Raspi-Tastatur und -Maus im Test
Die Basteltastatur für Bastelrechner

Für die Raspberry-Pi-Platinen gibt es eine offizielle Tastatur und Maus, passenderweise in Weiß und Rot. Im Test macht die Tastatur einen anständigen Eindruck, die Maus hingegen hat uns eher kaltgelassen. Das Keyboard ist zudem ein guter Ausgangspunkt für Bastelprojekte.
Ein Test von Tobias Költzsch

  1. Bastelcomputer Offizielle Maus und Tastatur für den Raspberry Pi
  2. Kodi mit Raspberry Pi Pimp your Stereoanlage
  3. Betriebssystem Windows 10 on ARM kann auf Raspberry Pi 3 installiert werden

Linux: Wer sind die Debian-Bewerber?
Linux
Wer sind die Debian-Bewerber?

Nach schleppendem Beginn stellen sich vier Kandidaten als Debian Project Leader zur Wahl. Zwei von ihnen kommen aus dem deutschsprachigen Raum und stellen Golem.de ihre Ziele vor.
Von Fabian A. Scherschel

  1. Betriebssystem Debian-Entwickler tritt wegen veralteter Werkzeuge zurück
  2. Linux Debian-Update verhindert Start auf ARM-Geräten
  3. Apt Bug in Debian-Paketmanager feuert Debatte über HTTPS an

Fitbit Versa Lite im Test: Eher smartes als sportliches Wearable
Fitbit Versa Lite im Test
Eher smartes als sportliches Wearable

Sieht fast aus wie eine Apple Watch, ist aber viel günstiger: Golem.de hat die Versa Lite von Fitbit ausprobiert. Neben den Sport- und Fitnessfunktionen haben uns besonders der Appstore und das Angebot an spaßigen und ernsthaften Anwendungen interessiert.
Von Peter Steinlechner

  1. Smartwatch Fitbit stellt Versa Lite für Einsteiger vor
  2. Inspire Fitbits neues Wearable gibt es nicht im Handel
  3. Charge 3 Fitbit stellt neuen Fitness-Tracker für 150 Euro vor

  1. Elektro-SUV: Audi reduziert E-Tron-Produktion wegen fehlender Akkus
    Elektro-SUV
    Audi reduziert E-Tron-Produktion wegen fehlender Akkus

    Audis erstes Elektro-SUV kann nicht in den gewünschten Stückzahlen gebaut werden, weil Akkus fehlen, heißt es aus informierten Kreisen. Statt 55.830 E-Tron sollen nur 45.242 Einheiten gebaut werden. Auch für ein anderes Elektro-Modell drohen Schwierigkeiten.

  2. Smarte Lautsprecher: Amazon und Google bieten Gratis-Musikstreaming
    Smarte Lautsprecher
    Amazon und Google bieten Gratis-Musikstreaming

    Amazon und Google wollen ihre digitalen Assistenten auf smarten Lautsprechern aufwerten. Dazu bieten beide Unternehmen ihre Musikstreamingdienste für Besitzer der smarten Lautsprecher kostenlos und dafür mit Werbeeinblendungen an. Aber es gibt viele weitere Beschränkungen.

  3. Remake: Agent XIII kämpft wieder um seine Identität
    Remake
    Agent XIII kämpft wieder um seine Identität

    Ein Mann ohne Erinnerung ist die Hauptfigur im 2003 veröffentlichten Actionspiel XIII, in dem es um nichts weniger geht als die Ermordung des Präsidenten der USA. Nun kündigen französische Entwickler eine Neuauflage an.


  1. 15:00

  2. 14:30

  3. 14:00

  4. 13:30

  5. 13:00

  6. 12:30

  7. 12:00

  8. 09:00