1. Foren
  2. Kommentare
  3. Internet-Forum
  4. Alle Kommentare zum Artikel
  5. › Soziales Netzwerk: Facebook…

Und nach 200 Tagen ist Schluss?

  1. Thema

Neues Thema


  1. Und nach 200 Tagen ist Schluss?

    Autor: pflo 23.08.12 - 17:17

    Oder darf man annehmen, dass jedes halbe Jahr ein neuer Fileserver von dieser Dimension angeschafft wird?

  2. Re: Und nach 200 Tagen ist Schluss?

    Autor: gaym0r 23.08.12 - 18:28

    pflo schrieb:
    --------------------------------------------------------------------------------
    > Oder darf man annehmen, dass jedes halbe Jahr ein neuer Fileserver von
    > dieser Dimension angeschafft wird?

    Weil Daten auch nie gelöscht werden ...

  3. Re: Und nach 200 Tagen ist Schluss?

    Autor: mouke 23.08.12 - 20:05

    Kann ich mir auch nicht vorstellen; das Gros der facebook-Nutzer löscht doch nichts. Entweder werden alte/selten zugriffene Daten ausgelagert oder in den Zahlen steckt ein Fehler, ansonsten wären diese 100 PB doch schon längst vollgelaufen, wenn man davon ausgeht dass das Wachstum in den letzten 1-2 Jahren vielleicht noch nicht ganz so hoch, aber zumindest in ner vergleichbaren Größenordnung lag..

  4. Re: Und nach 200 Tagen ist Schluss?

    Autor: Javaen 23.08.12 - 21:14

    Stand da nicht, dass ein großer Teil der Daten auf "einem" Cluster von 100PB Größe abgespeichert sind. Heisst für mich da gibt es noch n paar mehr Cluster ^^

  5. Re: Und nach 200 Tagen ist Schluss?

    Autor: __destruct() 24.08.12 - 04:47

    Ja, wahrscheinlich ist das ihr Hauptzugriffs-Cluster und sie haben noch eines für alte Daten, auf die selten zugegriffen wird. In dem haben die Server dann wahrscheinlich Festplatten mit viel mehr Kapazität, sind also auch auf den inneren Bahnen nutzbar. Außerdem werden die meisten Server außer zur Datenspeicherung kaum hochwertige Hardware besitzen die Leitungen dort hin logischerweise nur einen Bruchteil der Kapazität der Leitungen zum Hauptzugriffs-Cluster haben.

  6. Re: Und nach 200 Tagen ist Schluss?

    Autor: TheUnichi 24.08.12 - 07:00

    Javaen schrieb:
    --------------------------------------------------------------------------------
    > Stand da nicht, dass ein großer Teil der Daten auf "einem" Cluster von
    > 100PB Größe abgespeichert sind. Heisst für mich da gibt es noch n paar mehr
    > Cluster ^^

    Welchen Artikel hättest du denn verwendet?

  7. Re: Und nach 200 Tagen ist Schluss?

    Autor: theonlyone 24.08.12 - 07:01

    __destruct() schrieb:
    --------------------------------------------------------------------------------
    > Ja, wahrscheinlich ist das ihr Hauptzugriffs-Cluster und sie haben noch
    > eines für alte Daten, auf die selten zugegriffen wird. In dem haben die
    > Server dann wahrscheinlich Festplatten mit viel mehr Kapazität, sind also
    > auch auf den inneren Bahnen nutzbar. Außerdem werden die meisten Server
    > außer zur Datenspeicherung kaum hochwertige Hardware besitzen die Leitungen
    > dort hin logischerweise nur einen Bruchteil der Kapazität der Leitungen zum
    > Hauptzugriffs-Cluster haben.

    In die Richtung wirds gehen.

    Macht man doch generell immer so wenn man wirklich enorm viele Daten hat.

    Das "wichtigste" was oft angeschaut wird muss hoch verfügbar sein, der Rest wird eben auf billigsten Müll ausgelagert u.U. noch stark komprimiert.

  8. Re: Und nach 200 Tagen ist Schluss?

    Autor: hairetic 24.08.12 - 10:11

    Ähm ... die Daten liegen in einem Hadoop Cluster.

    Die hängen da einfach alle paar Tage ein Rudel neue Fileserver dran und gut ist.

    Natürlich ist das nicht trivial oder billig, aber "VOLL" ist der nie^^

  9. Re: Und nach 200 Tagen ist Schluss?

    Autor: YoungManKlaus 24.08.12 - 12:54

    500TB Rohdaten != 500TB die ich dann tatsächlich speichern muss. Bilder werden doch wenn ich mich richtig erinnere standardmäßig auf niedrige Quali runtergerechnet, und ne Deduplication wenn tausende Leute das selbe Bild raufladen (denke: neueste Meme) hilft auch mal anständig sowohl bei Performance als auch bei Speicherverbrauch.

    EDIT: nicht zu vergessen, dass sich Texte ganz hervorragend komprimieren lassen, ganz besonders copy/pastes von "Kopiere das in deinen Status und um exakt 16:28:06.456 in drei Jahren wird dir deine große Liebe erscheinen!!!!1111einself"



    1 mal bearbeitet, zuletzt am 24.08.12 12:55 durch YoungManKlaus.

  1. Thema

Neues Thema


Um zu kommentieren, loggen Sie sich bitte ein oder registrieren Sie sich. Sie müssen ausserdem in Ihrem Account-Profil unter Forum einen Nutzernamen vergeben haben. Zum Login

Stellenmarkt
  1. (Senior) Softwareentwickler C/C++ (m/w/d) im Umfeld NGOs und Non-Profit-Organisationen: Entwicklung, ... (m/w/d)
    über experteer GmbH, bundesweit
  2. Informatikerin / Informatiker für Verwaltungsanwendungen (m/w/d)
    Bundesanstalt für Geowissenschaften und Rohstoffe, Hannover
  3. IT-Systemadministrator:in (all genders) - Administrator für Serversysteme / Datenbanken
    Universitätsklinikum Hamburg-Eppendorf, Hamburg-Eppendorf
  4. Projektmanager_in Software-Implementierung
    Deutscher Caritasverband e.V., Freiburg

Detailsuche


Golem pur
  • Golem.de ohne Werbung nutzen

Anzeige
Spiele-Angebote
  1. 12,24€ (UVP 34,99€) - günstig wie nie!
  2. basierend auf Verkaufszahlen
  3. basierend auf Verkaufszahlen


Haben wir etwas übersehen?

E-Mail an news@golem.de


Tesla Model 3: Die Mechanik ist das Problem
Tesla Model 3
Die Mechanik ist das Problem

Manche Probleme zeigen sich beim Elektroauto erst mit der Zeit. Beispielsweise, wenn Wasser den Bauteilen zusetzt. Bericht eines langjährigen Tesla-Fahrers.
Von Dirk Kunde

  1. Beschwerden über Übertreibungen Tesla senkt in aller Stille die Reichweitenschätzungen
  2. Nur Fremdmarken Kostenlose Ladeaktion bei Tesla
  3. Elektroautos Tesla übertrifft Auslieferungsrekord im Jahr 2023

Hewlett Packard Enterprise: Was die Übernahme von Juniper Networks durch HPE bedeutet
Hewlett Packard Enterprise
Was die Übernahme von Juniper Networks durch HPE bedeutet

Juniper-Vorstandschef Rami Rahim wird den gemeinsamen Bereich HPE-Network leiten. Dazu gehört auch Aruba Networks.
Von Achim Sawall

  1. Hewlett Packard Enterprise HPE will offenbar Juniper Networks kaufen

Softwareentwicklung: Scrum-Abenteuer auf der grünen Wiese
Softwareentwicklung
Scrum-Abenteuer auf der grünen Wiese

Wie wir anderthalb Jahre lang im Greenfield-Projekt Scrum versuchten, über Bord warfen und völlig deformierten - um dann zu erkennen, dass wir es lebten.
Ein Erfahrungsbericht von Rene Koch

  1. Scrum of Scrums Ein leichtgewichtiges agiles Framework