#1 29. Oktober 2010 5-15 GB txt datei oder MySql? Also ich überlege wie ich 5 - 15 GB Daten (32 stellen:6stellen) Also ist es besser eine MySql datenbank zu erstellen oder die Daten aus der txt datei zu lesen? + Multi-Zitat Zitieren
#2 29. Oktober 2010 AW: 5-15 GB txt datei oder MySql? sqlite wobei bei mehr als 5GB daten mysql(oder vergleichbares) besser wäre, denn der server sollte wesentlich effektiver arbeiten (RAM nutzung, cache etc.). + Multi-Zitat Zitieren
#3 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? Was ist'n drin? Struktur, csv oder aehnliches drin? Wenn nur Muell (Im sinne von unorganisiert) drin ist, bringt 'ne MySQL auch nichts : D + Multi-Zitat Zitieren
#4 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? sind eigentlich nur MD5 Hash + Plain Text + Multi-Zitat Zitieren
#5 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? was willst du damit machen? sobald du eine abfrage machen willst, ist natürlich eine datenbank viel viel besser. bei solch einer datenmenge solltest du einen index auf den plaintext, je nachdem auch auf den hash legen. beispiel: du suchst nach einem hash der ziemlich hinten in der txt steht, also der worst case, dann musst du iterativ die komplette 15gb daten durchgehen. macht keinen sinn. gruß + Multi-Zitat Zitieren
#6 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? naja dachte mir eigentlich hashes in den ordner ./md5/ und dann den md5 wert als dateinamen und den plaintext in die datei rein.... aber hatte vergessen das dies auch clusterspeicherplatz frisst und so ist doch die datenbank besser... wenn ich 25 GB platz habe trifft das auch auf die datenbank zu oder? + Multi-Zitat Zitieren
#7 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? Korrekt. FTP, EMail und Datenbank bilden idR zusammen deinen 25 GB "Platz" + Multi-Zitat Zitieren
#8 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? Auf jeden Fall eine Datenbank. Ich würde MySQL nehmen. Ist für deinen Zweck sicher am besten. + Multi-Zitat Zitieren
#9 30. Oktober 2010 AW: 5-15 GB txt datei oder MySql? Vor allem lassen sich Abfragen und Vergleich mit einer MySQL DB viel schneller realisieren als dafür extra Funktionen zu schreiben die das ganze auf eine Datei anwenden. + Multi-Zitat Zitieren