Thread Datenhandling ganz allgm. gefragt
(15 answers)
Opened by geloescht at 2012-06-20 23:29 2012-06-20T21:29:30 ? Ohne in irgendwelchen Code zu schauen: Die meisten Filesysteme werden bei vielen Dateien langsam - sie können damit um, aber die performance geht in den Keller. Bei Hochleistungs-Dateisystemen wie ZFS oder BTRFS bin ich auch schon beim Indexing auf Problemen gestoßen (alle Dateien heißen gleich, z.b. Foo-<Timestamp>-<num>.file. Die Problemstellung für dich ist also "wie viel Dateien erwartest du maximal" und "welches FS liegt drunter". 2012-06-20T21:29:30 ? Datenbank, da meist eh vorhanden. SQL Skills sind außerdem ein must-have, also eine sinnvolle Möglichkeit sich im Rahmen eines Projektes weiterzubilden. Ob es SQLite oder MySQL oder Oracle oder... ist, ist dabei unerheblich. Zudem bleibt man flexibel - wachsen die Anforderungen an das Projekt, kann man das Problem mit Geld bewerfen (standalone Datenbankserver) bis es verschwindet. |