Hi Bianca,

das Kopieren einer CSV-Datei in eine MySQL-Tabelle geht sehr schnell. Ein Index ist nicht unbedingt notwendig aber bei 20Mio Records durchaus angebracht, ich würde einen Index auf das Datum-Feld setzen, die Indexerstellung dürfte je nach Blech bei einer Minute liegen. Mit dem Datum-Feld kann dann vorzüglich gruppiert werden (Abfrage der Zeiträume).

Alles Andere geht sicher auch gut mit pure Perl und Math::BigInt zu machen.