Metadaten aus csv-Datei auslesen bzw. diese manipulieren (Allgemeines zu Perl)

[thread]13812[/thread]

Metadaten aus csv-Datei auslesen bzw. diese manipulieren

Leser: 20

Articles: hide open all | hide show old branches

+6 replies
trojax

2009-08-03 17:05

User since
2009-05-13
21 Artikel
BenutzerIn

Hallo,
ich verschiebe mit Perl eine ganze Menge csv-Dateien.
Um zu markieren welche Dateien ich nur kopiert und welche ich neu erstellt habe um diese im nachhinein nicht zu verwechseln, hänge ich bisher den Schriftzug "copied_" vorne an die kopierten Dateien. Allerdings würde ich die Dateien lieber markieren bzw. auslesen welche kopiert sind, ohne den Dateinamen oder den Dateiinhalt verändern zu müssen.
Kennt jemand eine Möglichkeit sozusagen als Kommentar in die Metadaten der Datei das Wort "copied" oder irgendeine beliebige Markierung zu schreiben und diese wieder auslesen zu können?
Danke schon im Voraus für die Hilfe!
- +4 replies
- Taulmarill
  
  2009-08-03 17:46
  
  User since
  2004-02-19
  1750 Artikel
  BenutzerIn
  
  Hängt vom Filesystem ab. NTFS oder HFS können z.B. Daten versteckt an Dateien anhängen. Ich würde dir aber eher raten, die Metadaten in einer eigenen Datei im jeweils aktuellen Verzeichnis abzulegen, das finde ich leichter zu verwalten, ist OS und FS unabhängig und transparenter für den User.
  
  edit: Informationen zu versteckten Daten findest du u.a. bei Wikipedia http://de.wikipedia.org/wiki/Alternate_Data_Streams
  $_=unpack"B*",~pack"H*",$_ and y&1|0& |#&&print"$_\n"for@.=qw BFA2F7C39139F45F78 0A28104594444504400 0A2F107D54447DE7800 0A2110453444450500 73CF1045138445F4800 0 F3EF2044E3D17DE 8A08A0451412411 F3CF207DF41C79E 820A20451412414 83E93C4513D17D2B
  - +3 replies
  - trojax
    
    2009-08-03 18:02
    
    User since
    2009-05-13
    21 Artikel
    BenutzerIn
    
    Bin leider (oder meistens zum Glück) unter Linux unterwegs und hab ne ext3 Formatierung. Weist du ob da auch sowas möglich ist?
    Mein Problem ist einfach das, dass ich teilweise neu erstellte Dateien dazu bekomme die so heißen wie die bereits kopierten. Kommt eine neue, überschreibt die die kopierte Version.
    In mein sozusagen "Archiv" verschieben will ich aber nur die neuen. Bisher lasse ich also alle mit dem Präfix "copied_" aus. Ich hab nämlich leider keine Ahnung wie ich sonst feststellen soll welche kopiert und welche neu sind...
    - +2 replies
    - murphy
      
      2009-08-03 18:14
      
      User since
      2004-07-19
      1776 Artikel
      HausmeisterIn
      
      Es gibt einen Unixstandard für sogenannte "erweiterte Dateiattribute", nahezu beliebige Schlüssel-Wert-Paare, die einer Inode zugeordnet sind (siehe zum Beispiel man 2 setxattr).
      
      Je nachdem mit welchen Einstellungen Dein Kernel kompiliert wurde, kannst Du diese APIs prinzipiell auch auf einem Extended 3 Filesystem unter Linux benutzen. Ich weiß allerdings nicht, ob es dafür eine ordentliche Perlanbindung gibt.
      
      Wenn die Lösung portabel sein soll, würde ich Taulmarill beipflichten und empfehlen, die Metainformationen in einer zusätzlichen Datei abzulegen -- vielleicht in einer kleinen SQLite- oder DBM-Datenbank.
      When C++ is your hammer, every problem looks like your thumb.
      - topeg
        
        2009-08-03 20:23
        
        User since
        2006-07-10
        2611 Artikel
        BenutzerIn
        
        Schau mal: File::ExtAttr
- topeg
  
  2009-08-03 18:12
  
  User since
  2006-07-10
  2611 Artikel
  BenutzerIn
  
  Bei so was lege ich zu jeder Datei eine versteckte gleichen Namens an (meist mit der Endung ".log") und schreibe in die alle Änderungen (soweit möglich)
  
  Nur das kopieren wird etwas aufwändiger, da man auch die versteckten Dateien mit kopieren muss.
  
  Wie schon gesagt gibt es verschiedenen Dateisysteme, die das Anhängen von Metadaten erlauben. Unter Linux unterstützt das, glaube ich, XFS, jedoch ist das nicht POSIX-konform und damit nicht sehr portabel.
  
  Solltest du die Daten (csv-Dateien) nur in eigen (selbst geschrieben) Programmen verwenden, so kannst du auch alle zusammengehörigen Dateien in ein Container wie "tar" oder "zip" packen und so zusammenhalten. Es gibt für beide gute Module.
  
  Einige Programme unterstützen auch Kommentare innerhalb einer CSV-Datei.
  Wenn die das erste Zeichen einer Zeile einem "#" oder "!" beginnt wird sie ignoriert, in wie weit das unterstützt wird weiß ich nicht.

View all threads created 2009-08-03 17:05.