Dotaz: md5sum a standardní výstup

[diverman]

Ahoj přátelé, tvořím skript pro hromadné zpracování kontrolních součtů md5sum. Příkaz

md5sum -c -v MD5SUM

vypíše:

test1.txt   OK
test2.txt   OK
test3.txt   OK
test4.txt   CHYBNÝ

To je v pořádku. Teď chci tento výstup zapsat do souboru MD5SUM_RESULT, abych mohl výsledky dále zpracovávat:

md5sum -c -v MD5SUM > MD5SUM_RESULT

Ale vzniklý soubor MD5SUM_RESULT je prázdný. Zkouším to tedy jinak:

echo `md5sum -c -v MD5SUM` > MD5SUM_RESULT

Soubor MD5SUM_RESULT je opět prázdný... Kdybyste mě někdo nakopnul, co dělám špatně...
díky Pavel

Odpovědi

[Michal Karas]

Ahoj, zkus:

md5sum -c -v MD5SUM 2> MD5SUM_RESULT

[diverman]

Díky moc, to je vono!

[Michal Karas]

Ale nechápu proč to md5sum posílá na stderr. V Arch Linuxu se přitom chová korektně.

[diverman]

Já to dělám v Debianu a fakt je to do stderr. Taky mě to překvapilo. Teď ještě musím z toho vyparsovat soubory OK a soubory neeOK

[Michal Kubeček]

V SuSE 10.0 to posílá také na standardní výstup

  mike@lion:~/tmp> md5sum --version
  md5sum (GNU coreutils) 5.3.0
  Written by Ulrich Drepper and Scott Miller.

Jakou verzi máte vy?

[David Watzke]

Gentoo / amd64, stejná verze, taky OK.

[diverman]

Heh, no v té mé ani přepínač --version nefunguje. Takže asi mám nějakou prehistorickou verzi. (Debian Sarge)

[Michal Kubeček]

Tak to nejspíš nebude GNU verze… :-)

[diverman]

Hmmm čekal bych, že program jako md5sum instalovaný z "pravého debiálního" (heh to je teda výraz ) mirroru bude GNU.

[Jan Martinek]

Pro inspiraci jsem se pokusil něco podobného udělat.

Následující program projde všechny soubory v daném adresáři, u každého vypočítá md5sum a výsledky uloží do XML souboru. Formát XML jsem vybral záměrně, aby bylo možné uložit stromovou strukturu, kdybych procházel adresář rekurzivně (což prozatím nedělám). Také se rozumně vypořádá i s podivnými názvy souborů. Navíc ho lze "hezky" zobrazovat v prohlížeči

Při dalším spuštění program otevře XML soubor a porovná kontrolní součty se skutečností. Vypíše, které soubory se změnily.

Chtělo by to ještě přidat kontrolu chybových stavů, zjišťování, který soubor přibyl či ubyl, ale o to tu, myslím, nešlo.

import os, sys, md5
from elementtree.ElementTree import Element, SubElement, ElementTree, dump

def CalcMD5(filename):
  buffersize = 1000000
  sum = md5.new()
  f = open(filename)
  while True:
    data = f.read(buffersize)
    if not data: break
    sum.update(data)
  f.close()
  return sum.hexdigest()


def StoreChecksums(basedir, xmlname):

  root = Element("checksums")
  Files = SubElement(root, "Files")
  for name in os.listdir(basedir):
    name_fullpath = os.path.join(basedir, name)
    if not os.path.isfile(name_fullpath): continue
    md5sum = CalcMD5(name_fullpath)
    elem_file = SubElement(Files, "file") 
    elem_file.set("name", name_fullpath)
    elem_file.set("md5sum", md5sum)
 
  tree = ElementTree(root)
  dump(root)
  tree.write(xmlname, encoding="utf-8")

def CheckChecksums(basedir, xmlname):
  root = ElementTree(file=xmlname)
  files_old = root.find('Files')
  for file_old in files_old:
    name = file_old.get('name')
    md5sum_old = file_old.get('md5sum')
    md5sum_new = CalcMD5(os.path.join(basedir, name))
    if not md5sum_old == md5sum_new:
      print 'File', name, 'has changed!'

###############################  MAIN #############

xmlname = 'md5sums.xml'
basedir = '.'

if not os.path.exists(xmlname):
  print 'md5sums have not been calculated yet. Creating', xmlname
  StoreChecksums(basedir, xmlname)
  sys.exit(0)

CheckChecksums(basedir, xmlname)