Dotaz: python - chytré uložení konfigurace

[dik]

Ahoj All, mám dotaz na místní programátorské guru. Snažím se vymyslet vhodný způsob uložení konfigurace ,která je sdílena a načítána ruznými objekty a používána třeba k validaci dat atd...

Požadavky na konfiguraci: - lidské čitelná/konfigurovatelná syntaxe - uložení nejlépe v souboru, načítána při startu programu, db bych se chtěl vyhnout - jednoduše přístupná data z konfigu z metod či souborů - aktualizovatelná data konfigu za běhu programu

Prozatím používám slovníky (dict), nicméně situace se stává nepřehledná při vícenásobném vnoření (cca 4) a položek bude určitě přibývat:

modul = dict()
modul["prvni"] = dict()
modul["prvni"]["soubory"] = dict()
modul["prvni"]["metody"] = dict()
modul["prvni"]["testy"] = dict()
modul["prvni"]["cmd"] = dict()
...
modul["prvni"]["cmd"]["filter"] = dict()
modul["prvni"]["cmd"]["filter"]["cesta"] = ['/aaa/bbb','/ccc/ddd']
modul["prvni"]["cmd"]["filter"]["typ"] = "sh"
modul["prvni"]["cmd"]["filter"]["bin"] = "/abc/text_filter"

Ve funkci či objektu si pak jednoduše zístám potřebné informace viz:

text_procesor = modul["prvni"]["cmd"]["filter"]["bin"]

Napadá vás jak lépe konfig zapsat? Vím ,že položeb a zanoření slovníků bude dramaticky přibývat... Dík

Odpovědi

[Kit]

Databáze se pro tento účel přímo nabízí. Bude to i rychlejší, protože jistě nebudeš potřebovat všechny hodnoty naráz, ale budeš si vybírat.

[rADOn]

Asi začnu opravovat přísloví pro 21. století. Co třeba: „Když jedné co umíš je sql, vypadá každý problém jako SELECT“.

[Kit]

Pokud to chce často modifikovat, např. přímo z aplikace, tak by se databáze hodila. Přímo z Pythonu se dá pracovat např. s SQLite. NoSQL řešení se nebráním, jen bych vybíral mezi standardizovanými formáty, jako např. CSV, YAML, JSON nebo XML.

[rADOn]

"Pokud to chce casto modifikovat, napriklad primo z aplikace" tak to neni konfigurace.

[Kit]

Cite: "aktualizovatelná data konfigu za běhu programu".

Máš pravdu. Není to konfigurace.

[rADOn]

Cite: …uložení nejlépe v souboru, načítána při startu programu, db bych se chtěl vyhnout…

Mám pravdu Pokud "aktualizovatelna data" znamena ze si jako slusne vychovany unixovy program umi reloadnout konfigurak kdyz dostane HUP tak na to ma python uzasny vynalez k thread-safe zamene nahrazeni jednoho objektu jinym za behu. Obvykle se mu rika rovnitko :-P

[Josef Kufner]

Co je špatného programu upravujícího svou konfiguraci? Třeba už jen to, že program má v sobě GUI na úpravu té konfigurace, nebo když jedna část generuje konfiguraci pro jinou, která se spouští nezávisle na té první (jiný počítač).

[wamba]

nedávno jsem řešil něco podobného (v Perlu) a taky jsem skončil u hashe (slovníku)

i když se nabízely např. JSON, YAML, XML

jen zápis jsem zvolil jiný, jehož ekvivalent by v pythonu asi vypadal takto:

modul = {
    'prvni' : {
        'soubory' : {},
        'metody'  : {},
        'testy'   : {},
        'cmd'     : {
            'filter' : {
                'cesta' : [ '/aaa/bbb', '/ccc/ddd', ],
                'typ'   : 'sh',
                'bin'   : '/abc/text_filter',
            },
        },
    },
}

[tom]

Python nepodporuje autovivifikaci, takze tam je takove reseni vpodstate nepouzitelne. Musi se pouzit JSON, YAML apod.

[Delaunay]

collections.defaultdict

[rADOn]

…jeho kolega setdefault().

[tom]

To funguje do doby, nez zacnete krome hashe potrebovat i pole.

[rADOn]

Pokud je pro nekoho problem napsat cca pet radku ktery to nauci i pole, tak se obavam ze s perlem se o moc dal nedostane :-P

[tom]

V tom pripade je ale snazsi napsat 2 radky a pouzit JSON jak jsem psal ve svem prvnim komentari.

A navic na tech 5 radku napisete jen podporu pro A[x][y][z] = X syntaxi, s autovivifikaci mate mnohem vic moznosti.

[Delaunay]

config

[Jan Šimák]

Podle mého naprosto dostačuje modul configparser a vhodné uspořádání konfiguračního souboru.

[modul_prvni]
cmd_filter_cesta = /aaa/bbb,/ccc/ddd
cmd_filter_typ = sh
cmd_filter_bin = /abc/text_filter

K volbám a jejich hodnotám z konfigurace se pak přistupuje takto.

config = configparser.RawConfigParser()
config.read('config')
print(config.get('modul_prvni', 'cmd_filter_cesta').split(','))

Pro získání cest jako objektu pole.

[dik]

Díky všem za odpověď. Configparser znám, ten mi stačit nebude. Config vypadá zajímavě, ten ještě prozkoumám. Btw,také jsem vygooglil, žel lze jako key dict použít tuple, takže můžu napsat..

....
modul = {}
modul[("prvni","cmd","filter","bin")] = "/abc/text_filter"
....

jojo, furt se mám co učit.. Dik

[Kit]

Můžeš to udělat ještě jednodušeji

modul = {}
modul["prvni/cmd/filter/bin"] = "/abc/text_filter"

Na všechno se to ale nehodí.

[Jary]

configobj

[rADOn]

To neni tim ze by slovnik nestacil ale ze ho pouzivas blbe. Ten tvuj priklad by sel napsat prehledneji:

modul = {
  "prvni": {
       "soubory": {…},
       "metody": {…},
       "testy": {…},
       "cmd": {
           "filter" = {
               "cesta": ['/aaa/bbb','/ccc/ddd'],
               "typ": "sh",
               "bin": "/abc/text_filter"
           }
       }
   }
}

Kdyby to byl jinej jazyk tak by se dal uvazovat json nebo nedejboze xml, ale zrovna u pythonu si tim moc nepomuzes. Druha vec je jestli je nutny tak hluboke strukturovani. Neni problem napsat pajtni kod tak aby co nejvic hodnot bylo defaultnich.

[chrono]

Pri takto jednoduchom konfiguračnom súbore by bolo asi možné použiť aj YAML, ale je otázne, ako to bude vyzerať, keď tam toho bude výrazne viac.

[l4m4]

Bude to vypadat naprosto stejně, akorát toho bude výrazně víc.

[rADOn]

BTW pokud vystacis se zabudovanymi typy tak doporucuji pozornosti pomerne neznamou funkci literal_eval() z modulu ast.