abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 15:33 | Komunita

Fedora stále hledá nové logo. První návrhy byly představeny již před rokem. Designérka Fedory Máirín Duffy ukázala na Twitteru aktuální verzi a žádá uživatele o zpětnou vazbu.

Ladislav Hagara | Komentářů: 4
dnes 13:55 | Nová verze

Android-x86, tj. port mobilního operačního systému Android na standardní PC s architekturou x86, byl vydán v nové stabilní verze 9.0-r1. Přehled novinek v oficiálním oznámení.

Ladislav Hagara | Komentářů: 6
dnes 13:11 | Komunita

Mozilla definitivně opouští IRC. Vloni začala hledat novou veřejnou komunikační platformu. Dosud používala IRC (plus interně neveřejný Slack a po nějakou dobu i Mattermost). Nicméně IRC i servery zastarávaly a zejména použitelnost na mobilních zařízeních byla často problematická. Po zvažování a zkoušení různých alternativ se Mozilla přiklonila k otevřenému protokolu Matrix (můžete také znát referenčního klienta Riot) a na konci února IRC vypne.

Ladislav Hagara | Komentářů: 7
dnes 13:00 | IT novinky

Raspberry Pi slaví 8 let. Při této příležitosti bylo Raspberry Pi 4 s 2 GB RAM zlevněno o 10 dolarů. Napořád.

Ladislav Hagara | Komentářů: 1
dnes 06:00 | Zajímavý článek

Článek na webu Ars Technica poskytuje úvod do problematiky softwarových licencí a přehled nejvýznamnějších „copyleftových“ a „permisivních“ licencí.

Fluttershy, yay! | Komentářů: 7
včera 21:11 | Nová verze

Byla vydána nová major verze 3.0.0 open source dokumentově orientované NoSQL databáze Apache CouchDB (Wikipedie). Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
včera 17:33 | Komunita

Sketchfab, tj. platforma pro publikování, sdílení, objevování, nákup i prodej 3D modelů, ve spolupráci s 27 kulturními organizacemi z 13 různých zemí, oznámil spuštění programu na uchování 3D modelů předmětů kulturního dědictví jako volných děl (Public Domain). Organizace nahrávající své 3D modely na Sketchfab mohou nově použít licenci CC0 1.0 Univerzální (CC0 1.0) a tím potvrdit status volného díla. Podrobnosti v diskusním fóru. Aktuálně je na Sketchfabu pod CC0 cca 1700 modelů.

Ladislav Hagara | Komentářů: 1
včera 16:00 | Nová verze

Byla vydána nová verze 1.4.95 webového prohlížeče Brave (Wikipedie, GitHub). Vychází z Chromia 80.0.3987.122 a nově při nenalezení webové stránky nabídne její kopii z Wayback Machine. Podrobnosti v příspěvku na blogu Internet Archive.

Ladislav Hagara | Komentářů: 1
včera 13:33 | Zajímavý článek

Mozilla.cz informuje o veselých i smutných zprávách o WebThings Gateway. Před necelými dvěma týdny spatřila světlo světa WebThings Gateway 0.11 s oficiální českou lokalizací. Pravděpodobně v návaznosti na horší finanční výsledky za minulý rok, které vyústily i v docela velké propouštění, se Mozilla rozhodla v roce 2020 necílit na vydání žádného komerčního produktu, který by z WebThings vycházel. S okamžitou platností byla ukončena

… více »
Ladislav Hagara | Komentářů: 3
včera 06:00 | Nová verze

Po půl roce vývoje od vydání verze 1.13 byla vydána nová verze 1.14 programovacího jazyka Go (Wikipedie). Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
Vydržela vám novoroční předsevzetí?
 (11%)
 (5%)
 (3%)
 (81%)
Celkem 205 hlasů
 Komentářů: 0
Rozcestník

Univerzální konvertor dat

1.4.2018 19:42 | Přečteno: 1335× | Linux | poslední úprava: 1.4.2018 19:42

V rámci opáčka Pythonu jsem se podíval, co bych tak mohl naprogramovat a zjistil jsem, že jsem nenašel univerzální aplikaci na konverzi dat. Tak jsem jednu takovou napsal.

Je s podivem, že na tak častou činnost jako je konverze dat, jsem nenašel žádnou aplikaci, která by se lehce přizpůsobila pro jakákoliv data. Je s větším podivem, že je to tak jednoduché. Ukáži vám tedy vlastní implementaci. Zdrojové soubory přiložím v prvním komentáři (pokud mě někdo nepředběhne), v textu se zaměřím jen na ty nejzásadnější věci.

Aplikace se skládá ze dvou částí: První částí je hlavní program, který se stará a parsování příkazového řádku, načtení pluginů, spuštění pluginů a předání data. Druhou částí jsou zmiňované pluginy. Ty se starají o vlastní datové konverze.

Hlavní program

Jak bylo řečeno, hlavní program se stará o "administrativní část". Zběžně kontroluje, zda soubor s pluginem se podaří naimportovat. Dále podle požadavku uživatele vypíše seznam všech pluginů, případně podrobnou nápovědu.

Pluginy se pak postarají o vlastní práci. Máme 2 druhy pluginů.: Vstupní pluginy se starají o načtení dat a výstupní pluginy se starají a uložení. Jeden z nich pak provede i konverzi dat, ale to je na autrovi pluginu.

Soubor s pluginy musí dodržet jisté konvence. Hlavní program je zběžně zkontroluje a případně je spustí a předá jim data.

Vstupní plugin

Jednoduchý vstupní plugin vypadá třeba takto:
#!/usr/bin/env python3

import pickle

description="Unpickle data"
kind="Input"

class Plugin:
    def __init__(self, settings = None):
        self.settings = settings
        
    def Help(self):
        return """Unpickle data.
Settings:
path - (required) path to file where read data."""
        
    def Run(self):
        with open(self.settings['path'], "rb") as fh:
            data = pickle.load(fh)
            return data
Povinné položky jsou:

Výstupní plugin

Jednoduchý výstupní plugin vypadá třeba takto:
#!/usr/bin/env python3

import pickle

description="Pickle data"
kind="Output"

class Plugin:
    def __init__(self, settings = None):
        self.settings = settings
        
    def Help(self):
        return """Pickle data.
Settings:
path - (required) path to file where to store data."""
        
    def Run(self, data):
        with open(self.settings['path'], "wb") as fh:
            pickle.dump(data, fh)
Od vstupního pluginu se liší jen v několika detailech

Výhody

Výhody řešení jsou nasnadě:

Licence, diskuse a závěr

Používejte toto dílo jako Public Domain. Vůbec si s tím dělejte, co chcete.

Program se dá asi vylepšit, ale nemám zase tolik času. Obzvlášť když teď začne být hezky.

Do diskuse si piště co chcete. Nesuďte mě příliš ostře, ten program snad opravdu funguje (testoval jsem).        

Hodnocení: 50 %

        špatnédobré        

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

Komentáře

Vložit další komentář

1.4.2018 19:44 Tomáš | skóre: 30 | blog: Tomik
Rozbalit Rozbalit vše Zdoják
Příloha:
Přidávám zdrojové soubory.

Jeden z pluginů je i unpickle, tak jsem tam přiložil i ukázku zapicklených dat (jako výstupní plugin si nastavte printData).
xkucf03 avatar 1.4.2018 20:10 xkucf03 | skóre: 49 | blog: xkucf03
Rozbalit Rozbalit vše Re: Univerzální konvertor dat

Nechci ti kazit radost z Pythonu, ale v čem je to lepší než:

cat vstupní-soubor.bin | program-1 | program-2 > výstupní-soubor.txt

v Shellu? :-)

Kde program-1program-2 jsou vstupní resp. výstupní „pluginy“.

Mám rád, když se lidé přou, znamená to, že vědí, co dělají, a že mají směr. Frantovo.cz, SQL-DK, Relational pipes
xsubway avatar 1.4.2018 21:53 xsubway | skóre: 13 | blog: litera_scripta_manet
Rozbalit Rozbalit vše Re: Univerzální konvertor dat
On ten shell (třeba bash) je sice už i v MS Windows 10, ale Python bude asi víc multiplatformní řešení.
2.4.2018 13:29 ehm
Rozbalit Rozbalit vše Re: Univerzální konvertor dat
Roury umí snad i cmd.exe.
1.4.2018 23:18 Sten
Rozbalit Rozbalit vše Re: Univerzální konvertor dat
V čem je to lepší? Je to napsané 1. dubna ;-)
2.4.2018 13:27 ehm
Rozbalit Rozbalit vše Re: Univerzální konvertor dat
Pokud to měl být fór, tak mi to taky nedošlo. Trochu marné úsilí možná.
Bystroushaak avatar 2.4.2018 14:51 Bystroushaak | skóre: 36 | blog: Bystroushaakův blog | Praha
Rozbalit Rozbalit vše Re: Univerzální konvertor dat
Autor pluginu se nestará o nudné věci jako parsování parametrů z příkazové řádky.
BTW: Kdysi jsem napsal argparse builder (github), ve kterém si argumenty příkazové řádky jednoduše naklikáš během asi tak minuty. Koukám, že už se to zobrazuje trochu rozbitě, ale pořád funguje, používám ho relativně často :)

Založit nové vláknoNahoru

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.