Apache Airflow 2.0

Apache Airflow (Wikipedie) byl vydán ve verzi 2.0. Jedná se o open source platformu pro řízení procesů (workflow management).

18.12.2020 12:44 | Ladislav Hagara | Nová verze

Komentáře

[Josef Kufner]

Používáte to někdo?

[Josef Kufner]

… nebo něco takového podobného?

[Josef Kufner]

… nebo alespoň znáte někoho, kdo něco takového používá?

[Ondra]

V jednom projektu jsme to chtěli používat jako "ETL". Ikdyž ten projekt nakonec padnul i tak jsme pak vybrali Talend,přestože Airflow měl lepší monitoring.

[M.]

Jo. Co chceš vědět?

[Josef Kufner]

No, zajímalo by mne jak moc to je použitelné a k čemu se to reálně použilo.

[Josef Kufner]

… Jde mi o to, že jsem o tom jen slyšel, ale v praxi jsem to nepotkal. Vlastně mi přijde, že se o tom jen mluví a při tom to nikdo nepoužívá.

Tak pokud bys mohl prosím na pár řádcích nastínit jak to reálně v praxi vypadá, zda to stojí za to, nebo by bylo lepšího něco jiného, případně od jak složité aplikace se to vyplatí.

[smo]

mam pocit ze to pouzivali / pouzivaji v kiwi.com

[Josef Kufner]

Věděl bys k tomu prosím nějaké podrobnosti? Co s tím řešili a jak jim to šlo?

[smo]

dost věcí na práci s daty typu tady pustim dotaz, ten jeden 2h, pak pustim toto a udelam query tamhle. tzn ETL

obecně si pochvalovali pincip: mas batch/job ze kterych muzes delat strom operaci, ktere na sebe navazuji

-

bylo to vsechno na pohovoru takze at si z toho kazdy odnese to sve. (jeste si pamatuju ze jsem se o Airflow bavil s kymsi v hospode a taky byl spokojeny)