Dotaz: úprava konců řádek filtrem v proudu

[Ondroid]

Potřeboval bych v proudu co přichází z roury nahrazovat \r za \r\n. Zkoušel jsem to sedem ale ten zpracovává proud po řádcích a ty právě nejsou moc korekt, takže to nakešuje a nakonec vychrlí všechny řádky naráz - nezpracovává je kontinuálně. Nevíte jak na to ?

Odpovědi

[Michal Čihař]

man sed
/unbuffered

[Ondroid]

Tak s tím jsem taky neuspěl :(

[Ondroid]

Rději pořádně popíšu o co se snažím. Potřebuju nějak plynule filtrovat výstup z rsync --progres soubor1 soubor2 - ten cyklicky vypisuje průběh přenosu a na konci je vždy /r takže je všechno stále na jednom řádku. Zkoušel jsem nejprve tedy použít | tr $'\r' $'\n' - to vše vypisuje po řádku jak má ale pokud to napojím třeba | awk ... tak opět dlouho nic a pak se vypíše sposta řádků naráz. Už nevím jak ty konce řádků upravit aby to šlo kontinuálně, tak jak to leze z toho rsyncu...

[unchallenger]

Nijak.

Stdout rsyncu je line-buffered, tj. výstup se pošle druhému programu v rouře, když je kompletní řádek (a nejspíš taky po překročení 4kB). IOW výstup se zapíše, teprve až přijde \n; \r může přijít kolik chce, ale řádek neukončí.

[Michal Marek (twofish)]

Můj rsync volá pokaždé fflush(stdout), ale sed i s optionem -u čeká na vstupu na konec řádku, nejspíš proto, že ty regexpy pracují s celými řádky. tr zase nemá option -u, takže do roury zapisuje po blocích (viz tr a b | cat). Jak100hoven?

[unchallenger]

#!/usr/bin/tcc -run
#include <stdio.h>
int main() {
    int c;
    setvbuf(stdin, NULL, _IONBF, 0);
    while ((c = getchar()) != EOF)
        putchar(c == '\r' ? '\n' : c);
    return 0;
}

[unchallenger]

Zapomněl jsem podotknout, že skript se jmenuje \r2\n.c ;-)

[Michal Marek (twofish)]

+++ \r2\n.c.new 2005-05-08 17:16:35.179029032 +0200
@@ -3,6 +3,7 @@
 int main() {
     int c;
     setvbuf(stdin, NULL, _IONBF, 0);
+    setlinebuf(stdout);
     while ((c = getchar()) != EOF)
         putchar(c == '\r' ? '\n' : c);
     return 0;

[unchallenger]

To je snad default, ne? Tedy pokud isatty(fileno(stdout)).

[Michal Marek (twofish)]

No právě, on na to chtěl napojit awko. Na terminálu to funguje i s tr.

[Ondroid]

Mezi tím jsem přišel taky na řešení i když dost primitivní a ne moc čisté :). Prostě to z toho rsyncu přesměruju do temp souboru a ten pak jiným procesem čtu, v tom souboru to je pak jeden šíleně dlouhý řádek ale už z toho jde odfiltrovat těch pár posledních znaků. Použiji ale stejně jeden z vašich návrhů, díky hoši...

[Ondroid]

Tohle dělá úplně stejnou věc jako to tr ne ?