Unixové nástroje – 10 (echo, grep)

25. 2. 2010 | David Watzke | Návody | 43579×

V tomto díle si popíšeme příkaz echo pro výpis daného textu na výstup a k tomu přidáme vyhledávání v textu pomocí příkazu grep.

Obsah

• echo
• grep

echo

echo je příkaz sloužící k vypsání argumentů, které se mu zadají. Název echo v angličtině znamená „ozvěna“ – příkaz totiž opakuje to, co mu „řeknete“. Jen za daný výraz vypíše znak nového řádku, což při interaktivním použití (tj. v shellu) nemusí být úplně zjevné.

# pouze odřádkuje
$ echo

# vypíše daný text a odřádkuje
$ echo 'Hello world!'
Hello world!

# vypíše obsah proměnné a odřádkuje
$ echo $HOME
/home/dave

Pro záruku přenositelnosti byste se měli vyhnout přepínači -n (ten si za chvíli vysvětlíme) a zpětným lomítkům ve výrazech (které mají na většině systémů zvláštní význam).

Implementace dodržující XSI (X/Open Standard Interfaces), mezi které patří GNU a BSD echo, podporují přepínač -n, jenž zakáže odřádkování po vypsání daného výrazu.

# vypíše „ahoj světe“ na jeden řádek (první příkaz totiž neodřádkuje)
echo -n "ahoj "
echo "světe"

Tyto implementace také podporují zvláštní význam zpětných lomítek následovaných určitým znakem. Například „\n“ znamená odřádkování, „\r“ vrátí kurzor na začátek aktuálního řádku, „\t“ vloží tab a podobně (vizte specifikaci). GNU verze (a implementace příkazu v Bashi) tuto vlastnost podporuje jen s přepínačem -e.

$ echo -e "raz\ndva"
raz
dva

# tohle v Bashi na GNU vypíše postupně 1 až 100 (na jeden řádek)
for((i=1;i<=100;i++)); do
	echo -ne "$i\r"
	sleep 0.05
done; echo

Máte-li terminál podporující ASCII barvy a používáte-li echo od GNU nebo z Bashe, zkuste následující:

$ echo -e "== \e[31;1mCerveny text\e[31;0m =="
== Cerveny text ==

Pozor, toto ovšem není vlastnost programu echo, ten jen v tomto případě vypíše sekvenci znaků, které si shell interpretuje po svém (tj. výstup obarví). Více o tomto tématu si můžete přečíst v článku Barevný a formátovaný text v terminálu.

grep

Program grep slouží k hledání daných výrazů v textu. Jeho název vznikl z výrazu global / regular expression / print, což jsou instrukce, podle kterých ekvivalentní činnost vykonává program ed. To znamená, že toto:

ed soubor.txt
g/re/p
q

je totéž jako:

grep "re" soubor.txt

Obojí vyhledá v textu výraz „re“ a vypíše všechny řádky, na kterých se vyskytuje. To je nejjednodušší použití. Zdrojem textu nemusí být soubor, lze použít i přesměrování (standardní vstup).

Výraz může být buď obyčejný text nebo základní regulární výraz (BRE). Podporu rozšířených regulárních výrazů aktivuje přepínač -E. Na některých systémech je dostupný příkaz egrep, který bývá obvykle odkazem na grep a který dělá totéž jako grep -E. Ovšem preferovaným způsobem je přepínač, zmiňovaná alternativní metoda je zastaralá. Nejste-li zvědaví na regulární výrazy a chcete vyhledat řetězec přesně tak, jak byl zadaný, použijte přepínač -F (nebo zastaralý fgrep). Citlivost na velikost písmen lze vypnout přepínačem -i.

# vyhledá L (nebo l) a bezprostředně za ním číslo
egrep -i "L[0-9]+" soubor2.txt

Užitečný přepínač může být také -q, protože potlačí výstup programu a případný nález řetězce signalizuje pouze návratovou hodnotou (0 – úspěch, při nalezení a naopak). Je proto vhodný pro použití v jednoduchých podmínkách při skriptování.

grep -qi "watzke" jmena.txt prijmeni.txt && echo 'Watzke existuje!'

S přepínačem -l program vypíše pouze názvy souborů, ve kterých se hledaný výraz nachází. S přepínačem -c pro změnu vypíše počet řádků, na kterých se daný výraz vyskytuje. Přepínač -n aktivuje zobrazení čísel řádků, na kterých byl výraz nalezen.

Přepínač -v neguje výchozí funkci grepu a vypíše pouze ty řádky, které neodpovídají zadanému výrazu.

# vypíše řádky, na kterých není řetězec „hloupost“
grep -v "hloupost" textovy_soubor

Lze zadat vícero výrazů najednou tím, že je zadáte za přepínač -e, který lze uvést vícekrát za sebou. Potom se vyhledávají řádky se všemi danými výrazy v tom smyslu, že jde o sjednocení (tj. „a“ nebo „b“) a ne průnik.

grep -i -e david -e watzke soubor1.txt soubor2.txt

Vyhledáváte-li některé výrazy pravidelně, můžete si vytvořit soubor, který bude ve formátu „co řádek, to výraz“ a ten pak předat grepu přepínačem -f. Přepínačem -E nebo -F pak můžete nastavit typ výrazů (viz výše).

$ cat > vyrazy.grep << EOF
vyraz1
další výraz
EOF
$ grep -F -f vyrazy.grep soubor_s_vyrazy.txt

Teď si popíšeme některá rozšíření GNU verze programu. Užitečný je například rekurzivní režim (-r), který umožňuje místo souboru k prohledání zadat adresář, přičemž se prohledají veškeré soubory v něm obsažené.

grep -r "love" ~/texty/

Máte-li GNU grep zkompilovaný proti libpcre, tak můžete použít přepínač -P, který aktivuje použití perlových regulárních výrazů.

grep -P '\d+' soubor.txt

Přepínač -m umožňuje zadat počet nálezů řetězce, po kterém se vyhledávání přeruší.

grep -m3 řetězec /mnt/cdrom/soubor.txt

Přepínač -o zapříčiní výpis pouze těch částí řetězce, které odpovídají hledanému výrazu.

# vypíše 123
echo 123 | grep 2
# vypíše 2
echo 123 | grep -o 2

Občas, když hledáme nějaký výraz v souvislém textu, se nám hodí vidět kontext kolem samotného řádku, kde se výraz vyskytuje. To napadlo i někoho z GNU, a proto teď máme k dispozici přepínače -A, -B a -C. Přepínač -C (--context) bere jako argument celé číslo n, které udává, kolik řádků kolem samotného řádku s nálezem výrazu se má vypsat (tj. n řádků před a po každém nálezu). Přepínač -A (--after-context) je podobný, ale slouží k výpisu kontextu za nálezem. Přepínač -B (--before-context) naopak slouží k výpisu kontextu před nálezem.

# vypíše před a za každým řádkem s nálezem výrazu „interpol“
# pět okolních řádků
grep -i -C 5 interpol ../cia.log
# vypíše všechny řádky obsahující „abclinuxu“ a před každý z nich
# dva řádky kontextu
grep --before-context=2 abclinuxu /var/log/lighttpd/access.log

Při interaktivním použití příkazu je praktický přepínač --color, který zajistí barevné odlišení odpovídající části řádku. Můžete mu zadat argument za rovnítko (tj. např. --color=auto). Argument může být always (vždy obarví výstup), never (zakáže barvičky), nebo auto (rozhodne automaticky podle použití).

$ grep --color=auto -i text soubor.txt
toto je ukázkový text…

Podobný příkaz na Windows (a v DOSu) je find a pokročilejší findstr.

       

Komentáře

[Ladislav Hagara]

Jak pomocí příkazu echo vypsat "-n"?
echo -n

Řešení například v nedávné diskusi v coreutils diskusním listu.
Právě pro problémy s přenositelností doporučují i vývojáři coreutils místo echo používat příkaz printf ze stejného balíku.

[pozortucnak]

Wow, ale co...

echo -e '-\x6e'

echo -e "\x2dn"

echo -e '\x2d\x6e'

[petr_p]

Echo mě řádně vypeklo, když jsem si v Debianu vyměnil dash za bash coby implementaci /bin/sh.

Dostat do proměnné znaky nového řádku a poslat ji na standardní vstup dalšímu příkazu tak, aby skript fungoval jak v bashi, tak v dashi (bez použití externího echa) se ukázalo být nemožné.

Objev století na mě čekal, když jsem při srovnávání implementace a specifikace v echo(1p) našel tyto věty:

Implementations shall not support any options.

It is not possible to use echo portably across all POSIX systems unless both -n (as the first argument) and escape sequences are omitted.

New applications are encouraged to use printf instead of echo.

Tudíž doporučuji do svaté války vedle zahození ifconfigu přidat zavržení echa.

[pozortucnak]

printf toho umí celkem dost...

[Nicky726]

Hm, co bych měl použít místo ifconfig, a proč bych to měl udělat? Resp. Co mi to -- krom dobrého pocitu jiných -- přinese?

[Jakub Lucký]

Ty si buď totálně netknut asi tisíce a jednoho flame, nebo jen přiléváš vysoceoktanový benzín na další...

Podle ip-istů by se ifconfig měl zatratit a používat jedině ip, protože ifconfig je zastaralý a v určitých případech udává chybné výsledky, ifconfigisti se vesměs brání tím, že ip má hloupý a složitý zápis

[Nicky726]

Totálně netknutý. Díky za shrnutí.

[Jendа]

Např. A další výskyty ifconfig společně se jménem Kubeček. Hledej, šmudlo .

[pht]

vypíše sekvenci znaků, které si shell interpretuje po svém (tj. výstup obarví).

To není shell ale terminál.

[Ravensun]

Jaký je rozdíl mezi shell a terminál?

[David Watzke]

Shell je sh, bsh, bash, zsh, terminal je xterm, konsole, rxvt... ma pravdu, popletl jsem to.

[pht]

Ne. Terminál je krabice s monitorem a klávesnicí.

xterm, ... je emulátor terminálu.

[David Watzke]

Jasně, když se chcem vyjadřovat 100 % korektně. Byl jsem na mobilu a uvědomil jsem si to hned po odeslání. Tušil jsem, že tu na mě budou čekat nesouhlasný reakce

[Michal Kubeček]

Terminál je spíš /dev/pts/*, /dev/tty[0-9]* apod.

[zulu]

Není.

[Michal Kubeček]

Podle isatty() ano. :-)

[pht]

Tak to čtete blbě dokumentaci k této funkci. :)

[Michal Kubeček]

Nečtu. To, že se slovem terminál označuje jakási bedýnka, ještě neznamená, že tentýž výraz stejně legitimně nemůže označovat i něco jiného. Například část letiště nebo určitou kategorii znakových zařízení.

[pht]

O to nejde. Ale ty zařízení nejsou terminály. Pouze jsou něčím (portem) co Vás s terminálem spojí. Podobně jako /dev/ttyS0 by Vás mohlo spojit se skutečným terminálem, tak /dev/tty1 Vás spojí s virtuálním terminálem a pty s pseudo terminálem - např. xtermem. Abych ten rozdíl ilustroval, tak "/dev/hda" je master port na 1. IDE řadiči, a ne disk, a "eth0" je síťovka a ne vzdálený server/switch/...

[Michal Kubeček]

Myslím, že (ne)smysluplnost takového hnidopišství nejlépe ilustruje skutečnost, že jste mi nejprve vysvětlil, že /dev/tty1 není terminál, ale jen znakové zařízení, které mi ten terminál zpřístupňuje, a pak jedním dechem prohlásil, že eth0 je síťová karta.

[pht]

Proč by v tom byl nesmysl?

[Michal Kubeček]

Teď nerozumím otázce. Ptáte se, proč eth0 není síťová karta nebo proč je nesmysl bazírovat na do posledního písmenka dokonale přesné terminologii i tam, kde je i bez ní každému jasné, o čem je řeč?

[pht]

To druhé.

[Michal Kubeček]

V tom případě nemůžu sloužit, to je holt věc světonázoru. Co se mne týká, necítím potřebu opravovat každého, kdo řekne, že /dev/sda je disk, protože kdybych chtěl být opravdu důsledný, musel bych trvat nejen na tom, že to není disk, ale speciální soubor sloužící jako rozhraní pro přímý přístup k tomu disku, ale ještě upozorňovat, že obecně je potřeba místo /dev/sda říkat "blokové zařízení s major 8 a minor 0". Považuji přesnost terminologie za důležitou tam, kde nepřesnost vyjadřování může způsobit nedorozumění nebo špatné pochopení; ne tam, kde jde jen o chytání za slovíčka a předvádění se, jaký jsem frajer, že jsem vždy stoprocentně přesný (což stejně nejsem - a ani vy ne, jak jste sám předvedl na příkladu s eth0).

[pht]

To je mi líto, že to tak chápete. Ale původní otázka zněla "co je to terminál", respektive "jaký je rozdíl mezi shellem a terminálem" a v tomto kontextu mi přijde docela příhodné upozornit na to, že "xterm" je mnohem blíže terminálu než "/dev/pts". Váš výrok je tedy mystifikace a já ho uvádím na pravou míru. Pokud si myslíte, že jsem se vyjádřil nepřesně (včetně výroku o síťové kartě), tak mě opravte. Chcete-li naznačit, že moje upozornění je nesmysl, tak to je opravdu věc světonázoru.

[Michal Kubeček]

mi přijde docela příhodné upozornit na to, že "xterm" je mnohem blíže terminálu než "/dev/pts"

Za předpokladu, že akceptujete jen jeden možný význam slova "terminál", máte pravdu, jinak ne. Pro mne jsou přípustné i ty další, takže jsem nucen s takovým kategorickým tvrzením nesouhlasit.

Pokud si myslíte, že jsem se vyjádřil nepřesně (včetně výroku o síťové kartě), tak mě opravte.

Tvrzení, že eth0 je síťová karta, je asi tak stejně přesné jako tvrzení, že /dev/sda je disk. Jméno eth0 označuje síťové rozhraní, tedy abstraktní objekt, jehož prostřednictvím jádro umožňuje komunikovat (mimo jiné) se síťovými kartami. Navíc tu ani není korespondence 1:1, protože máme jednak virtuální síťová rozhraní (kterým neodpovídá konkrétní kus hardware), jednak třeba víceportové karty (kde jedné síťové kartě odpovídá více síťových rozhraní).

[pht]

Za předpokladu, že akceptujete jen jeden možný význam slova "terminál", máte pravdu, jinak ne.

Říkejte si jak chcete čemu chcete. Já se nechci tahat o slovíčka. Mně o myšlénku se jedná.

Představte si, že spustíte v xtermu ssh a připojíte se na vzdálený stroj, kde napíšete příklad z článku

echo -e "== \e[31;1mCerveny text\e[31;0m =="

V tomto příkladu, ačkoliv si echo povídá s /dev/pts na svém stroji, pokyn pro červenou barvu interpretuje až Váš xterm - tj. terminál. Takže toť rozdíl mezi shellem, /dev/* a terminálem (nebo jeho emulátorem). Zařízení /dev/pts (nebo tty) má svou roli, ale trochu jinou (viz manuály).

Tvrzení, že eth0 je síťová karta, je asi tak stejně přesné jako tvrzení, že /dev/sda je disk.

Uznávám že to nebyl dobrý příklad, a to nejspíš proto, že síťový systém má trochu jiné principy (a zákoutí).