Dotaz: načtení parametrů příkazu ze seznamu (souboru *.txt)

[Myšpulín]

Potřeboval bych provádět hromadně nějaké úkony v bashi - např. hromadně vytvořit adresáře nebo zadat uživatele a pod. Mám textový soubor se seznamem uživatelů nebo adresářů a chci, sloužil jako vstup. Chtěl jsem použít smyčku for in, ale nevím, jak jí říct, aby načetla data z toho souboru.

---

---

Odpovědi

[voda]

A co takhle:

while read line; do
    echo $line;
done < soubor.txt

[Myšpulín]

Super to vypadá, že to je ono. Dají se nějak použít oddělovače ve vstupním souboru? Např. středník?

[rastos]

man bash:

IFS

The Internal Field Separator that is used for word splitting after expansion and to split lines into words with the read builtin command. The default value is ''<space><tab><newline>''.

[Myšpulín]

Zatím jsem našel tohle: cut -d ";" -f 1 seznam.txt | while read x ; do mkdir "$x" ; done

V souboru seznam jsou tři sloupce oddělené středníkem. Příkaz cut vybere řádky, které obsahují středník a přepínač -f 1 určuje, ze kterého pole se mají brát hodnoty. Pokud má někdo něco lepšího, tak to určitě uvítám.

[Patrik Uhrak]

Zdravim,

ak sa snazis robit nieco v bash-i, tak sa to treba snazit robit v bash-i a nie volat daky iny program zbytocne. Najma ak je to nieco jednoduche a bash samotny ma toto implementovane. Samozrejme, su pripady, kedy je lepsie zavolat externy program, ktory to spravi rychlejsie, ale nie v tomto pripade. ;)

#! /bin/bash

while read LINE
do 
        # ${PREMENNA%%;*} - vymaze najdlhsi nalez od konca hodnoty premennej po znak ; (bodkociarka)
        echo "${LINE%%;*}"
done< ./seznam.txt

[Myšpulín]

Děkuji všem. Potřeboval jsem vytvořit adresáře podle jmen uživatelů ze seznamu a do těch adresářů nakopírovat konfigurační soubory pro každého uživatele, které byly zabaleny v zaheslovaném zipu, ten rozbalit a pak ty zbylé zip soubory zase smazat. Nakonec jsem to vyřešil takto:

#!/bin/bash

seznam=seznam.txt     # zde se předpokládá, že seznam.txt leží ve stejném adresáři jako samotný skript - jinak se musí pochopitelně uvést cesta k souboru se seznamem

cat $seznam | while read x ; do

cesta="$( echo $x | cut -d ";" -f 1 )"
soubor="$( echo $x | cut -d ";" -f 3 )"
heslo="$( echo $x | cut -d ";" -f 2 )"

mkdir "$cesta"
cp "$soubor.zip" "$cesta"
cd "$cesta"
unzip -P "$heslo" "$soubor.zip"
rm -rvf "$soubor.zip"
cd ..

done

[Patrik Uhrak]

Zdravim,

vidiet, ze ste sa snazili a zrejme ste s nim aj spokojny. V podstate robi, co ma, az kym nenastanu problemy.

1. Ziadne overovanie, ci dany subor ci adresar existuju. Vid prikaz test a if v bash-i.

2. cat $seznam moze narobit paseku, ak sa v ceste alebo adresari nachadza medzera. Vid uvodzovanie v bash-i.

3. Ziadne overovanie, ci seznam.txt je to, co potrebujete a taktiez moznost zadania ineho umiestnenia je pomocou upravy skriptu. Vid             pozicne parametry v bash-i.

Mozno je tam toho aj viac, ale ja musim spat k svojej praci. A neberte to nijak zle, ja napr. vzdy ocenujem, ked ma niekto napomenie. ;)

 

Tu je aj moja verzia. Mozte to upravit alebo ignorovat. Akokolvek, nebolo to ani raz otestovane, takze mozu tam byt chyby a preto to otestujte prv na necisto, teda ak to vobec pouzijete.

#!/bin/bash

declare -i E_SEZNAM
declare DEF_SEZNAM SEZNAM
E_SEZNAM=1
SEZNAM='seznam.txt'
# vychodzi zoznam sa nachadza v aktualnom adresari, podla mojho nazoru lepsie riesenie
DEF_SEZNAM="${PWD}"/"${SEZNAM}"
# tvoje riesenie, ked sa vychodzi zoznam nachadza v adresari so skriptom
# odkomentuje, ak to chces a zakomentuje predchadzajucu definiciu DEF_SEZNAM
# ${PREMENNA%/*} odstrani najkratsi nalez od konca hodnoty premennej po /
# ${0} je cesta ku skriptu
#DEF_SEZNAM="${0%/*}"/"${SEZNAM}"

# Ak nebol zadany pomocou tento_script cesta_k_seznamu, tak sa pouzije seznam.txt z
# aktualneho adresara, ak existuje.
SEZNAM="${1:-${DEF_SEZNAM}}"
SEZNAM="$(readlink -f "${SEZNAM}")"

if [[ $? -eq 0 && -r "${SEZNAM}" ]]
then
	echo "Nacitavam seznam z: ${SEZNAM}"
	# odkomentuj, ak chces mat aj moznost prerusenia skriptu v pripade, 
	# ze seznam.txt nie je to, co si si myslel alebo co si chcel spracovat.
	# echo -e "Citam prvych 5 riadkov v ${SEZNAM}\
	# 	---------------------------------------"
	# head -n 5 "${SEZNAM}"
	# echo -e "---------------------------------------\n"
	# read -p 'Pokracovat ? ' && exit ${E_SEZNAM}
else
	echo "${SEZNAM} neexistuje. Koncim."
	exit ${E_SEZNAM}	
fi 

while read LINE
do
	# vymaze najdlhsi nalez od konca po znak ;
	# pracujeme s absolutnymi cestami, mozno (teda som si isty ;) ) by tu bolo vhodne dat overovanie
	# ci ta cesta aj existuje, aby sa predislo nahodnemu prepisaniu niektoreho doleziteho
	# suboru. To je na tebe. ;) Celkom jednoducha podmienka pomocou if to vyriesi. A to rovnako
	# pri CESTA i pri SOUBOR
	CESTA="$(readlink -f "${LINE%%;*}")"
	# vymaze najdlhsi nalez od zaciatku po znak ;
	SOUBOR="$(readlink -f "${LINE##*;}")"
	# zobrazi hodnotu medzi dvoma znakmi ;
	HESLO="$(expr match "${LINE}" ".*;\(.*\);.*")"
	
	# nie je nutne pouzit prikaz cd, kedze pracujeme s absolutnymi cestami.
	mkdir "${CESTA}"
	cp "${SOUBOR}".zip "${CESTA}"
	unzip -P "${HESLO}" "${SOUBOR}".zip
	rm -rvf "${SOUBOR}".zip
done < "${SEZNAM}"

[Ash]

 # nie je nutne pouzit prikaz cd, kedze pracujeme s absolutnymi cestami.
    mkdir "${CESTA}"
    cp "${SOUBOR}".zip "${CESTA}"
    unzip -P "${HESLO}" "${SOUBOR}".zip

V zipu nebudou absolutní cesty, takže cd (nebo parametr zipu -d) je nutné, výchozí chování je rozbalovat do aktuálního adresáře, ne do adresáře se zipem. Spíš není nutné to kopírování:

    mkdir "${CESTA}" &&
    unzip -P "${HESLO}" -d "${CESTA}" "${SOUBOR}.zip" &&
    rm -rvf "${SOUBOR}.zip"

[Ash]

Jestli je žádoucí originál zip mazat samozřejmě nechám na tazateli, já to dal podmíněně, pokud se podaří rozbalit, ale je možné že je třeba potřeba víckrát, to nevím. Parametr -r jsem tam dal jen vinou copy&paste, ale u souboru samozř. není potřeba.

[Ash]

Jinak mne napadá že přes všechny ty ochrany vstupů a parametrů souboru se vytratila podstata - vytvoříte adresář uživatele, bez ohledu na to, jestli se vám to povedlo tam zkusíte nakopírovat zip soubor, nekontrolujete jestli se to povedlo, pak rozbalíte ten _původní_ zip v pracovním adresáři (opět nekontrolujete, jestli se to povedlo), a nakonec ho smažete. Takže výsledkem je změť konfiguračních souborů v aktuálním adresáři, zipy v adresářích uživatelů, a možná i nějaká zráta dat u uživatelů s lomítkem ve jménu a špatným heslem k zipu :)

Osobně doporučuji jistit hlavně kritické operace - vytváření souboru, kopírování, rozbalování, mazání, vše dělat je pokud se všechny prerekvizity podařily. V opačném případě nejspíš zastavit (a mít skript napsatný tak, aby jej bylo možno pustit víckrát aniž by se operace opakovaly). Takže např. kontrolovat existenci adresáře a pokud již existuje, tak jít rovnou na další jméno. Pokud by se to zadrhlo, tak se analyzuje problém, opraví skript, ten poslední adresář smaže a jede se dál.

[Patrik Uhrak]

Mohol som to dopisat kompletne, ale nedopisal som a bol na to dovod. Z toho titulu si nemyslim, ze mi usla pointa alebo nieco v tom zmysle. Ja sam by som testoval existenciu adresarov, ich prava atd. Ak si vsimnete, tak je tam prave toto napisane v komente priamo v skripte. Ja som nechcel vsetko spravit za neho, kedze od doby, kedy zalozil temu, tu prezentoval aj svoj vlastny progres v tejto veci. Tak som mu chcel dat priestor aj na sebarealizaciu. O vyuziti pozicnych parametroch tam nebolo nic v jeho povodnom skripte, to som teda napisal. Dalej vsak isiel spravne, tak som predpokladal, ze to chape a teda mu bude jednoduche upravit prave tu cast, aby kontrolovalo existenciu, opravnenia, atd. v slucke while.

[Ash]

Já zase zase snažil naznačit (a to už se opakuji), že mnoho kontrol vůbec není nutných.

if [[ -r soubor.txt ]]; then
while read line; do
foo
done < soubor.txt

je totéž, jako

while read line; do
foo
done < soubor.txt

akorát druhá varianta vám řekne line 3: soubor.txt: No such file or directory

zatímco ta první tiše selže. Takže buď můžete kontrolovat a psát vlastní chybová hlášení, nebo to nechat na bashi. Mnoho věcí na bashi nechat lze. Závislost mezi příkazy (unzip file.zip && rm file.zip) nikoliv, TO je potřeba ošetřit.

[Patrik Uhrak]

Dakujem za tip. Takto som nad kontrolou suboru, ci je citatelny pre sluckou while, nikdy nepremyslal. To sa isto zide. ;) Samozrejme suhlasim aj s ostatkom.

[Patrik Uhrak]

Ako som uz povedal, chyby tam mozu byt a nasli sa. Stravil som nad tym dakych 15 minut a ziadne otestovanie. Moj postup bol prepis povodneho skriptu a neuvedomil som si, ze unzip to rozbali uplne niekde inde. Moja chyba.

[Ash]

Já to chápu, netřeba se obhajovat :) Unzip někam jinam je prkotina, ale napsal jste nie je nutne pouzit prikaz cd, kedze pracujeme s absolutnymi cestami. což mi připadalo jako uričté neporozumnění věci, zip přece pracuje se symlinky úplně stejně jako s absolutními cestami, takže readlink -f zipu v ničem nepomůže a s použitím cd to nesouvisí. Nebo jsem vás asi nepochopil. Proto jsem to považoval za vhodné zmínit.

Ostatní věci jako absence kontroly úspěšnosti unzip nebo cp dřív, než originální zip smažu, bych nepovažoval za nepozornost či únavu po 15 minutách ošetřování vstupů, ale za hrubou chybu ;) Samozřejmě je to subjektivní, hlavně zálohovat :D

[Patrik Uhrak]

Hruba chyba urcite by to bola, ale tu som to neosetril prave skrz toho, ze som to chcel nechat na zakladatela a tak som to aj poznamenal v komente v skripte. Akokolvek, tento vas nazor nie je ani tak subjektivny ako objektivny. ;)

[Kit]

Dá se to napsat i jednodušeji:

#!/bin/bash
while IFS=';' read cesta heslo soubor; do
  mkdir -p "$cesta"
  cd "$cesta"
  unzip -P "$heslo" "../$soubor.zip"
  cd -
done <seznam.txt

[Ash]

#!/bin/bash
while IFS=';' read cesta heslo soubor; do
  mkdir -p "$cesta" &&
  unzip -P "$heslo" -d "$cesta" "$soubor.zip"
done < seznam.txt

[Kit]

Vidím to jako nejlepší řešení ze všech uvedených. Snad to Myšpulínovi bude stačit.