Dotaz: konvertování data a času z .csv pro MySQL

[Open Mage]

Zdravím Vás, narazil jsem při svém dlouhém přechodu z MS Access ve firmě na LAMP na další problém a sice potřeba konvertovat data dodaná klientem pro potřeby importu do MySQL databáze. Řetězce mi nedělají problém, čísla také ne, jediný kámen úrazu je datum (resp. datumčas). Většinou dostaneme klientská data, která máme zpracovat, v .xls (.csv v lepším případě) - data exportuju v OpenOffice.Org do .csv nebo .txt s kódováním v jakém mám DB a webový stránky GUI aplikace (ISO-8859-2) s oddělovačem záznamů "," a každý atribut v uvozovkách. Ikdyž nastavím v OO formát data a času na ten, který je přijatelný pro DB (RRRR-MM-DD) tak se do .csv exportuje DD.MM.RRRR. Jak toto prosím řešíte ? Existuje nějaká opravdu jednoduchá cesta ? Nic jako že nafetchovat záznamy ze souboru v PHP do pole a tam je regulárníma výrazama zpracovat do správnýho formátu, spíš něco fakt jednoduchýho a univerzálního pro jakýkoliv soubor dat v textovém, cvs nebo xls. Díky moc, Standa

Odpovědi

[Jan Martinek]

Těch způsobů je spousta a většinou závisejí na oblíbeném programovacím jazyce. V čem by ta jednoduchá cesta měla být jednoduchá? Jestli to chcete za každou cenu mít na jeden řádek, zkuste spatlat něco v shellu. Jestliže umíte PHP, proč jste ho hned vyloučil? Co třeba python, perl nebo jiné jazyky, co se v nich zachází pohodlně s regulárními výrazy?

[Open Mage]

Vim, že v Linux je nutno něco obětovat (čas?:o), ale pokud na každou rutinní záležitost pujdu s PHP (jiných jazyků moc neumim, PHP začínám dá se říct) tak mě asi brzo v práci vyměněj ;o) Potřebuju rychle tvořit aplikace a ne se časově zdržovat na rutinních operacích - myslel jsem něco jako prohodit to nějakym konvertorem, makrem v OO.o nebo tak. Samo pokud jiná možnost než jak říkáte perl, python, php, shell skripty neni tak mi nic jinýho nezbývá a půjdu do toho. Jen je mi jasný že pak šéfový (o to hůř že to neni soudnej chlap) o to hůř ale budu vysvětlovat proč v Accessu mi aplikace se všim všudy trvala 2-3 hodiny a teď 2-3 dny :o(

[wake]

zkuste rouru se sedem nebo awk. je to oneliner, ale parametry si vymanite urcite sam.

[Open Mage]

Jak jsem psal, sed ani awk neovládám (bohužel), takže si asi nic nevymanim - možná za pár měsíců až budu umět pořádně to co fakt potřebuju.

[wake]

jestlize je neovladate, je cas je vymanit.

[Open Mage]

Už jsem se vymanil, když už se učím PHP tak jsem to pořešil s PHP. Tady je řešení, sice asi pro PHP guru trochu krkolomné, ale pro můj účel plně dostačující začátečnické řešení ;o)

$row = 0;
$fp = fopen ("data.csv","r");
while ($data = fgetcsv ($fp, 1000, ";")) {
   $num = count ($data);
   $row++;
   
  // podmínkování tak, aby textové stringy v případě, že
  //nejsou prázdné byly vloženy mezi uvozovky a neignorovaly se
  //jako úniková sekvence či ohraničení textového řetězce
   if ($data[0] != "") {
   	$title_before = "\"$data[0]\"";
	}
   else {
   	$title_before = $data[0];
	}
   if ($data[1] != "") {
   	$firstname = "\"$data[1]\"";
	}
   else {
   	$firstname = $data[1];
	}
   if ($data[2] != "") {
   	$surname = "\"$data[2]\"";
	}
   else {
   	$surname = $data[2];
	}
   if ($data[3] != "") {
   	$job = "\"$data[3]\"";
	}
   else {
   	$job = $data[3];
	}
   if ($data[6] != "") {
   	$notice = "\"$data[6]\"";
	}
   else {
   	$notice = $data[6];
	}

// konvertování řetězce data a času z formátu Windows do formátu akceptovatelného MySQL
# nejprve rozdělím pole datumčas na jeho dvě části do proměnných DATUM a ČAS
$data5length = strlen ($data[5]);
if ($data5length > 0) {
	$datumcas = explode (" ", $data[5]);
	$datum = $datumcas[0];
	$cas = $datumcas[1];
# formát času je okey, měním tedy pouze datum - rozdělím ho stejně do proměnných DEN, MĚSÍC, ROk
	$denmesicrok = explode (".", $datum);
	$den = $denmesicrok[0];
	$mesic = $denmesicrok[1];
	$rok = $denmesicrok[2];
# konečně vygeneruji formát DATETIME akceptovatelný MySQL
	$datetime = "\"$rok-$mesic-$den $cas\"";
}
else {
	$datetime = "";
	}
	
   echo $title_before . ";" . $firstname . ";" . $surname . ";" . $job . ";" . $data[4] . ";" . $datetime . ";" . $notice . "
\n";
}
fclose ($fp);