Dotaz: MySQL + PHP insert into cca 30MB

[Mike Stufel]

Dobry den,

standardne prostredie DEBIAN 3.1 + PHP4 + MySQL 4.0.24

zbieram udaje, ktore potom prezeniem cez SED a AWK a spravim si z nich PHP skript na insertovanie udajov do MySQL podla tohto tutorialu

http://www.tizag.com/mysqlTutorial/mysqlinsert.php

Vsetko funguje tak ako ma - pokial je tychto insertov 10 - 15. No Pokial sa snazim takto insertnut "www.server.com/insert.php" subor o velkost 30MB, prehliadac mi napise: "Error Code 64: Host not available".

Je nejaka moznost ako takto insertovat do MySQl taky velky objem nazbieranych dat?

Dakujem za kazdy napad.

Odpovědi

[razor]

Zdar. A co takhle vygenerovat pomocí sed a awk "obyčejné" sql a to pak předhodit mysql klientovy: mysql < vygenerovane.sql ?

[Mike Stufel]

zial takto to neide, pretoze tieto udaje musia byt zverejnovane na webhostingu, preto to robim ako PHP, potom ho uploadnem na webhosting a nasledne spustim import www.hosting.com/import_dat.php

[finc]

Dobrý způsob může být vygenerovat CSV soubor s jasným oddělovačem. MySQL zná funkce typu LOAD INTO, atd. pomocí kterých lze hromadně přes jeden insert nahnad data do databáze. Problém ale může nastat ve chvíli, kdy k tomu nebudeš mít dostačující práva :(

[Buki]

taky muzete narazet na zcela obycejny limit PHP na velikost uploadovaneho souboru. vice viz php.ini

[Mike Stufel]

s tym limitom na PHP to moze byt celkom realny dovod preco sa na webhostingu neda insertnut velky subor.

Este to skusim s tym LOAD INTO - ak budem mat k tomu opravnenie. Ak nie, asi nezostava ina moznost ako data "rozporciovat" na mensie PHP "insert into" skripty a tie potom postupne spustat a tak vkladat data do MySQL.

Moc dakujem za nasmerovanie.

[OldFrog {Ondra Nemecek}]

Je tu jeste moznost soubor zazipovat a v php rozzipovat a zpracovavat... Kompresni pomer bude pravdepodobne velky, treba 5x mozna i vic.

Pripadne treba Mysqladmin toto umi sam od sebe, takze jej tam staci nainstalovat - coz ma i dalsi vyhody.