Portál AbcLinuxu, 18. července 2025 04:49


Dotaz: mysql - časově oddělené vykonání query

25.4.2014 09:56 belpir
mysql - časově oddělené vykonání query
Přečteno: 683×
Odpovědět | Admin
Dobrý den, jakým způsobem mohu rozdělit vykonání mysql query do menších úseků tak, aby nedošlo k zatížení chodu databáze?

př. 20000 menších databází s celkovou velikostí 200 GB. Potřebuji spustit query, která projde všechny databáze, ovšem spuštění najednou by způsobilo vytvoření dlouhé fronty požadavků, čímž by přestala databáze odpovídat na regulérní dotazy, pro které byla určena, tudíž by došlo k výpadkům funkčnosti.

Napadlo mě rozdělit vykonání query tak, aby se vykonala pro každou databázi s časovým timeoutem po vykonání. tedy po lopatě: Proveď požadavek na jedné databázi -> 0,02 nic nedělej -> proveď požadavek na druhé databázi -> 0,02s nic nedělej -> ... atd. Tím by zde byl prostor pro vyřízení regulérních query a fronta dotazů by nerostla. Je-li tento předpoklad správný, jakým způsobem se dá do query vložit časový interval, kdy query nebude nic dělat, tzn 0,02 s z předchozího příkladu?

Konkrétní mysql query slouží pro výpis velikostí DB, viz níže:

SELECT table_schema 'Data Base Name', sum( data_length + index_length ) / 1024 / 1024 'Data Base Size in MB' FROM information_schema.TABLES GROUP BY table_schema ;

Za pomoc předem děkuji.
Nástroje: Začni sledovat (1) ?Zašle upozornění na váš email při vložení nového komentáře.

Odpovědi

rADOn avatar 25.4.2014 10:39 rADOn | skóre: 44 | blog: bloK | Praha
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
Odpovědět | | Sbalit | Link | Blokovat | Admin
http://dev.mysql.com/doc/refman/5.1/en/miscellaneous-functions.html#function_sleep
"2^24 comments ought to be enough for anyone" -- CmdrTaco
25.4.2014 11:36 belpir
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
sleep(duration) se dá použít jen jako další SELECT, tzn. nejprve se spustí query nad všemi databázemi a pak, na závěr, se provede sleep. Spíše bych potřeboval, je-li to možné, aby se sleep(duration) provedl mezi jednotlivými opakováními stejného SELECTu, tedy po ukončení dotazu nad jednou databází a před přechodem k další databázi.
25.4.2014 17:30 blondak | skóre: 36 | blog: Blondak | Čáslav
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
Třeba pomocí procedury:
use mysql;
DELIMITER $$
DROP PROCEDURE IF EXISTS databaze $$
CREATE PROCEDURE databaze()
BEGIN
  DECLARE _table_schema VARCHAR(64);
  DECLARE exit_loop BOOLEAN;
  
  DECLARE databases_cursor CURSOR FOR 
    SELECT SCHEMA_NAME FROM information_schema.SCHEMATA;
    
  DECLARE CONTINUE HANDLER FOR NOT FOUND SET exit_loop = TRUE;
  
--  CREATE TEMPORARY TABLE IF NOT EXISTS _databaze (DABATASE_SCHEMA varchar(64), DATABASE_SIZE double);
--  TRUNCATE TABLE _databaze;
  
  OPEN databases_cursor;
  databases_loop: LOOP
     FETCH databases_cursor INTO _table_schema;
     IF exit_loop THEN
         CLOSE databases_cursor;
         LEAVE databases_loop;
     END IF;
--     INSERT INTO _databaze 
      SELECT 
        TABLE_SCHEMA `SCHEMA`, SUM( data_length + index_length ) / 1024 / 1024 `SIZE` 
      FROM 
        information_schema.TABLES 
      WHERE 
        TABLE_SCHEMA = _table_schema
      ;
     DO SLEEP(1);
   END LOOP databases_loop;
--   SELECT * FROM _databaze;
--   DROP TEMPORARY TABLE _databaze;
END$$
DELIMITER ;
call databaze();
Každý problém ma své logické, snadno pochopitelné nesprávné řešení.
26.4.2014 09:04 jekub
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
Odpovědět | | Sbalit | Link | Blokovat | Admin
Konkrétní mysql query slouží pro výpis velikostí DB

man du
28.4.2014 14:15 belpir
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
du je v tomto případě nepoužitelné. Potřebuji skutečnou velikost, kterou aktuálně zabírají data v databázích, ne pouze velikost souborů na filesystému.

Problém vyřešen. Nakonec jsem obnovil zálohu všech DB v testlab serveru a spustil query tam. Metodu od uživatele "blondak" jsem již nezkoušel

Děkuji vám všem za pomoc.
4.5.2014 11:10 azurIt | skóre: 34 | blog: zatial_bez_mena
Rozbalit Rozbalit vše Re: mysql - časově oddělené vykonání query
Odpovědět | | Sbalit | Link | Blokovat | Admin
Toto sa normalnym sposobom urobit neda. Urob to aplikacne mimo MySQL v nejakom cykle - najskor ziskaj zoznam vsetkych databaz a potom nad nimi postupne volaj ten SELECT.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267, (c) 1999-2007 Stickfish s.r.o.