abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

dnes 00:33 | IT novinky

Josef Průša představil na Maker Faire v New Yorku svou novou 3D tiskárnu Original Prusa i3 MK3. Z novinek (YouTube) lze zdůraznit senzor filamentu, výměnnou magnetickou podložku, rychlejší tisk nebo rozpoznání uskočené vrstvy, výpadku napájení a výpadku filamentu (YouTube).

Ladislav Hagara | Komentářů: 0
včera 17:22 | Komunita

Martin Flöser představil na svém blogu projekt XFree KWin. Cílem projektu je rozběhnout správce oken KWin na Waylandu bez XWaylandu [reddit].

Ladislav Hagara | Komentářů: 2
včera 16:55 | Komunita

Do pátku 29. září probíhá v Praze v hotelu Hilton konference SUSECON 2017 pořádaná společností SUSE. Dění na konferenci lze sledovat na Twitteru. Nils Brauckmann, CEO společnosti SUSE, vítá účastníky konference na YouTube.

Ladislav Hagara | Komentářů: 0
včera 07:00 | Komunita

Příspěvek na blogu společnosti Yubico informuje o začlenění podpory bezpečnostních klíčů FIDO U2F do Firefoxu Nightly. Dosud bylo možné dvoufázové ověření pomocí FIDO U2F ve Firefoxu zajistit pouze pomocí doplňku.

Ladislav Hagara | Komentářů: 3
včera 06:00 | Humor

Adobe PSIRT (Adobe Product Security Incident Response Team) neúmyslně zveřejnil (archive) na svém blogu svůj soukromý OpenPGP klíč. Klíč byl revokován a vygenerován nový. Nelze nezmínit xkcd 1553 - Veřejný klíč.

Ladislav Hagara | Komentářů: 1
24.9. 20:00 | Nová verze

Byla vydána (cgit) verze 0.99 svobodného nelineárního video editoru Pitivi. Jedná se o release candidate verze 1.0. Přehled úkolů, které je nutno ještě dodělat, na Phabricatoru. Pitivi je k dispozici také ve formátu Flatpak.

Ladislav Hagara | Komentářů: 0
24.9. 17:11 | Komunita

Microsoft s Canonicalem představili linuxové jádro Ubuntu optimalizováno pro cloudové služby Microsoft Azure (linux-azure). Jako výchozí je toto menší a výkonnější jádro použito již v Ubuntu Cloud Images for Ubuntu 16.04 LTS. Canonical zatím nenabízí patchování tohoto jádra za běhu systému (Canonical Livepatch Service).

Ladislav Hagara | Komentářů: 1
24.9. 14:55 | Komunita

Facebook oznámil, že přelicencuje open source projekty React, Jest, Flow a Immutable.js ze své vlastní kontroverzní licence BSD+Patents na licenci MIT. Stane se tak tento týden s vydáním Reactu 16. Jedním z důvodů přelicencování bylo oznámení nadace Apache, že software pod Facebook BSD+Patents licencí nesmí být součástí produktů pod touto nadací [Hacker News].

Ladislav Hagara | Komentářů: 0
23.9. 21:44 | Nová verze

Po půl roce od vydání verze 9.0 byla vydána verze 10.0 open source alternativy GitHubu, tj. softwarového nástroje s webovým rozhraním umožňujícího spolupráci na zdrojových kódech, GitLab (Wikipedie). Představení nových vlastností v příspěvku na blogu a na YouTube.

Ladislav Hagara | Komentářů: 0
22.9. 18:11 | Nová verze

Společnost Oracle oficiálně oznámila vydání Java SE 9 (JDK 9), Java Platform Enterprise Edition 8 (Java EE 8) a Java EE 8 Software Development Kit (SDK). Java SE 9 přináší více než 150 nových vlastností.

Ladislav Hagara | Komentářů: 0
Těžíte nějakou kryptoměnu?
 (5%)
 (3%)
 (17%)
 (75%)
Celkem 574 hlasů
 Komentářů: 23, poslední 24.9. 18:12
    Rozcestník

    Dotaz: vsetko zozeru buffery a system swapuje

    26.2.2016 16:25 asdqweqe
    vsetko zozeru buffery a system swapuje
    Přečteno: 263×
    Zdravim, trapim sa s problemom kedy mi buffer zozerie vsetku RAM a system zacne snapovat. Ma niekto skusenost?
    # free -m
                 total       used       free     shared    buffers     cached
    Mem:         20480      20476          3          0          0         41
    -/+ buffers/cache:      20434         45
    Swap:          512        443         68
    

    Odpovědi

    Fuky avatar 26.2.2016 16:39 Fuky | skóre: 52 | blog: 4u
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Co konkrétně Ti žere "kernel slab cache"? Jaký používáš filesystém?

    # slabtop -s c
    26.2.2016 16:47 asdqweqe
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Je to OpenVZ so ZFS
    # slabtop -s c
    fopen /proc/slabinfo: No such file or directory
    Fuky avatar 26.2.2016 17:16 Fuky | skóre: 52 | blog: 4u
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje

    OK, takže RAM Ti podle mě žere právě ZFS. Na jakou hodnotu máš nastaveno "zfs_arc_max"?

    Přidej výpis /proc/spl/kstat/zfs/arcstats a /proc/spl/kmem/slab.

    Mrkni na následující odkazy:

    ZFSonLinuxMemoryWhere
    SlabinfoSlabMerging
    ZFSonLinuxWeakAreas
    arc size vs memory usage

    The have been many discussions about the arc size, but not about what this means for the actual memory usage of ZFS. If you thought this was the same, or a fixed relationship: WRONG! The amount of memory needed is increased in steps for 3 different reasons.

    First there is more memory allocated in the slab then the arc cache. I'm not sure what the relationship between the slab objects and arc is, but I would guess different zfs caches use the slab as well.

    The second increase is caused by slab overhead. The slab needs to manage the objects, and the overhead for 512B objects can be as much as 100%. The overhead is not fixed, but depends on the object size.

    The third increase is caused by slab fragmentation, because slabs can only be released when all objects on the slab are released. So this is the difference between the alloced slabs and the required slabs.

    So I've written a slabstats script which shows the overhead introduced by each step, and the factor between the arc size and the full slab size. In my test the memory used was between 1.22 and 3.88!!! times the arc size, and stabilized around 2.

    26.2.2016 17:05 Michal Kubeček | skóre: 71 | Luštěnice
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Jak jste přišel na to, že "buffer zozerie vsetku RAM"? Jak vypadá obsah /proc/meminfo a /proc/zoneinfo?
    26.2.2016 17:26 asdqweqe
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    # cat /proc/meminfo
    MemTotal:       20971520 kB
    MemFree:           36316 kB
    Cached:            65996 kB
    Buffers:               0 kB
    Active:           617924 kB
    Inactive:         197820 kB
    Active(anon):     585672 kB
    Inactive(anon):   178532 kB
    Active(file):      32252 kB
    Inactive(file):    19288 kB
    Unevictable:           0 kB
    Mlocked:               0 kB
    SwapTotal:        524288 kB
    SwapFree:         448992 kB
    Dirty:                 0 kB
    Writeback:             0 kB
    AnonPages:        764204 kB
    Shmem:             14456 kB
    Slab:           20119444 kB
    SReclaimable:   20094688 kB
    SUnreclaim:        24756 kB
    # cat /proc/zoneinfo
    cat: /proc/zoneinfo: No such file or directory
    26.2.2016 17:40 Michal Kubeček | skóre: 71 | Luštěnice
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Takže jde o slab, ale reclaimable, takže diagnóza "systém swapuje" nejspíš nebude úplně správná. Spíš bych tipoval, že zvýšená disková aktivita bude důsledkem toho, že vám zbývá hodně málo paměti pro page cache. V každém případě by to chtělo zjistit, co konkrétně to spotřebuje tolik paměti; zkuste postupovat podle rad výše.
    26.2.2016 17:48 Michal2
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje

    Podle vseho ti pamet zere ZFS (hod sem vystup cat /proc/spl/kstat/zfs/arcstatscat ).

     

    Nepouzivas cirou nahodou deduplikaci? Pokud ano, tak uz dale problem hledat nemusis pac je zrejmy ;-)

    26.2.2016 18:36 asdqweqe
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Toto je vystup z nasho OpenVZ servera.

    No netusim ako to obmedzit na urovni VPS :-/
    # cat /proc/spl/kstat/zfs/arcstats
    6 1 0x01 91 4368 20349008856 11810986092908077
    name                            type data
    hits                            4    1443626517411
    misses                          4    1527227514
    demand_data_hits                4    1203502394246
    demand_data_misses              4    305169580
    demand_metadata_hits            4    7243728585
    demand_metadata_misses          4    1071662173
    prefetch_data_hits              4    231527868245
    prefetch_data_misses            4    108133799
    prefetch_metadata_hits          4    1352526338
    prefetch_metadata_misses        4    42261962
    mru_hits                        4    395875804
    mru_ghost_hits                  4    88952407
    mfu_hits                        4    1298690331029
    mfu_ghost_hits                  4    89323812
    deleted                         4    137898097
    mutex_miss                      4    28525
    evict_skip                      4    259520735
    evict_not_enough                4    234463
    evict_l2_cached                 4    18384265695744
    evict_l2_eligible               4    1502941855744
    evict_l2_ineligible             4    644783208448
    evict_l2_skip                   4    0
    hash_elements                   4    10533706
    hash_elements_max               4    10607940
    hash_collisions                 4    207769396
    hash_chains                     4    1344057
    hash_chain_max                  4    7
    p                               4    8705097216
    c                               4    34359738368
    c_min                           4    30064771072
    c_max                           4    34359738368
    size                            4    34363694696
    hdr_size                        4    1330915328
    data_size                       4    15384919552
    metadata_size                   4    6735291904
    other_size                      4    10230584896
    anon_size                       4    82886656
    anon_evictable_data             4    0
    anon_evictable_metadata         4    0
    mru_size                        4    2621831680
    mru_evictable_data              4    410124288
    mru_evictable_metadata          4    3414528
    mru_ghost_size                  4    31734104576
    mru_ghost_evictable_data        4    1910576128
    mru_ghost_evictable_metadata    4    29823528448
    mfu_size                        4    19415493120
    mfu_evictable_data              4    14915006464
    mfu_evictable_metadata          4    236452352
    mfu_ghost_size                  4    2608713728
    mfu_ghost_evictable_data        4    116488704
    mfu_ghost_evictable_metadata    4    2492225024
    l2_hits                         4    119369318
    l2_misses                       4    1407857959
    l2_feeds                        4    11838519
    l2_rw_clash                     4    29
    l2_read_bytes                   4    992057985024
    l2_write_bytes                  4    6782502233600
    l2_writes_sent                  4    11707457
    l2_writes_done                  4    11707457
    l2_writes_error                 4    0
    l2_writes_lock_retry            4    4432
    l2_evict_lock_retry             4    1117
    l2_evict_reading                4    41
    l2_evict_l1cached               4    5877717
    l2_free_on_write                4    58850
    l2_cdata_free_on_write          4    96718
    l2_abort_lowmem                 4    0
    l2_cksum_bad                    4    0
    l2_io_error                     4    0
    l2_size                         4    548897384448
    l2_asize                        4    260944846848
    l2_hdr_size                     4    681983016
    l2_compress_successes           4    232226027
    l2_compress_zeros               4    0
    l2_compress_failures            4    11586358
    memory_throttle_count           4    0
    duplicate_buffers               4    0
    duplicate_buffers_size          4    0
    duplicate_reads                 4    9
    memory_direct_count             4    0
    memory_indirect_count           4    0
    arc_no_grow                     4    0
    arc_tempreserve                 4    0
    arc_loaned_bytes                4    0
    arc_prune                       4    0
    arc_meta_used                   4    18978775144
    arc_meta_limit                  4    34359738368
    arc_meta_max                    4    21208047664
    arc_meta_min                    4    16777216
    arc_need_free                   4    0
    arc_sys_free                    4    4223533056
    
    26.2.2016 19:02 Michal2
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Takze polozka size = ~ 32 GB coz je pamet vyuzita pres ZFS ARC (vetsina z toho podle parametru c je MRU cache (most recenty used)). Takze bude chybne nastaveny parametr zfs_arc_max

    26.2.2016 21:08 asdqweqe
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Cely system ma 128GB RAM, kontajner kde mam tento problem ma vyclenenych len 20GB. Je spravne, ak vidim reziu filesystemu v kontajneri?
    26.2.2016 21:21 asdqweqe
    Rozbalit Rozbalit vše Re: vsetko zozeru buffery a system swapuje
    Ak by to tak bolo, tak by som arcsize musel nastavit na 1MB ... aby to nijako neovplyvnovalo jednotlive VPSky ktore tam mame. Ci je ina cesta?

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.