Dotaz: častý přepis souboru na SD kartě

[Deathfish]

Jak správně vyřešit problém častého přepisování stejného souboru na SD kartě? cca 500x za den přepíšu soubor čerstvými daty, porovnám a vyhodnotím. Domnívám se že tím dojde ke zničení SD karty. Jedná se o malý soubor do 1 kB.

Je řešení přepsat "xyzsoubor" na "old_xyzsoubor" vytvořit nový "xyzsoubor" a ten zas cca týden přepisovat a pořád dokola ?

HW: Rasperry-pi + Raspbian Jessie, externí HDD nepřipadá v úvahu.

---

---

Odpovědi

[NN]

http://www.abclinuxu.cz/poradna/programovani/show/415623

[Filip Jirsák]

Použijte souborový systém určený pro SD karty nebo alespoň CoW (copy-on-write) – např. btrfs. „Přepis“ souboru pak probíhá tak, že se data zapíšou do nového sektoru.

[petr_p]

To by mě zajímalo, jak vypadá souborový systém pro SD karty, když SD karty se vyznačují tím, že si dějí wear leveling samy, takže blokový systém vůbec netuší, do které paměťové buňky bude zápis směřovat.

[Filip Jirsák]

SD karty, které si dobře dělají wear leveling samy, není potřeba nějak speciálně řešit – pak je odpověď na dotaz „neřešte to, postará se o to sama karta“. Pokud nějaké zařízení wear leveling nedělá nebo dělá špatně, pomůže souborový systém, který zápisy rozkládá do různých bloků. Protože i když bude wear leveling udělaný špatně, asi nebude fungovat tak, že zápisy do různých bloků bude schválně směřovat do stále stejné paměťové buňky.

[Sten]

Ten wear leveling není dokonalý, např. rotuje bloky jen ve skupinách, v mnoha případech dokonce rozumně u in-place přepisujících souborových systémů funguje jen s FAT (jediný standardní systém pro SD karty). COW má smysl tím, že umožňuje wear levelingu rotovat mnohem víc bloků, protože nový blok bude pravděpodobně z jiné skupiny.

[Ovrscout]

Mno, problém není jen s vlastními daty, je třeba vzít v potaz i metadata souborového systému které se také ukládají. Také může záležet na tom jaký souborový systém tam bude, některé by třeba mohli tak malý soubor držet na stejném místě jako metadata. Nebo třeba při přepisu zapíše na jiné místo (copy on write?), každopádně je dobré přesně nastudovat, nebo nějakým nástrojem odsledovat co se kam zapíše, ne vždy je to uplně jasné a jednoduché (např žurnály, kopie fat tabulky,...).

Vidím tři možnosti

• Najít vhodný fs, který vám zaručí "správné" chování pro sd karty (třeba někdo doporučí)
• Nepoužívat žádný fs a používat kartu přímo po blocích a navrhnout si takový algoritmus který bude vyhovovat(ale kartu pak nejspíš nepřečtete v normální čtečce)
• Použít nějakou "industrial" kartu která bude mít algoritmus pro "Wear Leveling" v sobě. Nevýhoda je poměrně velká cena v maloobchodě. Nějaké se třeba dají najít na farnell.com (asi i jinde ale tady jsou docela často i PDF s podrobnějšími informacemi), hledejte "SD card" a pak nastudujte PDF, namátkou karty od SWISS a některé od Panasonic to podle pdf umějí a měli by být docela slušně dostupné (ale osobně těmi dvěma nemám zkušenost). A nenechte se zastrašit cenou SLC, existují i kousky s MLC které wearleveling také umějí a nejsou zas tak moc drahé.

[ikar]

Je důvod pro použití SSD na tento typ činnosti? Nedalo by se to řešit v RAM, s tmpfs?

[k3dAR]

ukladej do /dev/shm (automaticy vytvarenej "disk" v ram pomoci tpmfs, pri vypnuti se maze)

[Peter Fodrek]

Nová studie: SSD více likviduje čas než používání, SLC a MLC vydrží stejně 1. 3. 2016 Zhruba 30 až 80 % SSD má alespoň 1 vadný blok, u zhruba 2-7 % SSD selže alespoň 1 NAND flash čip během čtyř let od nasazení http://diit.cz/clanek/nova-studie-ssd-vice-likviduje-cas-nez-pouzivani-slc-mlc-vydrzi-stejne.

Takže na flash nič dôležité nesmie, ak to nemá zálohu inde

[k3dAR]

mas tam navic jedno S, rec je o SD ;)