Trocha hardwarových kolizí

16.5.2023 23:30 | Přečteno: 1402× | Linuxové drobty

V pracovní stanici mám motherboard ASUS PRIME X670-P WIFI. Hezká deska s rychlou pamětí. Ale bohužel jsem již zaplnil všech 6 SATA portů a potřeboval další. A vzhledem k tomu, že mám jeden starší Kouwell řadič s dvěmi SATA porty rozhodl jsem se použít ten. Deska má jeden PCIe x1 port, myslel jsem si jako dělaný pro onen řadič. Ale ouha. Po rebootu mě nenajely všechny šifrované disky, btrfs RAID1 nad nimi se nesložil a fakticky stanice nebootla.

Vzhledem k tomu, že jsem řešil více věcí a mechanicky s některými disky pracoval, tak jsem nejdříve projížděl konektory, SATA i napájecí, prohazoval konektory, měnil SATA kabely. Ve finále bylo jasné, že ať udělám, co udělám, ať jakkoliv propojím kabely, vždy jsou nepřítomny disky 3 a 4. Po prvním strachu, že jsem něčím odpálil konektory na desce, mne napadlo, jestli problém nesouvisí s přidaným řadičem a opravdu, po vyjmutí řadiče, disky byly zpět. A nyní je i funkční i řadič, vložil jsem ho do vedlejšího slotu PCIe x16. A kolize není.

Tohle je jen malý zápisek, pro možné čtenáře, kteří rozšiřují systém a narazí na nepředvídané vazby.        

Komentáře

[jejda]

Hm teď se dívám na stránky výrobce a tam pišou:

The PCIe 3.0 x1 slot shares bandwidth with the SATA6G_3/4 ports. When a device is installed on the PCIe 3.0 x1 slot, the SATA6G_3/4 ports cannot be used.

Nebude to ono?

[David Ježek]

Samozřejm+, že to je ono. Tak to prostě dnes je, SATA je v pozadí zájmu a tak se mu nevyhrazují jeho vlastní zdroje. Smutné je to u hi-end desek, ale u Asusu to překvapivé není, ten má máslo na hlavě rád.

[jejda]

Tak ono sedm tisíc za holou desku mi nepřijde nějak extra málo. To je jak kdybych vyrobil například auto které má pět míst ale s tím, že když do toho sednou víc jak tři lidi tak přestanou fungovat třeba brzdy. Náročný uživatel by si samozřejmě mohl připlatit za model bez kurvítek.

[alkoholik]

Ber to spis jako: sklopim zadni sedacky -> mam vetsi kufr.

[Petr Tomášek]

Náročný uživatel by si samozřejmě mohl připlatit za model bez kurvítek

No, pokud čipset víc linek nemá, tak by sis prostě nepřiplatil. Problém je, že ty linky s čipsetu jsou sdílené a např. buď můžeou být využity jako SATA nebo jako PCIe...

[lertimir]

Ano, je to samozřejmě ono, ale nenapadlo mne, že problém bude i v této cenové kategorii.

[xxx]

Protoze se porad pohybujes v socka kategorii. CPU i chipset je navrzeny vicemene na to, ze tam povesis GPU a NVMe disk. Mozna pridas jeste jednu sitovku, SATA disk nebo tak. Ostatne do toho chipsetu mas taky jen 4xPCIe4. A IMHO je fyzicky tak maly, ze z nej stejne nejdou vytahnout vsechny periferie co umi najednou.

Pokud chces skutecne vetsi mnozstvi PCIe linek pak musis o segment vys. Threadripper, EPYC.

BTW, nejsi prvni, kdo se spalil pri pokusu o lowcost NAS ;).

[Kate]

Ten SATA řadič prostě PCIe linku potřebuje tak jako tak. Není lepší mít volbu jestli ji využít pro řadič nebo něco jiného, než tam plesknout ten řadič napevno?

[Michal]

Consumer segment ma holt nedostatek PCIe linek a prosumer/HEDT segment vyklidil nejdrive Intel a hned potom i AMD kdyz zjistili, ze jim tam Intel nemuze konkurovat a je lepsi zakaznika podojit za Threadripper Pro.

[Petr Tomášek]

+1

[PetebLazar]

První Zen3-based produkt vyšel 7/2019, ThreadripperuPro(Zen4-based) se údajně dočkáme možná až začátkem 2024.To je bez pár měsíců 5 let. Jedna věc je nechat si pořádně zaplatit, druhá sedět na technologii. V tomto již AMD dávno Intel překonalo.

[Petr Tomášek]

Threadripper Pro (Zen3) byl vydán v minulém roce.

Co je spíš problém, je, že není ne-Pro Threadripper...

[PetebLazar]

"Zen based" Ryzen 1x00X (3/2017) Threadripper 19x0X (8/2017) .. +6 měsíců

"Zen+ based" Ryzen 2x00X (8/2018) Threadripper 29x0X (8/2018) .. +0 měsíců

"Zen2 based" Ryzen 3x00X (7/2019) Threadripper 39x0 (11/2019) .. +4 měsíce, Threadripper Pro 39x5WX (7/2020) +12 měsíců

"Zen3 based" Ryzen 5x00X (11/2020) Threadripper Pro 59x5WX (3/2022) +15 měsíců (navíc s dočasnou exluzivitou pro Lenovo)

"Zen4 based" Ryzen 7x00X (9/2022) Threadripper Pro (1/2024?) +16 měsíců

Právě pro segmentu (HEDT/WS), který je hladový na využití posledních technologií (díky svým vysokým nárokům) nám AMD přináší technologický pokrok stále později.

[Ovoce]

"Zen+ based" Ryzen 2x00X (8/2018) Threadripper 29x0X (8/2018) .. +0 měsíců

Asi chybka, Ryzeny 2000X vyšly už v dubnu 2018 iirc.

[PetebLazar]

Díky, to jsem se překoukl. Stále to zapadá do naznačovaného trendu. Pokud bychom přičetli období exluzivity (pro WS Lenovo .. ca půl roku?), termíny dostupnosti pro DIY trh by byly ještě horší.

[Max]

Než si zaplnit PCIe slot, který je sdílený se SATA řadičem, to raději 5x SATA do NVMe slotu. Dva roky stable...
Zdar Max

[lertimir]

No je to řadič, který jsem měl, a až/když budu potřebovat slot, tak budu hledat řešení jiné. Ono také točí se mi tam i starší disky s kapacitou 2TB a už to vnímám jako nehospodárné. Uvidíme v současnosti je pád cen raketový. Kupoval jsem 17.1. a nyní je RAM o 20% levnější a NVMe o 10% levnější (za 4 měsíce), SSD se blíží ke 1Kč za 1GB a i rychlé NVMe PCIe 4 je někde 1,8-2Kč za GB. U HDD je nejefektivnější na cenu za GB 18TB Toshiba za 6600Kč, tedy 0,37Kč za 1GB. Blíží se pro mne čas vyhodit staré disky a mít málo nových.

[Max]

Já takto přešel před 2r na 6TB a 8TB disky. Ale neberu lowcost, beru vyšší serverové modely s 5r zárukou.
Zdar Max

[lertimir]

Zatím jsem jen přidával disky (několik dalších disků do btrfs RAID1) a nevyřazoval staré, ty 2TB byly HGST a drží skvěle (dokonce některé disky už protočily celé 16 bitové smart pole Power_On_Hours a začaly znovu od nuly). Já uvažuji o Toshiba Enterprise Capacity MG09 18TB. S tím že budou 2 v btrfs RAID1. Ale ceny jsou zatím na skluzavce a nemám tlak ani nedostatek místa a klidně počkám půl roku.

[Max]

Beru podobné, jen menší kapacity. Ta cena opravdu spadla moc pěkně. Sakrblé !!! :D
Je to relativně nedávno, co jsem za podobnou cenu kupoval 8TB :-/
Zdar Max

[lertimir]

Ono když máš u SSD 1GB za 1Kč (Kingston) skoro i NVMe (Lexar, Kingston) a i dost výkonné NVMe tě stojí 1,5-1,75Kč za 1GB (WD, Mushkin s MLC, Kingston), tak klasické HDD musí hodně s cenou dolů, aby mělo smysl je koupit. Zatím cena spadla pod 0,4Kč za 1GB. Ale hodně dlouho se držela velmi blízko 1Kč za 1GB. Uvidíme jestli a kolik mají výrobci prostoru v snižování ceny. Na druhou stranu trochu pochybuji, jestli jde z chipů udělat za rozumnou cenu velkokapacitní SSD. Problém vidím v chlazení. Moje deska má 3 M2 sloty, jeden s chladičem, a NVMe v tom bez chladiče má 55°, a je to velká plocha, malý objem. O HDD je spotřeba více méně stejná nezávisle na kapacitě, u SSD lineárně roste a uchladit výkon z kostky jako je 3,5' disk bude náročné.

[Max]

Na každý NVMe dávám chladič. Výkonnější NVMe si pápnout a topí, takže bez chladiče mohou být na 80C, což je problém.
Zdar Max

[lertimir]

Dík za připomínku. Koupil jsem tenhle a teploa je výrazně nižší.

[Max]

Já kupuji tento: Akasa chladič M.2 SSD, pasivní, 2ks v balení.
Má sice samolepící jakoby žvejku, ale nevěřím tomu, takže to fixuju jednou stahovací minipáskou. Spokojenost, práci to za tu stovečku odvádí dobrou.
Zdar Max

[Petr Tomášek]

Pche! To není žádný chladič! TOHLE je chladič...

[Pavel Píša]

Jen se chci ujistit, ty Toshiba Enterprise Capacity MG09 jsou poctivé disky zapisovatelné po sektorech/blocích, žádný SMR (šindelový zápis) po sousedních cylindrech a tak podobně? Případně jaké jsou další ověřené typy s rozumnou předpokládanou spolehlivostí.

Předem díky za odpověď.

[PetebLazar]

Na odkazované stránce jsou v přehledu zmiňovány 20TB modely, které jsou SMR (mají značení MA09...), Modely 18TB a 16TB s označením MG09.... by podle ní měly být CMR. https://storage.toshiba.com/enterprise-hdd/cloud-scale-capacity/mg09-series

[Max]

Ano, jsou to poctivé disky. A od nějaké modelové řady (asi MG08) přibylo i helium, takže nižší teplota a vyšší životnost. Mám zkušenosti s MG04 a MG06 (ještě bez Helia) a třeba oproti WD jsou hlučnější, takže do super cool tichého prostředí to moc není. Jak je na tom MG09, to netuším. Každopádně výkonem a výdrží/kvalitou jsou na podobné úrovni jako WD Ultrastar, jen jsou o dost levnější. Já je vždy kupoval z Mironetu, kde ta cena byla vždy parádní.
Zdar Max

[PetebLazar]

Pokud se disk provozuje samostatně je otázkou nakolik je využití serverových edic HDD výhodou(vhodné). Mám za to, že tyto mají disablovaný(velmi omezený) TLER/ERC/CCTL, v případě chyby čtení to prakticky okamžitě vzdávají a spoléhají na redundanci vyšších vrstev (RAID atpd), aby místo typické ms reakce nezastavily systém opakovanými sekundovými "timeouty". U běžných HDD se to snad zkouší až jednotky sekund dopočítat zda sektor nevyjde v souladu s uloženým "CRC checksumem", tam nic jiného nezbývá.

[Max]

TLER mívaly dřív jen serverové a lepší disky (myslím, že WD Black měl také, ale už nevím). Běžný PC disk se zasekl a člověk čekal na vyřízení požadavku do doby, než umřely timeouty v OS.
Hodnota bývala nastavena na 7s. Pokud se do 7s nevyřídil požadavek, vyhodil disk při zmíněné operaci chybu. Nemyslím si, že by to byl nějak malý interval.
Zdar Max