Chia i SSD Endurance — duży postęp, mniej odpadów


Autor: Jonmichael Hands — August 3, 2021

Na początku tego roku napisałem wpis na blogu o wytrzymałości Chia i SSDChia wymaga dużo sortowania na tymczasowej przestrzeni magazynowej, aby format poletka był bezpieczny i wydajny, co umożliwia szybką weryfikację później w rolnictwie. Obciążenie kreśleniem Chia jest wymagane tylko raz na działkę podczas początkowego tworzenia, gdy końcowy plik wykresu znajduje się na urządzeniu magazynującym o niskim poborze mocy przez resztę lat uprawy. Podsumowanie postu dotyczyło użycia wysokowydajnych dysków SSD w centrach danych lub korporacyjnych do tworzenia wykresów Chia (używane jest świetne!) i unikania używania popularnych dysków SSD dla konsumentów, ponieważ nie są one przeznaczone do długotrwałego zapisu lub obciążeń o wysokiej wytrzymałości. Wygląda na to, że prasa głównego nurtu skupiła się na tym, że Chia zużywa dyski SSD, a tym samym powoduje e-marnotrawstwo. Traktujemy to poważnie, ponieważ podejmujemy inicjatywy, aby uczynić Chia zrównoważoną kryptowalutą.

Wiele się wydarzyło w krótkim czasie, odkąd napisałem ten post!

Nowe plotery wykorzystujące pamięć DRAM w celu zmniejszenia lub wyeliminowania zapisów na dyskach SSD

Członkowie społeczności dokonali dwóch głównych niezależnych przeróbek plotera Chia, którzy mogą używać pamięci DRAM, aby zmniejszyć lub całkowicie wyeliminować zapisy na dyskach SSD. MadMax ploter był bardzo popularny i 128GB pamięci DRAM może zmniejszyć pisanie na SSD o 75%.

Bladebit, autorstwa Harolda Brenesa, jest całkowicie przepisanym oprogramowaniem do kreślenia Chia, aby wykonać cały proces tworzenia wykresu tylko w pamięci. Jest to znacznie szybsze i wydajniejsze, a do zapisania końcowego pliku wydruku wystarczy tylko pamięć. Ten ploter nie jest nastawiony na konsumentów z głównego nurtu, ponieważ wymaga większej ilości pamięci DRAM, którą można znaleźć tylko na serwerach z wyższej półki, ale zapewnia znacznie szybszą i bardziej wydajną wydajność.

Teraz, gdy bardzo oczekiwana funkcja łączenia grup jest już dostępna (i bardzo dobrze przyjęta), chcieliśmy nagrodzić członków społeczności pracujących nad usprawnieniem kreślenia poprzez zorganizowanie konkursu społecznościowego. Więcej szczegółów już wkrótce!

Nowe dyski SSD zoptymalizowane pod kątem Chia do kreślenia

Widzieliśmy kilka niespodzianek dotyczących dysków SSD zoptymalizowanych pod kątem kreślenia Chia, więc skontaktowałem się z Phisonem, jednym z największych producentów kontrolerów SSD, aby dowiedzieć się, jakie ulepszenia wprowadzili, aby wesprzeć ten wysiłek.

Obejrzyj: Chia Optimized Plotting SSD — wywiad z Phisonem

Dyski SSD dla przedsiębiorstw mają wysoką wytrzymałość i mogą wytrzymać ponad dekadę. Zdolność do wysokiej wytrzymałości na dyskach SSD zawsze była kompromisem kosztowym, ponieważ przechowywanie mniejszej liczby bitów na komórkę znacznie zwiększa wytrzymałość komórki NAND i wykorzystuje pamięć NAND o wyższej jakości i poziomy korekcji błędów. Zaskoczyły mnie niektóre dodatkowe oprogramowanie układowe, korekcja błędów i możliwości sztucznej inteligencji, które udało im się wykorzystać, aby uzyskać jeszcze większą wytrzymałość z obecnego projektu SSD. Wersja 2TB „maker” SSD zoptymalizowana pod kątem kreślenia Chia ma 54 PBW (to znaczy zapisane w petabajtach lub 54 000 TBW), które mogą kreślić od 4 do 6 PB wykresów przed zużyciem. Można śmiało powiedzieć, że jest to ogromna wygrana dla poważnych rolników i entuzjastów komputerów stacjonarnych, którzy chcieli wykorzystać swoje obecne, wysokiej klasy komputery stacjonarne do ciągłego kreślenia,

zrzut ekranu wyników SMART

Tak… próbka, którą mi przysłali, wykonała 1,44 PB zapisów i użyła tylko 1%.

Firma PNY, która używa tej technologii SSD w swoich nowych dyskach SSD, PNY LX2030 i LX3030 M.2 NVMe Gen3, współpracowała z Chia, co wskazuje, że dyski te mają wysoką wytrzymałość i stałą przepustowość do kreślenia.

Zdjęcie produktu PNY Plotripper SSD z plakietką zoptymalizowaną pod kątem Chia

Widzieliśmy dodatkowe zapowiedzi Sabrent Plotripper i Adata Prospector 970 i 950 PCIe M.2. Mamy nadzieję, że postępy w oprogramowaniu do kreślenia sprawią, że nawet mniejsze dyski SSD o mniejszej pojemności i wysokiej wytrzymałości zostaną wprowadzone na rynek z niższymi kosztami początkowymi dla mniejszych rolników, którzy będą mogli dzielić się dyskami i pomagać sobie nawzajem w kreśleniu.

Mówiąc o innych kreatywnych rozwiązaniach do kreślenia Chia, firma NGD Systems, która jest jednym z liderów w dziedzinie obliczeniowych dysków SSD, wypuściła na rynek dysk SSD, który może sam kreślić !

Przed rozpoczęciem pracy w Chia spędziłem 10 lat w firmie Intel w grupie rozwiązań dotyczących pamięci nieulotnych. Byłem tam w celu opracowania i uruchomienia pamięci 3D XPoint w 2015 roku, którą Intel teraz nazywa Optane w swoich produktach. Była to pierwsza całkowicie nowa technologia pamięci od dziesięcioleci, którą niektórzy nazywają „pamięcią klasy pamięci masowej”, zaprojektowaną tak, aby była szybka jak DRAM, ale także trwała i zapisywała się na miejscu za pomocą komórek rezystancyjnych. Ta technologia zasila pamięć trwałą, a także najszybszy na świecie dysk SSD NVMe, Optane P5800X. Oczywiście, kiedy w końcu dostałem swoją próbkę, pierwszą rzeczą, którą zamierzałem przetestować, było kreślenie Chia .

Po wielu rozmowach z kilkoma moimi starymi kolegami z Intela, którzy testowali Chia, w zasadzie pobiliśmy wszystkie rekordy w planowaniu za pomocą nowych serwerów Ice Lake i Optane. Pracowałem z Allison Goodman, która jest jedną z najwyższych rangą kobiecych liderek technicznych w Intelu i dobrą przyjaciółką, aby opublikować pewne dane o tym, dlaczego Optane doskonale pasuje do intrygi Chia .

Czy Chia zużywa dużo dysków SSD?

Współpracuję bardzo blisko z największymi dostawcami pamięci masowych. W maju poprosiłem ich, aby dali mi znać, czy zaczęli widzieć przyspieszone zwroty lub konsumenci próbujący zwrócić dyski z gwarancją, które zostały zużyte. Wciąż pytam… i nadal fala uszkodzonych dysków SSD nie dotarła. Dlaczego to? Mam kilka teorii.

1) Wiele dysków SSD błędnie podaje wytrzymałość w procentach wykorzystanych SMART

W kanale kreślenia w Keybase mam luksus oglądania mnóstwa zrzutów ekranu z wyjścia SSD SMART ludzi. Wykorzystany procent SMART powinien śledzić cykle kasowania programu NAND, aby dokładnie ocenić zużycie dysku SSD. TBW na pudełku ma być podyktowane specyfikacją klienta JEDEC JESD219, aby użytkownicy mogli porównać dyski ze sobą.

Zdjęcie produktu PNY Plotripper SSD z plakietką zoptymalizowaną pod kątem Chia

Źródło: SNIA SSD Endurance , JEDEC

Niektórzy decydują się nie używać tej specyfikacji, inni nie ujawniają, a niektórzy po prostu wybierają najgorszy współczynnik wzmocnienia zapisu (WAF), aby ustawić TBW. W kreśleniu Chia, z włączonym TRIM, WAF będzie faktycznie niski, około 1,5-2, gdy dysk jest prawie pełny, bliższy 1, jeśli dysk ma dużo wolnego miejsca, niewykorzystanego miejsca, nadmiaru alokacji.

Oprogramowanie układowe w niektórych modelach dysków śledzi procent używany na samym zapisie hosta w porównaniu z TBW na pudełku (co jest szacowane za pomocą określonego WAF, gdzieś między 2-5) i NIE NAND P/E cykli. Co to znaczy? Możesz znacznie przekroczyć 100% procentowe zużycie na dysku, zanim dysk przestanie działać, ponieważ wielu użytkowników zgłosiło zrzuty ekranu, na których dyski zatrzymują się na 255% (zgodnie ze specyfikacją NVMe)

Dyski korporacyjne i dostawcy obsługujący centra danych i konsumenckie dyski SSD (Samsung, Intel, WD, Micron itp.) zgłaszają procent SMART użytych prawidłowo.

Nawet słabszy dysk konsumencki może wykreślić kilkaset TB przed zużyciem, jeśli WAF jest niski – większość ludzi się o tym dowiaduje. Kreślenie, gdy napęd przekracza 100%, przypomina jazdę bez prędkościomierza. Będziesz wiedział, kiedy dysk ulegnie awarii, ale istnieją pewne wskaźniki SMART, takie jak dziennik błędów i zarezerwowane części zapasowe, które powinny zostać uruchomione, gdy dysk faktycznie ulegnie awarii (zrobiłem długi przegląd tego, jak dyski SSD ulegają awarii w zeszłym roku!). Różne modele dysków zachowują się inaczej, szczególnie w przestrzeni korporacyjnej, w której ciche uszkodzenie danych spowoduje natychmiastowe wykluczenie dostawcy z kwalifikacji OEM dotyczących hiperskalowania lub dużego serwera.

Podsumowując, patrząc na arkusz kalkulacyjny SSD Endurance Wiki, można zauważyć, że wiele używanych dysków SSD do centrów danych może kreślić wykresy przez wiele lat i PB wykresów przed zużyciem, a nawet słabsze dyski konsumenckie mogą wykreślić kilkaset TB przed zużyciem.

2) Wielu użytkowników skorzystało z porady Chia i kupiło używane dyski SSD dla przedsiębiorstw, aby wykonać swoje wykresy.

Szacuję, że około 50% ploterów Chia korzysta z dysków SSD dla przedsiębiorstw lub centrów danych… może więcej. Większość z nich albo nadal knuje i zużyła tylko ułamek swojej wytrzymałości, albo z radością spisuje swoje napędy i odsprzedaje sprzęt innym farmerom lub komuś innemu na Craigslist lub eBay.

3) Konsumenci nie są głupi!

Jak dowiedziałem się podczas wielu dyskusji w Keybase , konsumenci przeprowadzają mnóstwo badań na temat dysków SSD przed zakupem ich do dedykowanego kreślenia. Inną rzeczą, którą ludzie robią, co jest mądre (gra słów nie zamierzonych), jest używanie dysku SSD, dopóki nie zostanie zużyty w około 70-80%, a następnie włożenie go do automatu do gier. Zapewnia to najlepsze wykorzystanie dysku, ponieważ typowe zadania konsumenckie, takie jak gry, nie wymagają wielu zapisów przez cały okres eksploatacji dysku.

4) Bezpośrednie drukowanie na dysku twardym

Chociaż jest to wolniejsze, wiele ploterów Chia wskazało, że drukują bezpośrednio na swoich dyskach twardych lub ponownie wykorzystują stare dyski twarde SAS o pojemności 10 000 lub 15 000 (które kosztują zaledwie 15 USD w serwisie eBay) w serwerach. Trudno oszacować odsetek użytkowników Chia przy użyciu tej metody, ale jest to odsetek niezerowy.

5) Liczba uszkodzonych dysków jest w hałasie

Jak wszystko, wyrzuciłem Excela i zrobiłem model.

wykres słupkowy raportu Forward Insights SSD za 1 kw. 2015 r.

Źródło: Raport Forward Insights SSD za pierwszy kwartał 21 roku

Forward Insights ma całkowity rynek dysków SSD na poziomie 435 milionów jednostek w 2021r. Pozwólcie, że zastanowię się nad tym przez chwilę… Jeśli typowy dysk konsumencki ma 1,5 miliona godzin MTBF (jest to tyle samo, co 0,584% rocznego wskaźnika awaryjności) i Dyski korporacyjne mają 2 mln godzin (0,44% afr), moja matematyka sugeruje, że około 2,6 miliona nowo zakupionych dysków SSD ulegnie awarii w samym 2021 roku.

Załóżmy, że korzystam z wiki Chia SSD Endurance, aby oszacować łączną liczbę wykresów, które każda klasa dysków może dostarczyć przed zużyciem, i wziąć mój procent Netspace, którego, jak sądzę, używa każda klasa dysków do wykresów, z których korzysta użytkownik. W takim przypadku mogę oszacować całkowitą wartość zużywanych dysków SSD. Pamiętaj, że to nie to samo, co rzeczywiste awarie dysków SSD z powodu Chia, ponieważ nie wiemy, ile dysków zostało zakupionych wyłącznie w celu kreślenia w Chia. Zakładam, że ludzie aktywnie starają się nie całkowicie zużyć SSD, aby dalej z nich korzystać. Mimo to obliczymy to w liczbie dysków o wartości wytrzymałości, aby ułatwić obliczenia.

W 32EiB Netspace szacuję, że Chia przyczyniła się do wzrostu liczby awarii zaobserwowanych w 2021 r. o 1-2% całkowitej liczby nowo zakupionych dysków, a w ciągu ostatnich trzech lat działających dysków łącznie ~0,5% .

PODSUMOWANIE

Wiele się wydarzyło od czasu uruchomienia sieci głównej Chia. Pojawiły się nowe plotery, które znacznie zmniejszają lub eliminują zużycie dysków SSD, nowe dyski SSD do plotowania dla konsumentów zoptymalizowane pod kątem Chia o wysokiej, trwałej przepustowości i wysokiej wytrzymałości, a także eksploracja wykorzystania pamięci obliczeniowej z NGD i pamięci klasy pamięci masowej o niewiarygodnie wysokiej wytrzymałości, takiej jak Intel Optane, do kreślenia.

Chia ściśle monitoruje branżę pamięci masowej, współpracując z naszymi partnerami nad obciążeniami związanymi z planowaniem i uprawą Chia, analizą rynku, programami zrównoważonego rozwoju, recyklingiem, e-odpadami i ulepszeniami zużycia energii, aby Chia mogła się rozwijać w sposób zrównoważony. Mamy o wiele więcej ekscytujących wiadomości na tym froncie, które pojawią się w tym roku z kilkoma ważnymi partnerami.

źródło: https://www.chia.net/2021/08/03/chia-and-ssd-endurance-big-progress-less-waste.html


Opinie i artykuły na tej stronie reprezentują jedynie autorów poszczególnych publikacji do których znajdują się odnośniki (źródło) pod każdym z artykułów. Nie oznacza, to że chia.com.pl zgadza się z tymi poglądami.
Strona chia.com.pl powstała jedynie z potrzeby informowania lub edukowania osób zainteresowanych tą technologią oraz dostarczania wiadomości z dziedziny blockchain i jego wpływu na środowisko, nie znajdują się na niej artykuły dotyczących predykcji cenowych kryptowaluty XCH (Chia).
Informacje tutaj prezentowane, nie mogą być wykorzystywane jako porada inwestycyjna i finansowa. Wszelkie decyzje, np. inwestycyjne podejmowane przez Użytkowników strony są zawsze podejmowane indywidualnie i niezależnie, na ich własne ryzyko i na ich własną odpowiedzialność.

Artykuły na stronie:
– nie stanowią rekomendacji inwestycyjnej lub czynności doradztwa inwestycyjnego w rozumieniu §3 Rozporządzenia Ministra Finansów z dnia 19 października 2005r. w sprawie informacji stanowiących rekomendacje dotyczące instrumentów finansowych, ich emitentów lub wystawców (Dz.U. 2005 nr 206 poz. 1715);
–  nie stanowią rekomendacji inwestycyjnej lub czynności doradztwa inwestycyjnego w rozumieniu (art.42 ust. 1 i art.76) Ustawy z dnia 29 lipca 2005r. o doradztwie inwestycyjnym (Dz.U. 2005 nr 183 poz. 1538 z późn.zm.
)

Więcej w dziale contact.