jak na plotting: Page 5 - Czech Chia Farm

jak na plotting

eSTe

Mozes napisat moje skusenosti, nebudem popisovat pokusy len to co sa mi osvedcilo.

Stary PC 1 x Xeon X5675 (6core, 12 threds) 16GB RAM, Linux, Oficalny plotter

Robim 4 ploty paralelne ale spustaju sa s odtupom cca 2h, lepsie sa rozdelia zdroje a zatazenie. Ak by sa spustili sucastne tak 16GB ram je malo.
4 threads, 4000MB
2 ploty ako temp idu na SSD nvme 1T
2 ploty na 3xHDD Raid0, LinuxRaid je spraveny ale tak ze su na to pouzite 3 particie ktore su vytvorene na zaciatku kazdeho disku 250GB, Disky su 4TB, Je to najrychlejsia cast disku a hlavicky neusia chodit po celom disku.

Vytvorenie Plotu trva cca 7-9h cca 12 za den
Rozdiel medzi tmp SSD a 3xHDD Raid0 je minimalny

Skusal som aj MadMAX spusteny iba jeden
tmp2 - SSD, tmp 3xHDD Raid0 - 1,5h + este kopirovanie 15min
tmp2 - SSD, tmp HDD - 2h 20min - tmp je final dir

Pouzivam teda oficialny ploter aspon nenicim tolko SSDcko

Starsi Server HP proliant DL380e Gen8 - 2x E5 2450L (2x8core, 32 threads) 128GB RAM, 14x3TB Raid5, Linux
MadMax ploter
32 threads
tmp1- Raid
tmp2 - Ramdisk
Plot vytvoreny za cca 46min cca 30denne

Nenicim ziadne SSD, na domace pouzitie neodporucam hlavne kvoli hlucnosti.

Ked zaplnim aktulane disky budem podla moznosti dokupovat uz len USB disky, najlepsie mi zatial vychadzaju 5TB 2,5".

gloom

Romik Díky za další informace. Já ty testy nedělám pro efektivní farmaření, s tím začnu, až mi přijde finální stroj, ale proto, že tvořím návod pro začátečníky a tak zkouším různé varianty i takové, o kterých vím, že nejsou funkční. Protože abych mohl napsat kvalitní návod, musím vědět ne jen co dělat, ale i co nedělat a proč. Ale každopádně děkuji za další tipy. Testy s MadMaxem budu dělat tento týden, protože jsem, myslím, už vyčerpal všechny varianty konfigurace GUI a výsledky mám zapsané.

libor777

Zdravím,
prosím o pomoc. Ve verzi 1.2.3 je uvedena tato informace v release notes:
Added an option to revert to sequential read. There are some systems (primarily macos+exfat) where the parallel read features results in very long lookup times. This addition makes the parallel feature the default, but adds the ability to disable it and revert back to sequential reads.
Chápu to správně, že se jedná o změnu nastavení procesu vytváření plotu? A je možné se vrátit zpět k sekvenčnímu čtení při vytváření plotu? Nebo se jedná o změnu v procesu farmení?

nexus

libor777 podle tohoto https://github.com/Chia-Network/chia-blockchain/commit/2d1b19d871aeaf36a2dc5d39fc4eb22034563c6f si troufam rict, ze se jedna o mozne nastaveni pro harvester

libor777

Můžete mi prosím poradit jak to nastavit na sekvenční čtení? Ve Windows.

PS: pro ty co přemýšlí na co to potřebuji. Je to proto, že ploty vytvářím na HDD. 4 servery každý po 4 plotech, vždy současně nastavené na týden tvorby. Žádné rozestupy a podobné komlikace jako SSD nemusím řešit. Celkem tvořím 16 plotů za 12 hodin. Pozor některým diskům co jsem musel vyměnit to trvá 20 hodin (ty s malou cache). Za den je tedy možné naplotit 32 plotů = 3,2 TB. Cílových 150TB tedy můžu za ideálních podmínek udělat za 46 dnů. To není žádná hrůza, když to pak bude čekat roky na svou návratnost. Co se týká životnosti disků záruka je 5 let. Když při tom chcípne, vyreklamuji a koupím větší kapacitu za méně peněz, disky zlevnili po pádu ceny Chia. Žádný problém s reklamací jako u SSD. Za 46 dnů co to bude trvat, mi to nikdy nezaplatí stroj se spoustou předražených SSD vhodných pro tvorbu plotů, který bych kvůli tomu musel stavět. Tvůrce klienta si ale ASI řekl, že to takovýmto lidem pořádně opepří a tak změnil nastavení klienta, který teď k disku přistupuje paralelně a tím se mi pokusí zničit hlavičky. Ještě provokativně napíše, že to aktivuje v klientu proto, že to jde už vypnout, tak asi není důvod to nezapnout, ale neudělá v klientu vypínač a pokud nejsem slepý, asi to nepůjde jen tak lehce vypnout v jednom konfiguráku.

T-800

u predchozi verze GUI se mi libilo, ze to ukazovalo % plotovani celkem realne, ted v nove verzi kdyz pustim plot, tak mam za chvilku treba 10% a naopak ke konci mam dlouho 100% a pritom to jeste neco na ssd dela (a nemyslim tim kopirovani plotu ze ssd na hdd)

ja bych treba uvital, aby tam pridali fičuru, kolik ma byt spustenych max. paralelnich plotu ve fronte, to mi prijde uzitecny, protoze kazdy vi kolik si jich paralelne muze dovolit. jako spocitat si to neni problem, ale pokud se chci vzdalit na vic dni, tak musim pustit nejdriv jeden paralelni plot s dvojnasobnym rozestupem a pockat az bude v pulce a pak pustit druhou paralelni frontu

Tom

T-800 No něco takovýjo by to chtělo, zadat velikost RAM, rychlost CPU, SSD a navrhlo by to optimální rozložení plotingu.

mumove

Zdravíme 🙂

Máme dva dotazy:

1/ máme cca 80 polí ještě před spuštěním poolu (tedy samostatně mimo pool) plotovaný někdy květen/červen, mají ještě nějaký smysl, případně myslíte, že jsou stále plodný 😃? Zda je vhodné je smazat a udělat si políčka nové?

2/ Momentálně farmaříme při parametrech - procesor Intel Core i7-11700K, deska ASUS Prime z590-9, paměť 32Gb ddr4 + klasický externí disk 2,5" na ukládání polí + na plotování SSD Samsung 980 1Gb. Pokud bychom chtěli přejít na pevný disk, jaký byste doporučili? Chtěli bychom použít SAS disk, dá se ale píchnout na naší desku? Případně jaké pevné disky používáte vy? 🙂

Díky 🙂

manas

mumove

1) pokud máš místo, tak je nemaž a farmařte. My také postupně replotujeme staré a nahrazujeme je novými NFT 😀

2) jaký disk je velká otázka a každý na ní odpoví jinak. Záleží na preferencích, prostředí, apod. ... za Czech Farm bylo přemýšlení relativně jednoduché: nejlepší poměr cena za 1 TB a celková velikost disku (minimum 10TB). Nakonec jsme pořídili 18 TB Seagate viz https://www.czc.cz/seagate-exos-x18-3-5-18tb_2/299847/produkt (samozřejmě před časem, jinde a za jinou cenu)

mumove

manas

OK, díky. Vzpomínám si, že jste nabízeli tento disk k prodeji, akorát to nebyl 6 Gb, ale 12 Gb, máte ho ještě k dispozici? A lze ho píchnout tedy do té desky tak jak je, nebo je potřeba k němu nějaké příslušenství? Redukce? 🙂

EDIT - respektive je to nějakým způsobem zásadní, zda je to 6 Gb nebo 12 Gb?

manas

mumove ne ne to byla 18TB, ale je to SAS tzn na to potřebuješ extra řadič. Disky sehnat umíme, ale bohužel minimum je 20 ks odběru, což teď díky tomu, že je to SAS nedáme hned dohromady.

mumove

manas Ajoooo, mno tak pokud by stačil na farmeni SATA, tak tam dáme ten. A dal by se někde sehnat za rozumný peníz?

KubiM

Ahoj, pár dní tvořím ploty přímo v Chia GUI, ve Windows. Použitím výchozího plotteru mám plot cca za 10 hodin. Teď jsem v GUI zkusil přepnout na MadMax a jeden plot trvá zhruba polovinu, tedy asi 5 hodin. Čas by se mi líbil, ale všiml jsem si, že většinu času jede SSD naplno. Jde mi o životnost plotovacího SSD. Je nějaký rozdíl mezi výchozím plotterem a Mad Maxem, co se životnosti SSD týče? Nebo jím proteče stejný objem dat jen za kratší dobu a proto to stoprocentní zatížení?
Mám stařičké i7 860; 8 GB ram; 500 GB SSD.
Původně jsem zvažoval o navýšení RAM, abych mohl spustit 2 až 3 ploty paralelně, s odstupem cca 5 až 3,5 hodiny. Použitím MadMax bych se asi bez vyšší RAMky obešel, ale zase se bojím, aby to nebylo na úkor životnosti plotovacího SSD.

eSTe

KubiM Co sa tyka zapisov tak oba plotery zapisu priblizne rovnake mnozstvo dat pri generovani plotu K32, je to cca 1.2TB zapisov. Zalezi ale ako si ponastavujes jednotlive adresare, da sa tym nieco usetrit aj co sa tyka zapisov aj casu.
Mozes este usetrit SSDcko ze nebudes vsetko zapisavat na SSD ale to rozlozis medzi SSD a HDD alebo este mozes spravit raid0 z niekolkych HDD a robit to len na HDD.

Original ploter ma tieto nastavenia adresarov
-t temp adresar - 1.1TB zapisov
-2 temp2 adresar sluzi len na skompletovanie finalneho plotu - 0.1TB (ak sa nenastavi tak sa kompletuje do -t)
-d cielovy adresar pre plot - 0.1TB
mne sa osvecilo nastavit -2 a -d rovnake adresare usetris tak zapis a aj cas kopirovania do cieloveho adresara

MadMax ploter
-2 temp2 - najlepsie pouzit ramdisk - 0.7TB zapisov
-t temp - 0.3TB + 0.1TB kompletovenie finalneho plotu
-d cielovy adresar pre plot - 0.1TB
Ja som pouzival ramdisk ale v tvojom pripade je lepsie nastavit -t a -d na cielovy disk kde bude plot. Generovat to sice bude dlhsie ale usetris SSDcko a aj cas kopirovanim plotu do cieloveho adresara.

Moj prvy ploter bol nieco podobne ako mas ty. Mne sa osvecilo spravit raid0 z 3 diskov a generovat to len original plotrom, tak ze som vobec nenicil SSD. Ale to len ak mas k diskozicii niekolko rychlych diskov. U teba ked ze mas len 8GB ram je asi lepsia volba ist do MadMax plotra a nastavit si -2 na SSD a -t -d na cielovy disk. Este zalezi ci ti tento stroj bude robit aj farmu, to uz moze byt 8 GB RAM aj malo. Sleduj si potom v poole ci ti nelaguje farma. System alebo aspon databazu treba ma tiez na SSD. S tymto plotrom ale pocitaj tak na generovanie radovo mensie stovky plotov, ak planujes viac oplati sa zainvestovat rovno do plotra zo 128GB RAM.

Tom_F-M

kolik plotu máš v plánu ?

KubiM

Tom_F-M
Pro začátek jsem vzal 16 TB disk, ten teď pomalu plotuji. Aktuálně je na cestě plot č. 20 😀

KubiM

eSTe Díky za obsáhlou odpověď. Podle Tvých rad tedy MadMax nastavit takto?[upl-image-preview url=https://forum.czech.farm/assets/files/2021-12-31/1640943072-233766-madmax-1.png]

chia-mann

KubiM

Pokud toho neplánuješ moc, možná by se ti vyplatilo nechat si těch pár disků naplotovat, než do toho investovat . Na 500 GB SSD ani 3 ploty paralelně nepustíš a pokud ano, ve finále zjistíš, že se ti výsledné časy prodlouží o tolik, že se to nevyplatí. Já nabízím plot za 6-8 Kč, to doma na SSD ani nepořídíš. ;-)

eSTe

KubiM Ak ti nieje jasna funkcia jednotlivych adresarov tak spusti plotovanie a priebezne sleduj ake subory sa vytvaraju v jednotlivych adresaroch. Ak rozsiris ploter na 16GB tak sa da spustit 3-4 paralelne na original plotry ale pocitaj ze ked to pustis paralelne tak cas generovania jedneho plotu urcite stupne mozno na 14-16h. Musis sa stym vyhrat a odladit to inak ti to bude padat napr na plnu Ram. Nevyhoda je aj ked budes chciet nieco upravovat, napr restart musis pockat ak nechces prist o rozrobene ploty alebo ked vypadne elektrika tak prides tiez o vsetko. MadMax je v tomto jednoduchy ked ze sam paralelizuje tak ze ho staci spustit 1x. Tie adresare na MadMaxe nastav ako si popisal na obrazku ale razsej si to skontroluj ked ze Original a MadMax maju -t -2 medzi sebou vymenene. Orignal zacne na zaciatku generovat tmp subory do -t a MadMax do -2, ak ano tak to mas potom spravne nastavene.

KubiM

A ještě mi není úplně jasné to střídaní adresářů

KubiM

Ale stále si pohrávám s myšlenkou, že bych přikoupil 16GB RAM a rozjel 3 ploty paralelně ve výchozím ploteru. Jeden plot single zhruba 10,5 hodiny; pokud bych tři ploty paralelně, s prodlevou 3,5 hodiny, vycházelo by to na necelých 7 plotů za den - je to takto reálné? MadMax mi v současnosti dá 4 a kousek za jeden den a pokud jedu single a použiju víc vláken, dá to 2 a půl plotu za den.

Jestli tomu rozumím dobře, MadMax by při správném nastavení dokázal prodloužit životnost SSD, podle toho, co si uvedl, možná až o třetinu - to taky není zlé.

Více RAM by mi asi zase urychlilo plotování.

Po naplotování 16 TB disku bych chtěl zkusit rozjet farmu na Rapsbery - a pak bych viděl, jestli bych přikupoval další disky

KubiM

eSTe Děkuji Ti za rady, průběžné výsledky zatím nevypadají zle, uvidíme, jestli nedojde dech na finálové rovince... 😀
Ještě se mi doma povedlo najít starší 250 GB HDD. Dávalo by smysl jej použít jako temp místo cílového? Jde mi o to, že bych pošetřil cílový disk pro ploty, od kterého přeci jen budu čekat hlavně životnost. Tedy takto:
-2 - SSD 512 GB
-t - HDD 250 GB
-d - HDD16 TB

« Previous Page Next Page »