Potrzebujemy macierzy dyskowej

[Młochowski_Jacek]

W chwili obecnej najważniejszą naszą potrzebą jest zabezpieczenie rozproszonych zasobów które posiadamy.
Jest ich na tyle dużo że proste sposoby nie wystarczają i potrzeba rozwiązań systemowych.
Doświadczenie i prawa Murphyego uczy, że dyski padają w najmniej odpowiednim momencie. A jeśli nie mamy kopii tego co było na dysku to mamy ból. To duża odpowiedzialność. Dlatego musimy nasze cenne zasoby przechowywać na macierzach dyskowych pracujących w RAID i jednocześnie posiadać ich kopię, która może póki co być na zwykłych dyskach. Inwentaryzację naszych zasobów również łatwiej będzie przeprowadzić, gdy pliki znajdą się na docelowych miejscach. Koszt macierzy dyskowej 5x5TB w RAID5 (20TB) to około 7 tys zł.

[Ćwikliński_Leszek]

Doświadczenie i prawa Murphyego uczy, że dyski padają w najmniej odpowiednim momencie.

Coś chyba wywołujesz wilka z lasu.
Dzisiaj padł Bronkowi dysk 2TB , a mnie tydzień temu odmówił posłuszeństwa dysk 3TB. Oba jeszcze na gwarancji, ale były już zapełnione danymi.

pozdrowienia

Leszek

[moyra777]

Inwentaryzację naszych zasobów również łatwiej będzie przeprowadzić, gdy pliki znajdą się na docelowych miejscach.

Cegielka wplacona...

tylko teraz mam pytanie, prawdopodobnie zaraz dostane po lapkach albo wciagnie sie mnie na czarna liste ale musz sie zapytac bo mnie to nurtuje...

czy nasze gremium bedzie mialo dostep do raportu z inwentaryzacji? Miloby bylo zobaczyc w jednym miejscu co dyski beda przechowywac, cos w rodzaju wykazu z SZwA

Tylko prosze nie piszcie.. zobacz sobie sobie tu i tam .. np. na metrykach... ja sobie zdaje sprawe czesc zrodel jest "nie publicznych" ale skoro "publika" sie sklada to wydaje mi sie ze "publika" ma prawo wiedziec do jakiego skarbca sie doklada

[Młochowski_Jacek]

Nigdy nie ograniczaliśmy dostępu do naszych zasobów i nie mamy zamiaru tego robić. Jeśli będą precyzyjne informacje odnośnie posiadanych zdjęć to będą one dostępne. Podobnie jak w przypadku sprzętu którym dysponujemy nie ukrywamy tych informacji. W Metrykach statystyki pokazują tylko to co jest w metrykach, w poczekalni pokazują ile plików mamy w poczekalni. Inwentaryzacja ma dotyczyć kopii zapasowych (źródłowych) które przechowujemy na dyskach poza internetem. Nie będzie to samo zestawienie ilościowe ale kompletna informacja o zasobie. Pozwoli ona jednocześnie uzupełnić zasoby internetowe, gdyby pokazały się rozbieżności.

[Piachu2]

Pozwolę sobie dodać tu małą uwage techniczną.
Powinny być dwa zestawy dysków lub kopie danych na dobrym hostingu zapewniającym takie bezpieczeństwo.
Tłumacząc mniej zorientowanym "z Polskiego na nasze":
Gdy w jednej lokalizacji będzie burza, pożar, powódź lub włamanie, to jest kopia w drugiej - odległej lokalizacji dokąd te kataklizmy nie dotarły.

Wspominasz Jacku w tekście wcześniejszym" "5x5TB w RAID5 (20TB) " czy nie powinno być: 5x5TB to nadal 5TB, jednak pięciokrotnie zwielokrotnione ( równoległe).
5x5 to, moim zdaniem, dość dobra macierz pod warunkiem , że ktoś ją monitoruje na bierząco i odpowiednio reaguje na zaistniałą sytuację nie szczędząc grosza na wymianę uszkodzonych dysków.

[Sroczyński_Włodzimierz]

CZy nie powinno być 5*5 to nadal 5?
nie, RAID (ząden - w tym RAID 5) nei ozancza aż takiego multiplikowania. Czy będzie to RAID 5 czy 6 to moim zdaniem jeszcze kwestia otarta, ale przy rozwiązaniach altenratywnych np 6 dysków po 6TB i zalożeniu RAIDa na tym fizycznym zestawie będzie ok 22-29 TB (zaleznie czy RAID 5 czy 6). do wysycenia w 100% nie powinno dochodzić. Plus możliwość rozbudowy
co do kwestii wychodzcych poza temat watku (tj 'serwery publikacyjne" ) - no bez przesady z tymi 2 serwery w jaskiniach odpornych na uderzenie termojądrowe. Tzn..jeślio znajdzie się chętny, by zapsokoić darowizną kilkudziesięciotysieczna takie "wymagania" (duplikacje całości, niezlaeznie od działań "hotigowca")...to czemu nie? tyle, że wtedy ma 100% nadzów trójliterowych instytucji nad soba "co my mamy takiego cennego,zeby takiei irracjonelne rozwiązania wybierać:)
pozdrawiam

[Młochowski_Jacek]

Wszystko co mamy na serwerach w Internecie ma swoją kopię na dyskach fizycznych. Docelowo wszystkie pliki źródłowe (niepublikacyjne - większe od tych co są w Metrykach) powinniśmy przechowywać w dwu kopiach na oddzielnych nośnikach, najlepiej na dwóch macierzach albo na macierzy i na dyskach. Te pliki nie muszą być w Internecie. Z racji większego rozmiaru plików wszystko wolniej by chodziło i generowało większe transfery. Pliki źródłowe trzymamy poza Internetem a publikacyjne w Internecie.
Jeszcze nie zdecydowaliśmy czy będzie to 5dysków po 5TB czy 6 dysków po 6TB. Większe wyjdą ekonomiczniej w przeliczeniu na TB. NAS w RAID5 ma pojemność o jeden dysk mniejszą niż pojemność wszystkich dysków. A więc przy pięciu dyskach 5TB uzyskamy (5-1)*5TB = 20TB a przy 6-ciu szóstkach (6-1)*6TB=30TB.

[Sroczyński_Włodzimierz]

nie wiem czy to efekt tego wątku, ale pierwszy raz dzienne wpłaty (średnio liczone z okresu dóch miesięcy) przekorczyły 100 zł:)
oczywiście, wiem, to główna zasługa kilku wpłat związanych z AP Olsztyn, ale przed chiwla 500 zł...i jest 100zł/dzień:) Nie sądzę, że to do utrzymania w dłuśzej perpejtywie,ale..obym się mylił:)

[Marek.Podolski]

A czy nie lepsze byłyby takie oto urządzenie? Kilka razy tańsze. Za cenę 8000 zł można 4 sztuki kupić o pojemności 20 TB x 4

http://www.komputronik.pl/product/24065 ... S_451.html

Pozdrawiam
Marek

[Młochowski_Jacek]

2.100 zł to cena gołego NAS-a bez dysków! NAS z czterema zatokami przy zastosowaniu nawet największych dysków 6T pozwoli uzyskać w RAID5 (4-1)*6=18TB przy koszcie ok 360zł/TB. Więc nie jest to rozwiązanie tańsze. Ono tylko mniej kosztuje.

[JarekK]

A czy nie lepsze byłyby takie oto urządzenie? Kilka razy tańsze. Za cenę 8000 zł można 4 sztuki kupić o pojemności 20 TB x 4

http://www.komputronik.pl/product/24065 ... S_451.html

Pozdrawiam
Marek

idzmy delej
czy nie lepsze byłoby zakupienie
http://czytam.pl/k,ks_336867,Blok-rysun ... o_spo=true

za 8000 można kupić 4395 sztuk i wszystko ładnie przerysować - dodatkowo 100% odporne na przepięcia i impuls elektromagnetyczny

[sebastian_gasiorek]

Rozważaliśmy zakupienie znacznie większej macierzy. 20TB na obecną chwilę nie jest za dużo, biorąc pod uwagę nasze zasoby którymi już dysponujemy. Ze względu na bezpieczeństwo danych zdecydowaliśmy się jednak na mniejszą pojemność.
NASy nie są niezawodne i trzymanie wszystkiego na jednym urządzeniu wiąże się z ryzykiem, że przy jednej awarii można stracić całe archiwum. W przyszłości będzie można łatwiej i taniej aktualizować taką mniejszą macierz przerzucając dane tymczasowo na inne urządzenia.

[kazmiers]

Największ dysk zgodny z tym NAS-em (wg. producenta) to 4TB, a więc w RAID5 (4-1)*4=12TB

[Sroczyński_Włodzimierz]

Wszystkie rozsądne propozycje sa nadal brane pod uwagę. Tj wybór będzie dokonany nie spośród egzotycznych pomysłów prezentowanych częściowo w tym wątku, ale z zestawu "sprzęt obsługujący wiele dysków zapewniający sprzętowo kontrole i korekte błędów, o opjemniśc co najmniej "naście" terabajtów w akceptowalnej cenie.

Prawdą jest to co pisze Jacek, szczególną wymową uzyskuje informcja Leszka. Potrzeba jest faktycznie pilna, jeśli zapadła decyzja,że nalezy naprawde szybko zając sie tematem, to trzeba to zrobic.
Popieram, wspieram, przyłączami się do hasła kierujacego ze strony głównej do tego wątku" trochę zmieniając:
PILNIE potrzebne darowizny - wpłaty na rachunki PTG - na potzreby zakupu macierzy do archiwizacji.

pozdrawiam

[Młochowski_Jacek]

Spośród wszystkiego czym dysponuje PTG najcenniejsze są właśnie nasze bazy i nasze zasoby zdjęciowe. Wszystkie nasze działania nakierowane są na realizację celów najważniejszych dla całego Środowiska a nie tylko stu kilkudziesięciu naszych Członków. Tworzą one dzisiejszą rzeczywistość w której nie za wszystko trzeba płacić. Pokazują, że można tworzyć w domenie publicznej i dla dobra publicznego. Z tego względu wielkość i bezpieczeństwo naszych zasobów ma znaczenie. Niestety duża część prac digitalizacyjnych w Polsce nierzadko finansowana ze środków publicznych służyć ma wzbogacaniu zbiorów do których dostęp jest ograniczony i nierzadko związany z ponoszeniem kosztów. Jeśli nie dziś to w przyszłości. Tego niestety nie unikniemy ale możemy się starać by projekty obejmujące bezpłatnie udostępnianie zasoby dla wszystkich i na zawsze rozwijały się najszybciej i nie zostały zdominowane przez projekty komercyjne. PTG nigdy nie wprowadzi opłat za korzystanie z naszych zbiorów. Niestety PTG nie dysponuje dużym budżetem, co ogranicza nasze możliwości i spowalnia wzrost zasobów.

Zwracam się apelem do całego Środowiska wesprzyjmy PTG sprzętowo bo są to działania dla nas wszystkich i wszyscy odniesiemy z nich korzyści. My, nasze dzieci i wnuki. Bo rzeczywistość jaką budujemy teraz będzie miała wpływ na przyszłość.