PcmOL
Guest
Fri Oct 09, 2009 6:19 pm
Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą z
ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga dziesiątek
terabajtów?
Mniej więcej wiem jak to zrobić energochłonnymi i/lub kosmicznie drogimi
protezami, ale też tak sobie myślę o innych dziwadłach.
Taki luźny temat łyk-endowy, trochę Sci-Fi.
Adam Dybkowski
Guest
Sat Oct 10, 2009 12:54 am
PcmOL pisze:
Quote:
Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą
z ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga
dziesiątek terabajtów?
To znaczy szukasz nośnika o pojemności dziesiątek terabajtów i
transferze podczas zapisu rzędu 1 gigabajta na sekundę? Idealnie do tego
nadawałaby się macierz RAID0 złożona z dysków SSD. Albo podtrzymywana
akumulatorem pamięć RAM - kwestia tylko pojemności i ceny, bo prędkością
wyrobi nawet zwykły pecetowy DDR2. A po zrzuceniu próbki do RAMu potem
już spokojnie kopiujesz na macierz tanich dysków SATA (przy zapisach
100MB/s wystarczy macierz 16-dyskowa RAID0 aby wyciągnąć ok. 1GB/s).
BTW: A docelowo to popytaj chłopaków z CERNu, oni jakoś w końcu muszą
zapisywać całe góry danych z Wielkiego Zderzacza.
--
Adam Dybkowski
http://dybkowski.net/
Uwaga: przed wysłaniem do mnie maila usuń cyfry z adresu.
Michał Lankosz
Guest
Sat Oct 10, 2009 8:38 am
Użytkownik "Adam Dybkowski" <adybkows12@45wp.pl> napisał w wiadomości
news:haoies$r6t$1@news.onet.pl...
Quote:
PcmOL pisze:
Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą
z ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga
dziesiątek terabajtów?
To znaczy szukasz nośnika o pojemności dziesiątek terabajtów i
transferze podczas zapisu rzędu 1 gigabajta na sekundę? Idealnie do tego
nadawałaby się macierz RAID0 złożona z dysków SSD. Albo podtrzymywana
akumulatorem pamięć RAM - kwestia tylko pojemności i ceny, bo prędkością
wyrobi nawet zwykły pecetowy DDR2. A po zrzuceniu próbki do RAMu potem
już spokojnie kopiujesz na macierz tanich dysków SATA (przy zapisach
100MB/s wystarczy macierz 16-dyskowa RAID0 aby wyciągnąć ok. 1GB/s).
Jak rozumieć: "Jak zapisać te nędznych parę bitów w jednostce czasu"? Jeśli
ze strumienia ma być przechwycone kilka bitów to może inna machineria
potrzebna? Poza tym nie wiadomo, czy człowiek dysponuje jakimkolwiek
interfejsem do komputera. Jakie to medium?
Quote:
BTW: A docelowo to popytaj chłopaków z CERNu, oni jakoś w końcu muszą
zapisywać całe góry danych z Wielkiego Zderzacza.
Do tego są całe zaprzęgi urządzeń/komputerów połączone w kaskady, na każdym
etapie robiona jest filtracja danych i gdy strumienie danych nadają się już
do dalszej transmisji kierowane do ośrodków obliczeniowych na świecie.
Przynajmniej tak miało być, takie schematy i opisy oglądałem, gdy prowadzone
były symulacje zaprojektowanego systemu.
Michał