Serwery do obróbki dużych ilości danych

[streaming3 0]

Witajcie,

 

Buduję system polegający na gromadzeniu i przetwarzaniu dużej ilości danych video. System ma być skalowalny więc chcę obliczyć koszt dla systemów obsługujących różne ilości użytkowników a co za tym idzie proporcjonalnie szerokości łącza w dół jak i mocy obliczeniowej.

 

Mówimy o skali od 1Gb/s do 100Gb/s transferów w dół oraz obliczeń na poziomie od jednej maszyny powiedzmy sześcio rdzeniowej do dziesiątek takich maszyn. Spore musiałyby być też przestrzenie storage no i też skalowalne odpowiednio.

 

Poszukuję optymalnego kosztowo dostawcy serwerów do tego typu celu. Położenie geograficzne nie ma tu dużego znaczenia przy czym znaczenie ma czas odpowiedzi serwera jeśli byśmy mówili o opóźnieniach w powyżej 200ms.

 

Na jakich dostawców sugerowalibyście zwrócić uwagę?

 

 

[Miłosz 2311]

Czego oczekujesz od dostawcy? Myślę, że tu sprzęt będzie raczej po Twojej stronie.

 

Duże i skalowalne storage, to idziesz w macierze. Koszta zakupu to dziesiątki tysięcy zł, potem cena przechodzi w 6cyfrową.

 

Każdy serwer kolejne kilka tysi. Zostaje jeszcze pytanie czy chcesz markowe maszyny czy składaki.

[tgx 575]

 

 

Duże i skalowalne storage, to idziesz w macierze. Koszta zakupu to dziesiątki tysięcy zł, potem cena przechodzi w 6cyfrową.

 

 

 

Nie koniecznie macierz

 

glusterfs, lustre itp może w tym zastosowaniu się sprawdzić

[streaming3 0]

Niedoprecyzowałem, że całość musi być też skalowalna kosztowo więc raczej nie zakup a dzierżawa serwerów.

[theONE 526]

Jeżeli nie masz skoków łącza w sposób nieplanowany i chcesz używać tych 2-3 Gbit/s (albo i 40-50 Gbit/s) to napisz na prv, ale jeżeli to ma być stream typu raz 10 Gbit/s a potem przez 2 dni po 20 Mbit/s to musisz na zachodzie szukać.

[Kszysiu 136]

 

jeżeli to ma być stream typu raz 10 Gbit/s a potem przez 2 dni po 20 Mbit/s to musisz na zachodzie szukać.

albo chmurka

[streaming3 0]

Ruch powinien utrzymywać się w miarę stały, bez bardzo dużych skoków.

[Tiktalik.com 18]

Czesc,

 

u nas w zespole jest pare osob, ktore pracowaly przy bardzo duzych projektach wideo. Skrobnij na kontakt@tiktalik.com, doradzimy.

 

pozdrawiam,

 

Daniel

[Gość patrys]

Są 3 największe problemy:

- Oprogramowanie zarządzające

- Łącze

- Dyski twarde

 

W Polsce będzie problem z łączem, a raczej z jego ceną więc lepiej będzie poszukać na zachodzie dostawcy.

Do tego dochodzi redundancja macierzy przechowujących pliki i macierzy serwujących najpopularniejsze pliki.

Kontrolery dyskowe/dyski mają naprawdę ciężko i trzeba dobierać dobrze rozwiązania sprzętowe które sobie poradzą cena/wydajność.

 

 

Warto wziąć do rozmów firmę która miała do czynienia z streamingiem danych przekraczającym choć te 10Gb/s.

Wdrażaliśmy naprawdę duże przepustowości i objętości, ale by coś podpowiedzieć musiał bym znać więcej szczegółów projektu.

[theONE 526]

Przy tym wolumenie (50 Gbit/s) to cena 1 Gbit/s w Polsce lub poza nie jest aż tak różna żeby brać to jako decydujące kryterium

[streaming3 0]

Dzięki za kolejne odpowiedzi, będę się kontaktował.

[dinek 19]

Witam,

 

Tak jak kolega pisal - przy volumenie 50Gbit cena za lacza nie powinna sie duzo roznic.

 

Kwestia jest infrastruktura - wydaje mi sie, ze zagramanica bedzie latwiej cos przygotowac.

 

Kto moze cos zaoferowac?

 

Europa

Leaseweb, Plusserver, OVH, Softlayer, hosteurope,

 

Jezeli do 200ms to wchodzi w rachube rowniez USA gnax, nac.net, quadra,net i wiele innych.

 

Wszystko zalezy od oczekiwan i budzetu.

 

NP szafa 25A z 10Gbit to cena ok 6K Euro do tego serwery, switche 4x10G, APC.

 

Pozdrawiam,

Dino Strzeminski

Edytowano Kwiecień 12, 2013 przez dinek (zobacz historię edycji)

[Tiktalik.com 18]

Stream3:

 

Ponownie zachecam do kontaktu, jestesmy w stanie przedstawic unikalna w sensie technicznym i cenowym oferte w zakresie 1-100Gbps

pozdrawiam,

 

mamy zaawansowany rozproszony system dedykowany do podawania duzej ilosci danych

 

kontakt@tiktalik.com

 

pozdrawiam,

 

Daniel Esposito Tiktalik Team

[Oreo 59]

Stream3:

 

Ponownie zachecam do kontaktu, jestesmy w stanie przedstawic unikalna w sensie technicznym i cenowym oferte w zakresie 1-100Gbps

pozdrawiam,

 

mamy zaawansowany rozproszony system dedykowany do podawania duzej ilosci danych

 

kontakt@tiktalik.com

 

pozdrawiam,

 

Daniel Esposito Tiktalik Team

 

Dwukrotnie pozdrawiasz.

[Gość patrys]

@Tiktalik.com: po proszę szczegóły tej oferty na priv z łączem 10Gb/s.

[Tiktalik.com 18]

@patrys: wyslane