VS
кароч мы вдвоём н поняли тебя даже с объяснением 😞
ну ок
Size: a a a
2020 March 10
як
просто контора взяла стандартные сервера и туда начала фигачить хадуп, не подумав абсолютно ни о чем. И так получилось что у них все быстро уперлось в то что хочется на ноде хранить намного больше данных, но ноды уже есть, кактус надо жрать какой рассчитан
т.е. проблема плотности упаковки в стойки/серверную габариты датацентра? так чуть понятнее. конечно, если самим это всё ново - надо было консультироваться. ДА
VS
т.е. проблема плотности упаковки в стойки/серверную габариты датацентра? так чуть понятнее. конечно, если самим это всё ново - надо было консультироваться. ДА
как минимум, так типично в хадуп ноды начинают пихать довольно много относительно медленного стораджа (сата диски). В случаи с блейдами ты нормального соотношения цпу к диску на 2.5" дисках не добьешься, а значит теряешь и в месте и в потреблении.
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
як
как минимум, так типично в хадуп ноды начинают пихать довольно много относительно медленного стораджа (сата диски). В случаи с блейдами ты нормального соотношения цпу к диску на 2.5" дисках не добьешься, а значит теряешь и в месте и в потреблении.
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
т.е. ребята не купили полок/голов?
GG
как минимум, так типично в хадуп ноды начинают пихать довольно много относительно медленного стораджа (сата диски). В случаи с блейдами ты нормального соотношения цпу к диску на 2.5" дисках не добьешься, а значит теряешь и в месте и в потреблении.
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
Не, я конечно не спец по мап редьюсу и возможно всегда есть исключения, но они редки
для нас хадуп вообще тупо дешевая распределенная хранилка
GG
все тупо срать хотели на мапредус
GG
другой вопрос, что спарк ВРОДЕ тоже умеет поверх ярна работать, но такое себе
VS
т.е. ребята не купили полок/голов?
ребята вообще ничего не сделали, взяли и заложили стандартные компьют ноды какие закупали и огребали с заменой этого железа на другое в следующие итерации закупок и прочим подобным
GG
вообще интересно, что сейчас спарк + с3 вполне решает необходимость держать хадуп, но я могу тупо быть неправ
VS
но так ребята считали что так и надо
VS
вообще интересно, что сейчас спарк + с3 вполне решает необходимость держать хадуп, но я могу тупо быть неправ
ну в облаках свои особенности так то, у каждого облака еще свои
як
ребята вообще ничего не сделали, взяли и заложили стандартные компьют ноды какие закупали и огребали с заменой этого железа на другое в следующие итерации закупок и прочим подобным
прикинь, я понимю тебя! твоймптичий язык! данные без сторэджа кароч, одна дробилка без хранилки
як
прикинь, я понимю тебя! твоймптичий язык! данные без сторэджа кароч, одна дробилка без хранилки
и я бы со всем этим ибался
VS
и я бы со всем этим ибался
это к "хадуп везде одинаковый"
як
это к "хадуп везде одинаковый"
ну я работал в компаниях где деньги на 80% серваков просто украли, в принципе
VS
@systemdy ну вот хочешь в нормальных местах - набирай нормальный опыт, а не тайтлы в резюме
Р
просто контора взяла стандартные сервера и туда начала фигачить хадуп, не подумав абсолютно ни о чем. И так получилось что у них все быстро уперлось в то что хочется на ноде хранить намного больше данных, но ноды уже есть, кактус надо жрать какой рассчитан
У клаудеры, между прочим, была отличная экселька для капасити планнинга хадупа, даже менеджер справится
VS
У клаудеры, между прочим, была отличная экселька для капасити планнинга хадупа, даже менеджер справится
Этот ж думать надо, не все умеют и хотят
VS
И не всегда вообще цель сделать хорошо)
YA
привет, кто-нибудь посоветует компанию, предоставляющую услуги DevOps?