M
а зачем вам это?
Size: a a a
2021 May 15
MB
?? тут про ram ничего
M
в бакете все денег стоит
AS
Ну так посмотрите пропорции. К RAM то же самое.
M
на бакет да, з траф нет оплаты
MB
проще говоря не дошла оператива, есть 32 ядра, есть куча tb nvme , а оперативу пока жду.. чтобы не терять время я бы мог во много потоков запускать k33 плоты .
PS
Не увидел этого, интересно
MB
откуда такая увереность? по моим пониманием наоборт, под к=33 плот нужно столько же рам и потоков цпу…
AS
Убьете ССД и всё. Смысла в k=33 нет никакого
M
вы на 5 лет вперед планируете плоты? не епите мозг и длайте так:
2)Сколько параллельных (одновременных) плотеров мне надо запускать на моем ХХХХХХХХХХХХХХХХХХХХХХХХ (конфигурация) компе?
Базовое количество зависит от 3х параметров: проца, памяти, размера SSD. Запускать требуется минимальное кол-во по которому вы просидаете.
а)Процессор (взято для современных процов).
Считается, что выделать больше 2х ядер (4 потока) на один плот особо смысла не имеет, большой прирост скорости не дает. Это касается процов с гипертрейдингом, если у вас его нет - возможно будет смысл выделять больше ядер на каждый плот.
Итого, если у вас, допустим, 8 ядер и 16 потоков - то максимальное число это 4 плота.
б)Память (рекомендуется использовать с проверкой, чтобы минимизировать битые плоты)
Размер требуемой памяти на каждый плот зависит от параметра “Количества корзин”. Чем меньше корзин вы используете, тем больше требуется оперативной памяти для каждого плота, но тем быстрее они делаются.
По умолчанию, считается, что на 128 корзин, необходимо 3Гб памяти. Если вы сократите кол-во корзин до 64, то для каждого плота будет требоваться уже минимум 6ГБ, до 32 - 12Гб, 16 - 24Гб. Реально памяти используется чуть больше, примерно 3,2Гб на 128 корзин. Если у вас мало памяти - вы можете увеличить кол-во корзин, допустим для 256 достаточно и 2гб (даже меньше).
Если на вашем компе 64Гб памяти, то при 64 корзинах вы можете использовать 64/6,4=10.
Не забывайте, что каждый поток съедает не ровно 3, а чуть больше, плюс еще операционная система и фоновые приложения, фактически ставить больше 8-9 смысла нет в данном случае.
в)SSD
Существуют рызаные SSD интерфейсы, SATA, SAS, M2 и т.п. У каждого своя скорость, которая зависит как от диска так и от интерфейса. Здесь приводится расчет, с условием что вы не упираетесь в скорость интерфейса или диска (не или не очень упираетесь).
Для создания одного плота (при к=32) требуется около 260Гб свободного места на диске. Т.е. если вы имеете SSD емкостью 1 Тб, вы можете создавать 931/260=3,5 т.е. не более 3х плотов одновременно.
Итог:
Что получаем в сумме? По примерам выше, вы можете запустить 4 по процу, 8-9 по памяти и 3 по SSD. Отсюда вывод - запускаем 3 параллельных плота, выставляем кол-во корзин в 32 (фактически юзаем 12х3=36 по памяти), по 2 ядра и радуемся.
Я не скажу что это будет самая оптимальная конфигурация, так как тюнинг - это “дело тонкое Петруха”, но базово оно будет так. Рекомендую смотреть нагрузку во время когда и идет засев, и смотреть что у вас из этих параметров перегружено или недогружено. Соответственно корректировать конфигурацию в нужное русло.
2)Сколько параллельных (одновременных) плотеров мне надо запускать на моем ХХХХХХХХХХХХХХХХХХХХХХХХ (конфигурация) компе?
Базовое количество зависит от 3х параметров: проца, памяти, размера SSD. Запускать требуется минимальное кол-во по которому вы просидаете.
а)Процессор (взято для современных процов).
Считается, что выделать больше 2х ядер (4 потока) на один плот особо смысла не имеет, большой прирост скорости не дает. Это касается процов с гипертрейдингом, если у вас его нет - возможно будет смысл выделять больше ядер на каждый плот.
Итого, если у вас, допустим, 8 ядер и 16 потоков - то максимальное число это 4 плота.
б)Память (рекомендуется использовать с проверкой, чтобы минимизировать битые плоты)
Размер требуемой памяти на каждый плот зависит от параметра “Количества корзин”. Чем меньше корзин вы используете, тем больше требуется оперативной памяти для каждого плота, но тем быстрее они делаются.
По умолчанию, считается, что на 128 корзин, необходимо 3Гб памяти. Если вы сократите кол-во корзин до 64, то для каждого плота будет требоваться уже минимум 6ГБ, до 32 - 12Гб, 16 - 24Гб. Реально памяти используется чуть больше, примерно 3,2Гб на 128 корзин. Если у вас мало памяти - вы можете увеличить кол-во корзин, допустим для 256 достаточно и 2гб (даже меньше).
Если на вашем компе 64Гб памяти, то при 64 корзинах вы можете использовать 64/6,4=10.
Не забывайте, что каждый поток съедает не ровно 3, а чуть больше, плюс еще операционная система и фоновые приложения, фактически ставить больше 8-9 смысла нет в данном случае.
в)SSD
Существуют рызаные SSD интерфейсы, SATA, SAS, M2 и т.п. У каждого своя скорость, которая зависит как от диска так и от интерфейса. Здесь приводится расчет, с условием что вы не упираетесь в скорость интерфейса или диска (не или не очень упираетесь).
Для создания одного плота (при к=32) требуется около 260Гб свободного места на диске. Т.е. если вы имеете SSD емкостью 1 Тб, вы можете создавать 931/260=3,5 т.е. не более 3х плотов одновременно.
Итог:
Что получаем в сумме? По примерам выше, вы можете запустить 4 по процу, 8-9 по памяти и 3 по SSD. Отсюда вывод - запускаем 3 параллельных плота, выставляем кол-во корзин в 32 (фактически юзаем 12х3=36 по памяти), по 2 ядра и радуемся.
Я не скажу что это будет самая оптимальная конфигурация, так как тюнинг - это “дело тонкое Петруха”, но базово оно будет так. Рекомендую смотреть нагрузку во время когда и идет засев, и смотреть что у вас из этих параметров перегружено или недогружено. Соответственно корректировать конфигурацию в нужное русло.
AS
Зачем вам плоты с k=33 и больше?
MB
ну у меня серверные intel…. вряд ли убью
PS
Остаётся вопрос как на 1000 машин софт развернуть, клонами если только
M
DE
самописным софтом и API амазона
M
пффф.... кибирнейт слашали?)
MB
проще говоря не дошла оператива, есть 32 ядра, есть куча tb nvme , а оперативу пока жду.. чтобы не терять время я бы мог во много потоков запускать k33 плоты .
M
ну с дописками это да)
DE
там системный диск на 8 ГБ если что
M
и что?