A
тут 2 celery worker'а в m5.large
nginx, приложение и еще один celery worker в t2.medium
nginx, приложение и еще один celery worker в t2.medium
тут 2 celery worker'а в m5.large
nginx, приложение и еще один celery worker в t2.medium
Size: a a a
2019 June 25
A
а споты не подходят?
A
а споты не подходят?
хз, таски долгие, по идее когда задач нет. должны кредиты копиться
A
тут 2 celery worker'а в m5.large
nginx, приложение и еще один celery worker в t2.medium
nginx, приложение и еще один celery worker в t2.medium
m5 выкинуть, а t2 сунуть в ASG
A
а ASG настроить по глубине SQS
A
option_settings:
'aws:autoscaling:launchconfiguration':
InstanceType: 't2.medium'
Ec2KeyName: 'foo'
SecurityGroups: 'bar'
IamInstanceProfile: 'aws-elasticbeanstalk-ec2-role'
'aws:autoscaling:launchconfiguration':
InstanceType: 't2.medium'
Ec2KeyName: 'foo'
SecurityGroups: 'bar'
IamInstanceProfile: 'aws-elasticbeanstalk-ec2-role'
A
option_settings:
'aws:autoscaling:launchconfiguration':
InstanceType: 't2.medium'
Ec2KeyName: 'foo'
SecurityGroups: 'bar'
IamInstanceProfile: 'aws-elasticbeanstalk-ec2-role'
'aws:autoscaling:launchconfiguration':
InstanceType: 't2.medium'
Ec2KeyName: 'foo'
SecurityGroups: 'bar'
IamInstanceProfile: 'aws-elasticbeanstalk-ec2-role'
а зачем m5 тогда?
A
ну и проверить почему долго работает, вдруг диски медленные например, или сеть, сделать апдейт
A
ну и проверить почему долго работает, вдруг диски медленные например, или сеть, сделать апдейт
чтобы это сказать надо понять какие таски тормозят
A
чтобы это сказать надо понять какие таски тормозят
они все разные чтоли? нельзя понять по их логике че им надо больше?
A
они все разные чтоли? нельзя понять по их логике че им надо больше?
да разные, кто-то в rekognition идет,
кто-то миниатюры далает
кто-то миниатюры далает
A
да разные, кто-то в rekognition идет,
кто-то миниатюры далает
кто-то миниатюры далает
тогда их в разные ASG надо сунуть + лямбды
A
надо чтобы внутри одной ASG одинаковая нагрузка была (более менее)
A
все разное в одно не стоит пихать
A
они все разные чтоли? нельзя понять по их логике че им надо больше?
2 воркера стартуют так
celery -A foobar.celeryapp worker -Ofair -l info -Q $FOO_CELERY_VIDEO_QUEUE -n video@$HOSTNAME --concurrency=1
celery -A foobar.celeryapp worker -Ofair -l info -Q $FOO_CELERY_VIDEO_QUEUE -n video@$HOSTNAME --concurrency=1
A
и чтото мне это не нравится
A
а нафиг селери вообще? можно взять голый sqs
A
а нафиг селери вообще? можно взять голый sqs
sqs выглядит как rabit/redis , а кто делать будет? лямбды?
A
sqs выглядит как rabit/redis , а кто делать будет? лямбды?
код скопипастить
A
код скопипастить
не 100%, там таски стартуют другие таски