N
DynamoDB наверное не совсем прообраз Кассандры. Dynamo database - это прообраз, а динамо ДБ просто созвучное название, но там совершенно другие принципы заложены
Size: a a a
2021 July 24
e
Народ , а кто нить проходил ИТ аудит (SOX) для решений BigData ?
AZ
bigtable/hbase и dynamodb/cassandra это wide column store
AZ
я не писал что DynamoDB это прообраз Cassandra, это схожие дизайны
N
column oriented != wide column. условно говоря в первом случае каждая колонка в своем файле, а во втором формат ближе к строковому и файл может быть 1. сначала идет ключ, а потом название колонки и значение этой колонки для данного ключа. кассандра - это wide column, а кликхаус, например колумн ориентед
N
а в чем схожесть? динамо ДБ - это паксос и соответственно лидер бэйсед, а кассандра - это лидерлесс
AZ
с точки зрения пользователя, PK/SK vs PK/CK, вторичные индексы схоже сделаны; у Сциллы вроде есть (нетолстый) гейтвей который делает DynamoDB API поверх Кассандры
C
Maire Marthy has been banned! Reason: CAS ban.
C
Maire Marthy has been banned! Reason: CAS ban.
AZ
для managed offering конечно лучше паксос какой-нибудь, банально проще чем то что накручено в кассандре, но это детали реализации
ЕГ
Бигдата это всего лишь инструмент для увеличения отклика на рекламу на 0.01%)
e
😂😉 тсс
так слона не продашь )
так слона не продашь )
PK
Ну, смотря сколько рекламы продаёшь
D
кажется что маловато)
AZ
Так себе хот тейк, вот как надо: бигдаты не существует (также как кансел культуры, "хороших" юзкейсов для блокчейн/крипты и устойчивой бизнес-модели на основе opensource)
2021 July 25
K
Добрый вечер. Поднимаю docker-compose puckel/docker-airflow:1.10.9.
Получаю ошибку Broken DAG: [/usr/local/airflow/dags/test_dag_airflow.py] No module named 'clickhouse_driver'
В volumes указал зависимости (./dags/requirements.txt:/usr/local/airflow/dags/requirements.txt)
Ошибка не меняется, в чем может быть проблема?
Получаю ошибку Broken DAG: [/usr/local/airflow/dags/test_dag_airflow.py] No module named 'clickhouse_driver'
В volumes указал зависимости (./dags/requirements.txt:/usr/local/airflow/dags/requirements.txt)
Ошибка не меняется, в чем может быть проблема?
D
пропишите в RUN секцию, 100% рабочий вариант, а так может с правами проблемы на папку? по факту модуль не установлен
K
Да я и заходил в сам контейнер и там выполнял руками, ничего не менялось
D
Образ норм собирается? Покажите код где ломается