N
Пока мало.
Size: a a a
2021 January 05
ВН
Nikita
Да понятно, я о том, что их становится настолько дохуя, что я о них узнаю 😂
Ну я короче хз почему твои знакомые должны быть эталоном измерения числа кредитных покупателей биткойна))
N
Ну я короче хз почему твои знакомые должны быть эталоном измерения числа кредитных покупателей биткойна))
Среди моих знакомых таких, к счастью, нет.
SK
чувствуются корни зеленого
MG
Господа.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
SG
Господа.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Купи постгрепро
t
Господа.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
А постгре xl разбить данные по разным инстансам, а эти инстансы на разных серверах?
t
Это типа партиции
SG
А вообще etl
t
Купи постгрепро
Не даёт профита, так-то
t
Кроме мульти мастера, который нах не всрался
SG
Не даёт профита, так-то
Поддержке мозг ебать можно
SG
Или переходите на нормальный скл
t
Если что можешь продублировать вопрос в @pgsql
ВН
Господа.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Есть серьезный вопрос к тем, кто шарит в базах данных (реляционных и нет). За консультацию готов заплатить, если кто решится.
Имеем PostgreSQL 12 и таблицу в ней для хранения данных об эффективности рекламы. Размер таблицы на данный момент составляет ~300млн строк и каждый день увеличивается на 1-3 миллиона.
Каждый день несколько десятков или сотен раз нужно получать сводные данные из неё (SUM как основная функция), фильтровать и сортировать по вычисленным полям.
Пока что каждая операция занимает от 10 секунд до нескольких десятков минут.
Нужен эдвайс, как это говно денормализовать. Может, с использованием промежуточной БД для вычисленных значений (mongo, например).
Если кому интересна такая задача — ткните в личку, я дам файл с более детальным описанием текущего процесса и структурой нужных таблиц.
Я щас за это должен был взять видимо деньги, но TimescaleDB
t
Но, надо глянуть базу, мож у тебя не всё так плачевно
t
Я щас за это должен был взять видимо деньги, но TimescaleDB
Хмм, tsdb и ради этого отдельный сервер? Они уже юзают посгрю как совместить без полного переезда?
ВН
Хмм, tsdb и ради этого отдельный сервер? Они уже юзают посгрю как совместить без полного переезда?
TimescaleDB это экстенжн к постгресу
t
TimescaleDB это экстенжн к постгресу
Ёпта
ВН
Он забавным образом утаптывает данные в массивы и получается очень компактно