Коллеги, есть какой нибудь способ получить красивую схему базы данных из существующей базы данных, или из скрипта?

схема т.е набор ddl или схема например в idef1x?

ER диаграмма

Что то вот такое

PowerArchitect если правильно помню название

Спс!

Нужно написать запрос для PostgreSQL 12 типа:

copy subscriptions (
    id, --sequence
    uuid, --есть в файле
    timezone, --результат подзапроса
    language, --есть в файле
    is_test, --нет в файле, должно быть false
    created_at, --есть в файле
    updated_at, --TIMESTAMP должно быть NOW()
    deleted_at --должно принимать значение null или колонки last_ative из файла при условии, что колонка @invalid_identifier в файле равна "t"
) from '/temp/test.csv' with delimiter as ','

Не могу понять как дать "имена" колонкам в исходном .csv и можно ли в copy использовать case when, подзапросы и т.д. Можно ли вообще так сделать с Postgres?


В качестве примера - вот рабочая версия этого запроса для MySQL:

LOAD DATA LOCAL INFILE '/temp/test.csv' IGNORE INTO TABLE subscriptions COLUMNS TERMINATED BY ',' LINES TERMINATED BY '\n' IGNORE 1 LINES (
    @id,
    @language,
    @unused_1
    @unused_2
    @unused_3
    @created_at,
    @last_active
    @invalid_identifier,
) SET
    id = null,
    uuid = @id,
    timezone = (SELECT NAME FROM timezones WHERE OFFSET=@timezone LIMIT 1),
    language = @language,
    is_test = false,
    created_at = @created_at,
    updated_at = NOW(),
    deleted_at = CASE
        WHEN @invalid_identifier = 't' THEN @last_active
        ELSE null
    END

Кто может помочь?

copy subscriptions (
    id, --sequence
    uuid, --есть в файле
    timezone, --результат подзапроса
    language, --есть в файле
    is_test, --нет в файле, должно быть false
    created_at, --есть в файле
    updated_at, --TIMESTAMP должно быть NOW()
    deleted_at --должно принимать значение null или колонки last_ative из файла при условии, что колонка @invalid_identifier в файле равна "t"
) from '/temp/test.csv' with delimiter as ','

LOAD DATA LOCAL INFILE '/temp/test.csv' IGNORE INTO TABLE subscriptions COLUMNS TERMINATED BY ',' LINES TERMINATED BY '\n' IGNORE 1 LINES (
    @id,
    @language,
    @unused_1
    @unused_2
    @unused_3
    @created_at,
    @last_active
    @invalid_identifier,
) SET
    id = null,
    uuid = @id,
    timezone = (SELECT NAME FROM timezones WHERE OFFSET=@timezone LIMIT 1),
    language = @language,
    is_test = false,
    created_at = @created_at,
    updated_at = NOW(),
    deleted_at = CASE
        WHEN @invalid_identifier = 't' THEN @last_active
        ELSE null
    END

> MySQL

А причём тут PostgreSQL?

Запрос MySQL для примера. Нужен такой для постргрес. В моем сообщении это написано.

Возможно, стоит поменять местами :)

Сразу указать, что нужен такой же для ПГ, а то вот я спросонья не увидел, прошу прощения.

да, все верно говорите, сейчас переделаю

Докумертация нам говорит, что:

COPY имя_таблицы [ ( имя_столбца [, ...] ) ]
    FROM { 'имя_файла' | PROGRAM 'команда' | STDIN }
    [ [ WITH ] ( параметр [, ...] ) ]

Т.е. COPY (<list of columns>) FROM PROGRAM '<команда обработки CSV>' в вашем случае. И вся подготовка csv - снаружи. Либо по через file_fdw подключать этот csv, как таблицу и выгребать данные штатными средствами SQL.

либо через временную таблицу, в которую залить csv, как есть, а потом выковыривать данные.

Посмотрю, спасибо.
Всё усложняется тем, что база на удаленном сервере и использовать можно только`psql \copy`

file_fdw, если есть полномочия в самой базе на CREATE EXTENSION file_fdw; или временная таблица, я лично других вариантов не вижу с указанным условием.

Если есть кто-то, кто может сделать - готов оплатить. Оригинальный запрос чуть больше того, что в примере, но не сильно.

Видимо, временная таблица. Т.к. есть подзапрос.

Сложность может быть в том, что в файле обычно содержится от 2 до 10, а иногда и больше, миллионов строк. Таких файлов может быть загружено с десяток в течение часа.