ЕС
Size: a a a
2020 March 13
EI
Сергей Старченко
Если сначала загрузить, а потом применить AutoNumber, у менчя получилось 38 сек.
потом не в контексте оператора загрузки а отдельным оператором, в котором можно перечислить все поля для обработки.
СС
Спасибо большое, буду сейчас пробовать
EI
Сергей Старченко
Если сначала загрузить, а потом применить AutoNumber, у менчя получилось 38 сек.
тестовый пример на 12 млн строк у меня дает:
чистая загрузка - 9 с
с преобразованием в скрипте - 29
с преобразованием в предзагрузке - 21
с оператором после загрузки - 11
чистая загрузка - 9 с
с преобразованием в скрипте - 29
с преобразованием в предзагрузке - 21
с оператором после загрузки - 11
EI
появилось где-то в 2018 году
СС
потом не в контексте оператора загрузки а отдельным оператором, в котором можно перечислить все поля для обработки.
К сожалению, такая конструкция autonumber OriginalKey using 'OriginalKeyCount'; не доступна в QV11
ЕС
ну тогда попробуйте
ЕС
left join load
FieldValue('OriginalKey', RecNo()) as OriginalKey,
autonumber(FieldValue('OriginalKey', RecNo())) as OriginalKeyAnum
AUTOGENERATE FieldValueCount('OriginalKey');
FieldValue('OriginalKey', RecNo()) as OriginalKey,
autonumber(FieldValue('OriginalKey', RecNo())) as OriginalKeyAnum
AUTOGENERATE FieldValueCount('OriginalKey');
СС
ну тогда попробуйте
У меня просто нет слов: 22 млн строк, чистая загрузка - 10 сек, с AutoNumber - 41 сек, с тем что Вы предложили - 17 сек. Гениально!
EI
Сергей Старченко
У меня просто нет слов: 22 млн строк, чистая загрузка - 10 сек, с AutoNumber - 41 сек, с тем что Вы предложили - 17 сек. Гениально!
как сказал мне 1сник после показа ему Qlik . "Да это просто магия какая-то "))
СС
как сказал мне 1сник после показа ему Qlik . "Да это просто магия какая-то "))
Это точно. Я уже всех из 1С перетянул в QV)))
ЖШ
Когда много таблиц и связей по длинным ключам и лень везде делать АвтоНамбер, то есть такой классный скрипт AutoAutoNumber.qvs который сам определяет ключи и заменяет их Autonumber'ом. Просто вызываешь процедуру в конце скрипта модели и все. 😉
ЖШ
Р
Ребята, а если я загружаю таблицу с несколькими миллионами строк, при следующей загрузке она будет полностью перезагружаться или только новая часть?
EI
Ребята, а если я загружаю таблицу с несколькими миллионами строк, при следующей загрузке она будет полностью перезагружаться или только новая часть?
все будет работать по тексту скрипта с нуля.
т.е. обнулится и вперед заново
т.е. обнулится и вперед заново
Р
А какие способы есть это избежать? Если я загружаю через direct query
Р
и еще вопрос, можно ли таким образом выгружать данные из материализованных вью
ZS
Sizing - всегда была процедура расчёта конфигурации железа.