UT
Сканировать сотни тысяч директорий в несколько потоков и матчить глоб шаблоны
Size: a a a
2021 April 04
N
хахахах
IV
может отдельный сервис на го?
VK
а нода зачем?
UT
Вообще весь проект на ноде и либа эта нужна тоже на ноде. Есть пакет fast-glob на js, он справляется с задачей за 20 секунд. Возникла идея сделать нативный модуль и попытаться побить результат
VK
А есть основания полагать, что ты его побьешь?
T
Rust отлично интегрируется с нодой. Получаются статические нативные компоненты.
UT
Кроме того, что с++ в целом быстрее, на базовых операциях в 7-10 раз обгоняет ноду. И главное — есть поддержка полноценной многопоточности.
IV
ну как бы быстрее если уметь)
IV
сама нода то тоже на C++
UT
Да я уже понял, что у вас веры в мои знания нет ))
Меня это не останавливает
Меня это не останавливает
SK
если вам так хочется крутых скоростей, то можете полазить в исходниках крайне быстрого аналога грепа и посмотреть как работать с файловой системой в расте, вдруг получится быстрее
https://github.com/BurntSushi/ripgrep
https://github.com/BurntSushi/ripgrep
UT
Спасибо, посмотрю
AC
мби просто вызывать шелл чайлд процессом, куда уж быстрее то
UT
Пробовал бить на чанки и использовать дочерние процессы, буста почти нет
N
сканируете 1 раз
пишете модуль к ядру который при изменении файлов в директории обновляет ваш индекс
пишете модуль к ядру который при изменении файлов в директории обновляет ваш индекс
N
конечно если выймут диск из компа, поменяют на нем что то, и вернут назад, начунться проблемы, индекс не станет акутальным...
T
Обычно когда люди такое гуглят, у них уже есть ответ на этот вопрос
AC
типо простой вызов ls -f не даст прироста скорости?