ЕП
вот что для упаковки геномов специально придумали: https://github.com/jkbonfield/rans_static
Size: a a a
2016 August 31
ЕП
но это еще без lz, т.е. не подойдет для упаковки строчек в условной базе данных
a
вот что для упаковки геномов специально придумали: https://github.com/jkbonfield/rans_static
Спасибо, ознакомлюсь на досуге
2016 September 01
S
Тарантул - это такой redis + application server, оба плохо работают с большими ключами, ну и хранят только столько, сколько помещается в память. Cassandra не масштабируется при ключах в мегабайты длиной. Вообще, хранить в базе данных что-то большее килобайт - путь к io stalls. Хранить в одном месте байты и мегабайты - похоже на ошибку. Искать по этому с помощью like% - вы точно понмаете, что делаете?
Я в процессе обдумывания самой идеи, так что я пока еще не совсем понимаю, что делаю, т.к. ничего не делаю.
Ваш комментарий весьма дельный, кстати. Спасибо.
Ваш комментарий весьма дельный, кстати. Спасибо.
S
что за строчки в мегабайты длиной в одном ключе? их точно нельзя порезать на части?
Ну это, скорее всего, будут не ключевые поля, но по ним нужен полнотекстовый поиск. Надо будет посмотреть на эластик.
S
Всем, кто отвечал, спасибо!
ЕП
полнотекстовый поиск на одной ноде лучше sphinx, его индекс заметно меньше, но он требует хранить в памяти атрибуты (для быстрого поиска, впрочем, можно положить на диск в спициальных конфигах)
ЕП
в принципе, sphinx как-то живет и на нескольких нодах, но я не пробовал, а для эластика такая конфигурация родная
PR
полнотекстовый поиск на одной ноде лучше sphinx, его индекс заметно меньше, но он требует хранить в памяти атрибуты (для быстрого поиска, впрочем, можно положить на диск в спициальных конфигах)
а сфинкс научился поддерживать что нибудь кроме mysql? Лично я голосую за эластик. Главное - его настроить, ибо настройка из коробки ужасна, а вот его гибкость в настройке - почти безгранична
ЕП
сфинкс умеет mysql, postresql, mssql и odbc, есть xml загрузчик (не знаю, кто им пользуется), и относительно недавно появились tsv/csv загрузчики
ЕП
сфинкс не хранит оригиналы "в себе", так что нужен внешний сторадж, и обычно это какая-то популярная sql база, в этом плане тоже большое отличие от эластика
PR
сфинкс не хранит оригиналы "в себе", так что нужен внешний сторадж, и обычно это какая-то популярная sql база, в этом плане тоже большое отличие от эластика
я знаю, что такое сфинкс
PR
я с ним работал во времена mysql 5.0 и тогда он мог только с mysql работать. Это похоронило надежду на перевод одного крупного проекта на постгрес
ЕП
хм, может быть, мне казалось, что постгрес он всегда умел, но наверное я забыл
PR
нет, раньше точно не умел. Если теперь умеет - это отличная новость
ЕП
да, сейчас без проблем загружает, там даже odbc есть, так что из любого sql сможет, хоть из db2 или оракла какого
IS
сфинкс не хранит оригиналы "в себе", так что нужен внешний сторадж, и обычно это какая-то популярная sql база, в этом плане тоже большое отличие от эластика
Можно хранить данные в качестве атрибутов (строки/булы/числа)
a
привет!!!
АЩ
привет!!!
Привет :)
SK
Господа вашу бих дату в большом автосервисе можно использовать? Есть готовый бизнес план/идея как юзать чтобы показать хозяину? И вам хорошо будет и мне?