VS
поэтому имеет смысл составить список тех, кого ты подозреваешь на дубликаты, а потом прочитать
Size: a a a
2020 February 04
VS
условно ты можешь прочитать первые несколько кбайт, последние несколько кбайт и например в середине и уже с большой вероятностью сказать одинаковые файлы или нет, а для подозрительно похожих - поблочно сравнить целиком
GG
условно ты можешь прочитать первые несколько кбайт, последние несколько кбайт и например в середине и уже с большой вероятностью сказать одинаковые файлы или нет, а для подозрительно похожих - поблочно сравнить целиком
+++++
ЕО
условно ты можешь прочитать первые несколько кбайт, последние несколько кбайт и например в середине и уже с большой вероятностью сказать одинаковые файлы или нет, а для подозрительно похожих - поблочно сравнить целиком
Я бы делал так:
1. Посмотрел размеры всех файлов
2. Сгруппировал
3. Пробежался, для каждой группы:
* если в ней пара файлов, то сразу бы сравнивал их
* если больше пары, то сначала чексумма, а потом для совпавших сравнение на равенство
1. Посмотрел размеры всех файлов
2. Сгруппировал
3. Пробежался, для каждой группы:
* если в ней пара файлов, то сразу бы сравнивал их
* если больше пары, то сначала чексумма, а потом для совпавших сравнение на равенство
GG
Мд5сумма коллеге все равно нужна
GG
Для минимальной проверки целостности файлов на той стороне после передачи дистриба
VS
Я бы делал так:
1. Посмотрел размеры всех файлов
2. Сгруппировал
3. Пробежался, для каждой группы:
* если в ней пара файлов, то сразу бы сравнивал их
* если больше пары, то сначала чексумма, а потом для совпавших сравнение на равенство
1. Посмотрел размеры всех файлов
2. Сгруппировал
3. Пробежался, для каждой группы:
* если в ней пара файлов, то сразу бы сравнивал их
* если больше пары, то сначала чексумма, а потом для совпавших сравнение на равенство
Чексумма все равно читает весь файл. Если файлов разумное колличество, быстрее сразу сравнить
GG
Но вообще выглядит будто коллегу спасли бы архивы рар мультивольюм с избыточной инфой
GG
Но хз
ЕО
Чексумма все равно читает весь файл. Если файлов разумное колличество, быстрее сразу сравнить
Ну нет, для четырёх файлов уже неразумно
VS
Мд5сумма коллеге все равно нужна
Ну так да, в целом можно и зная что за файлы можно ещё делать предположения
ЕО
Ну нет, для четырёх файлов уже неразумно
Это ж 6 сравнений
GG
Вообще реально задача для м
Собеса
Собеса
GG
В девопс джобс
VS
Это ж 6 сравнений
Ну для рассчета суммы тебе надо прочитать столько же но вместо сравнения делать математику над каждым
VS
А так можно прочитать 4 блока, сравнить, выкинуть все файлы что не имеют совпадений, продолжить читать оставшиеся по блокам
VS
Если ты предполагаешь что у тебя среди равных по размеру файлов маловероятно будут совпадения, то лучше сразу сравнивать
ЕО
Ну для рассчета суммы тебе надо прочитать столько же но вместо сравнения делать математику над каждым
Ну там не такая уж жуткая математика. Но вообще можно начать попарные сравнения и одновременно, если файлов в группе больше 3, считать чексуммы
VS
В целом если у него нет чексумм и ему надо из посчитать все равно, тогда да, возможно можно сначала по чексумма сравнить
ЕО
Если ты предполагаешь что у тебя среди равных по размеру файлов маловероятно будут совпадения, то лучше сразу сравнивать
Ну, можно предполагать, что у них начало одинаковое