Исходное сообщение
"Представлен более эффективный метод определения префиксов ко..." Отправлено anonymous, 14-Май-19 11:42
> Имхо, это уже будет синтетика ("большие и тяжелые" файлы, бэкапы и прочее обычно все же хранятся на дисках, где все упирается в ИО). Во-первых диски бывают быстренькие, а-ля всякие NVMe; во-вторых, бывает hash-ирование на лету (без работы с диском). > Тем более, это вообще-то был SSD, Я неправильно прочитал вывод time-а, sorry. И Вы правы (перепроверил на своей машине, только что): действительно утилиты sha1sum и md5sum работают с примерно одинаковой скоростью: $ time md5sum dump 4c37decbf524ac3abced1e33132833d6  dump real    0m3,997s user    0m3,700s sys     0m0,289s $ time sha1sum dump 1bbe8f39f30d3a97528d87c5db87b1a72bf7f1f4  dump real    0m4,438s user    0m4,129s sys     0m0,300s А если выбрать более аккуратную реализацию, то sha1 даже быстрее будет (спец. инструкции в процессоре?): $ time openssl md5 dump MD5(dump)= 4c37decbf524ac3abced1e33132833d6 real    0m3,881s user    0m3,589s sys     0m0,292s $ time openssl sha1 dump SHA1(dump)= 1bbe8f39f30d3a97528d87c5db87b1a72bf7f1f4 real    0m2,818s user    0m2,510s sys     0m0,308s