проблема синхронизации большого количества мелких файлов

dickofan

суммарный объем порядка 200-300Га
при попытке сабжа с помощью, скажем, ТС, в какой-то момент комп тупо затыкается и перестает шуршать винтами, та же хрень при попытке копирования из одного места в другое
вычитал, что корень трабла мб в виндовом механизме кеширования мелких файлов в оперативу целиком, которой, соответственно, существенно меньше
истинна ли причина, есть ли лекарство?

juliuzz

копировать фаром, killcopy?

nas1234

тотал сам вроде копирует и е кеширует.
попробуй ещё киллкопи задействовать. может она справится

AlexV769

тотал сначала пытается оценить общий объем копируемого.
если этот механизм выключить, то всё должно заработать.

dickofan

не, про оценить это понятно, затык происходит уже сильно после, в процессе
т.е. жмешь, к примеру, "сравнить по содержимому" - он все просчитывает, потом начинает сравнивать, и где-то на 20-30-м проценте прогресса намертво вешает машину
собственно, скопировать я уже скопировал в несколько этапов, хочу теперь сравнить с бекапом - не похерилось ли чего
пока приходится тоже кусками сравнивать, что категорически неудобно (

AlexV769

охтыгоспаде, какие извращенные способы.
открой для себя rsync
или на худой конец сравнивай md5-суммы, посчитанные _локально_.

yroslavasako

попробуй себе поставить filezilla, она куда надёжнее

Marinavo_0507

я юзал rsync под цыгвином ещё на w2k, работал
даже через ssh!
нет, вру
на nt4! в w2k тогда ещё не верили!

Marinavo_0507

что значит затыкается?
если б весь кеш был забит эти файлами вусмерть, тогда б ни один процесс не смог бы читать с диска, и комп бы завис - при всём неуважении, не поверю, что в винде всё так плохо

tokuchu

если б весь кеш был забит эти файлами вусмерть, тогда б ни один процесс не смог бы читать с диска, и комп бы завис - при всём неуважении, не поверю, что в винде всё так плохо

Ну хз как там с кешем, но 2000-ю венду некоторые операции io подвешивали так, что "ни один процесс не мог читать с диска". Очень часто этот эффект наблюдался на сетевых шарах.

Marinavo_0507

ну тоже мне, вспомнил про сетевые диски
конечно, там косячная реализация, это неудивительно
но в этом треде, надеюсь, про локальные файлы идёт речь

tokuchu

ну тоже мне, вспомнил про сетевые диски
конечно, там косячная реализация, это неудивительно
но в этом треде, надеюсь, про локальные файлы идёт речь

Ну сетевые - не сетевые, но лочилось нах всё io.

dickofan

тем не менее, по симптомам именно это и происходит (
или еще что-то неведомое, но с тем же результатом )
пойду ботать rsync и ставить 2003