Mirror systemu plików RPS-->Kimsufi

gshegosh - 20-01-2010 11:18
Mirror systemu plików RPS-->Kimsufi
Czy macie jakiś patent na (stosunkowo) szybkie skopiowanie (prawie) całego systemu plików z RPSa na Kimsufi czy gdzieś tam indziej?

Próbowałem rsync ale mimo kilku prób i ustawień połączenie jest gdzieś w środku zrywane i nie kończy się to.

Robiłem dotąd backupy rdiff-backupem ale przestało to działać z tego samego powodu co rsync.

Teraz zapuściłem tar + netcat ale niezależnie czy z kompresją zip, compress czy bez kompresji "wyciąga" mi to jakieś 30kB/s :-(

Jak na RPSie zapodam hdparm to wychodzi te 1,8-1,9MB/s -- wiem że przy kopiowaniu wielu niedużych plików wydajność spada, ale czy to normalne że aż do takiego poziomu jaki obserwuję?

Może jest jakiś sprytny patent na to? Poza pojechaniem do Francji, przekupieniem techników i przeniesieniem wszystkiego na pendrajwie :D

ollerm - 20-01-2010 12:02
rsync chyba powinien zacząć z tego miejsca gdzie skończył kopiowanie :) To chyba bedzie najszybsza drogra skopiowania plików

gshegosh - 20-01-2010 12:06
Tylko że rsync na początku buduje listę plików do zsynchronizowania, a to trwa najdłużej u mnie (jest tych plików z 600k) - potem przekopiuje 100-500MB i pada. W taki sposób to będę miał ze 40-60 prób zanim skopiuję wszystko. Trochę syzyfowa praca :(

Jest jakiś sposób/inny program niż rsync lub przełącznik w rsyncu żeby tę listę plików zapisać do pliku i przy kolejnych próbach nie trzeba było jej budować?

no4b - 20-01-2010 13:28
tar i w locie wyrzucanie na 2 system i dekompresja.

gshegosh - 20-01-2010 13:43
Właśnie tar+netcat (i jeszcze pv do mierzenia prędkości) daje te 30kB/s :-(

Mam backup RPSa zrobiony rdiff-backupem parę dni temu i wrzucam go właśnie tarem+netcatem na docelowy Kimsufi z mojego komputera przez głupie łącze 30/3 w UPC -- i idzie ładnie 300-370kB/s.

Zrobienie tego samego WEWNĄTRZ sieci OVH idzie dobre 10x wolniej -- kto to czyta niech się poważnie zastanowi zanim zdecyduje się na RPSa z jego iSCSI. hdparm może i daje na RPSach 1-2MB/s, ale rzeczywisty transfer jest zupełnie inny.

bart613 - 20-01-2010 18:07
Spróbój włączyć rsync z flagą --progress, i zobacz po czym dokładnie (na czym) on dokładnie się zatrzymuje.

Może jest tam coś przez co nie może przejść - dasz to do exclude (lub przekopiujesz w inny sposób) i po problemie.