szybka kopia danych między serwerami w ovh

angerek - 02-10-2008 11:38
szybka kopia danych między serwerami w ovh
ponieważ robię migrację między dwoma serwerami w ovh z pomocą ftp i wygląda to tak (serwery nic więcej teraz nie robią prócz właśnie tego kopiowania):

----total-cpu-usage---- -dsk/total- -net/total- ---paging-- ---system--
usr sys idl wai hiq siq|_read _writ|_recv _send|__in_ _out_|_int_ _csw_
0 1 92 5 1 2| 22M 224k| 336k 12M| 0 0 | 12k 338
0 1 90 5 4 1| 23M 320k| 262k 12M| 0 0 | 12k 273
0 0 94 3 2 1| 15M 0 | 192k 9111k| 0 0 |8321 179
0 0 100 0 0 1|2560k 0 | 50k 1503k| 0 0 |1346 66
0 0 100 1 0 0|2824k 0 | 31k 1279k| 0 0 |1063 119
0 0 100 0 0 1|2560k 0 | 31k 1284k| 0 0 |1121 72
0 0 99 0 0 0|1280k 0 | 30k 1297k| 0 0 |1082 54
0 1 100 0 0 0|2568k 0 | 30k 1290k| 0 0 |1077 75
0 0 99 0 1 1|2560k 0 | 32k 1359k| 0 0 |1146 74
0 0 100 0 0 1|2560k 0 | 33k 1281k| 0 0 |1139 87
0 1 99 1 0 0|2824k 0 | 38k 1608k| 0 0 |1504 85
1 0 99 1 0 1|1280k 0 | 31k 1288k| 0 0 |1191 69
0 0 100 0 0 1|2560k 0 | 31k 1287k| 0 0 |1188 76
0 0 99 1 1 1|2560k 336k| 30k 1312k| 0 0 |1230 98
0 2 97 1 1 1| 14M 32k| 172k 7795k| 0 0 |7456 218
1 1 92 3 3 2| 22M 0 | 262k 12M| 0 0 | 12k 238
0 1 92 3 2 1| 23M 0 | 262k 12M| 0 0 | 12k 252
0 0 98 1 0 0|6248k 0 | 108k 4633k| 0 0 |4330 99
0 0 99 1 1 0|2208k 0 | 49k 1432k| 0 0 |1189 161
1 0 99 0 0 1|2560k 0 | 37k 1282k| 0 0 |1136 102
0 0 99 1 0 0|2816k 192k| 30k 1288k| 0 0 |1093 84
1 0 99 0 0 1|1544k 0 | 30k 1288k| 0 0 |1072 59
0 0 100 0 0 0|2560k 0 | 31k 1288k| 0 0 |1068 77
0 0 100 0 0 0|2560k 0 | 30k 1318k| 0 0 |1051 77
0 0 99 1 0 0|1280k 0 | 31k 1279k| 0 0 |1088 106
0 0 99 1 0 1|2824k 0 | 36k 1519k| 0 0 |1316 73

to mam 2 pytania

1, czy ograniczenie 32MB dotyczy również sieci ovh?
2. czy jeśli chcę kopiować trochę szybciej niż 10Mbit w sieci ovh to powinienem w związku z tym szatkować backupy po max 32MB i zyskam na prędkości?

linx - 02-10-2008 13:05
tak i tak

borec - 02-10-2008 13:16
Cytat:
tak i tak Tydzień temu robiłem to samo tyle że po ssh i leciało 12MB/s (100mbit) cały czas (ok 60GB danych).

Meduza - 02-10-2008 18:38
hmm
no wiecie...czasem to 10 mbit to nie jest prawda ;]

angerek - 02-10-2008 18:50
i faktycznie 60-80 mbit leci w 3 strumieniach nieduże pliki.

grz3chu - 02-10-2008 19:22
Podzielić backup splitem zapętlić wrzucanie na ftp i leci 100mbit/s.

Kod: 31457280 bajtów przesłane w ciągu 3 sekund (11.00M/s)
cd ok, cwd=/02102008
31457280 bajtów przesłane w ciągu 3 sekund (10.85M/s)
cd ok, cwd=/02102008
31457280 bajtów przesłane w ciągu 3 sekund (10.78M/s)
cd ok, cwd=/02102008
31457280 bajtów przesłane w ciągu 3 sekund (10.99M/s)
cd ok, cwd=/02102008
31457280 bajtów przesłane w ciągu 3 sekund (11.03M/s)
cd ok, cwd=/02102008
31457280 bajtów przesłane w ciągu 3 sekund (10.94M/s)
cd ok, cwd=/02102008
... Zastanawiam się czemu tak jest, czy to kwestia techniczna, że routery limitują nawet ten ruch do serwerów backupu czy jest to celowo. Można zrozumieć te limity, ale połączenie z backupem powinno być na full. Wysyłanie niedużego backupu trwa prawie 2 godziny, a po rozerwaniu na części przeleci po paru minutach.

angerek - 02-10-2008 21:15
poszedłem jeszcze bardziej na łatwiznę, może się komuś przyda
lftp
help mirror
-P, --parallel[=N] download N files in parallel

leci pełnym 100mbit.

grz3chu - 02-10-2008 21:49
Cytat:
poszedłem jeszcze bardziej na łatwiznę, może się komuś przyda
lftp
help mirror
-P, --parallel[=N] download N files in parallel

leci pełnym 100mbit. fakt sposób dobry jak się ma 2 maszynki w Twoim przypadku, ale jeśli ktoś chce wysłać na ftpbackX.ovh.net to niestety musi dzielić jeśli nie chce 10mbit/s bo opcja mirror robi lusterko na kliencie, szkoda, że nie odwrotnie byłoby prościej :)

angerek - 02-10-2008 22:00
eee tam czytać
-R polecam :)

ale czy ftp ovh pozwala na więcej niż jedną sesję ftp. to już sam sprawdź.. mam inną robótkę aktualnie ;)

grz3chu - 03-10-2008 09:27
Nie da rady, byłoby za pięknie :D