Puncte:0

De ce este mv atât de lent - disc local pe disc local?

drapel st

Mut un singur fișier mare din /mnt/z la /mnt/a pe o instalare Ubuntu 20.04.3 bare metal.

Ambele discuri sunt capabile să susțină 2 GB/s în scrieri și fac în alte operațiuni, dar mv se limitează la ~200 MiB/s.

Discurile sunt plăci PCIe 4.0 Highpoint RAID cu unități U2 sau M2 în RAID 0. Ambele cu partiții NTFS.

Ce mi-ar putea lipsi?

drapel ar
Acestea sunt unități USB 2 sau 3.1 sau 3.2 sau unități SATA externe? Dacă acestea sunt unități SATA în cuști USB, funcționează [UASP](https://www.minitool.com/lib/uasp.html)? Vă rugăm să vă editați întrebarea și să adăugați informații noi.
drapel st
Nici. Sunt în mașină, atașați direct prin benzile PCIe.
vanadium avatar
drapel cn
Poate pentru că formatul sistemului de fișiere este ntfs? Performanța nu ar fi mai bună atunci când utilizați un sistem de fișiere linux nativ precum ext4 sau poate cu vfat? Este, de asemenea, atât de lent când copiați multe fișiere mai mici?
sudodus avatar
drapel jp
+1 la comentariul lui @vanadium. Experiența mea este că NTFS este mult mai lent decât ext4 atunci când este accesat din Linux.
drapel cn
@vanadium 99% sigur că aceasta este problema -- Mutați-le folosind Windows, altfel NTFS nu este cel mai bun sistem de fișiere pentru asta; Puteți utiliza ext3 pentru suport 100% OS. ext4 ar putea avea nevoie de un driver terță parte pe alte sisteme de operare
drapel cc
Căutați pe acest site „copie lentă”. de exemplu. vezi https://askubuntu.com/questions/1113235/very-slow-copying-files-from-exfat-to-ntfs Pe scurt, procesul de copiere transferă ieșirea către sistem (buffere), tampoanele de sistem se umplu , lucrurile se târăsc până la un loc. Se întâmplă oricând ieșirea este mai lentă decât intrarea, iar copia este suficient de mare pentru a umple tampoanele de sistem (în funcție de memorie).
drapel st
Este interesant că scrierea pe discul NTFS din memorie merge la viteză maximă. De asemenea, pot copia fișiere pe diferite discuri simultan și citirea totală de pe discul NTFS crește, dar fiecare operațiune mv individuală limitează în continuare aproximativ 200 MiB/s.
drapel st
@ubfan1, ar fi acest lucru relevant cu un fișier de 100 GB și 500 GB RAM? Atât citirea, cât și scrierea au loc la 1/10 din lățimea de bandă.
drapel cc
Vă rugăm să adăugați informații suplimentare la postarea dvs. în loc de în comentarii. Nu există experiență cu memoria de 500 GB, dar văd încetiniri atunci când dimensiunea copiei îmi depășește memoria. Vestea proastă este că hardware-ul SMR este pur și simplu lent -- furnizorii sinceri spun că „nu este potrivit pentru copii de rezervă”.

Postează un răspuns

Majoritatea oamenilor nu înțeleg că a pune multe întrebări deblochează învățarea și îmbunătățește legătura interpersonală. În studiile lui Alison, de exemplu, deși oamenii își puteau aminti cu exactitate câte întrebări au fost puse în conversațiile lor, ei nu au intuit legătura dintre întrebări și apreciere. În patru studii, în care participanții au fost implicați în conversații ei înșiși sau au citit transcrieri ale conversațiilor altora, oamenii au avut tendința să nu realizeze că întrebarea ar influența – sau ar fi influențat – nivelul de prietenie dintre conversatori.