Puncte:0

Cum se remediază etcd într-un cluster kuberentes?

drapel us

Am un cluster kubernetes bare-metal (kubeadm) care este cu adevărat instabil și l-am urmărit până la o problemă etcd.

Din descrierea podului etcd primesc:

Imagine: k8s.gcr.io/etcd:3.4.13-0
Vioitate: ... #success=1 #failure=8
Pornire: ... #success=1 #failure=24

În secvența de pornire a jurnalelor pare în regulă (comparativ cu un alt cluster), atunci primesc o mulțime de avertismente:

etcdserver: [...] cererea ... a durat prea mult pentru a se executa

Dar nu cred că este legat de hardware pentru că etcd_disk_backend_commit_duration_seconds Percentila 99 este la 16 ms, ceea ce este bine conform FAQ.

Oricum, acest lucru durează câteva minute, apoi cred că acest lucru determină repornirea:

etcdserver/api/etcdhttp: /health eroare; QGET eșuat etcdserver: cererea a expirat (codul de stare 503)

Aveți idee ce pași suplimentari pot face pentru a diagnostica problema și a remedia etcd?

Mikołaj Głodziak avatar
drapel id
Ați văzut această [problemă](https://github.com/etcd-io/etcd/issues/11809)? Este asemănător cu al tău?
drapel us
Ei bine, are unele asemănări, dar în problema menționată, timeout-urile încep imediat după pornire, în timp ce în cazul meu, începe după câteva minute de funcționare. De asemenea, nu este clar dacă există o blocare în cealaltă problemă, în timp ce pentru mine este sigur. Dar voi continua să mă uit la performanța discului până îmi voi face o idee mai bună...
Mikołaj Głodziak avatar
drapel id
Ce versiune de Kubernetes ați folosit? Puteți oferi pași cum exact ați configurat clusterul?
Wytrzymały Wiktor avatar
drapel it
Salut @Antoine. Orice actualizari?
drapel us
Mulțumesc, am reușit să obțin ajutor pentru github și să rezolv problema: https://github.com/etcd-io/etcd/issues/13373. Cred că la un moment dat nodul meu și-a schimbat IP-ul privat din cauza problemelor hardware, iar la actualizarea etcd a cauzat probleme de configurare. Remedierea a fost să dump+restaurarea datelor etcd.

Postează un răspuns

Majoritatea oamenilor nu înțeleg că a pune multe întrebări deblochează învățarea și îmbunătățește legătura interpersonală. În studiile lui Alison, de exemplu, deși oamenii își puteau aminti cu exactitate câte întrebări au fost puse în conversațiile lor, ei nu au intuit legătura dintre întrebări și apreciere. În patru studii, în care participanții au fost implicați în conversații ei înșiși sau au citit transcrieri ale conversațiilor altora, oamenii au avut tendința să nu realizeze că întrebarea ar influența – sau ar fi influențat – nivelul de prietenie dintre conversatori.