Am configurat un cluster Kubernetes (1.19) folosind RKE pe o mașină ubuntu bare betal (20.04).
Rulez o instanță gitlab găzduită de sine (instalată de helm chart) pe acel cluster.
Din când în când (la fiecare 1-5 ore), unele păstăi leșin și văd cele mai multe reporniri pentru
cert-manager-cainjector-856d4df858-l4fsz
gitlab-postgresql-0
gitlab-redis-master-0
nfs-provisioner-6c95ddf48-xndwh
Nu știu care dintre ele provoacă problema și care sunt coincidențe. Poate că eroarea AOF este cauza principală, dar poate este doar rezultatul unei alte probleme.
descrie postgres
Avertisment Nesănătos 4m50s (x16 peste 21h) Sonda kubelet Liveness a eșuat: â
Avertisment Nesănătos 4m50s (x19 peste 21h) Sonda de pregătire kubelet a eșuat: â
Avertisment Nesănătos 4m3s (x47 peste 15h) Sonda kubelet Liveness a eșuat: 127.0.0.1:5432 - niciun răspuns â
Normal Killing 4m3s (x74 peste 15h) kubelet Container gitlab-postgresql a eșuat sonda de viață, va fi repornit â
Avertisment Nesănătos 3m53s (x74 peste 15h) Sonda de pregătire kubelet a eșuat: 127.0.0.1:5432 - niciun răspuns
log postgres
metrics time="2021-10-15T11:07:53Z" level=info msg="S-a stabilit o nouă conexiune la baza de date la \"127.0.0.1:5432\"." source="postgres_exporter.go:878"
metrics time="2021-10-15T11:07:54Z" level=info msg="S-a stabilit o nouă conexiune la baza de date la \"127.0.0.1:5432\"." source="postgres_exporter.go:878"
metrics time="2021-10-15T11:07:56Z" level=info msg="S-a stabilit o nouă conexiune la baza de date la \"127.0.0.1:5432\"." source="postgres_exporter.go:878"
metrics time="2021-10-15T11:07:59Z" level=error msg="Eroare la deschiderea conexiunii la baza de date (postgresql://gitlab:[email protected]:5432/gitlabhq_production?sslmode=disable): pq: the sistemul de baze de date pornește" source="postgres_exporter.go:1474"
metrics time="2021-10-15T11:07:59Z" level=info msg="Se pornește serverul: :9187" source="postgres_exporter.go:1672"
descrie redis
Avertisment Nesănătos 5m10s (x44 peste 22h) Sonda de pregătire kubelet a eșuat: â
Avertisment Nesănătos 5m (x34 peste 15h) Sonda de liveness kubelet a eșuat: â
Avertisment: Utilizarea unei parole cu opțiunea „-a” sau „-u” pe interfața de linie de comandă poate să nu fie sigură. â
timeout: comanda monitorizată a descărcat nucleul â
Avertisment Nesănătos 4m45s (x27 peste 19h) Sonda kubelet Liveness a eșuat: â
Avertisment Nesănătos 65s (x2311 peste 15 h) Sonda de pregătire kubelet a eșuat: â
Avertisment: Utilizarea unei parole cu opțiunea „-a” sau „-u” pe interfața de linie de comandă poate să nu fie sigură. â
timeout: comanda monitorizată a descărcat nucleul
log redis
useradd: Permisiune refuzată.
useradd: nu poate bloca /etc/passwd; încercați mai târziu.
chown: utilizator nevalid: „redis”
redis 06:20:45.18 INFO ==> ** Pornind Redis **
1:C 18 oct 2021 06:20:45.194 # oO0OoO0OoO0Oo Redis începe oO0OoO0OoO0Oo
1:C 18 octombrie 2021 06:20:45.194 # Versiunea Redis=6.0.9, biți=64, commit=00000000, modificat=0, pid=1, tocmai a început
1:C 18 oct 2021 06:20:45.194 # Configurație încărcată
1:M 18 oct 2021 06:20:45.197 * Mod de rulare=autonom, port=6379.
1:M 18 octombrie 2021 06:20:45.197 # Server inițializat
1:M 18 oct 2021 06:20:45.512 * Se citește preambulul RDB din fișierul AOF...
1:M 18 octombrie 2021 06:20:45.512 * Se încarcă RDB produs de versiunea 6.0.9
1:M 18 octombrie 2021 06:20:45.512 * vârsta RDB 694288 secunde
1:M 18 octombrie 2021 06:20:45.512 * Utilizarea memoriei RDB la crearea 3,97 Mb
1:M 18 oct 2021 06:20:45.512 * RDB are o coadă AOF
1:M 18 oct 2021 06:20:45.515 * Se citesc coada AOF rămasă...
1:M 18 oct 2021 06:20:45.735 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:46.641 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:47.169 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:47.569 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:47.649 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:48.151 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:48.697 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:50.452 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:51.337 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:51.479 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:51.846 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:51.847 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:52.078 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:52.247 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:54.645 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:55.877 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:56.234 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:56.400 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:56.991 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.352 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.421 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.547 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.628 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.733 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.781 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.811 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:57.958 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:58.059 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:58.160 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:58.367 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:58.475 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:58.558 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:20:59.649 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 oct 2021 06:21:00.050 # == CRITIC == Acest server trimite o eroare clientului său de încărcare AOF: „Apelurile MULTI nu pot fi imbricate” după procesarea comenzii „exec”
1:M 18 octombrie 2021 06:21:00.278 * DB încărcat din fișierul numai pentru adăugare: 15.080 secunde
1:M 18 oct 2021 06:21:00.278 * Gata să accepte conexiuni
log nfs-provisioner
I1016 09:52:48.042599 1 main.go:63] Provisioner quay.io/nfs-provisioner specificat â
I1016 09:52:48.042763 1 main.go:87] Se instalează serverul NFS! â
I1016 09:53:10.846186 1 server.go:144] pornind RLIMIT_NOFILE rlimit.Cur 1048576, rlimit.Max 1048576 â
I1016 09:53:10.846225 1 server.go:155] se încheie cu RLIMIT_NOFILE rlimit.Cur 1048576, rlimit.Max 1048576 â
I1016 09:53:10.846823 1 server.go:129] Se rulează serverul NFS!
Cred că există suficiente resurse:
descrie nodul
Spațiu de nume Nume CPU Solicită Limite CPU Solicită memorie Limite memorie Vârstă
--------- ---- ------------ ---------- ---------------- ------------- ---
cert-manager cert-manager-66b6d6bf59-hnlm7 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
cert-manager cert-manager-cainjector-856d4df858-l4fsz 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
cert-manager cert-manager-webhook-5fd7d458f7-wwq4c 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
gitlab gitlab-gitaly-0 100m (1%) 0 (0%) 200Mi (0%) 0 (0%) 84m
gitlab gitlab-gitlab-exporter-775f6f9fb-2tcwg 75m (1%) 0 (0%) 100M (0%) 0 (0%) 85m
gitlab gitlab-gitlab-pages-79bf887975-xptqx 900m (15%) 0 (0%) 2G (7%) 0 (0%) 80m
gitlab gitlab-gitlab-runner-bb6cbb7f-4vbxx 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-gitlab-shell-ccd9bfbbf-8kmzl 50m (0%) 0 (0%) 6M (0%) 0 (0%) 85m
gitlab gitlab-gitlab-shell-ccd9bfbbf-phzdf 50m (0%) 0 (0%) 6M (0%) 0 (0%) 85m
gitlab gitlab-grafana-app-5758fb55f6-j5rtb 0 (0%) 0 (0%) 0 (0%) 0 (0%) 44m
gitlab gitlab-mailroom-54c4b4769f-jj2d8 50m (0%) 0 (0%) 150M (0%) 0 (0%) 85m
gitlab gitlab-minio-f69c7f86d-lkz2m 100m (1%) 0 (0%) 128Mi (0%) 0 (0%) 7h6m
gitlab gitlab-postgresql-0 250m (4%) 0 (0%) 256Mi (1%) 0 (0%) 7h6m
gitlab gitlab-prometheus-server-6444c7bd76-62prc 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-master-0 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-slave-0 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-slave-1 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h5m
gitlab gitlab-registry-678dccc897-dfdvd 50m (0%) 0 (0%) 32Mi (0%) 0 (0%) 85m
gitlab gitlab-registry-678dccc897-lrxcw 50m (0%) 0 (0%) 32Mi (0%) 0 (0%) 85m
gitlab gitlab-sidekiq-all-in-1-v1-57479447cb-jr9gr 900m (15%) 0 (0%) 2G (7%) 0 (0%) 78m
gitlab gitlab-task-runner-899458786-2x4n2 50m (0%) 0 (0%) 350M (1%) 0 (0%) 78m
gitlab gitlab-webservice-default-96484c9f4-khxzm 400m (6%) 0 (0%) 2600M (10%) 0 (0%) 77m
gitlab gitlab-webservice-default-96484c9f4-qmblw 400m (6%) 0 (0%) 2600M (10%) 0 (0%) 78m
ingress-nginx nginx-ingress-controller-gs9dx 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d18h
kube-system coredns-685d6d555d-626km 100m (1%) 0 (0%) 70Mi (0%) 170Mi (0%) 5d21h
kube-system coredns-autoscaler-57fd5c9bd5-t7snq 20m (0%) 0 (0%) 10Mi (0%) 0 (0%) 5d21h
kube-system metrics-server-7bf4b68b78-xkbn7 100m (1%) 0 (0%) 200Mi (0%) 0 (0%) 5d21h
kube-system nfs-provisioner-6c95ddf48-xndwh 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
kube-system weave-net-dsfzf 100m (1%) 0 (0%) 0 (0%) 0 (0%) 5d21h
Resurse alocate:
(Limitele totale pot fi peste 100 la sută, adică supraangajate.)
Limitele cererilor de resurse
-------- -------- ------
CPU 3745m (62%) 0 (0%)
memorie 10785078528 (42%) 170Mi (0%)
stocare efemeră 0 (0%) 0 (0%)
hugepages-2Mi 0 (0%) 0 (0%)
Evenimente: <niciunul>
Jurnalul verbal al postgresului
postgresql 02:54:44.29
postgresql 02:54:44.29 Bun venit la containerul Bitnami postgresql
postgresql 02:54:44.29 Abonați-vă la actualizările proiectului urmărind https://github.com/bitnami/bitnami-docker-postgresql
postgresql 02:54:44.30 Trimiteți probleme și solicitări de funcții la https://github.com/bitnami/bitnami-docker-postgresql/issues
postgresql 02:54:44.33
postgresql 02:54:44.34 INFO ==> ** Se pornește configurarea PostgreSQL **
postgresql 02:54:44.37 INFO ==> Validarea setărilor în POSTGRESQL_* env vars..
postgresql 02:54:44.38 INFO ==> Se încarcă scripturi personalizate de pre-inițializare...
postgresql 02:54:44.38 INFO ==> Se încarcă fișierele personalizate ale utilizatorului din /docker-entrypoint-preinitdb.d...
postgresql 02:54:44.39 INFO ==> Se inițializează baza de date PostgreSQL...
postgresql 02:54:44.39 INFO ==> Curățarea fișierului învechit /bitnami/postgresql/data/postmaster.pid
postgresql 02:54:44.45 INFO ==> fișierul pg_hba.conf nu a fost detectat. Generandu-l...
postgresql 02:54:44.45 INFO ==> Generarea configurației locale de autentificare
postgresql 02:54:44.47 INFO ==> Se implementează PostgreSQL cu date persistente...
postgresql 02:54:44.48 INFO ==> Configurarea parametrilor de replicare
postgresql 02:54:44.54 INFO ==> Configurarea fsync
postgresql 02:54:44.57 INFO ==> Se încarcă scripturi personalizate...
postgresql 02:54:44.57 INFO ==> Activarea conexiunilor la distanță
postgresql 02:54:44.59 INFO ==> ** Configurarea PostgreSQL s-a încheiat! **
postgresql 02:54:44.64 INFO ==> ** Pornirea PostgreSQL **
2021-10-22 02:54:44.670 GMT [1[] LOG: 00000: extensia pgaudit inițializată
2021-10-22 02:54:44.670 GMT [1[] LOCATION: _PG_init, pgaudit.c:2017
2021-10-22 02:54:44.670 GMT [1[] LOG: 00000: pornește PostgreSQL 12.7 pe x86_64-pc-linux-gnu, compilat de gcc (Debian 8.3.0-6) 8.3.0, 64 de biți
2021-10-22 02:54:44.670 GMT [1[] LOCAȚIE: PostmasterMain, postmaster.c:1019
2021-10-22 02:54:44.671 GMT [1[] LOG: 00000: ascultare pe adresa IPv4 „0.0.0.0”, portul 5432
22-10-2021 02:54:44.671 GMT [1[] LOCAȚIE: StreamServerPort, pqcomm.c:590
2021-10-22 02:54:44.671 GMT [1[] LOG: 00000: ascultare pe adresa IPv6 „::”, portul 5432
22-10-2021 02:54:44.671 GMT [1[] LOCAȚIE: StreamServerPort, pqcomm.c:590
2021-10-22 02:54:44.674 GMT [1[] LOG: 00000: ascultare pe socket Unix „/tmp/.s.PGSQL.5432”
2021-10-22 02:54:44.674 GMT [1[] LOCAȚIE: StreamServerPort, pqcomm.c:584
2021-10-22 02:54:44.864 GMT [92[] LOG: 00000: sistemul de baze de date a fost întrerupt; ultima dată cunoscută la 22-10-2021 02:36:29 GMT
2021-10-22 02:54:44.864 GMT [92[] LOCAȚIE: StartupXLOG, xlog.c:6305
2021-10-22 02:54:49.253 GMT [92[] LOG: 00000: sistemul de baze de date nu a fost oprit corespunzător; recuperare automată în curs
2021-10-22 02:54:49.253 GMT [92[] LOCAȚIE: StartupXLOG, xlog.c:6808
2021-10-22 02:54:49.303 GMT [92[] LOG: 00000: refacere începe la 0/376F9D0
2021-10-22 02:54:49.303 GMT [92[] LOCAȚIE: StartupXLOG, xlog.c:7083
2021-10-22 02:54:49.304 GMT [92[] LOG: 00000: lungime de înregistrare nevalidă la 0/376FAB8: dorit 24, a primit 0
2021-10-22 02:54:49.304 GMT [92[] LOCATION: ReadRecord, xlog.c:4313
2021-10-22 02:54:49.304 GMT [92[] LOG: 00000: reface făcut la 0/376FA80
22-10-2021 02:54:49.304 GMT [92[] LOCAȚIE: StartupXLOG, xlog.c:7345
2021-10-22 02:54:49.318 GMT [1[] LOG: 00000: sistemul de baze de date este gata să accepte conexiuni
2021-10-22 02:54:49.318 GMT [1[] LOCATIE: reaper, postmaster.c:3001
redis log
useradd: Permisiune refuzată.
useradd: nu poate bloca /etc/passwd; încercați mai târziu.
chown: utilizator nevalid: „redis”
redis 11:49:42.69 INFO ==> ** Pornind Redis **
1:C 22 oct 2021 11:49:42.707 # oO0OoO0OoO0Oo Redis începe oO0OoO0OoO0Oo
1:C 22 octombrie 2021 11:49:42.707 # Versiunea Redis=6.0.9, biți=64, commit=00000000, modificat=0, pid=1, tocmai a început
1:C 22 octombrie 2021 11:49:42.707 # Configurație încărcată
1:M 22 oct 2021 11:49:42.709 * Mod de rulare=autonom, port=6379.
1:M 22 octombrie 2021 11:49:42.709 # Server inițializat
1:M 22 oct 2021 11:49:42.714 * Se citește preambulul RDB din fișierul AOF...
1:M 22 octombrie 2021 11:49:42.714 * Se încarcă RDB produs de versiunea 6.0.9
1:M 22 octombrie 2021 11:49:42.714 * vârsta RDB 6028 secunde
1:M 22 octombrie 2021 11:49:42.714 * Utilizarea memoriei RDB la crearea 3,67 Mb
1:M 22 oct 2021 11:49:42.714 * RDB are o coadă AOF
1:M 22 oct 2021 11:49:42.717 * Se citesc coada AOF rămasă...
1:M 22 octombrie 2021 11:49:42.869 # !!! Atenție: citire scurtă la încărcarea fișierului AOF !!!
1:M 22 octombrie 2021 11:49:42.869 # !!! Trunchierea AOF la offset 28641046 !!!
1:M 22 octombrie 2021 11:49:42.870 # AOF încărcat oricum deoarece aof-load-truncated este activat
1:M 22 octombrie 2021 11:49:42.870 * DB încărcat din fișierul numai pentru adăugare: 0,161 secunde
1:M 22 oct 2021 11:49:42.870 * Gata să accepte conexiuni
1:M 22 oct 2021 13:59:33.814 * Se începe rescrierea automată a AOF cu o creștere de 134%
1:M 22 octombrie 2021 13:59:33.815 * Rescrierea fișierului numai pentru adăugarea în fundal începută de pid 38407
1:M 22 oct 2021 13:59:33.843 * Copilul de rescriere AOF cere să nu mai trimită diferențe.
38407:C 22 oct 2021 13:59:33.843 * Părintele a fost de acord să nu mai trimită diferențe. Se finalizează AOF...
38407:C 22 oct 2021 13:59:33.843 * Concatenarea a 0,00 MB de diferență AOF primită de la părinte.
38407:C 22 octombrie 2021 13:59:33.844 * S-a efectuat rescrierea fișierului SYNC pentru adăugare numai
38407:C 22 octombrie 2021 13:59:33.845 * Rescriere AOF: 1 MB de memorie folosită de copiere la scriere
1:M 22 octombrie 2021 13:59:33.915 * Rescrierea AOF de fundal a fost încheiată cu succes
1:M 22 oct 2021 13:59:33.916 * Diferența părinte reziduală a fost eliminată cu succes în AOF rescris (0,00 MB)
1:M 22 oct 2021 13:59:33.917 * Rescrierea AOF de fundal a fost finalizată cu succes