nutanix@pcvm$ ncc health_checks run_all

Oder führen Sie die Prüfung pcvm_disk_usage_check separat aus.

 nutanix@pcvm$ ncc health_checks system_checks pcvm_disk_usage_check

Sie können die Prüfungen auch von der Integritätsseite der Prism-Webkonsole aus ausführen: Wählen Sie Aktionen > Prüfungen ausführen . Wählen Sie Alle Prüfungen aus und klicken Sie auf Ausführen .

Diese Prüfung wird standardmäßig alle 5 Minuten ausgeführt.

Diese Prüfung generiert nach 5 aufeinanderfolgenden Fehlern in geplanten Intervallen eine Warnung.

Beispielausgaben
Für Status: PASS

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check               [ PASS ] -------------------------------------------------------------------------------+ +---------------+ | State | Count | +---------------+ | Pass  | 1     | | Total | 1     | +---------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: WARN (auf der Datenfestplatte der Prism Central VM, z. B. /dev/sdc1)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ WARN ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Prism Central VM xxxx disk usage exceeds warning limit 75 % for disks: /dev/sdc1(/home/nutanix/data/stargate-storage/disks/NFS_2_0_283_5a853328_a7fa_45a4_b3d2_6f91cffaa653). Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Warning | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: WARN (auf Prism Central VM auf der gesamten MultiVDisk)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ WARN ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Prism Central VM xxxx overall MultiVDisk usage exceeds warning limit of 2321329924 KB. Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Warning | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: FAIL (auf der Datenfestplatte der Prism Central VM, z. B. /dev/sdc1)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ FAIL ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Prism Central VM xxxx disk usage exceeds critical limit 90 % for disks: /dev/sdc1(/home/nutanix/data/stargate-storage/disks/NFS_2_0_283_5a853328_a7fa_45a4_b3d2_6f91cffaa653). Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Fail | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: FAIL (auf Root-Partition, also /)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ FAIL ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: FAIL: PC VM root partition xxxx disk usage exceeds critical limit 95 % for disks: 97%. Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------+ | State | Count | +-----------------+ | Fail | 1 | | Total | 1 | +-----------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: WARN (auf der Home-Partition der Prism Central VM, d. h. /home)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ WARN ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Prism Central VM xxxx home partition disk usage exceeds warning limit 75 %. Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Warning | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: FAIL (auf der Home-Partition der Prism Central VM, d. h. /home)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ FAIL ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Prism Central VM xxxx home partition disk usage exceeds critical limit 90 %. Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Fail | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: WARN (auf der CMSP-Partition von Prism Central VM, d. h. /dev/sde)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ WARN ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx: WARN: Platform disk space usage in Prism Central VM xxxx exceeds 75% for disk(s): /dev/sde Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on pcvm_disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list= xxxx +-----------------------+ | State | Count | +-----------------------+ | Warning | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: FAIL (auf der CMSP-Partition von Prism Central VM, d. h. /dev/sde)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ FAIL ] -------------------------------------------------------------------------------+ Detailed information for pcvm_disk_usage_check: Node xxxx : FAIL: Platform disk space usage in Prism Central VM xxxx exceeds 90% for disk(s): /dev/sde Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on pcvm_disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list= xxxx +-----------------------+ | State | Count | +-----------------------+ | Fail | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Für Status: FAIL (auf der Upgrade-Festplattenpartition der Prism Central VM, z. B. /home/nutanix/upgrade)

 Running : health_checks system_checks pcvm_disk_usage_check [==================================================] 100% /health_checks/system_checks/pcvm_disk_usage_check [ FAIL ] -----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+Detailed information for pcvm_disk_usage_check: Node xxxx: FAIL: Prism Central VM xxxx upgrade disk usage exceeds critical limit 70 %. Refer to KB 5228 (http://portal.nutanix.com/kb/5228) for details on pcvm_disk_usage_check or Recheck with: ncc health_checks system_checks pcvm_disk_usage_check --cvm_list=xxxx +-----------------------+ | State | Count | +-----------------------+ | Fail | 1 | | Total Plugins | 1 | +-----------------------+ Plugin output written to /home/nutanix/data/logs/ncc-output-latest.log

Hinweis: Alle Befehle in diesem Artikel zur Ausführung auf dem PC setzen voraus, dass Sie sich über SSH bei der PC-VM anmelden.

 nutanix@pcvm$ df -h Filesystem Size Used Avail Use% Mounted on /dev/sdb1 9.8G 7.2G 2.2G 78% / devtmpfs 7.9G 0 7.9G 0% /dev tmpfs 7.9G 16K 7.9G 1% /dev/shm tmpfs 7.9G 428K 7.9G 1% /run tmpfs 7.9G 0 7.9G 0% /sys/fs/cgroup /dev/sdb3 40G 4.4G 35G 12% /home /dev/sdc1 493G 431G 57G 69% /home/nutanix/data/stargate-storage/disks/NFS_1_0_450_823394be_0c7b_4f18_8335_71bae1bc6c82 tmpfs 1.6G 0 1.6G 0% /run/user/1000

Die Partition für die Upgrade-Festplatte würde ungefähr wie folgt aussehen:

 /dev/sde 30G 26G 4.1G 87% /home/nutanix/upgrade

Ausgabenachrichten

Ausweis prüfen	101059
Beschreibung	Überprüfen Sie, ob die Festplattenspeichernutzung auf der Prism Central VM innerhalb der Grenzen liegt.
Ursachen des Scheiterns	Hohe Festplattenauslastung in der Prism Central VM.
Auflösungen	Weitere Einzelheiten finden Sie in KB 5228.
Auswirkungen	Der Prism Central VM steht möglicherweise nicht genügend Speicherplatz zum Speichern von Daten zur Verfügung.
Warnmeldungs-ID	A101059
Alarmtitel	Hohe Datenträgerauslastung der Prism Central VM
Warnmeldung	Die IP- Datenträgernutzung der Prism Central VM überschreitet den Warngrenzwert x % für Datenträger: Datenträger . Die gesamte MultiVDisk-Nutzung von Prism Central VM IP überschreitet den Warngrenzwert von 2321329924 KB Die IP- Datenträgernutzung der Prism Central VM überschreitet den kritischen Grenzwert von x % für Datenträger: Datenträger .

Ausweis prüfen	200316
Beschreibung	Überprüft, ob die Nutzung der Root-Partition des Prism Central-Systems innerhalb des Grenzwertes liegt, um einen unterbrechungsfreien Betrieb sicherzustellen.
Ursachen des Scheiterns	Erhöhte Nutzung der Root-Partition des Prism Central VM-Systems aufgrund übermäßiger Protokollierung oder unvollständiger Wartungsvorgänge.
Auflösungen	Reduzieren Sie die Nutzung der Stammpartition des Prism Central VM-Systems, indem Sie alle bekannten temporären oder nicht benötigten Dateien entfernen. Weitere Einzelheiten finden Sie in KB 5228.
Auswirkungen	Wenn die Stammpartition des Prism Central VM-Systems stark ausgelastet ist, können bestimmte Wartungsvorgänge, wie z. B. Upgrades, beeinträchtigt werden. Wenn die Stammpartition des Prism Central VM-Systems zu 100 % ausgelastet ist, können Dienste angehalten werden und die Clusterverwaltungsfunktionen von Prism Central beeinträchtigen.
Warnmeldungs-ID	A200316
Alarmtitel	Hohe Speicherplatznutzung der Root-Partition des Prism Central VM-Systems
Warnmeldung	Die Festplattenspeichernutzung für den Mount_Pfad der Root-Partition auf der Entität „ IP_Adresse“ hat den Schwellenwert % überschritten.

Ausweis prüfen	200317
Beschreibung	Überprüft, ob die Nutzung der Prism Central-Home-Partition innerhalb des Grenzwertes liegt, um einen unterbrechungsfreien Betrieb sicherzustellen.
Ursachen des Scheiterns	Erhöhte Nutzung der Home-Partition von Prism Central VM aufgrund übermäßiger Protokollierung oder unvollständiger Wartungsvorgänge.
Auflösungen	Reduzieren Sie die Nutzung der Home-Partition von Prism Central VM, indem Sie alle bekannten temporären oder nicht benötigten Dateien entfernen. Weitere Einzelheiten finden Sie in KB 5228.
Auswirkungen	Wenn die Home-Partition der Prism Central VM stark ausgelastet ist, können bestimmte Wartungsvorgänge, wie z. B. Upgrades, beeinträchtigt werden. Wenn die Home-Partition der Prism Central VM zu 100 % ausgelastet ist, können Dienste gestoppt werden und die Verfügbarkeit des Cluster-Speichers beeinträchtigen.
Warnmeldungs-ID	A200317
Alarmtitel	Hohe Festplattennutzung der Home-Partition von Prism Central VM
Warnmeldung	Die Datenträgernutzung der IP- Home-Partition von Prism Central VM überschreitet den Warngrenzwert x %. Die Festplattennutzung der IP- Home-Partition von Prism Central VM überschreitet den kritischen Grenzwert von x %.

Ausweis prüfen	200328
Beschreibung	Überprüfen Sie, ob die Festplattennutzung der Plattform auf der Prism Central VM innerhalb der Grenzen liegt.
Ursachen des Scheiterns	Hohe Festplattenauslastung in der Prism Central VM.
Auflösungen	Weitere Einzelheiten finden Sie in KB 5228.
Auswirkungen	Der Prism Central VM steht möglicherweise nicht genügend Speicherplatz zum Speichern von Daten zur Verfügung.
Warnmeldungs-ID	A200328
Alarmtitel	Hohe Festplattenspeichernutzung der Prism Central VM-Plattform
Intelligenter Titel für Warnmeldungen	Hohe Festplattenspeichernutzung der Prism Central VM svm_ip -Plattform
Warnmeldung	Die Festplattenspeichernutzung der Plattform in Prism Central VM svm_ip überschreitet percentage_exceed % für Festplatte(n): disk_paths .

Ausweis prüfen	200334
Beschreibung	Überprüft, ob die Festplattennutzung beim Prism Central-Upgrade innerhalb des Grenzwertes liegt, um einen unterbrechungsfreien Upgrade-Vorgang sicherzustellen.
Ursachen des Scheiterns	Erhöhte Datenträgernutzung beim Upgrade von Prism Central VM aufgrund des Vorhandenseins mehrerer Prism Central Installer-Dateien
Auflösungen	Reduzieren Sie die Nutzung der Prism Central VM-Upgradepartition, indem Sie nicht benötigte Prism Central Installer-Dateien entfernen. Weitere Einzelheiten finden Sie in KB 5228.
Auswirkungen	Wenn die Upgrade-Festplatte der Prism Central-VM stark ausgelastet ist, schlägt das Prism Central-Upgrade aufgrund von Speicherplatzmangel auf der Upgrade-Festplatte fehl.
Warnmeldungs-ID	A200334
Alarmtitel	Datenträgernutzung beim Upgrade von Prism Central VM
Warnmeldung	Die Datenträgernutzung für das Upgrade von Prism Central VM <IP> überschreitet den kritischen Grenzwert von x %

Szenario 1
Das /home- Verzeichnis auf PC-Instanzen mit langer Laufzeit könnte seine maximale Größe fast erreichen, da älterer Prism-Code nicht bereinigt wird:

 nutanix@pcvm$ cat ~/config/upgrade.history Thu, 17 Dec 2020 08:51:43 el7.3-release-euphrates-5.19-stable-b2ab98294375c3f24f4d813b83ffcb43d85ebcc1 Tue, 19 Jan 2021 11:53:43 el7.3-release-euphrates-5.19-stable-aadf03fd084cb00f0414f84549b7ebbe9691a984 Wed, 24 Feb 2021 08:53:13 el7.3-release-euphrates-5.19-stable-ddf5fcc232b693ae965280668b10d0337ce99281 Mon, 19 Apr 2021 07:03:39 el7.3-release-euphrates-5.19-stable-6d6cec7de63c8fd117eeb59162031d03c2faf548 Mon, 26 Apr 2021 07:00:07 el7.3-release-euphrates-5.19-stable-3927829dad6a930e67f2f4a47e752df5a8f6c64d Tue, 01 Jun 2021 10:15:14 el7.3-release-euphrates-5.19-stable-db974bded2c0cd1037288ca7aa9aef6f5e441222 Mon, 14 Jun 2021 09:47:29 el7.3-release-fraser-6.0-stable-a48467616ee7c603e3cee3174779cf24bea227cb Thu, 01 Jul 2021 11:52:24 el7.3-release-fraser-6.0-stable-0601c1f41bad35bf4afe05da443947d34927c6ae Thu, 05 Aug 2021 09:16:28 el7.3-release-fraser-6.0-stable-b9dbe4a0b0876cffa23d268d8ddc7f272fa4a166 Wed, 01 Sep 2021 07:44:46 el7.3-release-fraser-6.0-stable-f948d198de58b1b1e511431dbef0b34d20c82739 nutanix@pcvm$ sudo du -sh /home/apache/ www /console/el7.3-release-* 304M el7.3-release-euphrates-5.18.1.1-stable-4546d2908cb8495b316deb45de63b7f5e52541a1 541M el7.3-release-euphrates-5.18.1.2-stable-b1b096696c0c034570545912a00d39746e901f36 675M el7.3-release-euphrates-5.19.1.5-stable-0f9e00f661436fef1af18a094089744f34ccd8c0 1.1G el7.3-release-euphrates-5.19.1.6-stable-a1bbd4f054f86b9d445bf2153b93c5d8d920cff7 629M el7.3-release-euphrates-5.19.1-stable-6edca74801c9db2ff2003780084bb12aa6aa29f4 694M el7.3-release-euphrates-5.19.2-stable-8e7da6324cbe5c34564ec51615b10a7737c6782a 1.1G el7.3-release-euphrates-5.19-stable-5282152e02f3ede70f0957217a62dc436c60b454 329M el7.3-release-euphrates-5.20.1.1-stable-726ea8f7dc4bca156d3e3f63cd7982eecb70c8cb 2.1G el7.3-release-fraser-6.0.1.1-stable-d9f94c47b63e3eb4179dd7a6e16202d5856581a6

Das Problem wurde in den Versionen pc.2022.1, pc.2022.4, pc.2021.9.0.5 und höher behoben. Weitere Einzelheiten und die Problemumgehung finden Sie im entsprechenden Lösungsabschnitt.

Entfernen älterer Sysstats-Protokolle
Wenn Sie alle üblichen Stellen überprüft haben, aber dennoch Speicherplatz freigeben müssen, können Sie die Erlaubnis des Kunden einholen, ältere Sysstats-Protokolle zu entfernen. Überprüfen Sie vor dem Fortfahren noch einmal, dass keine offenen Supportfälle mit ausstehenden RCAs vorhanden sind, da diese Daten möglicherweise noch nicht erfasst wurden.

 nutanix@pcvm:~$ sudo du -h -d 1 /home/nutanix/data/logs | sort -h 4.0K    /home/nutanix/data/logs/ecr 28K     /home/nutanix/data/logs/work 5.5M    /home/nutanix/data/logs/kafka 127M    /home/nutanix/data/logs/cassandra 162M    /home/nutanix/data/logs/data_providers 368M    /home/nutanix/data/logs/ikat_access_logs 4.2G    /home/nutanix/data/logs/sysstats 11G     /home/nutanix/data/logs nutanix@pcvm:~$

Szenario 2
Hyperkube-Protokolle (Kublet-Protokolle) werden nach der Aktivierung von CMSP/Microservices auf Prism Central nicht bereinigt.

Wenn Cluster Maintenance Utilities (CMU) mithilfe von LCM auf Version 2.0.3 aktualisiert wurde, fehlt der enthaltenen Scavenger-Version die Möglichkeit, bestimmte Protokolle im Zusammenhang mit CMSP-Mikrodiensten zu bereinigen. Aufgrund dieses Problems stellen Benutzer möglicherweise fest, dass Prism Central-Dienste nicht gestartet werden oder dass sie sich nicht bei der PC-Benutzeroberfläche anmelden können. Dieses Problem füllt zuerst das Verzeichnis /home/nutanix/data/sys-storage/NFS_.../ , danach beginnen die Kubelet-Protokolle, die Stammpartition im Ordner /tmp zu füllen.

 nutanix@pcvm$ df -h Filesystem Size Used Avail Use% Mounted on devtmpfs 34G 0 34G 0% /dev tmpfs 34G 52K 34G 1% /dev/shm tmpfs 34G 3.4M 34G 1% /run tmpfs 34G 0 34G 0% /sys/fs/cgroup /dev/sdb2 9.8G 9.8G 0G 100% / /dev/sdb3 50G 33G 16G 68% /home tmpfs 6.7G 0 6.7G 0% /run/user/1000 /dev/sdf1 2.5T 21G 2.4T 1% /home/nutanix/data/stargate-storage/disks/NFS_6708977956_4f2835fa_ab29_41c5_9110_483bff268ca0 /dev/sdg1 2.5T 13G 2.4T 1% /home/nutanix/data/stargate-storage/disks/NFS_6708977958_10aa3f76_65a5_4fa6_8c88_7c70a4504f29 /dev/sde1 2.5T 20G 2.4T 1% /home/nutanix/data/stargate-storage/disks/NFS_6708977954_df3a5816_b14b_4098_9b58_d90d670781a1 /dev/sdc1 2.5T 12G 2.4T 1% /home/nutanix/data/stargate-storage/disks/NFS_6708977948_1bd3cd0d_de69_4a98_a18d_6049945e261b /dev/sdd 98G 88G 5.4G 100% /home/nutanix/data/kafka/disks/NFS_6708977950_cd98c6f5_c534_486a_a939_4f40bffd986c

Möglicherweise werden hyperkube.ntnx *-Protokolle generiert und nicht korrekt rotiert, wenn CMSP aktiviert ist. Überprüfen Sie, ob das Verzeichnis /home/nutanix/data/sys-storage/NFS.../kubelet/ übermäßig mit diesen Protokollen gefüllt ist.

 nutanix@pcvm:~$ du -hsx /home/nutanix/data/sys-storage/NFS*/kubelet/ 97.0G /home/nutanix/data/sys-storage/NFS_6708977950_cd98c6f5_c534_486a_a939_4f40bffd986c/kubelet/ nutanix@pcvm:~$ ls -l /home/nutanix/data/sys-storage/NFS_4_0_7036_6578653c_8a38_4af8_9649_42e7939f3656/kubelet/kubelet* | wc -l 98

Wenn es wie vorgesehen funktioniert, sollten in diesem Kubelet-Ordner weniger als 10 G belegt sein und die Dateianzahl für Kubelet* sollte weniger als ~15 betragen.

Möglicherweise sehen wir außerdem, dass ähnliche Kubelet-Protokolle den Speicherplatz in /tmp belegen, nachdem der Speicherplatz im Verzeichnis /home/nutanix/data/sys-storage/NFS... erschöpft ist.

 nutanix@pcvm:~$ sudo du -hsx /tmp 2.8G /tmp nutanix@pcvm:~/tmp$ sudo ls -larth /tmp/ total 2.8G ***truncated*** -rw-r--r--. 1 root root 109K Jun 23 05:49 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230623-054920.15123 -rw-r--r--. 1 root root 1.4K Jun 23 05:50 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230623-055012.17214 -rw-r--r--. 1 root root 114K Jun 23 05:50 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230623-055011.17214 -rw-r--r--. 1 root root 1.4K Jun 23 05:50 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230623-055038.18217 -rw-r--r--. 1 root root 114K Jun 23 05:50 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230623-055038.18217 -rw-r--r--. 1 root root 109K Jun 23 05:51 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230623-055106.19499 -rw-r--r--. 1 root root 1.8G Jun 24 03:20 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230623-055151.21218 -rw-r--r--. 1 root root 60K Jun 24 15:06 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.ERROR.20230623-055155.21218 -rw-r--r--. 1 root root 5.8M Jun 24 15:10 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230623-055152.21218 -rw-r--r--. 1 root root 990M Jun 24 15:10 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230624-032057.21218 -rw-r--r--. 1 root root 103K Jun 24 23:59 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230624-235940.170513 -rw-r--r--. 1 root root 3.3K Jun 25 00:01 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.ERROR.20230625-000123.175052 -rw-r--r--. 1 root root 6.7K Jun 25 00:01 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230625-000120.175052 -rw-r--r--. 1 root root 2.8M Jun 25 00:01 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230625-000120.175052 lrwxrwxrwx. 1 root root 67 Jun 25 04:01 kubelet.INFO -> kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230625-040145.21556 lrwxrwxrwx. 1 root root 70 Jun 25 04:01 kubelet.WARNING -> kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230625-040145.21556 lrwxrwxrwx. 1 root root 68 Jun 25 04:01 kubelet.ERROR -> kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.ERROR.20230625-040148.21556 -rw-r--r--. 1 root root 25K Jun 25 04:02 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.ERROR.20230625-040148.21556 -rw-r--r--. 1 root root 38K Jun 25 04:04 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.WARNING.20230625-040145.21556 -rw-r--r--. 1 root root 6.0M Jun 25 04:04 kubelet.ntnx-ww-xx-yy-zz-a-pcvm.root.log.INFO.20230625-040145.21556 -rw-------. 1 nutanix nutanix 0 Jun 26 08:37 .nstat.u1000 -rw-r-----. 1 nutanix nutanix 0 Jun 26 08:38 lcm_metrics_uploader_lock -rw-------. 1 nutanix nutanix 0 Jun 26 08:43 lazan_pc_greenlet_stack_dump -rw-------. 1 nutanix nutanix 0 Jun 26 08:43 uhura_greenlet_stack_dump drwxr-xr-x. 19 root root 4.0K Jun 26 08:44 .. drwx------. 2 nutanix nutanix 4.0K Jun 26 09:24 hsperfdata_nutanix drwxrwxrwt. 14 root root 4.0K Jun 26 09:35 .

Szenario 3
Ab PC.2022.6 wird eine dedizierte 30 GB-Festplatte für PC-Upgrades erstellt und bereitgestellt. Diese Vdisk wird zum Herunterladen und Extrahieren von Upgrade-Binärdateien aus aufeinanderfolgenden Upgrades verwendet. Wenn die Upgrade-Festplatte der Prism Central VM stark ausgelastet ist, schlägt das Prism Central-Upgrade aufgrund von Speicherplatzmangel auf der Upgrade-Festplatte fehl.

 nutanix@NTNX-PCVM:$ df -h Filesystem Size Used Avail Use% Mounted on devtmpfs 13G 0 13G 0% /dev tmpfs 13G 40K 13G 1% /dev/shm tmpfs 13G 2.6M 13G 1% /run tmpfs 13G 0 13G 0% /sys/fs/cgroup /dev/sdb1 9.8G 7.2G 2.5G 75% / /dev/sdb3 50G 14G 36G 28% /home /dev/sde 30G 26G 4.1G 87% /home/nutanix/upgrade /dev/sdc1 492G 147M 486G 1% /home/nutanix/data/stargate-storage/disks/NFS_2_0_271_960db4d2_45e7_4ef7_92bd_bdcd7e0b6aaf tmpfs 2.6G 0 2.6G 0% /run/user/1000

Hinweis : Falls auf Prism Central mehrere Dienste aktiviert sind, wie z. B. MSP, Karbon, Calm, Flow und Objects, ist die /home-Nutzung hoch, da jeder der Dienste mehrere Protokolle und Konfigurationsdateien generiert. Die Ingenieure von Nutanix arbeiten ständig daran, die /home-Nutzung zu verbessern. Wenn keines der oben genannten Szenarien zutrifft und dies das Upgrade von Prism Central beeinträchtigt, wenden Sie sich an das Nutanix-Supportteam, um bei der manuellen Bereinigung von /home durch Kürzen der Protokolle zu helfen.

Szenario 4
Aufgrund des Problems mit der Protokolldateirotation ist die Nutzung des Adonis-Protokollverzeichnisses hoch. Diese Protokollverzeichnisnutzung sollte nicht über 1 GB liegen. Überprüfen Sie bei Scale-Out-Prism Central-Bereitstellungen die Dateinutzung auf jeder der Prism Central-VMs:

 nutanix@pcvm:~/data/logs$ sudo du -h /home/nutanix/adonis/logs 6.1G /home/nutanix/adonis/logs/access 19G /home/nutanix

Szenario 5
In bestimmten Fällen kann catalina.out viel Speicherplatz auf der Prism Central VM beanspruchen.

Stellen Sie per SSH eine Verbindung zu Prism Central her und prüfen Sie, ob /home/nutanix/data/logs/catalina.out sehr viel Speicherplatz verbraucht:

 nutanix@PCVM:~$ allssh du -h /home/nutanix/data/logs/catalina.out

Szenario 6
Bei PC 2022.9 und höher führt eine hohe Inode-Nutzung in der PCVM zu einer hohen Nutzung der Root-Partition

Stellen Sie per SSH eine Verbindung zur Prism-Zentrale her und führen Sie die folgenden Befehle aus, um die Inode-Nutzung zu überprüfen:

 nutanix@PCVM:~$ allssh df -i /

 nutanix@pcvm$ df -h Filesystem Size Used Avail Use% Mounted on devtmpfs 7.9G 0 7.9G 0% /dev tmpfs 7.9G 44K 7.9G 1% /dev/shm tmpfs 7.9G 6.1M 7.9G 1% /run tmpfs 7.9G 0 7.9G 0% /sys/fs/cgroup /dev/sdb1 9.8G 7.4G 2.3G 77% / /dev/sdb3 50G 8.5G 41G 18% /home /dev/sdc1 492G 150M 486G 1% /home/nutanix/data/stargate-storage/disks/NFS_2_0_267_5a298323_3c9f_4a6f_a265_10c4c1e6593e tmpfs 1.6G 0 1.6G 0% /run/user/1000 /dev/sde 98G 401M 93G 1% /home/nutanix/data/sys-storage/NFS_1_0_264_1f5cda9a_2b3f_4f49_b348_baeb0ae338b8 tmpfs 1.6G 0 1.6G 0% /run/user/0

 nutanix@pcvm$ allssh df -h nutanix@pcvm$ ncc health_checks system_checks pcvm_disk_usage_check

 nutanix@pcvm$ allssh df -h nutanix@pcvm$ sudo du -h --max-depth=1 / 2>/dev/null nutanix@pcvm$ ncc health_checks system_checks pcvm_disk_usage_check

Das Problem wurde in den Versionen pc.2022.1, pc.2022.4, pc.2021.9.0.5 und höher behoben.
Um das Problem zu umgehen, entfernen Sie die Verzeichnisse, in denen keine Cluster mit der entsprechenden Version registriert sind.

1. Suchen Sie die AOS-Versionen aller registrierten PEs. Dies können Sie in Prism Central > Hardware > Cluster > Spalte AOS-Version tun.
2. Listen Sie die PE-Apache-Konsolenverzeichnisse unter /home/apache/ www /console/ auf.

 nutanix@pcvm$ sudo ls -lrth /home/apache/ www /console/el7.3-release-*

3. Wenn PE-Apache-Konsolenverzeichnisse vorhanden sind, die nicht den registrierten PE-Versionen entsprechen, können diese problemlos bereinigt werden.

Wenn Sie weitere Unterstützung bei der Bereinigung benötigen, wenden Sie sich an den Nutanix-Support . Sammeln Sie die Ausgabe der folgenden Befehle und hängen Sie sie an den Supportfall an:

 nutanix@pcvm$ ncli cluster info nutanix@pcvm$ allssh df -h nutanix@pcvm$ sudo du -h --max-depth=1 /home/apache/ www 2>/dev/null nutanix@pcvm$ cat ~/config/upgrade.history nutanix@pcvm$ ls -lrth /home/apache/ www /console/el7.3-release-* nutanix@pcvm$ du -sh /home/apache/ www /console/el7.3-release-*

Entfernen älterer Sysstats-Protokolle
Wenn Sie an allen üblichen Stellen nachgesehen haben, aber dennoch Speicherplatz freigeben müssen, können Sie die Erlaubnis des Kunden einholen, ältere Sysstats-Protokolle zu entfernen. Überprüfen Sie vor dem Fortfahren noch einmal, dass keine offenen Supportfälle mit ausstehenden RCAs vorhanden sind, da diese Daten möglicherweise noch nicht erfasst wurden.

 nutanix@PCVM:~$ sudo du -h -d 1 /home/nutanix/data/logs | sort -h 4.0K    /home/nutanix/data/logs/ecr 28K     /home/nutanix/data/logs/work 5.5M    /home/nutanix/data/logs/kafka 127M    /home/nutanix/data/logs/cassandra 162M    /home/nutanix/data/logs/data_providers 368M    /home/nutanix/data/logs/ikat_access_logs 4.2G    /home/nutanix/data/logs/sysstats 11G     /home/nutanix/data/logs nutanix@PCVM:~$

Mit dem folgenden Befehl können Sie gzippte Sysstats-Protokolle entfernen, die älter als ein bestimmtes Datum sind. Im folgenden Beispiel entfernen Sie Sysstats-Protokolle von allen PCVMs, die älter als 3 Tage (oder 4320 Minuten) sind.

 nutanix@PCVM:~$ allssh "find ~/data/logs/sysstats -name '*.gz' -mmin +4320 -type f -exec rm '{}' +"

Der Anstieg der Datenträgernutzung für das Upgrade von Prism Central VM ist auf mehrere Prism Central Installer-Dateien zurückzuführen. Reduzieren Sie die Nutzung der Prism Central VM-Upgradepartition, indem Sie die nicht benötigten Prism Central Installer-Dateien entfernen.
Diese Partition /home/nutanix/upgrade dient zur Aufnahme von Upgrade-bezogenen Dateien. Daher können alle anderen Dateien in diesem Verzeichnis gelöscht werden.

Die Partitionsverwendung wie in df -h aufgeführt:

 /dev/sde 30G 26G 4.1G 87%/home/nutanix/upgrade

So überprüfen Sie den Inhalt der Festplatte:

 allssh "ls -latr /home/nutanix/upgrade/"

Um die unerwünschten Dateien zu entfernen, verwenden Sie den folgenden Befehl:

 rm -f /home/nutanix/upgrade/<file_to_be_removed>

Bitte beachten Sie: Wenn Sie das Prism Central-Upgrade in diesem Ordner versehentlich löschen, melden Sie sich über einen Webbrowser bei Prism Central an, gehen Sie zu Prism Central-Einstellungen --> Prism Central aktualisieren --> Klicken Sie auf das „X“ neben dem Software-Upgrade und laden Sie das Paket erneut herunter.

 nutanix@PCVM:~$ genesis stop prism; cluster start

In einigen seltenen Fällen wird in der Datei catalina.out nicht automatisch Speicherplatz freigegeben, nachdem der Prism Leader übergelaufen ist. Um dies zu beheben, löschen Sie die Protokolldatei catalina.out manuell, nachdem der Prism Leader übergelaufen ist:

 nutanix@PCVM:~$ echo "" > ~/data/logs/catalina.out

Führen Sie diese Änderung bei PCVMs mit einer einzelnen Instanz durch, während der Prism-Dienst gestoppt ist, und führen Sie dann einen Clusterstart aus.