sudo stalls, no kill -9 works, firefox stops working

[scooter010]

Hey,

ich habe in meiner pop os Büchse ein merkwürdiges Verhalten festgestellt, welches ich nicht nachvollziehen kann.

Ich habe es derzeit reproduzierbar, dass nach einigen Minuten (15-50) folgender Effekt auftritt, wenn ich in Firefox ein Video schaue und parallel dazu VMware Workstation laufen habe. Es passierte aber auch schon ohne vmware:

Die Videowiedergabe in Firefox läuft bis zum Ende des aktuellen Videos, das Starten des nächsten Videos scheitert. Der Fehler tritt also während des bereits laufenden Videos auf.
Es ist mir dann nicht mehr möglich:

1. Firefox per gui oder per kill -9 zu beenden oder eine Webseite zu öffnen
2. Eine Weitere Instanz von Firefox kann nicht gestartet werden
3. sudo Befehl blockiert das entsprechende Terminal, da keine Passwortabfrage erfolgt, strg+c aber den Befehl nicht abbrechen lässt. Auch nach 10 Minuten keine Besserung.
4. Manche Anwendungen (z.B. VIM) lassen sich noch starten
5. Das Wechseln in eine andere tty klappt, aber auch dort komme ich mangels funktionierendem sudo nicht in eine root-shell. Auch dauert der login dort mehrere Sekunden.
6. Das neu starten von gdm klappt, dauert aber ewig und löst das Problem nicht. Die Reste der alten gnome-session (z.B. firefox prozess) bleiben aber erhalten
7. Das System lässt sich nicht herunterfahren. Es bleibt an einem Punkt nach dem beenden der GUI hängen, wo ein wechsel in eine andere tty nicht (mehr) möglich ist.

Ich hätte gerne dmesg ran gehangen, aber mehr als 100.000 Zeichen sind nicht erlaubt @Steffen und Anlagen, welche keine Bilder sind, ebenfalls nicht.
Folgende Meldung kommt jedoch alle paar ~5 Minuten, nachdem das Phänomen auftrat:

[ 1529.700888] rcu: INFO: rcu:preempt detected stalls on CPU/tasks: { 5-...0 } 287676 jiffies s: 733 root: 0x20/.
[ 1529.701021] rcu: blocking rcu_node structures (internal RCU debug)

Hier varieeren die Teile, welche Werte/Variablen zu sein scheinen immer. Leider hat google mir nicht sehr konkret geholfen. Kernel(-modul)-Fehler, Hardwarefehler, Treiberfehler... Irgendetwas, was den Kernel bzw. Teile von ihm in eine Endlosschleife schickt, ohne dass eine Bedingung zum Verlassen dieser Schleife vorhanden ist. CPU-Auslastung ist während des Problems aber nicht erhöht, auch der Lüfter dreht nicht hoch (für den Fall, dass durch den kernel verursachte Auslastung nicht in htop sichtbar sein sollte).

Hat jemand eine Idee, wie ich den Fehler eingrenzen kann? Ansonsten bleibt nur noch der Windows-Weg: Neu aufsetzen...

 

[NameHere]

Hat jemand eine Idee, wie ich den Fehler eingrenzen kann? Ansonsten bleibt nur noch der Windows-Weg: Neu aufsetzen...

Warum nicht erst mal Firefox ein neues Profil erstellen oder neu installieren!?
Ein andern Kernel kann man auch probieren.

 

[madmax2010]

im pop os git Scheint jemand ein ähnliches Problem zu haben.
hat aber einfach einen älteren Kernel installier..
welchen scheduler nutzt du?

 

[scooter010]

Warum nicht erst mal Firefox ein neues Profil erstellen oder neu installieren!?

Wenn das Haus brennt, prüfe ich nicht zu erst, ob die Fenster vielleicht undicht sind.

welchen scheduler nutzt du?

Den pop os standardmäßig ausliefert. Mit Schedulern habe ich mich bisher nur so weit beschäftigt, dass ich theoretisch weiß, dass es unterschiedliche gibt und wie sie grob funktionieren. Praktisch habe ich noch nie einen selbst gewechselt.

Ich denke, es liegt doch an vmware workstation. Diesmal habe ich eine root-shell geöffnet, bevor ich vmware startete. Anbei der Output ab da, wo cih vmware starte. VMware tötet einfach den Kernel.

Spoiler: dmesg

[  203.620572] /dev/vmmon[6519]: PTSC: initialized at 2592003000 Hz using TSC, TSCs are synchronized.
[  203.709150] /dev/vmmon[6519]: Monitor IPI vector: 0
[  203.709154] /dev/vmmon[6519]: HV      IPI vector: 0
[  203.713038] ------------[ cut here ]------------
[  203.713041] WARNING: CPU: 1 PID: 6519 at kernel/rcu/tree_plugin.h:734 rcu_sched_clock_irq+0x4ad/0x4c0
[  203.713047] Modules linked in: tls vmnet(OE) vmw_vsock_vmci_transport vsock nft_masq vmw_vmci vmmon(OE) rfcomm snd_seq_dummy snd_hrtimer xt_CHECKSUM xt_MASQUERADE xt_conntrack ipt_REJECT nf_reject_ipv4 cmac algif_hash algif_skcipher af_alg xt_tcpudp nft_compat nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables nfnetlink bridge stp llc bnep zstd zram binfmt_misc zfs(POE) spl(OE) nvidia_uvm(POE) btusb uvcvideo btrtl btintel videobuf2_vmalloc uvc btbcm videobuf2_memops videobuf2_v4l2 btmtk snd_usb_audio videodev bluetooth snd_usbmidi_lib videobuf2_common snd_ump ecdh_generic mc ecc snd_sof_pci_intel_cnl snd_sof_intel_hda_common soundwire_intel snd_sof_intel_hda_mlink soundwire_cadence snd_sof_intel_hda snd_sof_pci snd_sof_xtensa_dsp snd_sof snd_sof_utils snd_soc_hdac_hda snd_hda_ext_core snd_soc_acpi_intel_match snd_soc_acpi soundwire_generic_allocation soundwire_bus snd_hda_codec_realtek snd_hda_codec_generic snd_soc_core iwlmvm snd_compress nvidia_drm(POE) ac97_bus intel_rapl_msr
[  203.713145]  snd_pcm_dmaengine nvidia_modeset(POE) snd_hda_codec_hdmi intel_rapl_common intel_tcc_cooling snd_hda_intel snd_intel_dspcfg snd_intel_sdw_acpi mac80211 snd_hda_codec x86_pkg_temp_thermal intel_powerclamp snd_hda_core coretemp libarc4 snd_hwdep snd_pcm nvidia(POE) kvm_intel snd_seq_midi nls_iso8859_1 mei_hdcp mei_pxp bfq iwlwifi snd_seq_midi_event kvm joydev asus_wmi cmdlinepart snd_rawmidi irqbypass cfg80211 ledtrig_audio spi_nor snd_seq rapl input_leds platform_profile qc71_laptop(OE) sparse_keymap mtd serio_raw snd_seq_device intel_wmi_thunderbolt mei_me snd_timer intel_cstate 8250_dw ee1004 wmi_bmof mxm_wmi mei hid_multitouch snd soundcore intel_pch_thermal acpi_pad mac_hid acpi_tad sch_fq_codel kyber_iosched nls_utf8 cifs cifs_arc4 nls_ucs2_utils cifs_md4 fscache netfs msr parport_pc ppdev lp parport efi_pstore ip_tables x_tables autofs4 dm_crypt raid10 raid456 async_raid6_recov async_memcpy async_pq async_xor async_tx xor raid6_pq libcrc32c raid1 raid0 multipath linear system76_io(OE)
[  203.713202]  system76_acpi(OE) uas usb_storage i915 drm_buddy i2c_algo_bit crct10dif_pclmul ttm crc32_pclmul polyval_clmulni polyval_generic drm_display_helper hid_generic ghash_clmulni_intel usbhid cec sha256_ssse3 i2c_hid_acpi rc_core i2c_hid sha1_ssse3 drm_kms_helper hid aesni_intel r8169 nvme intel_lpss_pci spi_intel_pci nvme_core i2c_i801 crypto_simd cryptd psmouse spi_intel i2c_smbus thunderbolt realtek nvme_common ahci intel_lpss xhci_pci idma64 libahci xhci_pci_renesas drm video wmi pinctrl_cannonlake
[  203.713231] CPU: 1 PID: 6519 Comm: vmware-vmx Tainted: P           OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  203.713233] Hardware name: SchenkerTechnologiesGmbH XMG FUSION 15 (XFU15L19)/LAPQC71B, BIOS QCCFL357.0150.2022.0523.1145 05/23/2022
[  203.713235] RIP: 0010:rcu_sched_clock_irq+0x4ad/0x4c0
[  203.713237] Code: 04 25 80 2b 03 00 f0 80 08 08 65 81 25 70 19 e6 70 ff ff ff 7f e9 aa fe ff ff 8b 87 38 08 00 00 85 c0 0f 84 27 fc ff ff eb 85 <0f> 0b e9 f1 fb ff ff 66 66 2e 0f 1f 84 00 00 00 00 00 90 90 90 90
[  203.713239] RSP: 0018:ffffc900001a0e50 EFLAGS: 00010082
[  203.713241] RAX: ffff888121099a00 RBX: 0000000000000000 RCX: 0000000000000000
[  203.713242] RDX: 00000000ffffffd0 RSI: ffffffff9096f2d5 RDI: ffff888121099a00
[  203.713243] RBP: ffffc900001a0e80 R08: 0000000000000000 R09: 0000000000000000
[  203.713244] R10: 0000000000000000 R11: 0000000000000000 R12: 0000000000000000
[  203.713245] R13: ffff88889d8a3ce0 R14: ffffc9000953b998 R15: ffff88889d8a37c0
[  203.713246] FS:  00007479c4c61c00(0000) GS:ffff88889d880000(0000) knlGS:0000000000000000
[  203.713248] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
[  203.713249] CR2: 00007479c157f000 CR3: 00000001185d8003 CR4: 00000000003706e0
[  203.713250] Call Trace:
[  203.713252]  <IRQ>
[  203.713254]  ? show_regs+0x6d/0x80
[  203.713257]  ? __warn+0x89/0x160
[  203.713259]  ? rcu_sched_clock_irq+0x4ad/0x4c0
[  203.713261]  ? report_bug+0x17e/0x1b0
[  203.713265]  ? handle_bug+0x46/0x90
[  203.713267]  ? exc_invalid_op+0x18/0x80
[  203.713269]  ? asm_exc_invalid_op+0x1b/0x20
[  203.713273]  ? rcu_sched_clock_irq+0x4ad/0x4c0
[  203.713275]  update_process_times+0x76/0xb0
[  203.713278]  tick_sched_handle+0x28/0x70
[  203.713280]  tick_sched_timer+0x78/0xa0
[  203.713282]  ? __pfx_tick_sched_timer+0x10/0x10
[  203.713284]  __hrtimer_run_queues+0x10f/0x2a0
[  203.713287]  hrtimer_interrupt+0xf6/0x250
[  203.713289]  __sysvec_apic_timer_interrupt+0x4e/0x150
[  203.713292]  sysvec_apic_timer_interrupt+0x8d/0xd0
[  203.713294]  </IRQ>
[  203.713295]  <TASK>
[  203.713296]  asm_sysvec_apic_timer_interrupt+0x1b/0x20
[  203.713298] RIP: 0010:do_user_addr_fault+0x280/0x6b0
[  203.713300] Code: c3 cc cc cc cc 9c 58 0f 1f 40 00 f6 c4 02 0f 84 ef fd ff ff e9 0c fe ff ff 41 f6 84 24 91 00 00 00 02 74 06 fb 0f 1f 44 00 00 <41> be 14 02 00 00 e9 56 fe ff ff 4c 89 e9 4c 89 e2 be 01 00 00 00
[  203.713301] RSP: 0018:ffffc9000953ba40 EFLAGS: 00000202
[  203.713302] RAX: 0000000080000000 RBX: 0000000000000002 RCX: ffffffff90201217
[  203.713303] RDX: 00007479c157f000 RSI: 0000000000000002 RDI: ffffc9000953bab8
[  203.713304] RBP: ffffc9000953ba78 R08: 0000000000000000 R09: 0000000000000000
[  203.713305] R10: 0000000000000000 R11: 0000000000000000 R12: ffffc9000953bab8
[  203.713306] R13: 00007479c157f000 R14: 0000000000000000 R15: 0000000000000000
[  203.713308]  ? early_xen_iret_patch+0xc/0xc
[  203.713311]  exc_page_fault+0x83/0x1b0
[  203.713313]  asm_exc_page_fault+0x27/0x30
[  203.713315] RIP: 0010:rep_movs_alternative+0x4a/0x70
[  203.713318] Code: cc cc cc 66 66 2e 0f 1f 84 00 00 00 00 00 66 90 48 8b 06 48 89 07 48 83 c6 08 48 83 c7 08 83 e9 08 74 db 83 f9 08 73 e8 eb c5 <f3> a4 c3 cc cc cc cc 48 89 c8 48 c1 e9 03 83 e0 07 f3 48 a5 89 c1
[  203.713319] RSP: 0018:ffffc9000953bb60 EFLAGS: 00050206
[  203.713321] RAX: 00007479c157f010 RBX: 0000000000001000 RCX: 0000000000000010
[  203.713322] RDX: 0000000000000000 RSI: ffff8882b0adeff0 RDI: 00007479c157f000
[  203.713323] RBP: ffffc9000953bb68 R08: 0000000000000000 R09: 0000000000000000
[  203.713324] R10: 00000000013f4000 R11: 0000000000000000 R12: 0000000000000000
[  203.713324] R13: ffffc9000953bde8 R14: ffff8882b0ade000 R15: 0000000000001000
[  203.713327]  ? copyout+0x25/0x50
[  203.713330]  _copy_to_iter+0x7c/0x530
[  203.713332]  ? filemap_get_pages+0xa9/0x3b0
[  203.713336]  copy_page_to_iter+0x89/0xd0
[  203.713339]  filemap_read+0x237/0x490
[  203.713342]  generic_file_read_iter+0xbb/0x110
[  203.713344]  ext4_file_read_iter+0x63/0x210
[  203.713347]  ? security_file_permission+0x5f/0x70
[  203.713349]  vfs_read+0x20a/0x360
[  203.713353]  ksys_read+0x73/0x100
[  203.713355]  __x64_sys_read+0x19/0x30
[  203.713357]  do_syscall_64+0x58/0x90
[  203.713360]  ? exit_to_user_mode_prepare+0x30/0xb0
[  203.713362]  ? syscall_exit_to_user_mode+0x37/0x60
[  203.713364]  ? do_syscall_64+0x67/0x90
[  203.713366]  ? irqentry_exit+0x43/0x50
[  203.713367]  ? exc_page_fault+0x94/0x1b0
[  203.713369]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  203.713370] RIP: 0033:0x7479c471481c
[  203.713388] Code: ec 28 48 89 54 24 18 48 89 74 24 10 89 7c 24 08 e8 e9 c1 f7 ff 48 8b 54 24 18 48 8b 74 24 10 41 89 c0 8b 7c 24 08 31 c0 0f 05 <48> 3d 00 f0 ff ff 77 34 44 89 c7 48 89 44 24 08 e8 2f c2 f7 ff 48
[  203.713389] RSP: 002b:00007ffd319bbab0 EFLAGS: 00000246 ORIG_RAX: 0000000000000000
[  203.713391] RAX: ffffffffffffffda RBX: 0000000000553f88 RCX: 00007479c471481c
[  203.713392] RDX: 0000000000553f88 RSI: 00007479c14aa010 RDI: 000000000000004a
[  203.713393] RBP: 00005ce1eacad7d0 R08: 0000000000000000 R09: 00007479c14aa010
[  203.713394] R10: 0000000000000022 R11: 0000000000000246 R12: 0000000000553f88
[  203.713395] R13: 0000000000000027 R14: 00007479c14aa010 R15: 0000000000000001
[  203.713397]  </TASK>
[  203.713398] ---[ end trace 0000000000000000 ]---
[  223.965200] ------------[ cut here ]------------
[  223.965203] WARNING: CPU: 0 PID: 6519 at kernel/rcu/tree_exp.h:787 rcu_exp_handler+0x38/0x110
[  223.965208] Modules linked in: tls vmnet(OE) vmw_vsock_vmci_transport vsock nft_masq vmw_vmci vmmon(OE) rfcomm snd_seq_dummy snd_hrtimer xt_CHECKSUM xt_MASQUERADE xt_conntrack ipt_REJECT nf_reject_ipv4 cmac algif_hash algif_skcipher af_alg xt_tcpudp nft_compat nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables nfnetlink bridge stp llc bnep zstd zram binfmt_misc zfs(POE) spl(OE) nvidia_uvm(POE) btusb uvcvideo btrtl btintel videobuf2_vmalloc uvc btbcm videobuf2_memops videobuf2_v4l2 btmtk snd_usb_audio videodev bluetooth snd_usbmidi_lib videobuf2_common snd_ump ecdh_generic mc ecc snd_sof_pci_intel_cnl snd_sof_intel_hda_common soundwire_intel snd_sof_intel_hda_mlink soundwire_cadence snd_sof_intel_hda snd_sof_pci snd_sof_xtensa_dsp snd_sof snd_sof_utils snd_soc_hdac_hda snd_hda_ext_core snd_soc_acpi_intel_match snd_soc_acpi soundwire_generic_allocation soundwire_bus snd_hda_codec_realtek snd_hda_codec_generic snd_soc_core iwlmvm snd_compress nvidia_drm(POE) ac97_bus intel_rapl_msr
[  223.965257]  snd_pcm_dmaengine nvidia_modeset(POE) snd_hda_codec_hdmi intel_rapl_common intel_tcc_cooling snd_hda_intel snd_intel_dspcfg snd_intel_sdw_acpi mac80211 snd_hda_codec x86_pkg_temp_thermal intel_powerclamp snd_hda_core coretemp libarc4 snd_hwdep snd_pcm nvidia(POE) kvm_intel snd_seq_midi nls_iso8859_1 mei_hdcp mei_pxp bfq iwlwifi snd_seq_midi_event kvm joydev asus_wmi cmdlinepart snd_rawmidi irqbypass cfg80211 ledtrig_audio spi_nor snd_seq rapl input_leds platform_profile qc71_laptop(OE) sparse_keymap mtd serio_raw snd_seq_device intel_wmi_thunderbolt mei_me snd_timer intel_cstate 8250_dw ee1004 wmi_bmof mxm_wmi mei hid_multitouch snd soundcore intel_pch_thermal acpi_pad mac_hid acpi_tad sch_fq_codel kyber_iosched nls_utf8 cifs cifs_arc4 nls_ucs2_utils cifs_md4 fscache netfs msr parport_pc ppdev lp parport efi_pstore ip_tables x_tables autofs4 dm_crypt raid10 raid456 async_raid6_recov async_memcpy async_pq async_xor async_tx xor raid6_pq libcrc32c raid1 raid0 multipath linear system76_io(OE)
[  223.965310]  system76_acpi(OE) uas usb_storage i915 drm_buddy i2c_algo_bit crct10dif_pclmul ttm crc32_pclmul polyval_clmulni polyval_generic drm_display_helper hid_generic ghash_clmulni_intel usbhid cec sha256_ssse3 i2c_hid_acpi rc_core i2c_hid sha1_ssse3 drm_kms_helper hid aesni_intel r8169 nvme intel_lpss_pci spi_intel_pci nvme_core i2c_i801 crypto_simd cryptd psmouse spi_intel i2c_smbus thunderbolt realtek nvme_common ahci intel_lpss xhci_pci idma64 libahci xhci_pci_renesas drm video wmi pinctrl_cannonlake
[  223.965338] CPU: 0 PID: 6519 Comm: vmware-vmx Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  223.965340] Hardware name: SchenkerTechnologiesGmbH XMG FUSION 15 (XFU15L19)/LAPQC71B, BIOS QCCFL357.0150.2022.0523.1145 05/23/2022
[  223.965342] RIP: 0010:rcu_exp_handler+0x38/0x110
[  223.965344] Code: 4c 8b 24 25 80 2b 03 00 53 41 8b 84 24 34 08 00 00 48 c7 c3 80 42 03 00 65 48 03 1d f2 a3 e4 70 4c 8b 6b 18 85 c0 74 17 7f 77 <0f> 0b 5b 41 5c 41 5d 5d 31 c0 31 d2 31 f6 31 ff c3 cc cc cc cc 65
[  223.965346] RSP: 0018:ffffc90000003f70 EFLAGS: 00010086
[  223.965347] RAX: 00000000ffffff09 RBX: ffff88889d834280 RCX: 0000000000000000
[  223.965349] RDX: 0000000000000000 RSI: 0000000000000000 RDI: 0000000000000000
[  223.965350] RBP: ffffc90000003f88 R08: 0000000000000000 R09: 0000000000000000
[  223.965351] R10: 0000000000000000 R11: ffffc90000003ff8 R12: ffff888121099a00
[  223.965352] R13: ffffffff91388140 R14: 0000000000000000 R15: ffffffff8f1cf5e0
[  223.965353] FS:  00007479c4c61c00(0000) GS:ffff88889d800000(0000) knlGS:0000000000000000
[  223.965354] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
[  223.965355] CR2: 0000747999117000 CR3: 00000001185d8004 CR4: 00000000003706f0
[  223.965357] Call Trace:
[  223.965358]  <IRQ>
[  223.965360]  ? show_regs+0x6d/0x80
[  223.965362]  ? __warn+0x89/0x160
[  223.965365]  ? rcu_exp_handler+0x38/0x110
[  223.965367]  ? report_bug+0x17e/0x1b0
[  223.965370]  ? handle_bug+0x46/0x90
[  223.965372]  ? exc_invalid_op+0x18/0x80
[  223.965374]  ? asm_exc_invalid_op+0x1b/0x20
[  223.965376]  ? __pfx_rcu_exp_handler+0x10/0x10
[  223.965379]  ? rcu_exp_handler+0x38/0x110
[  223.965381]  __flush_smp_call_function_queue+0x107/0x450
[  223.965385]  generic_smp_call_function_single_interrupt+0x13/0x20
[  223.965387]  __sysvec_call_function_single+0x1c/0xd0
[  223.965389]  sysvec_call_function_single+0x8d/0xd0
[  223.965392]  </IRQ>
[  223.965393]  <TASK>
[  223.965393]  asm_sysvec_call_function_single+0x1b/0x20
[  223.965395] RIP: 0010:__fget_light+0x7a/0x120
[  223.965398] Code: 00 49 39 c7 48 19 c0 48 8b 4a 08 44 21 e0 48 8d 34 c1 48 8b 1e 48 85 db 0f 84 a5 00 00 00 44 89 e8 23 43 14 0f 85 99 00 00 00 <48> 8b 43 18 48 85 c0 74 bf 48 8d 48 01 f0 48 0f b1 4b 18 75 ef 49
[  223.965399] RSP: 0018:ffffc9000953b980 EFLAGS: 00000246
[  223.965401] RAX: 0000000000000000 RBX: ffff88820ed85000 RCX: ffff888145d4e800
[  223.965402] RDX: ffff888136fc9900 RSI: ffff888145d4e860 RDI: 000000000000000c
[  223.965403] RBP: ffffc9000953b9a8 R08: 0000000000000001 R09: 0000000000000000
[  223.965403] R10: 0000000000000000 R11: 0000000000000000 R12: 000000000000000c
[  223.965404] R13: 0000000000004000 R14: ffff88811ce41340 R15: 000000000000000c
[  223.965407]  __fdget+0x13/0x20
[  223.965409]  do_poll.constprop.0+0xd6/0x3c0
[  223.965414]  do_sys_poll+0x1ef/0x290
[  223.965415]  ? poll_freewait+0x8a/0xb0
[  223.965420]  ? __pfx___pollwait+0x10/0x10
[  223.965422]  ? __pfx_pollwake+0x10/0x10
[  223.965425]  ? __pfx_pollwake+0x10/0x10
[  223.965427]  ? __pfx_pollwake+0x10/0x10
[  223.965433]  ? _copy_from_user+0x2f/0x80
[  223.965436]  __x64_sys_ppoll+0xde/0x170
[  223.965439]  do_syscall_64+0x58/0x90
[  223.965441]  ? exit_to_user_mode_prepare+0x9b/0xb0
[  223.965443]  ? syscall_exit_to_user_mode+0x37/0x60
[  223.965445]  ? do_syscall_64+0x67/0x90
[  223.965447]  ? do_syscall_64+0x67/0x90
[  223.965449]  ? do_syscall_64+0x67/0x90
[  223.965451]  ? do_syscall_64+0x67/0x90
[  223.965453]  ? do_syscall_64+0x67/0x90
[  223.965455]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  223.965457] RIP: 0033:0x7479c4718cce
[  223.965475] Code: 7c 24 08 e8 44 7d f7 ff 4c 8b 54 24 18 48 8b 74 24 10 41 b8 08 00 00 00 41 89 c1 48 8b 7c 24 08 4c 89 ea b8 0f 01 00 00 0f 05 <48> 3d 00 f0 ff ff 77 3a 44 89 cf 89 44 24 08 e8 7e 7d f7 ff 8b 44
[  223.965476] RSP: 002b:00007ffd319bb560 EFLAGS: 00000293 ORIG_RAX: 000000000000010f
[  223.965478] RAX: ffffffffffffffda RBX: 00007ffd319bb5e0 RCX: 00007479c4718cce
[  223.965479] RDX: 00007ffd319bb580 RSI: 0000000000000010 RDI: 00007ffd319bb9b8
[  223.965480] RBP: 00005ce1ea6dbbd0 R08: 0000000000000008 R09: 0000000000000000
[  223.965480] R10: 0000000000000000 R11: 0000000000000293 R12: 00005ce1ea6dbbd0
[  223.965481] R13: 00007ffd319bb580 R14: 0000000000000001 R15: 0000000000000010
[  223.965484]  </TASK>
[  223.965485] ---[ end trace 0000000000000000 ]---
[  285.796761] rcu: INFO: rcu_preempt detected expedited stalls on CPUs/tasks: { 0-...D 5-...D } 15458 jiffies s: 701 root: 0x21/.
[  285.796790] rcu: blocking rcu_node structures (internal RCU debug):
[  285.796798] Sending NMI from CPU 11 to CPUs 0:
[  285.796850] NMI backtrace for cpu 0 skipped: idling at intel_idle_ibrs+0x94/0x130
[  285.797804] Sending NMI from CPU 11 to CPUs 5:
[  285.797815] NMI backtrace for cpu 5
[  285.797821] CPU: 5 PID: 0 Comm: swapper/5 Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  285.797830] Hardware name: SchenkerTechnologiesGmbH XMG FUSION 15 (XFU15L19)/LAPQC71B, BIOS QCCFL357.0150.2022.0523.1145 05/23/2022
[  285.797834] RIP: 0010:native_write_msr+0x6/0x40
[  285.797848] Code: c3 cc cc cc cc 66 66 2e 0f 1f 84 00 00 00 00 00 0f 1f 40 00 90 90 90 90 90 90 90 90 90 90 90 90 90 90 90 90 89 f0 89 f9 0f 30 <66> 90 31 c0 31 d2 31 c9 31 f6 31 ff c3 cc cc cc cc 55 48 c1 e2 20
[  285.797854] RSP: 0018:ffffc90000133dd0 EFLAGS: 00000007
[  285.797861] RAX: 00000000dcb900f4 RBX: 00001c3d3204b7c7 RCX: 00000000000006e0
[  285.797866] RDX: 00000000000000b1 RSI: 00000000dcb900f4 RDI: 00000000000006e0
[  285.797871] RBP: ffffc90000133dd8 R08: ffff88889daa3780 R09: 0000000000000000
[  285.797875] R10: 0000000000000000 R11: 0000000000000000 R12: 0000000000000001
[  285.797879] R13: ffff88889da9fdc0 R14: ffff88889daa37c0 R15: 0000000000000087
[  285.797884] FS:  0000000000000000(0000) GS:ffff88889da80000(0000) knlGS:0000000000000000
[  285.797890] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
[  285.797895] CR2: 0000793e00013000 CR3: 000000056423c003 CR4: 00000000003706e0
[  285.797900] Call Trace:
[  285.797903]  <NMI>
[  285.797910]  ? show_regs+0x6d/0x80
[  285.797919]  ? nmi_cpu_backtrace+0xb5/0x120
[  285.797929]  ? nmi_cpu_backtrace_handler+0x11/0x20
[  285.797941]  ? nmi_handle+0x64/0x180
[  285.797950]  ? default_do_nmi+0x47/0x130
[  285.797961]  ? exc_nmi+0x1d5/0x2a0
[  285.797970]  ? end_repeat_nmi+0x16/0x67
[  285.797987]  ? native_write_msr+0x6/0x40
[  285.797996]  ? native_write_msr+0x6/0x40
[  285.798006]  ? native_write_msr+0x6/0x40
[  285.798014]  </NMI>
[  285.798016]  <TASK>
[  285.798018]  ? lapic_next_deadline+0x2c/0x50
[  285.798025]  clockevents_program_event+0xb3/0x140
[  285.798040]  tick_program_event+0x43/0xa0
[  285.798049]  hrtimer_reprogram+0x88/0xe0
[  285.798057]  hrtimer_start_range_ns+0xae/0xd0
[  285.798067]  tick_nohz_restart+0x88/0xb0
[  285.798077]  tick_nohz_idle_exit+0xb4/0x110
[  285.798088]  do_idle+0xa8/0xf0
[  285.798096]  cpu_startup_entry+0x2a/0x30
[  285.798104]  start_secondary+0x129/0x160
[  285.798116]  secondary_startup_64_no_verify+0x17d/0x18b
[  285.798134]  </TASK>
[  363.620454] INFO: task kworker/u24:1:90 blocked for more than 120 seconds.
[  363.620471]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.620479] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.620483] task:kworker/u24:1   state:D stack:0     pid:90    ppid:2      flags:0x00004000
[  363.620497] Workqueue: netns cleanup_net
[  363.620515] Call Trace:
[  363.620519]  <TASK>
[  363.620529]  __schedule+0x2cb/0x750
[  363.620548]  schedule+0x63/0x110
[  363.620559]  synchronize_rcu_expedited+0x1ee/0x270
[  363.620570]  ? __pfx_wait_rcu_exp_gp+0x10/0x10
[  363.620579]  ? __pfx_autoremove_wake_function+0x10/0x10
[  363.620593]  ? netdev_unregister_kobject+0x8e/0xb0
[  363.620603]  unregister_netdevice_many_notify+0x5b9/0x710
[  363.620618]  default_device_exit_batch+0xe0/0x120
[  363.620631]  ops_exit_list+0x57/0x70
[  363.620643]  cleanup_net+0x201/0x380
[  363.620656]  process_one_work+0x16c/0x350
[  363.620668]  worker_thread+0x306/0x440
[  363.620678]  ? __pfx_worker_thread+0x10/0x10
[  363.620686]  kthread+0xef/0x120
[  363.620698]  ? __pfx_kthread+0x10/0x10
[  363.620709]  ret_from_fork+0x44/0x70
[  363.620717]  ? __pfx_kthread+0x10/0x10
[  363.620728]  ret_from_fork_asm+0x1b/0x30
[  363.620742]  </TASK>
[  363.620776] INFO: task systemd-resolve:1552 blocked for more than 120 seconds.
[  363.620784]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.620790] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.620794] task:systemd-resolve state:D stack:0     pid:1552  ppid:1      flags:0x00000002
[  363.620804] Call Trace:
[  363.620808]  <TASK>
[  363.620813]  __schedule+0x2cb/0x750
[  363.620829]  schedule+0x63/0x110
[  363.620839]  schedule_preempt_disabled+0x15/0x30
[  363.620850]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  363.620859]  ? kfree_skbmem+0x58/0xb0
[  363.620870]  __mutex_lock_slowpath+0x13/0x20
[  363.620877]  mutex_lock+0x3c/0x50
[  363.620884]  __netlink_dump_start+0x76/0x2a0
[  363.620892]  ? kfree_skbmem+0x58/0xb0
[  363.620900]  ? __pfx_inet_dump_ifaddr+0x10/0x10
[  363.620912]  rtnetlink_rcv_msg+0x2ac/0x430
[  363.620922]  ? __pfx_inet_dump_ifaddr+0x10/0x10
[  363.620934]  ? __pfx_rtnetlink_rcv_msg+0x10/0x10
[  363.620943]  netlink_rcv_skb+0x5a/0x110
[  363.620960]  rtnetlink_rcv+0x15/0x30
[  363.620970]  netlink_unicast+0x1b0/0x2a0
[  363.620983]  netlink_sendmsg+0x25e/0x4f0
[  363.620999]  __sys_sendto+0x238/0x250
[  363.621030]  __x64_sys_sendto+0x24/0x40
[  363.621043]  do_syscall_64+0x58/0x90
[  363.621057]  ? do_syscall_64+0x67/0x90
[  363.621070]  ? do_syscall_64+0x67/0x90
[  363.621084]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  363.621096] RIP: 0033:0x7e8777f27a0a
[  363.621147] RSP: 002b:00007ffd7fc068f8 EFLAGS: 00000246 ORIG_RAX: 000000000000002c
[  363.621156] RAX: ffffffffffffffda RBX: 00007ffd7fc069d4 RCX: 00007e8777f27a0a
[  363.621162] RDX: 0000000000000018 RSI: 00005feb119537f0 RDI: 0000000000000009
[  363.621167] RBP: 00005feb11944620 R08: 00007ffd7fc06900 R09: 0000000000000080
[  363.621172] R10: 0000000000000000 R11: 0000000000000246 R12: 00005feb11970100
[  363.621177] R13: 0000000000000610 R14: 00007ffd7fc06a48 R15: 00005feb11967770
[  363.621190]  </TASK>
[  363.621230] INFO: task pool-gnome-shel:6603 blocked for more than 120 seconds.
[  363.621238]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.621244] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.621248] task:pool-gnome-shel state:D stack:0     pid:6603  ppid:3234   flags:0x00000002
[  363.621257] Call Trace:
[  363.621261]  <TASK>
[  363.621266]  __schedule+0x2cb/0x750
[  363.621282]  schedule+0x63/0x110
[  363.621292]  schedule_preempt_disabled+0x15/0x30
[  363.621303]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  363.621312]  ? put_dec+0x1c/0xc0
[  363.621325]  __mutex_lock_slowpath+0x13/0x20
[  363.621332]  mutex_lock+0x3c/0x50
[  363.621339]  __netlink_dump_start+0x76/0x2a0
[  363.621348]  ? __pfx_rtnl_dump_all+0x10/0x10
[  363.621355]  rtnetlink_rcv_msg+0x2ac/0x430
[  363.621364]  ? __pfx_rtnl_dump_all+0x10/0x10
[  363.621372]  ? __pfx_rtnetlink_rcv_msg+0x10/0x10
[  363.621380]  netlink_rcv_skb+0x5a/0x110
[  363.621396]  rtnetlink_rcv+0x15/0x30
[  363.621402]  netlink_unicast+0x1b0/0x2a0
[  363.621411]  netlink_sendmsg+0x25e/0x4f0
[  363.621423]  __sys_sendto+0x238/0x250
[  363.621445]  __x64_sys_sendto+0x24/0x40
[  363.621454]  do_syscall_64+0x58/0x90
[  363.621471]  ? exit_to_user_mode_prepare+0x30/0xb0
[  363.621481]  ? syscall_exit_to_user_mode+0x37/0x60
[  363.621489]  ? do_syscall_64+0x67/0x90
[  363.621500]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  363.621507] RIP: 0033:0x793e4ff27a66
[  363.621531] RSP: 002b:0000793dd7ffc5e0 EFLAGS: 00000293 ORIG_RAX: 000000000000002c
[  363.621538] RAX: ffffffffffffffda RBX: 0000793dd7ffd710 RCX: 0000793e4ff27a66
[  363.621543] RDX: 0000000000000014 RSI: 0000793dd7ffd710 RDI: 0000000000000018
[  363.621547] RBP: 0000793dd7ffd760 R08: 0000793dd7ffd6b4 R09: 000000000000000c
[  363.621552] R10: 0000000000000000 R11: 0000000000000293 R12: 0000000000000000
[  363.621557] R13: 0000000000000fc6 R14: 0000000000000018 R15: 0000793dd7ffdef0
[  363.621569]  </TASK>
[  363.621588] INFO: task Qt bearer threa:4371 blocked for more than 120 seconds.
[  363.621595]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.621601] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.621605] task:Qt bearer threa state:D stack:0     pid:4371  ppid:4015   flags:0x00000002
[  363.621613] Call Trace:
[  363.621617]  <TASK>
[  363.621622]  __schedule+0x2cb/0x750
[  363.621637]  schedule+0x63/0x110
[  363.621647]  schedule_preempt_disabled+0x15/0x30
[  363.621658]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  363.621669]  __mutex_lock_slowpath+0x13/0x20
[  363.621676]  mutex_lock+0x3c/0x50
[  363.621683]  __netlink_dump_start+0x76/0x2a0
[  363.621691]  ? __pfx_rtnl_dump_ifinfo+0x10/0x10
[  363.621702]  rtnetlink_rcv_msg+0x2ac/0x430
[  363.621710]  ? __pfx_rtnl_dump_ifinfo+0x10/0x10
[  363.621722]  ? __pfx_rtnetlink_rcv_msg+0x10/0x10
[  363.621730]  netlink_rcv_skb+0x5a/0x110
[  363.621745]  rtnetlink_rcv+0x15/0x30
[  363.621752]  netlink_unicast+0x1b0/0x2a0
[  363.621761]  netlink_sendmsg+0x25e/0x4f0
[  363.621773]  __sys_sendto+0x238/0x250
[  363.621795]  __x64_sys_sendto+0x24/0x40
[  363.621803]  do_syscall_64+0x58/0x90
[  363.621815]  ? ksys_write+0xe6/0x100
[  363.621825]  ? exit_to_user_mode_prepare+0x30/0xb0
[  363.621834]  ? syscall_exit_to_user_mode+0x37/0x60
[  363.621841]  ? do_syscall_64+0x67/0x90
[  363.621850]  ? do_syscall_64+0x67/0x90
[  363.621860]  ? do_syscall_64+0x67/0x90
[  363.621870]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  363.621877] RIP: 0033:0x71db2cf278fe
[  363.621896] RSP: 002b:000071db21c07dd0 EFLAGS: 00000246 ORIG_RAX: 000000000000002c
[  363.621903] RAX: ffffffffffffffda RBX: 0000000000000015 RCX: 000071db2cf278fe
[  363.621908] RDX: 0000000000000020 RSI: 000071db21c07e60 RDI: 0000000000000015
[  363.621912] RBP: 000071db0c04a1a8 R08: 0000000000000000 R09: 0000000000000000
[  363.621916] R10: 0000000000000000 R11: 0000000000000246 R12: 0000000000000000
[  363.621920] R13: 000071db21c07e30 R14: 000071db213ca1c0 R15: 0000000000000001
[  363.621932]  </TASK>
[  363.621949] INFO: task Qt bearer threa:4590 blocked for more than 120 seconds.
[  363.621955]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.621961] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.621965] task:Qt bearer threa state:D stack:0     pid:4590  ppid:4015   flags:0x00000002
[  363.621972] Call Trace:
[  363.621975]  <TASK>
[  363.621980]  __schedule+0x2cb/0x750
[  363.621995]  schedule+0x63/0x110
[  363.622006]  schedule_preempt_disabled+0x15/0x30
[  363.622016]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  363.622028]  __mutex_lock_slowpath+0x13/0x20
[  363.622034]  mutex_lock+0x3c/0x50
[  363.622041]  __netlink_dump_start+0x76/0x2a0
[  363.622049]  ? __pfx_rtnl_dump_ifinfo+0x10/0x10
[  363.622059]  rtnetlink_rcv_msg+0x2ac/0x430
[  363.622067]  ? __pfx_rtnl_dump_ifinfo+0x10/0x10
[  363.622079]  ? __pfx_rtnetlink_rcv_msg+0x10/0x10
[  363.622090]  netlink_rcv_skb+0x5a/0x110
[  363.622110]  rtnetlink_rcv+0x15/0x30
[  363.622120]  netlink_unicast+0x1b0/0x2a0
[  363.622132]  netlink_sendmsg+0x25e/0x4f0
[  363.622150]  __sys_sendto+0x238/0x250
[  363.622180]  __x64_sys_sendto+0x24/0x40
[  363.622192]  do_syscall_64+0x58/0x90
[  363.622206]  ? syscall_exit_to_user_mode+0x37/0x60
[  363.622213]  ? do_syscall_64+0x67/0x90
[  363.622223]  ? do_syscall_64+0x67/0x90
[  363.622233]  ? do_syscall_64+0x67/0x90
[  363.622243]  ? do_syscall_64+0x67/0x90
[  363.622253]  ? do_syscall_64+0x67/0x90
[  363.622262]  ? do_syscall_64+0x67/0x90
[  363.622272]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  363.622280] RIP: 0033:0x7ee2719278fe
[  363.622300] RSP: 002b:00007ee23effb210 EFLAGS: 00000246 ORIG_RAX: 000000000000002c
[  363.622306] RAX: ffffffffffffffda RBX: 000000000000001c RCX: 00007ee2719278fe
[  363.622311] RDX: 0000000000000020 RSI: 00007ee23effb2a0 RDI: 000000000000001c
[  363.622315] RBP: 00007ee23404a2d8 R08: 0000000000000000 R09: 0000000000000000
[  363.622319] R10: 0000000000000000 R11: 0000000000000246 R12: 0000000000000000
[  363.622324] R13: 00007ee23effb270 R14: 00007ee2640501c0 R15: 0000000000000001
[  363.622335]  </TASK>
[  363.622340] INFO: task Thread (pooled):6613 blocked for more than 120 seconds.
[  363.622347]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  363.622352] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  363.622356] task:Thread (pooled) state:D stack:0     pid:6613  ppid:4015   flags:0x00000002
[  363.622364] Call Trace:
[  363.622367]  <TASK>
[  363.622412]  __schedule+0x2cb/0x750
[  363.622427]  schedule+0x63/0x110
[  363.622438]  schedule_preempt_disabled+0x15/0x30
[  363.622448]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  363.622460]  __mutex_lock_slowpath+0x13/0x20
[  363.622467]  mutex_lock+0x3c/0x50
[  363.622473]  __netlink_dump_start+0x76/0x2a0
[  363.622482]  ? __pfx_rtnl_dump_all+0x10/0x10
[  363.622488]  rtnetlink_rcv_msg+0x2ac/0x430
[  363.622497]  ? __pfx_rtnl_dump_all+0x10/0x10
[  363.622506]  ? __pfx_rtnetlink_rcv_msg+0x10/0x10
[  363.622514]  netlink_rcv_skb+0x5a/0x110
[  363.622529]  rtnetlink_rcv+0x15/0x30
[  363.622535]  netlink_unicast+0x1b0/0x2a0
[  363.622545]  netlink_sendmsg+0x25e/0x4f0
[  363.622557]  __sys_sendto+0x238/0x250
[  363.622579]  __x64_sys_sendto+0x24/0x40
[  363.622587]  do_syscall_64+0x58/0x90
[  363.622599]  ? exit_to_user_mode_prepare+0x30/0xb0
[  363.622608]  ? syscall_exit_to_user_mode+0x37/0x60
[  363.622615]  ? do_syscall_64+0x67/0x90
[  363.622625]  ? do_syscall_64+0x67/0x90
[  363.622635]  ? syscall_exit_to_user_mode+0x37/0x60
[  363.622642]  ? ret_from_fork+0x29/0x70
[  363.622650]  entry_SYSCALL_64_after_hwframe+0x6e/0xd8
[  363.622657] RIP: 0033:0x7ee271927a66
[  363.622676] RSP: 002b:00007ee23cff6620 EFLAGS: 00000293 ORIG_RAX: 000000000000002c
[  363.622682] RAX: ffffffffffffffda RBX: 00007ee23cff7750 RCX: 00007ee271927a66
[  363.622687] RDX: 0000000000000014 RSI: 00007ee23cff7750 RDI: 000000000000001e
[  363.622691] RBP: 00007ee23cff77a0 R08: 00007ee23cff76f4 R09: 000000000000000c
[  363.622695] R10: 0000000000000000 R11: 0000000000000293 R12: 0000000000000000
[  363.622699] R13: 00000000b8bd6d23 R14: 000000000000001e R15: 00007ee23cff7f60
[  363.622711]  </TASK>
[  480.355941] rcu: INFO: rcu_preempt detected expedited stalls on CPUs/tasks: { 0-...D 5-...D } 64098 jiffies s: 701 root: 0x21/.
[  480.355970] rcu: blocking rcu_node structures (internal RCU debug):
[  480.355978] Sending NMI from CPU 11 to CPUs 0:
[  480.356052] NMI backtrace for cpu 0 skipped: idling at intel_idle_ibrs+0x94/0x130
[  480.356983] Sending NMI from CPU 11 to CPUs 5:
[  480.356995] NMI backtrace for cpu 5 skipped: idling at intel_idle_ibrs+0x94/0x130
[  484.451918] INFO: task kworker/u24:1:90 blocked for more than 241 seconds.
[  484.451937]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  484.451947] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  484.451952] task:kworker/u24:1   state:D stack:0     pid:90    ppid:2      flags:0x00004000
[  484.451967] Workqueue: netns cleanup_net
[  484.451986] Call Trace:
[  484.451991]  <TASK>
[  484.452001]  __schedule+0x2cb/0x750
[  484.452023]  schedule+0x63/0x110
[  484.452035]  synchronize_rcu_expedited+0x1ee/0x270
[  484.452048]  ? __pfx_wait_rcu_exp_gp+0x10/0x10
[  484.452058]  ? __pfx_autoremove_wake_function+0x10/0x10
[  484.452073]  ? netdev_unregister_kobject+0x8e/0xb0
[  484.452085]  unregister_netdevice_many_notify+0x5b9/0x710
[  484.452102]  default_device_exit_batch+0xe0/0x120
[  484.452116]  ops_exit_list+0x57/0x70
[  484.452130]  cleanup_net+0x201/0x380
[  484.452145]  process_one_work+0x16c/0x350
[  484.452158]  worker_thread+0x306/0x440
[  484.452170]  ? __pfx_worker_thread+0x10/0x10
[  484.452179]  kthread+0xef/0x120
[  484.452193]  ? __pfx_kthread+0x10/0x10
[  484.452206]  ret_from_fork+0x44/0x70
[  484.452214]  ? __pfx_kthread+0x10/0x10
[  484.452226]  ret_from_fork_asm+0x1b/0x30
[  484.452276]  </TASK>
[  484.452285] INFO: task kworker/10:1:114 blocked for more than 120 seconds.
[  484.452294]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  484.452302] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  484.452306] task:kworker/10:1    state:D stack:0     pid:114   ppid:2      flags:0x00004000
[  484.452318] Workqueue: ipv6_addrconf addrconf_verify_work
[  484.452335] Call Trace:
[  484.452338]  <TASK>
[  484.452344]  __schedule+0x2cb/0x750
[  484.452362]  schedule+0x63/0x110
[  484.452374]  schedule_preempt_disabled+0x15/0x30
[  484.452386]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  484.452396]  ? raw_spin_rq_unlock+0x10/0x40
[  484.452405]  ? finish_task_switch.isra.0+0x85/0x2a0
[  484.452415]  __mutex_lock_slowpath+0x13/0x20
[  484.452423]  mutex_lock+0x3c/0x50
[  484.452431]  rtnl_lock+0x15/0x20
[  484.452443]  addrconf_verify_work+0x12/0x30
[  484.452455]  process_one_work+0x16c/0x350
[  484.452467]  worker_thread+0x306/0x440
[  484.452476]  ? _raw_spin_lock_irqsave+0xe/0x20
[  484.452489]  ? __pfx_worker_thread+0x10/0x10
[  484.452498]  kthread+0xef/0x120
[  484.452511]  ? __pfx_kthread+0x10/0x10
[  484.452523]  ret_from_fork+0x44/0x70
[  484.452530]  ? __pfx_kthread+0x10/0x10
[  484.452542]  ret_from_fork_asm+0x1b/0x30
[  484.452557]  </TASK>
[  484.452565] INFO: task kworker/9:1:134 blocked for more than 120 seconds.
[  484.452572]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  484.452578] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  484.452583] task:kworker/9:1     state:D stack:0     pid:134   ppid:2      flags:0x00004000
[  484.452593] Workqueue: ipv6_addrconf addrconf_verify_work
[  484.452606] Call Trace:
[  484.452610]  <TASK>
[  484.452615]  __schedule+0x2cb/0x750
[  484.452632]  schedule+0x63/0x110
[  484.452644]  schedule_preempt_disabled+0x15/0x30
[  484.452656]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  484.452665]  ? raw_spin_rq_unlock+0x10/0x40
[  484.452673]  ? finish_task_switch.isra.0+0x85/0x2a0
[  484.452683]  __mutex_lock_slowpath+0x13/0x20
[  484.452690]  mutex_lock+0x3c/0x50
[  484.452698]  rtnl_lock+0x15/0x20
[  484.452709]  addrconf_verify_work+0x12/0x30
[  484.452721]  process_one_work+0x16c/0x350
[  484.452733]  worker_thread+0x306/0x440
[  484.452742]  ? _raw_spin_lock_irqsave+0xe/0x20
[  484.452754]  ? __pfx_worker_thread+0x10/0x10
[  484.452763]  kthread+0xef/0x120
[  484.452775]  ? __pfx_kthread+0x10/0x10
[  484.452788]  ret_from_fork+0x44/0x70
[  484.452794]  ? __pfx_kthread+0x10/0x10
[  484.452806]  ret_from_fork_asm+0x1b/0x30
[  484.452821]  </TASK>
[  484.452836] INFO: task kworker/1:2:627 blocked for more than 120 seconds.
[  484.452843]       Tainted: P        W  OE      6.6.6-76060606-generic #202312111032~1702306143~22.04~d28ffec
[  484.452849] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[  484.452853] task:kworker/1:2     state:D stack:0     pid:627   ppid:2      flags:0x00004000
[  484.452863] Workqueue: ipv6_addrconf addrconf_verify_work
[  484.452876] Call Trace:
[  484.452879]  <TASK>
[  484.452884]  __schedule+0x2cb/0x750
[  484.452901]  schedule+0x63/0x110
[  484.452913]  schedule_preempt_disabled+0x15/0x30
[  484.452924]  __mutex_lock.constprop.0+0x3f8/0x7a0
[  484.452934]  ? raw_spin_rq_unlock+0x10/0x40
[  484.452942]  ? finish_task_switch.isra.0+0x85/0x2a0
[  484.452952]  __mutex_lock_slowpath+0x13/0x20
[  484.452960]  mutex_lock+0x3c/0x50
[  484.452968]  rtnl_lock+0x15/0x20
[  484.452980]  addrconf_verify_work+0x12/0x30
[  484.452992]  process_one_work+0x16c/0x350
[  484.453003]  worker_thread+0x306/0x440
[  484.453013]  ? _raw_spin_lock_irqsave+0xe/0x20
[  484.453024]  ? __pfx_worker_thread+0x10/0x10
[  484.453033]  kthread+0xef/0x120
[  484.453046]  ? __pfx_kthread+0x10/0x10
[  484.453058]  ret_from_fork+0x44/0x70
[  484.453065]  ? __pfx_kthread+0x10/0x10
[  484.453077]  ret_from_fork_asm+0x1b/0x30
[  484.453091]  </TASK>
[  484.453095] Future hung task reports are suppressed, see sysctl kernel.hung_task_warnings
[  660.583018] rcu: INFO: rcu_preempt detected expedited stalls on CPUs/tasks: { 0-...D 5-...D } 109155 jiffies s: 701 root: 0x21/.
[  660.583026] rcu: blocking rcu_node structures (internal RCU debug):
[  660.583028] Sending NMI from CPU 11 to CPUs 0:
[  660.583087] NMI backtrace for cpu 0 skipped: idling at intel_idle_ibrs+0x94/0x130
[  660.584043] Sending NMI from CPU 11 to CPUs 5:
[  660.584046] NMI backtrace for cpu 5 skipped: idling at intel_idle_ibrs+0x94/0x130

 

[GrumpyCat]

Klingt nach im Betrieb ausgefallenem Root-Dateisystem oder sowas. Ein paar Sachen funktionieren dann noch, weil die Binaries im Cache sind, alles andere nicht mehr. Das ext4_file_read_iter im Log deutet auch auf sowas hin.

 

[scooter010]

Klingt nach im Betrieb ausgefallenem Root-Dateisystem oder sowas

Jein. Ist jetzt die Grätchenfrage, ob der Fehler darin liegt, dass das root-fs fehlt und daher der Rest auch nicht mehr geht oder ob Kernel-funktionen in einer Endlosschleife hängen und daher die Ressourcen auf Anfrage nicht mehr liefern...
Da systemd-resolved auch stirbt (sowohl nach log als auch das die Namensauflösung tatsächlich nicht mehr geht) und der Kram eigentlich im Speicher "lebt" (außer vielleicht /etc/hosts). Naja, ist müßig. VMware Workstation ist für den Hintern, ich versuche dann halt qemu...

 

[Steffen]

Ich hätte gerne dmesg ran gehangen, aber mehr als 100.000 Zeichen sind nicht erlaubt @Steffen und Anlagen, welche keine Bilder sind, ebenfalls nicht.

Es sind eigentlich allerhand Anhänge möglich, die keine Bilder sind: 7z, bmp, csv, doc, docx, gif, jpe, jpeg, jpg, mp3, odg, odp, ods, odt, pdf, png, psd, rar, svg, txt, xls, xlsx, zip

 

[NameHere]

Wenn das Haus brennt, prüfe ich nicht zu erst, ob die Fenster vielleicht undicht sind.

Warum sagst du dann das du mit deinem " Fenster" Probleme hast wenn es nichts mit dem Brand zu tun hat?

 

[klapproth]

Das dürfte das kcompactd0 bekannte Problem sein: https://communities.vmware.com/t5/V...0-CPU-with-VMware-Workstation-16/td-p/2896972

Es gibt keinen funktionierenden Workaround außer mehr Speicher drauf zu werfen. Oder der VM sehr wenig RAM zuweisen und auf dem Host alles zu schließen. Mit aktuelleren Kerneln ist das Problem immer schlimmer geworden.

Der kcompactd0 läuft Amok und das blockt das gesamte System.

Du kannst mal testweise folgendes mitlaufen lassen. Das dämmt das Problem etwas ein.

    #!/bin/bash
    while true ; do
        sleep 1
        echo 1 > /proc/sys/vm/compact_memory
        ps aux| grep " R " | grep kcompactd0 -q && sync && echo 3 > /proc/sys/vm/drop_caches
        echo dropped @ $(date)
    done

 

[flaphoschi]

1. VM-Ware deinstallieren. Quellgeschlossenes Kernelmodul, somit ist er Kernel tainted und niemand fuehlt sich verantwortlich.
2. Tritt das Problem dann immer noch auf, Ausgabe von journalctl -b bzw. dmesg sichern.
3. Bug suchen (Upstream). Falls nicht vorhanden, Bug melden (Upstream).

Upstream -> Verantwortliches Projekt
Downstream -> Distribution

 

[scooter010]

Das dürfte das kcompactd0 bekannte Problem sein

Kann ich nicht ausschließen. Ist die tatsächliche Speicherauslastung ein Indikator? Das problem tritt bei mir schon auf, wenn nur 15 von 32GB als genutzt angezeigt werden. Aber jetzt wo ich drüber nachdenke, wurde der Rest des Speichers von htop gelb markiert, was wohl puffer/cache meint, was auch immer das bedeutet.

 

[flaphoschi]

Das dürfte das kcompactd0 bekannte Problem sein: https://communities.vmware.com/t5/V...0-CPU-with-VMware-Workstation-16/td-p/2896972

Oh je. Wenn das zutrifft, ein gutes Beispiel warum "Tainted" so wichtig ist.

Ich mag VMWare, vor allem wegen der Gtk-UI und dem Bridge-Networking.
Etwas das bei GNOME-Boxes bzw. QEMU/KVM viel zu viel Aufwand erfordert.

PS: Was ich statt Virtualisierung mache? Kein Windows benuetzen. Schont die Nerven.

 

[scooter010]

Ich möchte nochmals klar stellen, ich habe keine erhöhte Systemauslastung. Auch ein beenden von VMware löst das problem nicht oder ändert etwas an CPU-/Speicherauslastung. Zumindest nicht mehr, als durch das Freigeben der Ressourcen für die VM(s) zu erwarten wäre.

 

[flaphoschi]

Besonders wenn es nicht das "kompactd0" ist, gelten die Anweisungen aus meinem ersten Post.

Dazu muss man moegliche Problemquellen und Seiteeffekt ausschalten, dann kann man sich auf das Problem konzentrieren (falls es ueberhaupt weiterhin auftritt) und melden. Nur durch eine Meldung, kann es dann auch jemand beheben.

 

[scooter010]

moegliche Problemquellen und Seiteeffekt ausschalten,

Ergo müsste ich jetzt, anstelle meinen Online-Kurs (der die Nutzung von zu Verfügung gestellten VMs beinhaltet) zu machen, meine Host-Kiste plätten - denn die lebt schon ein paar Jahre und ich habe hier und da mal ein Modul installiert (die ich auch benutze) - und dann neu installieren, dann nur VMware installieren und versuchen, das Problem objektiv nachzuvollziehen.

Wahrscheinlicher ist IMHO: VMware unterstützt offiziell "nur" Ubuntu 22.04, nicht PoP_OS 22.04 als host. Damit sind Analysen meinerseits nicht hilfreich und Zeitverschwendung, da sich der Upstream darum nicht kümmern (wollen) wird.

Ergänzung (17. Januar 2024)

https://github.com/mkubecek/vmware-host-modules/issues/228

Hier liegt wohl der Hase im Pfeffer.

 

[madmax2010]

Oder nimm fix virtualbox.
das kommt mit VMware images klar

 

[scooter010]

Lösung:

sudo -i
VMware-Workstation-Full-17.5.0-22583795.x86_64.bundle -u vmware-workstation
git pull https://github.com/mkubecek/vmware-host-modules.git workstation-17.5.0
cd vmware-host-modules
make
make install
VMware-Workstation-Full-17.5.0-22583795.x86_64.bundle
make install # nur zur Sicherheit, schadet jedenfalls nicht...
reboot

Das VMware Bundle bekommt man hier.

 

[foofoobar]

Ich mag VMWare, vor allem wegen der Gtk-UI und dem Bridge-Networking.
Etwas das bei GNOME-Boxes bzw. QEMU/KVM viel zu viel Aufwand erfordert.

Was kann VMware besser?

 

[flaphoschi]

Das erwähnte Bridge-Networking. Das heißt, es wird auf dem Host eine bridge-device angelegt und der Guest bekommt auf seiner NIC eine eigene IPv4 die im LAN des Hosts genau so erreichbar ist.

GNOME-Boxes oder der Virtual-Manager sind ansonsten bequemer und machen alles wie etwa USB-Passthrough, File-Sharing und so weiter. Die Bridge kann man auch manuell anlegen, aber da habe ich in dem Moment keine Zeit gehabt. Ein Netzwerkadmin hätte das wohl schnell per Hand gemacht.

Mit einer direkt erreichbaren IP über Bridge kann zum Beispiel bequem Remote-Debugger. Anderer Sachen sind ein Flag zum Emulieren von MacOS (kann man schnell unter Arch einschalten) oder wenn man VMWare-Center professionell verwendet.

Mir reichen die Bordmittel ansonsten aus. Wenn wer Bridge-Networking einfach nutzbar macht in Virtual-Manager/GNOME-Boxes, wäre es toll. Zumal die Zukunft von VMWare unsicher ist (Übernahme Broadcom).

 

[foofoobar]

Das erwähnte Bridge-Networking. Das heißt, es wird auf dem Host eine bridge-device angelegt und der Guest bekommt auf seiner NIC eine eigene IPv4 die im LAN des Hosts genau so erreichbar ist.

Quemu/KVM kann es genau gleich machen. Bridge anlegen und die VM dran pappen:

<interface type="bridge">
<mac address="XX"/>
<source bridge="bridgeX"/>
<target dev="vnetX"/>
<model type="virtio"/>
<alias name="netX"/>
<address type="pci" domain="0x0000" bus="0x01" slot="0x00" function="0x0"/>
</interface>