���b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu= �N�m3���tEgPUje-bYZ&ޣ����������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������panic: acquiring blockable sleep lock with spinlock or critical section held (pkanerinc:e l _l o c kke)r &nkeerl ndiealg_lnoocskt
ic Stopped at db_enter+0x18: addq $0x8,%rsp
TID PID UID PRFLAGS PFLAGS CPU COMMAND
192678 85215 0 0 0x4000000 1 syz-executor.7
*415821 90589 0 0 0x4000000 0 syz-executor.5
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
end trace frame: 0xffff800027aca950, count: 0
https://www.openbsd.org/ddb.html describes the minimum info required in bug
reports. Insufficient info makes it difficult to find and fix bugs.
ddb{0}>
ddb{0}> set $lines = 0
ddb{0}> set $maxwidth = 0
ddb{0}> show panic
*cpu0: acquiring blockable sleep lock with spinlock or critical section held (kernel_lock) &kernel_lock
cpu1: kernel diagnostic assertion "!_kernel_lock_held()" failed: file "/syzkaller/managers/multicore/kernel/sys/kern/kern_fork.c", line 678
ddb{0}> trace
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
ip_output(fffffd8076f08000,0,fffffd806f67ba38,20,0,fffffd806f67b9c0,3ab17e4bafa14dff) at ip_output+0x106b sys/netinet/ip_output.c:468
rip_output(fffffd8076f08000,fffffd806d8e71f8,ffff800027aca9f0,101) at rip_output+0x2cb sys/netinet/raw_ip.c:302
rip_usrreq(fffffd806d8e71f8,9,fffffd8076f08000,0,0,ffff8000ffff3508) at rip_usrreq+0x49c sys/netinet/raw_ip.c:554
sosend(fffffd806d8e71f8,0,ffff800027acab60,0,0,0) at sosend+0x632 sys/kern/uipc_socket.c:582
sendit(ffff8000ffff3508,7,ffff800027acac60,0,ffff800027acad50) at sendit+0x65d sys/kern/uipc_syscalls.c:653
sys_sendto(ffff8000ffff3508,ffff800027acacf8,ffff800027acad50) at sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
syscall(ffff800027acadc0) at syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
syscall(ffff800027acadc0) at syscall+0x489 sys/arch/amd64/amd64/trap.c:585
Xsyscall() at Xsyscall+0x128
end of kernel
end trace frame: 0x8028df2e4e0, count: -22
ddb{0}> show registers
rdi 0
rsi 0x1
rbp 0xffff800027aca210
rbx 0xffffffff8298dbff cpu_info_full_primary+0x2bff
rdx 0xffff800000bda240
rcx 0
rax 0xffff8000ffff3508
r8 0x101010101010101
r9 0x8080808080808080
r10 0xb7ff3165a416e9bb
r11 0xc1f1c669553963be
r12 0xffffffff8298da00 cpu_info_full_primary+0x2a00
r13 0
r14 0
r15 0x1
rip 0xffffffff811e4c58 db_enter+0x18
cs 0x8
rflags 0x246
rsp 0xffff800027aca200
ss 0x10
db_enter+0x18: addq $0x8,%rsp
ddb{0}> show proc
PROC (syz-executor.5) pid=415821 stat=onproc
flags process=0 proc=4000000<THREAD>
pri=32, usrpri=86, nice=20
forw=0xffffffffffffffff, list=0xffff80002e36c7e8,0xffff8000ffff37b8
process=0xffff80002a937620 user=0xffff800027ac5000, vmspace=0xfffffd806edc3008
estcpu=36, cpticks=1, pctcpu=0.0
user=0, sys=1, intr=0
ddb{0}> ps
PID TID PPID UID S FLAGS WAIT COMMAND
15217 251650 61021 0 2 0 syz-executor.0
29225 14232 21178 0 2 0 syz-executor.3
29225 494050 21178 0 2 0x4000000 syz-executor.3
85215 364462 87931 0 2 0 syz-executor.7
85215 192678 87931 0 7 0x4000000 syz-executor.7
90589 298848 50977 0 2 0 syz-executor.5
*90589 415821 50977 0 7 0x4000000 syz-executor.5
1828 437190 94847 0 2 0 syz-executor.4
1828 52299 94847 0 2 0x4000000 syz-executor.4
98094 105617 5135 0 2 0 syz-executor.2
98094 7839 5135 0 3 0x4000080 rest syz-executor.2
98094 122075 5135 0 3 0x4000080 bell syz-executor.2
71819 399578 1159 0 2 0 syz-executor.1
71819 505894 1159 0 3 0x4000080 fsleep syz-executor.1
71819 462579 1159 0 2 0x4000000 syz-executor.1
5135 202784 67722 0 3 0x82 nanoslp syz-executor.2
94847 236618 67722 0 3 0x82 nanoslp syz-executor.4
1159 9324 67722 0 2 0x2 syz-executor.1
53479 330973 1 0 3 0x100083 ttyopn getty
21483 51189 0 0 3 0x14200 bored sosplice
94815 238387 67722 0 2 0x2 syz-executor.6
87931 433914 67722 0 3 0x82 nanoslp syz-executor.7
50977 86323 67722 0 3 0x82 nanoslp syz-executor.5
21178 457008 67722 0 3 0x82 nanoslp syz-executor.3
61021 206956 67722 0 3 0x82 nanoslp syz-executor.0
67722 342942 1646 0 3 0x82 thrsleep syz-fuzzer
67722 375977 1646 0 3 0x4000082 nanoslp syz-fuzzer
67722 120409 1646 0 3 0x4000082 thrsleep syz-fuzzer
67722 386786 1646 0 3 0x4000082 thrsleep syz-fuzzer
67722 163611 1646 0 3 0x4000082 thrsleep syz-fuzzer
67722 80394 1646 0 3 0x4000082 thrsleep syz-fuzzer
67722 504686 1646 0 3 0x4000082 thrsleep syz-fuzzer
67722 110592 1646 0 3 0x4000082 kqread syz-fuzzer
67722 79979 1646 0 3 0x4000082 thrsleep syz-fuzzer
1646 240297 62341 0 3 0x10008a sigsusp ksh
62341 110569 81746 0 3 0x9a kqread sshd
81746 42764 1 0 3 0x88 kqread sshd
3797 374554 25262 74 3 0x1100092 bpf pflogd
25262 499765 1 0 3 0x80 netio pflogd
22531 206802 68207 73 3 0x1100090 kqread syslogd
68207 416809 1 0 3 0x100082 netio syslogd
92805 381662 1 0 3 0x100080 kqread resolvd
31153 31317 97605 77 3 0x100092 kqread dhcpleased
99781 289783 97605 77 3 0x100092 kqread dhcpleased
97605 195490 1 0 3 0x80 kqread dhcpleased
17206 230914 0 0 3 0x14200 bored smr
96972 395378 0 0 2 0x14200 zerothread
72234 280261 0 0 3 0x14200 aiodoned aiodoned
90327 179953 0 0 3 0x14200 syncer update
68953 80558 0 0 3 0x14200 cleaner cleaner
79557 517241 0 0 3 0x14200 reaper reaper
40190 476632 0 0 3 0x14200 pgdaemon pagedaemon
3564 43861 0 0 3 0x14200 bored viomb
70511 356042 0 0 3 0x40014200 acpi0 acpi0
35454 189099 0 0 3 0x40014200 idle1
23615 232206 0 0 3 0x14200 bored softnet
75661 477999 0 0 3 0x14200 bored systqmp
28973 199702 0 0 3 0x14200 bored systq
93702 324150 0 0 3 0x40014200 bored softclock
42935 76066 0 0 3 0x40014200 idle0
1 342146 0 0 3 0x80082 wait init
0 0 -1 0 3 0x10200 scheduler swapper
ddb{0}> show all locks
CPU 0:
exclusive mutex &table->inpt_mtx r = 0 (0xffffffff82b03010)
#0 witness_lock+0x44d
#1 mtx_enter_try+0x100
#2 mtx_enter+0x4b sys/kern/kern_lock.c:266
#3 rip_input+0x135
#4 ip_deliver+0x322 sys/netinet/ip_input.c:657
#5 ip_ours+0x3ba sys/netinet/ip_input.c:616
#6 ip_input_if+0x2a1
#7 ipv4_input+0x48 sys/netinet/ip_input.c:242
#8 if_input_local+0x10e sys/net/if.c:774
#9 ether_resolve+0x4ac sys/net/if_ethersubr.c:242
#10 ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
#10 ether_output+0x47 sys/net/if_ethersubr.c:353
#11 ip_output+0x106b sys/netinet/ip_output.c:468
#12 rip_output+0x2cb sys/netinet/raw_ip.c:302
#13 rip_usrreq+0x49c sys/netinet/raw_ip.c:554
#14 sosend+0x632 sys/kern/uipc_socket.c:582
#15 sendit+0x65d sys/kern/uipc_syscalls.c:653
#16 sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#17 syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#17 syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#18 Xsyscall+0x128
Process 90589 (syz-executor.5) thread 0xffff8000ffff3508 (415821)
exclusive rwlock netlock r = 0 (0xffffffff82904160)
#0 witness_lock+0x44d
#1 solock+0x86 sys/kern/uipc_socket2.c:295
#2 sosend+0x517 sys/kern/uipc_socket.c:570
#3 sendit+0x65d sys/kern/uipc_syscalls.c:653
#4 sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#5 syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#5 syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#6 Xsyscall+0x128
exclusive mutex &table->inpt_mtx r = 0 (0xffffffff82b03010)
#0 witness_lock+0x44d
#1 mtx_enter_try+0x100
#2 mtx_enter+0x4b sys/kern/kern_lock.c:266
#3 rip_input+0x135
#4 ip_deliver+0x322 sys/netinet/ip_input.c:657
#5 ip_ours+0x3ba sys/netinet/ip_input.c:616
#6 ip_input_if+0x2a1
#7 ipv4_input+0x48 sys/netinet/ip_input.c:242
#8 if_input_local+0x10e sys/net/if.c:774
#9 ether_resolve+0x4ac sys/net/if_ethersubr.c:242
#10 ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
#10 ether_output+0x47 sys/net/if_ethersubr.c:353
#11 ip_output+0x106b sys/netinet/ip_output.c:468
#12 rip_output+0x2cb sys/netinet/raw_ip.c:302
#13 rip_usrreq+0x49c sys/netinet/raw_ip.c:554
#14 sosend+0x632 sys/kern/uipc_socket.c:582
#15 sendit+0x65d sys/kern/uipc_syscalls.c:653
#16 sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#17 syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#17 syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#18 Xsyscall+0x128
ddb{0}> show malloc
Type InUse MemUse HighUse Limit Requests Type Lim
devbuf 10186 6540K 7056K 78643K 15792 0
pcb 13 8K 8K 78643K 290 0
rtable 178 6K 10K 78643K 904 0
ifaddr 75 17K 18K 78643K 455 0
sysctl 2 0K 0K 78643K 2 0
counters 52 35K 35K 78643K 182 0
ioctlops 0 0K 4K 78643K 1891 0
iov 0 0K 18K 78643K 170 0
mount 1 1K 1K 78643K 1 0
log 0 0K 0K 78643K 4 0
vnodes 1285 80K 80K 78643K 2961 0
UFS quota 1 32K 32K 78643K 1 0
UFS mount 5 36K 36K 78643K 5 0
shm 2 1K 9K 78643K 29 0
VM map 2 1K 1K 78643K 2 0
sem 10 0K 1K 78643K 11 0
dirhash 12 2K 2K 78643K 12 0
ACPI 1697 195K 286K 78643K 12548 0
file desc 17 61K 85K 78643K 5402 0
sigio 0 0K 0K 78643K 47 0
proc 71 87K 124K 78643K 1016 0
subproc 104 6K 7K 78643K 260 0
NFS srvsock 1 0K 0K 78643K 1 0
NFS daemon 1 16K 16K 78643K 1 0
ip_moptions 0 0K 0K 78643K 308 0
in_multi 82 5K 6K 78643K 346 0
ether_multi 1 0K 0K 78643K 52 0
mrt 1 0K 0K 78643K 29 0
ISOFS mount 1 32K 32K 78643K 1 0
MSDOSFS mount 1 16K 16K 78643K 1 0
ttys 79 360K 360K 78643K 79 0
exec 0 0K 2K 78643K 1125 0
pfkey data 0 0K 1K 78643K 4 0
tdb 3 0K 0K 78643K 3 0
pagedep 1 8K 8K 78643K 1 0
inodedep 1 32K 32K 78643K 1 0
newblk 1 0K 0K 78643K 1 0
VM swap 7 26K 26K 78643K 7 0
UVM amap 414 590K 599K 78643K 64726 0
UVM aobj 26 2K 3K 78643K 30 0
memdesc 1 4K 4K 78643K 1 0
crypto data 1 1K 1K 78643K 1 0
ip6_options 0 0K 0K 78643K 162 0
NDP 10 0K 2K 78643K 115 0
temp 125 4711K 4787K 78643K 40486 0
kqueue 12 18K 26K 78643K 339 0
SYN cache 2 16K 16K 78643K 2 0
ddb{0}> show all pools
Name Size Requests Fail Releases Pgreq Pgrel Npage Hiwat Minpg Maxpg Idle
plcache 128 22 0 0 1 0 1 1 0 8 0
rtpcb 120 197 0 194 1 0 1 1 0 8 0
rtentry 112 264 0 187 4 0 4 4 0 8 0
unpcb 136 1212 0 1194 1 0 1 1 0 8 0
syncache 296 70 0 70 8 8 0 1 0 8 0
tcpqe 32 13 0 13 3 3 0 1 0 8 0
tcpcb 736 962 0 957 19 17 2 5 0 8 1
arp 120 49 0 35 1 0 1 1 0 8 0
inpcb 312 2244 0 2233 6 4 2 3 0 8 1
rttmr 72 8 0 8 2 2 0 1 0 8 0
nd6 48 60 0 42 1 0 1 1 0 8 0
pkpcb 40 53 0 53 5 5 0 1 0 8 0
kcovpl 48 20 0 12 1 0 1 1 0 8 0
ppxss 1248 18 0 18 3 3 0 1 0 8 0
pfstscr 40 5 0 5 2 2 0 1 0 8 0
pffrag 232 8 0 6 2 1 1 1 0 482 0
pffrnode 88 8 0 6 2 1 1 1 0 8 0
pffrent 40 16 0 14 2 1 1 1 0 8 0
pfosfp 40 1440 0 1440 5 5 0 5 0 8 0
pfosfpen 112 1440 0 1440 21 21 0 21 0 8 0
pfrktable 1344 31 0 31 2 2 0 1 0 8 0
pfstitem 24 32 0 30 1 0 1 1 0 8 0
pfstkey 112 46 0 44 1 0 1 1 0 8 0
pfstate 320 37 0 35 3 2 1 3 0 8 0
pfrule 1360 109 0 108 5 4 1 3 0 8 0
art_heap8 4096 1 0 0 1 0 1 1 0 8 0
art_heap4 256 1104 0 753 31 6 25 30 0 8 2
art_table 32 1105 0 753 4 0 4 4 0 8 0
art_node 16 263 0 196 1 0 1 1 0 8 0
sysvmsgpl 40 60 0 20 1 0 1 1 0 8 0
semapl 112 8 0 0 1 0 1 1 0 8 0
shmpl 112 27 0 4 1 0 1 1 0 8 0
dirhash 1024 17 0 0 3 0 3 3 0 8 0
dino2pl 256 8227 0 6783 91 0 91 91 0 8 0
ffsino 272 8227 0 6783 97 0 97 97 0 8 0
nchpl 144 14508 0 12885 63 0 63 63 0 8 0
uvmvnodes 80 5926 0 0 121 0 121 121 0 8 0
vnodes 224 5926 0 0 349 0 349 349 0 8 0
namei 1024 37524 0 37524 3 2 1 2 0 8 1
percpumem 16 103 0 65 1 0 1 1 0 8 0
vcpupl 2048 31 0 0 4 0 4 4 0 8 0
vmpool 560 31 0 0 3 0 3 3 0 8 0
pfiaddrpl 120 8 0 8 1 1 0 1 0 8 0
scsiplug 72 4 0 4 1 1 0 1 0 8 0
scxspl 216 42367 0 42367 9 8 1 7 0 8 1
plimitpl 152 172 0 157 1 0 1 1 0 8 0
sigapl 424 5699 0 5654 6 0 6 6 0 8 0
futexpl 64 30094 0 30093 2 1 1 1 0 8 0
knotepl 120 815 0 0 24 0 24 24 0 8 0
kqueuepl 216 493 0 485 1 0 1 1 0 8 0
pipepl 336 391 0 363 3 0 3 3 0 8 0
fdescpl 496 5677 0 5647 6 2 4 5 0 8 0
filepl 152 15983 0 15737 15 5 10 11 0 8 0
lockfpl 104 537 0 535 1 0 1 1 0 8 0
lockfspl 48 218 0 216 1 0 1 1 0 8 0
sessionpl 144 37 0 20 1 0 1 1 0 8 0
pgrppl 48 41 0 24 1 0 1 1 0 8 0
ucredpl 96 1871 0 1859 1 0 1 1 0 8 0
zombiepl 144 5654 0 5654 3 2 1 1 0 8 1
processpl 1064 5699 0 5654 4 0 4 4 0 8 0
procpl 672 11449 0 11388 12 6 6 7 0 8 0
srpgc 96 30 0 30 3 3 0 1 0 8 0
sosppl 168 91 0 91 7 7 0 1 0 8 0
sockpl 480 3706 0 3674 11 6 5 6 0 8 0
mcl64k 65536 14 0 0 2 0 2 2 0 8 0
mcl16k 16384 4 0 0 1 0 1 1 0 8 0
mcl12k 12288 5 0 0 1 0 1 1 0 8 0
mcl9k 9216 5 0 0 1 0 1 1 0 8 0
mcl8k 8192 25 0 0 4 1 3 3 0 8 0
mcl4k 4096 17 0 0 3 0 3 3 0 8 0
mcl2k2 2112 8 0 0 1 0 1 1 0 8 0
mcl2k 2048 260 0 0 17 0 17 17 0 8 0
mtagpl 96 373 0 0 9 0 9 9 0 8 0
mbufpl 256 729 0 0 41 0 41 41 0 8 0
bufpl 288 10506 0 4170 453 0 453 453 0 8 0
anonpl 24 1477572 0 1466943 161 86 75 148 0 186 2
amapchunkpl 152 153202 0 152475 54 23 31 44 0 158 1
amappl16 200 15384 0 15160 83 69 14 39 0 8 1
amappl15 192 1593 0 1587 1 0 1 1 0 8 0
amappl14 184 1025 0 1020 1 0 1 1 0 8 0
amappl13 176 819 0 813 1 0 1 1 0 8 0
amappl12 168 73 0 68 2 1 1 1 0 8 0
amappl11 160 657 0 641 1 0 1 1 0 8 0
amappl10 152 1579 0 1570 1 0 1 1 0 8 0
amappl9 144 515 0 513 1 0 1 1 0 8 0
amappl8 136 1044 0 960 4 0 4 4 0 8 1
amappl7 128 290 0 275 1 0 1 1 0 8 0
amappl6 120 294 0 271 2 1 1 2 0 8 0
amappl5 112 6544 0 6522 1 0 1 1 0 8 0
amappl4 104 2077 0 2050 2 1 1 2 0 8 0
amappl3 96 316 0 302 1 0 1 1 0 8 0
amappl2 88 1491 0 1433 3 1 2 3 0 8 0
amappl1 80 96154 0 95562 21 7 14 19 0 8 1
amappl 88 63910 0 63628 8 1 7 8 0 92 0
dma4096 4096 1 0 1 1 1 0 1 0 8 0
dma1024 1024 1 0 0 1 0 1 1 0 8 0
dma256 256 6 0 6 1 1 0 1 0 8 0
dma128 128 253 0 253 1 1 0 1 0 8 0
dma64 64 6 0 6 1 1 0 1 0 8 0
dma32 32 7 0 7 1 1 0 1 0 8 0
dma16 16 18 0 17 1 0 1 1 0 8 0
aobjpl 72 29 0 4 1 0 1 1 0 8 0
uaddrrnd 24 5708 0 5647 1 0 1 1 0 8 0
uaddrbest 32 2 0 0 1 0 1 1 0 8 0
uaddr 24 5708 0 5647 1 0 1 1 0 8 0
vmmpekpl 168 33441 0 33387 3 0 3 3 0 8 0
vmmpepl 168 492300 0 489985 155 47 108 124 0 357 3
vmsppl 368 5707 0 5647 7 1 6 6 0 8 0
rwobjpl 56 116677 0 109454 105 1 104 104 0 8 0
pdppl 4096 11423 0 11325 247 147 100 102 0 8 2
pvpl 32 2825682 0 2810705 292 155 137 262 0 265 6
pmappl 248 5707 0 5647 5 1 4 4 0 8 0
extentpl 40 58 0 38 1 0 1 1 0 8 0
phpool 112 1041 0 184 25 0 25 25 0 8 0
ddb{0}> machine ddbcpu 0
Invalid cpu 0
ddb{0}> trace
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
ip_output(fffffd8076f08000,0,fffffd806f67ba38,20,0,fffffd806f67b9c0,3ab17e4bafa14dff) at ip_output+0x106b sys/netinet/ip_output.c:468
rip_output(fffffd8076f08000,fffffd806d8e71f8,ffff800027aca9f0,101) at rip_output+0x2cb sys/netinet/raw_ip.c:302
rip_usrreq(fffffd806d8e71f8,9,fffffd8076f08000,0,0,ffff8000ffff3508) at rip_usrreq+0x49c sys/netinet/raw_ip.c:554
sosend(fffffd806d8e71f8,0,ffff800027acab60,0,0,0) at sosend+0x632 sys/kern/uipc_socket.c:582
sendit(ffff8000ffff3508,7,ffff800027acac60,0,ffff800027acad50) at sendit+0x65d sys/kern/uipc_syscalls.c:653
sys_sendto(ffff8000ffff3508,ffff800027acacf8,ffff800027acad50) at sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
syscall(ffff800027acadc0) at syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
syscall(ffff800027acadc0) at syscall+0x489 sys/arch/amd64/amd64/trap.c:585
Xsyscall() at Xsyscall+0x128
end of kernel
end trace frame: 0x8028df2e4e0, count: -22
ddb{0}> machine ddbcpu 1
Stopped at x86_ipi_db+0x1a: addq $0x8,%rsp
x86_ipi_db(ffff800020ce8ff0) at x86_ipi_db+0x1a sys/arch/amd64/amd64/db_interface.c:393
x86_ipi_handler() at x86_ipi_handler+0xb7 sys/arch/amd64/amd64/ipi.c:106
Xresume_lapic_ipi() at Xresume_lapic_ipi+0x23
x86_bus_space_io_read_1(3f8,5) at x86_bus_space_io_read_1+0x28 sys/arch/amd64/amd64/bus_space.c:639
comcnputc(800,20) at comcnputc+0x97 sys/dev/ic/com.c:1259
cnputc(20) at cnputc+0x4b sys/dev/cons.c:239
db_putchar(61) at db_putchar+0x316 db_force_whitespace sys/ddb/db_output.c:102 [inline]
db_putchar(61) at db_putchar+0x316 sys/ddb/db_output.c:153
kprintf() at kprintf+0x20ec sys/kern/subr_prf.c:1068
db_printf(ffffffff82608c08) at db_printf+0x85 sys/kern/subr_prf.c:502
panic(ffffffff8258fc0f) at panic+0xd7 sys/kern/subr_prf.c:220
__assert(ffffffff826026c6,ffffffff825e4e08,2a6,ffffffff825be35d) at __assert+0x25 sys/kern/subr_prf.c:161
proc_trampoline_mp() at proc_trampoline_mp+0x131
end trace frame: 0x0, count: 3
ddb{1}> trace
x86_ipi_db(ffff800020ce8ff0) at x86_ipi_db+0x1a sys/arch/amd64/amd64/db_interface.c:393
x86_ipi_handler() at x86_ipi_handler+0xb7 sys/arch/amd64/amd64/ipi.c:106
Xresume_lapic_ipi() at Xresume_lapic_ipi+0x23
x86_bus_space_io_read_1(3f8,5) at x86_bus_space_io_read_1+0x28 sys/arch/amd64/amd64/bus_space.c:639
comcnputc(800,20) at comcnputc+0x97 sys/dev/ic/com.c:1259
cnputc(20) at cnputc+0x4b sys/dev/cons.c:239
db_putchar(61) at db_putchar+0x316 db_force_whitespace sys/ddb/db_output.c:102 [inline]
db_putchar(61) at db_putchar+0x316 sys/ddb/db_output.c:153
kprintf() at kprintf+0x20ec sys/kern/subr_prf.c:1068
db_printf(ffffffff82608c08) at db_printf+0x85 sys/kern/subr_prf.c:502
panic(ffffffff8258fc0f) at panic+0xd7 sys/kern/subr_prf.c:220
__assert(ffffffff826026c6,ffffffff825e4e08,2a6,ffffffff825be35d) at __assert+0x25 sys/kern/subr_prf.c:161
proc_trampoline_mp() at proc_trampoline_mp+0x131
end trace frame: 0x0, count: -12