syzbot


panic: acquiring blockable sleep lock with spinlock or critical section held (pkanerinc:e l _l o c kke)r &nkeerl ndiea

Status: fixed on 2022/03/24 08:53
Reported-by: syzbot+dfef35e931301e496e0f@syzkaller.appspotmail.com
Fix commit: d25fea59a0de For raw IP packets rip_input() traverses the loop of all PCBs. From there it calls sbappendaddr() while holding the raw table mutex. This ends in sorwakeup() where we finally grab the kernel lock while holding a mutex. Witness detects this misuse. Use the same solution as for PCB notify. Collect the affected PCBs in a temporary list. The list is protected by exclusive net lock. syzbot+ebe3f03a472fecf5e42e@syzkaller.appspotmail.com OK claudio@
First crash: 766d, last: 766d

Sample crash report:
���b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ�������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������b�+���&~�SАu=	�N�m3���჏tEgPUje-bYZ&ޣ����������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������panic: acquiring blockable sleep lock with spinlock or critical section held (pkanerinc:e l _l  o c kke)r &nkeerl  ndiealg_lnoocskt
ic Stopped at     db_enter+0x18:  addq    $0x8,%rsp
    TID    PID    UID     PRFLAGS     PFLAGS  CPU  COMMAND
 192678  85215      0           0  0x4000000    1  syz-executor.7
*415821  90589      0           0  0x4000000    0  syz-executor.5
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
end trace frame: 0xffff800027aca950, count: 0
https://www.openbsd.org/ddb.html describes the minimum info required in bug
reports.  Insufficient info makes it difficult to find and fix bugs.
ddb{0}> 
ddb{0}> set $lines = 0
ddb{0}> set $maxwidth = 0
ddb{0}> show panic
*cpu0: acquiring blockable sleep lock with spinlock or critical section held (kernel_lock) &kernel_lock
 cpu1: kernel diagnostic assertion "!_kernel_lock_held()" failed: file "/syzkaller/managers/multicore/kernel/sys/kern/kern_fork.c", line 678
ddb{0}> trace
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
ip_output(fffffd8076f08000,0,fffffd806f67ba38,20,0,fffffd806f67b9c0,3ab17e4bafa14dff) at ip_output+0x106b sys/netinet/ip_output.c:468
rip_output(fffffd8076f08000,fffffd806d8e71f8,ffff800027aca9f0,101) at rip_output+0x2cb sys/netinet/raw_ip.c:302
rip_usrreq(fffffd806d8e71f8,9,fffffd8076f08000,0,0,ffff8000ffff3508) at rip_usrreq+0x49c sys/netinet/raw_ip.c:554
sosend(fffffd806d8e71f8,0,ffff800027acab60,0,0,0) at sosend+0x632 sys/kern/uipc_socket.c:582
sendit(ffff8000ffff3508,7,ffff800027acac60,0,ffff800027acad50) at sendit+0x65d sys/kern/uipc_syscalls.c:653
sys_sendto(ffff8000ffff3508,ffff800027acacf8,ffff800027acad50) at sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
syscall(ffff800027acadc0) at syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
syscall(ffff800027acadc0) at syscall+0x489 sys/arch/amd64/amd64/trap.c:585
Xsyscall() at Xsyscall+0x128
end of kernel
end trace frame: 0x8028df2e4e0, count: -22
ddb{0}> show registers
rdi                                0
rsi                              0x1
rbp               0xffff800027aca210
rbx               0xffffffff8298dbff    cpu_info_full_primary+0x2bff
rdx               0xffff800000bda240
rcx                                0
rax               0xffff8000ffff3508
r8                 0x101010101010101
r9                0x8080808080808080
r10               0xb7ff3165a416e9bb
r11               0xc1f1c669553963be
r12               0xffffffff8298da00    cpu_info_full_primary+0x2a00
r13                                0
r14                                0
r15                              0x1
rip               0xffffffff811e4c58    db_enter+0x18
cs                               0x8
rflags                         0x246
rsp               0xffff800027aca200
ss                              0x10
db_enter+0x18:  addq    $0x8,%rsp
ddb{0}> show proc
PROC (syz-executor.5) pid=415821 stat=onproc
    flags process=0 proc=4000000<THREAD>
    pri=32, usrpri=86, nice=20
    forw=0xffffffffffffffff, list=0xffff80002e36c7e8,0xffff8000ffff37b8
    process=0xffff80002a937620 user=0xffff800027ac5000, vmspace=0xfffffd806edc3008
    estcpu=36, cpticks=1, pctcpu=0.0
    user=0, sys=1, intr=0
ddb{0}> ps
   PID     TID   PPID    UID  S       FLAGS  WAIT          COMMAND
 15217  251650  61021      0  2           0                syz-executor.0
 29225   14232  21178      0  2           0                syz-executor.3
 29225  494050  21178      0  2   0x4000000                syz-executor.3
 85215  364462  87931      0  2           0                syz-executor.7
 85215  192678  87931      0  7   0x4000000                syz-executor.7
 90589  298848  50977      0  2           0                syz-executor.5
*90589  415821  50977      0  7   0x4000000                syz-executor.5
  1828  437190  94847      0  2           0                syz-executor.4
  1828   52299  94847      0  2   0x4000000                syz-executor.4
 98094  105617   5135      0  2           0                syz-executor.2
 98094    7839   5135      0  3   0x4000080  rest          syz-executor.2
 98094  122075   5135      0  3   0x4000080  bell          syz-executor.2
 71819  399578   1159      0  2           0                syz-executor.1
 71819  505894   1159      0  3   0x4000080  fsleep        syz-executor.1
 71819  462579   1159      0  2   0x4000000                syz-executor.1
  5135  202784  67722      0  3        0x82  nanoslp       syz-executor.2
 94847  236618  67722      0  3        0x82  nanoslp       syz-executor.4
  1159    9324  67722      0  2         0x2                syz-executor.1
 53479  330973      1      0  3    0x100083  ttyopn        getty
 21483   51189      0      0  3     0x14200  bored         sosplice
 94815  238387  67722      0  2         0x2                syz-executor.6
 87931  433914  67722      0  3        0x82  nanoslp       syz-executor.7
 50977   86323  67722      0  3        0x82  nanoslp       syz-executor.5
 21178  457008  67722      0  3        0x82  nanoslp       syz-executor.3
 61021  206956  67722      0  3        0x82  nanoslp       syz-executor.0
 67722  342942   1646      0  3        0x82  thrsleep      syz-fuzzer
 67722  375977   1646      0  3   0x4000082  nanoslp       syz-fuzzer
 67722  120409   1646      0  3   0x4000082  thrsleep      syz-fuzzer
 67722  386786   1646      0  3   0x4000082  thrsleep      syz-fuzzer
 67722  163611   1646      0  3   0x4000082  thrsleep      syz-fuzzer
 67722   80394   1646      0  3   0x4000082  thrsleep      syz-fuzzer
 67722  504686   1646      0  3   0x4000082  thrsleep      syz-fuzzer
 67722  110592   1646      0  3   0x4000082  kqread        syz-fuzzer
 67722   79979   1646      0  3   0x4000082  thrsleep      syz-fuzzer
  1646  240297  62341      0  3    0x10008a  sigsusp       ksh
 62341  110569  81746      0  3        0x9a  kqread        sshd
 81746   42764      1      0  3        0x88  kqread        sshd
  3797  374554  25262     74  3   0x1100092  bpf           pflogd
 25262  499765      1      0  3        0x80  netio         pflogd
 22531  206802  68207     73  3   0x1100090  kqread        syslogd
 68207  416809      1      0  3    0x100082  netio         syslogd
 92805  381662      1      0  3    0x100080  kqread        resolvd
 31153   31317  97605     77  3    0x100092  kqread        dhcpleased
 99781  289783  97605     77  3    0x100092  kqread        dhcpleased
 97605  195490      1      0  3        0x80  kqread        dhcpleased
 17206  230914      0      0  3     0x14200  bored         smr
 96972  395378      0      0  2     0x14200                zerothread
 72234  280261      0      0  3     0x14200  aiodoned      aiodoned
 90327  179953      0      0  3     0x14200  syncer        update
 68953   80558      0      0  3     0x14200  cleaner       cleaner
 79557  517241      0      0  3     0x14200  reaper        reaper
 40190  476632      0      0  3     0x14200  pgdaemon      pagedaemon
  3564   43861      0      0  3     0x14200  bored         viomb
 70511  356042      0      0  3  0x40014200  acpi0         acpi0
 35454  189099      0      0  3  0x40014200                idle1
 23615  232206      0      0  3     0x14200  bored         softnet
 75661  477999      0      0  3     0x14200  bored         systqmp
 28973  199702      0      0  3     0x14200  bored         systq
 93702  324150      0      0  3  0x40014200  bored         softclock
 42935   76066      0      0  3  0x40014200                idle0
     1  342146      0      0  3     0x80082  wait          init
     0       0     -1      0  3     0x10200  scheduler     swapper
ddb{0}> show all locks
CPU 0:
exclusive mutex &table->inpt_mtx r = 0 (0xffffffff82b03010)
#0  witness_lock+0x44d
#1  mtx_enter_try+0x100
#2  mtx_enter+0x4b sys/kern/kern_lock.c:266
#3  rip_input+0x135
#4  ip_deliver+0x322 sys/netinet/ip_input.c:657
#5  ip_ours+0x3ba sys/netinet/ip_input.c:616
#6  ip_input_if+0x2a1
#7  ipv4_input+0x48 sys/netinet/ip_input.c:242
#8  if_input_local+0x10e sys/net/if.c:774
#9  ether_resolve+0x4ac sys/net/if_ethersubr.c:242
#10 ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
#10 ether_output+0x47 sys/net/if_ethersubr.c:353
#11 ip_output+0x106b sys/netinet/ip_output.c:468
#12 rip_output+0x2cb sys/netinet/raw_ip.c:302
#13 rip_usrreq+0x49c sys/netinet/raw_ip.c:554
#14 sosend+0x632 sys/kern/uipc_socket.c:582
#15 sendit+0x65d sys/kern/uipc_syscalls.c:653
#16 sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#17 syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#17 syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#18 Xsyscall+0x128
Process 90589 (syz-executor.5) thread 0xffff8000ffff3508 (415821)
exclusive rwlock netlock r = 0 (0xffffffff82904160)
#0  witness_lock+0x44d
#1  solock+0x86 sys/kern/uipc_socket2.c:295
#2  sosend+0x517 sys/kern/uipc_socket.c:570
#3  sendit+0x65d sys/kern/uipc_syscalls.c:653
#4  sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#5  syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#5  syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#6  Xsyscall+0x128
exclusive mutex &table->inpt_mtx r = 0 (0xffffffff82b03010)
#0  witness_lock+0x44d
#1  mtx_enter_try+0x100
#2  mtx_enter+0x4b sys/kern/kern_lock.c:266
#3  rip_input+0x135
#4  ip_deliver+0x322 sys/netinet/ip_input.c:657
#5  ip_ours+0x3ba sys/netinet/ip_input.c:616
#6  ip_input_if+0x2a1
#7  ipv4_input+0x48 sys/netinet/ip_input.c:242
#8  if_input_local+0x10e sys/net/if.c:774
#9  ether_resolve+0x4ac sys/net/if_ethersubr.c:242
#10 ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
#10 ether_output+0x47 sys/net/if_ethersubr.c:353
#11 ip_output+0x106b sys/netinet/ip_output.c:468
#12 rip_output+0x2cb sys/netinet/raw_ip.c:302
#13 rip_usrreq+0x49c sys/netinet/raw_ip.c:554
#14 sosend+0x632 sys/kern/uipc_socket.c:582
#15 sendit+0x65d sys/kern/uipc_syscalls.c:653
#16 sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
#17 syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
#17 syscall+0x489 sys/arch/amd64/amd64/trap.c:585
#18 Xsyscall+0x128
ddb{0}> show malloc
           Type InUse  MemUse  HighUse   Limit  Requests Type Lim
         devbuf 10186   6540K    7056K  78643K     15792        0
            pcb    13      8K       8K  78643K       290        0
         rtable   178      6K      10K  78643K       904        0
         ifaddr    75     17K      18K  78643K       455        0
         sysctl     2      0K       0K  78643K         2        0
       counters    52     35K      35K  78643K       182        0
       ioctlops     0      0K       4K  78643K      1891        0
            iov     0      0K      18K  78643K       170        0
          mount     1      1K       1K  78643K         1        0
            log     0      0K       0K  78643K         4        0
         vnodes  1285     80K      80K  78643K      2961        0
      UFS quota     1     32K      32K  78643K         1        0
      UFS mount     5     36K      36K  78643K         5        0
            shm     2      1K       9K  78643K        29        0
         VM map     2      1K       1K  78643K         2        0
            sem    10      0K       1K  78643K        11        0
        dirhash    12      2K       2K  78643K        12        0
           ACPI  1697    195K     286K  78643K     12548        0
      file desc    17     61K      85K  78643K      5402        0
          sigio     0      0K       0K  78643K        47        0
           proc    71     87K     124K  78643K      1016        0
        subproc   104      6K       7K  78643K       260        0
    NFS srvsock     1      0K       0K  78643K         1        0
     NFS daemon     1     16K      16K  78643K         1        0
    ip_moptions     0      0K       0K  78643K       308        0
       in_multi    82      5K       6K  78643K       346        0
    ether_multi     1      0K       0K  78643K        52        0
            mrt     1      0K       0K  78643K        29        0
    ISOFS mount     1     32K      32K  78643K         1        0
  MSDOSFS mount     1     16K      16K  78643K         1        0
           ttys    79    360K     360K  78643K        79        0
           exec     0      0K       2K  78643K      1125        0
     pfkey data     0      0K       1K  78643K         4        0
            tdb     3      0K       0K  78643K         3        0
        pagedep     1      8K       8K  78643K         1        0
       inodedep     1     32K      32K  78643K         1        0
         newblk     1      0K       0K  78643K         1        0
        VM swap     7     26K      26K  78643K         7        0
       UVM amap   414    590K     599K  78643K     64726        0
       UVM aobj    26      2K       3K  78643K        30        0
        memdesc     1      4K       4K  78643K         1        0
    crypto data     1      1K       1K  78643K         1        0
    ip6_options     0      0K       0K  78643K       162        0
            NDP    10      0K       2K  78643K       115        0
           temp   125   4711K    4787K  78643K     40486        0
         kqueue    12     18K      26K  78643K       339        0
      SYN cache     2     16K      16K  78643K         2        0
ddb{0}> show all pools
Name      Size Requests Fail Releases Pgreq Pgrel Npage Hiwat Minpg Maxpg Idle
plcache    128       22    0        0     1     0     1     1     0     8    0
rtpcb      120      197    0      194     1     0     1     1     0     8    0
rtentry    112      264    0      187     4     0     4     4     0     8    0
unpcb      136     1212    0     1194     1     0     1     1     0     8    0
syncache   296       70    0       70     8     8     0     1     0     8    0
tcpqe       32       13    0       13     3     3     0     1     0     8    0
tcpcb      736      962    0      957    19    17     2     5     0     8    1
arp        120       49    0       35     1     0     1     1     0     8    0
inpcb      312     2244    0     2233     6     4     2     3     0     8    1
rttmr       72        8    0        8     2     2     0     1     0     8    0
nd6         48       60    0       42     1     0     1     1     0     8    0
pkpcb       40       53    0       53     5     5     0     1     0     8    0
kcovpl      48       20    0       12     1     0     1     1     0     8    0
ppxss      1248      18    0       18     3     3     0     1     0     8    0
pfstscr     40        5    0        5     2     2     0     1     0     8    0
pffrag     232        8    0        6     2     1     1     1     0   482    0
pffrnode    88        8    0        6     2     1     1     1     0     8    0
pffrent     40       16    0       14     2     1     1     1     0     8    0
pfosfp      40     1440    0     1440     5     5     0     5     0     8    0
pfosfpen   112     1440    0     1440    21    21     0    21     0     8    0
pfrktable  1344      31    0       31     2     2     0     1     0     8    0
pfstitem    24       32    0       30     1     0     1     1     0     8    0
pfstkey    112       46    0       44     1     0     1     1     0     8    0
pfstate    320       37    0       35     3     2     1     3     0     8    0
pfrule     1360     109    0      108     5     4     1     3     0     8    0
art_heap8  4096       1    0        0     1     0     1     1     0     8    0
art_heap4  256     1104    0      753    31     6    25    30     0     8    2
art_table   32     1105    0      753     4     0     4     4     0     8    0
art_node    16      263    0      196     1     0     1     1     0     8    0
sysvmsgpl   40       60    0       20     1     0     1     1     0     8    0
semapl     112        8    0        0     1     0     1     1     0     8    0
shmpl      112       27    0        4     1     0     1     1     0     8    0
dirhash    1024      17    0        0     3     0     3     3     0     8    0
dino2pl    256     8227    0     6783    91     0    91    91     0     8    0
ffsino     272     8227    0     6783    97     0    97    97     0     8    0
nchpl      144    14508    0    12885    63     0    63    63     0     8    0
uvmvnodes   80     5926    0        0   121     0   121   121     0     8    0
vnodes     224     5926    0        0   349     0   349   349     0     8    0
namei      1024   37524    0    37524     3     2     1     2     0     8    1
percpumem   16      103    0       65     1     0     1     1     0     8    0
vcpupl     2048      31    0        0     4     0     4     4     0     8    0
vmpool     560       31    0        0     3     0     3     3     0     8    0
pfiaddrpl  120        8    0        8     1     1     0     1     0     8    0
scsiplug    72        4    0        4     1     1     0     1     0     8    0
scxspl     216    42367    0    42367     9     8     1     7     0     8    1
plimitpl   152      172    0      157     1     0     1     1     0     8    0
sigapl     424     5699    0     5654     6     0     6     6     0     8    0
futexpl     64    30094    0    30093     2     1     1     1     0     8    0
knotepl    120      815    0        0    24     0    24    24     0     8    0
kqueuepl   216      493    0      485     1     0     1     1     0     8    0
pipepl     336      391    0      363     3     0     3     3     0     8    0
fdescpl    496     5677    0     5647     6     2     4     5     0     8    0
filepl     152    15983    0    15737    15     5    10    11     0     8    0
lockfpl    104      537    0      535     1     0     1     1     0     8    0
lockfspl    48      218    0      216     1     0     1     1     0     8    0
sessionpl  144       37    0       20     1     0     1     1     0     8    0
pgrppl      48       41    0       24     1     0     1     1     0     8    0
ucredpl     96     1871    0     1859     1     0     1     1     0     8    0
zombiepl   144     5654    0     5654     3     2     1     1     0     8    1
processpl  1064    5699    0     5654     4     0     4     4     0     8    0
procpl     672    11449    0    11388    12     6     6     7     0     8    0
srpgc       96       30    0       30     3     3     0     1     0     8    0
sosppl     168       91    0       91     7     7     0     1     0     8    0
sockpl     480     3706    0     3674    11     6     5     6     0     8    0
mcl64k     65536     14    0        0     2     0     2     2     0     8    0
mcl16k     16384      4    0        0     1     0     1     1     0     8    0
mcl12k     12288      5    0        0     1     0     1     1     0     8    0
mcl9k      9216       5    0        0     1     0     1     1     0     8    0
mcl8k      8192      25    0        0     4     1     3     3     0     8    0
mcl4k      4096      17    0        0     3     0     3     3     0     8    0
mcl2k2     2112       8    0        0     1     0     1     1     0     8    0
mcl2k      2048     260    0        0    17     0    17    17     0     8    0
mtagpl      96      373    0        0     9     0     9     9     0     8    0
mbufpl     256      729    0        0    41     0    41    41     0     8    0
bufpl      288    10506    0     4170   453     0   453   453     0     8    0
anonpl      24  1477572    0  1466943   161    86    75   148     0   186    2
amapchunkpl 152  153202    0   152475    54    23    31    44     0   158    1
amappl16   200    15384    0    15160    83    69    14    39     0     8    1
amappl15   192     1593    0     1587     1     0     1     1     0     8    0
amappl14   184     1025    0     1020     1     0     1     1     0     8    0
amappl13   176      819    0      813     1     0     1     1     0     8    0
amappl12   168       73    0       68     2     1     1     1     0     8    0
amappl11   160      657    0      641     1     0     1     1     0     8    0
amappl10   152     1579    0     1570     1     0     1     1     0     8    0
amappl9    144      515    0      513     1     0     1     1     0     8    0
amappl8    136     1044    0      960     4     0     4     4     0     8    1
amappl7    128      290    0      275     1     0     1     1     0     8    0
amappl6    120      294    0      271     2     1     1     2     0     8    0
amappl5    112     6544    0     6522     1     0     1     1     0     8    0
amappl4    104     2077    0     2050     2     1     1     2     0     8    0
amappl3     96      316    0      302     1     0     1     1     0     8    0
amappl2     88     1491    0     1433     3     1     2     3     0     8    0
amappl1     80    96154    0    95562    21     7    14    19     0     8    1
amappl      88    63910    0    63628     8     1     7     8     0    92    0
dma4096    4096       1    0        1     1     1     0     1     0     8    0
dma1024    1024       1    0        0     1     0     1     1     0     8    0
dma256     256        6    0        6     1     1     0     1     0     8    0
dma128     128      253    0      253     1     1     0     1     0     8    0
dma64       64        6    0        6     1     1     0     1     0     8    0
dma32       32        7    0        7     1     1     0     1     0     8    0
dma16       16       18    0       17     1     0     1     1     0     8    0
aobjpl      72       29    0        4     1     0     1     1     0     8    0
uaddrrnd    24     5708    0     5647     1     0     1     1     0     8    0
uaddrbest   32        2    0        0     1     0     1     1     0     8    0
uaddr       24     5708    0     5647     1     0     1     1     0     8    0
vmmpekpl   168    33441    0    33387     3     0     3     3     0     8    0
vmmpepl    168   492300    0   489985   155    47   108   124     0   357    3
vmsppl     368     5707    0     5647     7     1     6     6     0     8    0
rwobjpl     56   116677    0   109454   105     1   104   104     0     8    0
pdppl      4096   11423    0    11325   247   147   100   102     0     8    2
pvpl        32  2825682    0  2810705   292   155   137   262     0   265    6
pmappl     248     5707    0     5647     5     1     4     4     0     8    0
extentpl    40       58    0       38     1     0     1     1     0     8    0
phpool     112     1041    0      184    25     0    25    25     0     8    0
ddb{0}> machine ddbcpu 0
Invalid cpu 0
ddb{0}> trace
db_enter() at db_enter+0x18 sys/arch/amd64/amd64/db_interface.c:440
panic(ffffffff825a2db5) at panic+0x177 sys/kern/subr_prf.c:202
witness_checkorder(ffffffff829f3ad8,9,0) at witness_checkorder+0x116d sys/kern/subr_witness.c:833
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 read_rflags machine/cpufunc.h:195 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 intr_disable machine/cpufunc.h:216 [inline]
__mp_lock(ffffffff829f38d0) at __mp_lock+0xa1 sys/kern/kern_lock.c:142
selwakeup(fffffd8065c11348) at selwakeup+0x16 klist_empty sys/sys/event.h:361 [inline]
selwakeup(fffffd8065c11348) at selwakeup+0x16 sys/kern/sys_generic.c:885
sorwakeup(fffffd8065c11230) at sorwakeup+0xc9 sys/kern/uipc_socket.c:1699
rip_input(ffff800027aca688,ffff800027aca694,0,2) at rip_input+0x3b0 sys/netinet/raw_ip.c:188
ip_deliver(ffff800027aca688,ffff800027aca694,0,2) at ip_deliver+0x322 sys/netinet/ip_input.c:657
ip_ours(ffff800027aca688,ffff800027aca694,ffff800027ae7000,0) at ip_ours+0x3ba sys/netinet/ip_input.c:616
ip_input_if(ffff800027aca688,ffff800027aca694,4,0,ffff80000019f2a8) at ip_input_if+0x2a1
ipv4_input(ffff80000019f2a8,fffffd807df82000) at ipv4_input+0x48 sys/netinet/ip_input.c:242
if_input_local(ffff80000019f2a8,fffffd807df82000,2) at if_input_local+0x10e sys/net/if.c:774
ether_resolve(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0,ffff800027aca7d8) at ether_resolve+0x4ac sys/net/if_ethersubr.c:242
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 ether_encap sys/net/if_ethersubr.c:324 [inline]
ether_output(ffff80000019f2a8,fffffd8076f08000,fffffd806f67ba48,fffffd806f6ee0e0) at ether_output+0x47 sys/net/if_ethersubr.c:353
ip_output(fffffd8076f08000,0,fffffd806f67ba38,20,0,fffffd806f67b9c0,3ab17e4bafa14dff) at ip_output+0x106b sys/netinet/ip_output.c:468
rip_output(fffffd8076f08000,fffffd806d8e71f8,ffff800027aca9f0,101) at rip_output+0x2cb sys/netinet/raw_ip.c:302
rip_usrreq(fffffd806d8e71f8,9,fffffd8076f08000,0,0,ffff8000ffff3508) at rip_usrreq+0x49c sys/netinet/raw_ip.c:554
sosend(fffffd806d8e71f8,0,ffff800027acab60,0,0,0) at sosend+0x632 sys/kern/uipc_socket.c:582
sendit(ffff8000ffff3508,7,ffff800027acac60,0,ffff800027acad50) at sendit+0x65d sys/kern/uipc_syscalls.c:653
sys_sendto(ffff8000ffff3508,ffff800027acacf8,ffff800027acad50) at sys_sendto+0x80 sys/kern/uipc_syscalls.c:520
syscall(ffff800027acadc0) at syscall+0x489 mi_syscall sys/sys/syscall_mi.h:102 [inline]
syscall(ffff800027acadc0) at syscall+0x489 sys/arch/amd64/amd64/trap.c:585
Xsyscall() at Xsyscall+0x128
end of kernel
end trace frame: 0x8028df2e4e0, count: -22
ddb{0}> machine ddbcpu 1
Stopped at      x86_ipi_db+0x1a:        addq    $0x8,%rsp
x86_ipi_db(ffff800020ce8ff0) at x86_ipi_db+0x1a sys/arch/amd64/amd64/db_interface.c:393
x86_ipi_handler() at x86_ipi_handler+0xb7 sys/arch/amd64/amd64/ipi.c:106
Xresume_lapic_ipi() at Xresume_lapic_ipi+0x23
x86_bus_space_io_read_1(3f8,5) at x86_bus_space_io_read_1+0x28 sys/arch/amd64/amd64/bus_space.c:639
comcnputc(800,20) at comcnputc+0x97 sys/dev/ic/com.c:1259
cnputc(20) at cnputc+0x4b sys/dev/cons.c:239
db_putchar(61) at db_putchar+0x316 db_force_whitespace sys/ddb/db_output.c:102 [inline]
db_putchar(61) at db_putchar+0x316 sys/ddb/db_output.c:153
kprintf() at kprintf+0x20ec sys/kern/subr_prf.c:1068
db_printf(ffffffff82608c08) at db_printf+0x85 sys/kern/subr_prf.c:502
panic(ffffffff8258fc0f) at panic+0xd7 sys/kern/subr_prf.c:220
__assert(ffffffff826026c6,ffffffff825e4e08,2a6,ffffffff825be35d) at __assert+0x25 sys/kern/subr_prf.c:161
proc_trampoline_mp() at proc_trampoline_mp+0x131
end trace frame: 0x0, count: 3
ddb{1}> trace
x86_ipi_db(ffff800020ce8ff0) at x86_ipi_db+0x1a sys/arch/amd64/amd64/db_interface.c:393
x86_ipi_handler() at x86_ipi_handler+0xb7 sys/arch/amd64/amd64/ipi.c:106
Xresume_lapic_ipi() at Xresume_lapic_ipi+0x23
x86_bus_space_io_read_1(3f8,5) at x86_bus_space_io_read_1+0x28 sys/arch/amd64/amd64/bus_space.c:639
comcnputc(800,20) at comcnputc+0x97 sys/dev/ic/com.c:1259
cnputc(20) at cnputc+0x4b sys/dev/cons.c:239
db_putchar(61) at db_putchar+0x316 db_force_whitespace sys/ddb/db_output.c:102 [inline]
db_putchar(61) at db_putchar+0x316 sys/ddb/db_output.c:153
kprintf() at kprintf+0x20ec sys/kern/subr_prf.c:1068
db_printf(ffffffff82608c08) at db_printf+0x85 sys/kern/subr_prf.c:502
panic(ffffffff8258fc0f) at panic+0xd7 sys/kern/subr_prf.c:220
__assert(ffffffff826026c6,ffffffff825e4e08,2a6,ffffffff825be35d) at __assert+0x25 sys/kern/subr_prf.c:161
proc_trampoline_mp() at proc_trampoline_mp+0x131
end trace frame: 0x0, count: -12

Crashes (1):
Time Kernel Commit Syzkaller Config Log Report Syz repro C repro VM info Assets (help?) Manager Title
2022/03/22 10:20 openbsd 63abc0ec39b5 d88ef0c5 .config console log report ci-openbsd-multicore panic: acquiring blockable sleep lock with spinlock or critical section held (pkanerinc:e l _l o c kke)r &nkeerl ndiea
* Struck through repros no longer work on HEAD.