[Linux-cluster] do_dlm_unlock kernel panic

[Sylvain COUTANT]

Hi all,

I got the following error tonight after a network blackout on one -test- server :

dlm: dlm_unlock: lkid 10301 lockspace not found
exp1 move flags 0,1,0 ids 0,2,0
exp1 move use event 2
exp1 recover event 2 (first)
exp1 add nodes
exp1 total nodes 3
exp1 rebuild resource directory
exp1 rebuilt 5 resources
exp1 recover event 2 done
exp1 move flags 0,0,1 ids 0,2,2
exp1 process held requests
exp1 processed 0 requests
exp1 recover event 2 finished
exp1 move flags 1,0,0 ids 2,2,2

8140 un 2,13f 10107 3 0
8140 un 2,40e 10074 3 0
8140 un 2,9c 201c7 3 0
8140 un 2,27b 201ab 3 0
8133 qc 2,38d 3,3 id 203a8 sts -65538 0
8133 qc 2,a4 3,3 id 20000 sts -65538 0
8133 qc 2,393 3,3 id 20381 sts -65538 0
8133 qc 2,308 3,3 id 10350 sts -65538 0
8133 qc 2,8e 3,3 id 1015f sts -65538 0
8133 qc 2,3e0 3,3 id 20171 sts -65538 0
8133 qc 2,411 3,3 id 100cc sts -65538 0
8133 qc 2,397 3,3 id 302ef sts -65538 0
8133 qc 2,13f 3,3 id 10107 sts -65538 0
8133 qc 2,40e 3,3 id 10074 sts -65538 0
8133 qc 2,9c 3,3 id 201c7 sts -65538 0
8133 qc 2,27b 3,3 id 201ab sts -65538 0
8140 un 2,38b 202ab 3 0
8140 un 2,3d8 20351 3 0
8140 un 2,304 203f6 3 0
8140 un 2,3dc 103ea 3 0
8140 un 2,319 10023 3 0
8140 un 2,16e 203b9 3 0
8140 un 2,4b 101bf 3 0
8140 un 2,414 10342 3 0
8140 un 2,31d 1026f 3 0
8140 un 2,187 1024e 3 0
8140 un 2,3d4 1016a 3 0
8140 un 2,34 2011a 3 0
8133 qc 2,38b 3,3 id 202ab sts -65538 0
8133 qc 2,3d8 3,3 id 20351 sts -65538 0
8133 qc 2,304 3,3 id 203f6 sts -65538 0
8133 qc 2,3dc 3,3 id 103ea sts -65538 0
8133 qc 2,319 3,3 id 10023 sts -65538 0
8133 qc 2,16e 3,3 id 203b9 sts -65538 0
8133 qc 2,4b 3,3 id 101bf sts -65538 0
8133 qc 2,414 3,3 id 10342 sts -65538 0
8133 qc 2,31d 3,3 id 1026f sts -65538 0
8133 qc 2,187 3,3 id 1024e sts -65538 0
8133 qc 2,3d4 3,3 id 1016a sts -65538 0
8133 qc 2,34 3,3 id 2011a sts -65538 0
8140 un 2,311 10161 3 0
8133 qc 2,311 3,3 id 10161 sts -65538 0
8140 un 2,148 1036c 3 0
8133 qc 2,148 3,3 id 1036c sts -65538 0
8140 un 2,2c 2038d 3 0
8133 qc 2,2c 3,3 id 2038d sts -65538 0
8140 un 2,31b 100be 3 0
8133 qc 2,31b 3,3 id 100be sts -65538 0
8140 un 2,263 1016f 3 0
8133 qc 2,263 3,3 id 1016f sts -65538 0
8140 un 2,1e1 10068 3 0
8133 qc 2,1e1 3,3 id 10068 sts -65538 0
8140 un 2,3b2 10175 3 0
8133 qc 2,3b2 3,3 id 10175 sts -65538 0
8140 un 2,309 100af 3 0
8133 qc 2,309 3,3 id 100af sts -65538 0
8140 un 2,3e1 102fe 3 0
8133 qc 2,3e1 3,3 id 102fe sts -65538 0
8140 un 2,31f 1037f 3 0
8133 qc 2,31f 3,3 id 1037f sts -65538 0
8140 un 2,f8 201f7 3 0
8133 qc 2,f8 3,3 id 201f7 sts -65538 0
8140 un 2,55 102cc 3 0
8133 qc 2,55 3,3 id 102cc sts -65538 0
8140 un 2,30d 2007e 3 0
8133 qc 2,30d 3,3 id 2007e sts -65538 0
8140 un 2,313 100b0 3 0
8133 qc 2,313 3,3 id 100b0 sts -65538 0
8140 un 2,25b 1006f 3 0
8133 qc 2,25b 3,3 id 1006f sts -65538 0
8140 un 2,144 103a1 3 0
8133 qc 2,144 3,3 id 103a1 sts -65538 0
8140 un 2,3aa 103f5 3 0
8133 qc 2,3aa 3,3 id 103f5 sts -65538 0
8140 un 2,156 103ab 3 0
8133 qc 2,156 3,3 id 103ab sts -65538 0
8140 un 2,3d9 10099 3 0
8133 qc 2,3d9 3,3 id 10099 sts -65538 0
8140 un 2,b3 103e3 3 0
8133 qc 2,b3 3,3 id 103e3 sts -65538 0
8140 un 2,18 10040 3 0
8133 qc 2,18 3,3 id 10040 sts -65538 0
8140 un 2,317 201ec 3 0
8133 qc 2,317 3,3 id 201ec sts -65538 0
8140 un 2,4d 1017e 3 0
8133 qc 2,4d 3,3 id 1017e sts -65538 0
8140 un 2,3ae 1027e 3 0
8133 qc 2,3ae 3,3 id 1027e sts -65538 0
8140 un 2,3dd 1038e 3 0
8133 qc 2,3dd 3,3 id 1038e sts -65538 0
8140 un 2,179 10168 3 0
8133 qc 2,179 3,3 id 10168 sts -65538 0
8140 un 2,3a6 102ee 3 0
8133 qc 2,3a6 3,3 id 102ee sts -65538 0
8140 un 2,142 1039f 3 0
8133 qc 2,142 3,3 id 1039f sts -65538 0
8140 un 2,3d5 1016e 3 0
8133 qc 2,3d5 3,3 id 1016e sts -65538 0
8140 un 2,3db 10334 3 0
8133 qc 2,3db 3,3 id 10334 sts -65538 0
8140 un 2,39a 10016 3 0
8133 qc 2,39a 3,3 id 10016 sts -65538 0
8140 un 2,146 203cb 3 0
8133 qc 2,146 3,3 id 203cb sts -65538 0
8140 un 2,a3 100e5 3 0
8133 qc 2,a3 3,3 id 100e5 sts -65538 0
8140 un 2,307 100aa 3 0
8133 qc 2,307 3,3 id 100aa sts -65538 0
8140 un 2,27e 200c6 3 0
8133 qc 2,27e 3,3 id 200c6 sts -65538 0
8140 un 2,3df 20326 3 0
8133 qc 2,3df 3,3 id 20326 sts -65538 0
8140 un 2,a7 10366 3 0
8133 qc 2,a7 3,3 id 10366 sts -65538 0
8140 un 2,272 10287 3 0
8133 qc 2,272 3,3 id 10287 sts -65538 0
8140 un 2,3d3 10308 3 0
8133 qc 2,3d3 3,3 id 10308 sts -65538 0
8140 un 2,412 10146 3 0
8140 un 2,3d7 103f6 3 0
8133 qc 2,412 3,3 id 10146 sts -65538 0
8133 qc 2,3d7 3,3 id 103f6 sts -65538 0
8140 un 2,396 20001 3 0
8133 qc 2,396 3,3 id 20001 sts -65538 0
1974 lk 2,18 id 0 -1,3 10000
8133 qc 2,18 -1,3 id 10301 sts 0 0
8140 un 2,18 10301 3 0

lock_dlm:  Assertion failed on line 353 of file /usr/src/cluster-1.00.00/gfs-kernel/src/dlm/lock.c
lock_dlm:  assertion:  "!error"
lock_dlm:  time = 265742
exp1: error=-22 num=2,18 lkf=10000 flags=84

kernel BUG at /usr/src/cluster-1.00.00/gfs-kernel/src/dlm/lock.c:353 (do_dlm_unlock)!
 [<c48ffde4>] do_dlm_unlock+0x134/0x140 [lock_dlm]  [<c49001d0>] lm_dlm_unlock+0x20/0x30 [lock_dlm]  [<c49eac29>] gfs_lm_unlock+0x39/0x60 [gfs]  [<c49ddd9d>] gfs_glock_drop_th+0x8d/0x1d0 [gfs]  [<c49dcee6>] rq_demote+0xb6/0xd0 [gfs]  [<c49dc945>] gfs_holder_get+0x45/0x60 [gfs]  [<c49dd00c>] run_queue+0xac/0xe0 [gfs]  [<c49dd15b>] unlock_on_glock+0x2b/0x40 [gfs]  [<c49dff84>] gfs_reclaim_glock+0x144/0x1b0 [gfs]  [<c49d0369>] gfs_glockd+0x109/0x120 [gfs]  [<c011a780>] default_wake_function+0x0/0x20  [<c010a082>] ret_from_fork+0x6/0x14  [<c011a780>] default_wake_function+0x0/0x20  [<c49d0260>] gfs_glockd+0x0/0x120 [gfs]  [<c01080a5>] kernel_thread_helper+0x5/0x10 Kernel panic - not syncing: BUG!

Do someone know if there is any reason for this ?


This one was built from the cluster-1.00.00 tarball.

Regards,
--
Sylvain COUTANT

ADVISEO
http://www.adviseo.fr/
http://www.open-sp.fr/