Which kernel are you running<br>If you are running the stock RedHat kernel not the patched version that comes with RHOS or RDO that might explain it.<br><br><span style="font-family:Prelude, Verdana, san-serif;"><br><br></span><span id="signature"><div style="font-family: arial, sans-serif; font-size: 12px;color: #999999;">-- Sent from my HP Pre3</div><br></span><span style="color:navy; font-family:Prelude, Verdana, san-serif; "><hr align="left" style="width:75%">On Nov 5, 2013 17:33, Xin Zhao <xzhao@bnl.gov> wrote: <br><br></span>Hi Thomas, <br> <br>Thanks for the reply, here is the info of the drivers: <br> <br>1) NIC for the VM network connection: <br> <br>$> ethtool -i eth1 <br>driver: e1000e <br>version: 2.1.4-k <br>firmware-version: 1.6-12 <br>bus-info: 0000:04:00.1 <br>supports-statistics: yes <br>supports-test: yes <br>supports-eeprom-access: yes <br>supports-register-dump: yes <br>supports-priv-flags: no <br> <br>2) NIC for the external internet connection: <br> <br>$> ethtool -i eth2 <br>driver: myri10ge <br>version: 1.5.1-1.451 <br>firmware-version: 1.4.52 -- 2010/10/28 21:27:06 m <br>bus-info: 0000:0b:00.0 <br>supports-statistics: yes <br>supports-test: no <br>supports-eeprom-access: no <br>supports-register-dump: no <br>supports-priv-flags: no <br> <br>Xin <br> <br> <br>On 11/5/2013 4:55 PM, Thomas Graf wrote: <br>> On 11/05/2013 10:43 PM, Xin Zhao wrote: <br>>> Add the general Openstack list, sorry for folks who are on both lists... <br>>> <br>>> On 11/5/2013 2:42 PM, Xin Zhao wrote: <br>>>> Hello, <br>>>> <br>>>> On my grizzly quantum/OVS network node, after I start the <br>>>> quantum-openvswitch-agent, the system log shows errors as below, <br>>>> and it repeats every second since then...  and the panic messages <br>>>> continue on even after I stop all openstack daemons, only a system  <br>>>> reboot <br>>>> can clear it out. <br>>>> <br>>>> Nov  5 14:13:58 cldnet01 kernel: qg-581539d2-ac: hw csum failure. <br>>>> Nov  5 14:13:58 cldnet01 kernel: Pid: 0, comm: swapper Not tainted <br>>>> 2.6.32-358.123.2.openstack.el6.x86_64 #1 <br>>>> Nov  5 14:13:58 cldnet01 kernel: Call Trace: <br>>>> Nov  5 14:13:58 cldnet01 kernel: <IRQ> [<ffffffff8144a252>] ? <br>>>> netdev_rx_csum_fault+0x42/0x50 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81442cc0>] ? <br>>>> __skb_checksum_complete_head+0x60/0x70 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81442ce1>] ? <br>>>> __skb_checksum_complete+0x11/0x20 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff814c8b7d>] ? <br>>>> nf_ip_checksum+0x5d/0x130 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa01b4d31>] ? <br>>>> udp_error+0xb1/0x1e0 [nf_conntrack] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa01aec98>] ? <br>>>> nf_conntrack_in+0x138/0xa00 [nf_conntrack] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa00721bb>] ? <br>>>> alloc_null_binding+0x5b/0xa0 [iptable_nat] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa0072441>] ? <br>>>> nf_nat_fn+0x91/0x260 [iptable_nat] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa01cc721>] ? <br>>>> ipv4_conntrack_in+0x21/0x30 [nf_conntrack_ipv4] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81477459>] ? <br>>>> nf_iterate+0x69/0xb0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff814819e9>] ? <br>>>> ip_rcv_finish+0x199/0x440 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81481850>] ? <br>>>> ip_rcv_finish+0x0/0x440 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81477614>] ? <br>>>> nf_hook_slow+0x74/0x110 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81481850>] ? <br>>>> ip_rcv_finish+0x0/0x440 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81481ef4>] ? <br>>>> ip_rcv+0x264/0x350 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffffa024b503>] ? <br>>>> ovs_netdev_frame_hook+0xb3/0x110 [openvswitch] <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81449e6b>] ? <br>>>> __netif_receive_skb+0x4ab/0x750 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8144a1aa>] ? <br>>>> process_backlog+0x9a/0x100 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8144f483>] ? <br>>>> net_rx_action+0x103/0x2f0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff810770b1>] ? <br>>>> __do_softirq+0xc1/0x1e0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff810e1bb0>] ? <br>>>> handle_IRQ_event+0x60/0x170 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8100c1cc>] ? <br>>>> call_softirq+0x1c/0x30 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8100de05>] ? <br>>>> do_softirq+0x65/0xa0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81076e95>] ? <br>>>> irq_exit+0x85/0x90 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8151cd75>] ?  <br>>>> do_IRQ+0x75/0xf0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8100b9d3>] ? <br>>>> ret_from_intr+0x0/0x11 <br>>>> Nov  5 14:13:58 cldnet01 kernel: <EOI> [<ffffffff81014907>] ? <br>>>> mwait_idle+0x77/0xd0 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8151931a>] ? <br>>>> atomic_notifier_call_chain+0x1a/0x20 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff81009fc6>] ? <br>>>> cpu_idle+0xb6/0x110 <br>>>> Nov  5 14:13:58 cldnet01 kernel: [<ffffffff8150cc00>] ? <br>>>> start_secondary+0x2ac/0x2ef <br>>>> <br>>>> The only other message in the syslog that's related to CSUM is the <br>>>> following: <br>>>> Nov  5 14:10:44 cldnet01 kernel: lo: Dropping TSO features since no <br>>>> CSUM feature. <br>>>> Nov  5 14:10:44 cldnet01 kernel: lo: Disabled Privacy Extensions <br>>>> (this message appears after starting the l3-agent) <br>>>> <br>>>> The network host is RHEL6.4, kernel is <br>>>> 2.6.32-358.123.2.openstack.el6.x86_64 <br>>>> <br>>>> All the daemons appear to being running, an instance can start, but <br>>>> network doesn't work for the instance. <br>>>> <br>>>> Any wisdom on what's going on? <br>> <br>> Most likely a driver issue, what NIC model and driver are you using? <br>> ehttool -i $DEV will help. <br> <br>_______________________________________________ <br>rhos-list mailing list <br>rhos-list@redhat.com <br>https://www.redhat.com/mailman/listinfo/rhos-list <br>