<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 15 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri",sans-serif;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link="#0563C1" vlink="#954F72"><div class=WordSection1><p class=MsoNormal>Today I tried to log in to my SW server and could not get in.  I also tried to get in via spacecmd and could not get in.<o:p></o:p></p><p class=MsoNormal>This is from the  rhn_taskomatic_daemon.log<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>INFO   | jvm 5    | 2017/08/31 12:43:15 | Wrapper (Version 3.2.3) http://wrapper.tanukisoftware.org<o:p></o:p></p><p class=MsoNormal>INFO   | jvm 5    | 2017/08/31 12:43:15 |   Copyright 1999-2006 Tanuki Software, Inc.  All Rights Reserved.<o:p></o:p></p><p class=MsoNormal>INFO   | jvm 5    | 2017/08/31 12:43:15 |<o:p></o:p></p><p class=MsoNormal>ERROR  | wrapper  | 2017/08/31 12:43:44 | Startup failed: Timed out waiting for signal from JVM.<o:p></o:p></p><p class=MsoNormal>ERROR  | wrapper  | 2017/08/31 12:43:45 | JVM did not exit on request, terminated<o:p></o:p></p><p class=MsoNormal>INFO   | wrapper  | 2017/08/31 12:43:45 | JVM exited on its own while waiting to kill the application.<o:p></o:p></p><p class=MsoNormal>STATUS | wrapper  | 2017/08/31 12:43:45 | JVM exited in response to signal SIGKILL (9).<o:p></o:p></p><p class=MsoNormal>FATAL  | wrapper  | 2017/08/31 12:43:45 | There were 5 failed launches in a row, each lasting less than 300 seconds.  Giving up.<o:p></o:p></p><p class=MsoNormal>FATAL  | wrapper  | 2017/08/31 12:43:45 |   There may be a configuration problem: please check the logs.<o:p></o:p></p><p class=MsoNormal>STATUS | wrapper  | 2017/08/31 12:43:45 | <-- Wrapper Stopped<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>[root@oelsandbox rhn]# spacecmd<o:p></o:p></p><p class=MsoNormal>Welcome to spacecmd, a command-line interface to Spacewalk.<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Type: 'help' for a list of commands<o:p></o:p></p><p class=MsoNormal>      'help <cmd>' for command-specific help<o:p></o:p></p><p class=MsoNormal>      'quit' to quit<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Traceback (most recent call last):<o:p></o:p></p><p class=MsoNormal>  File "/bin/spacecmd", line 166, in <module><o:p></o:p></p><p class=MsoNormal>    if not shell.do_login(''):<o:p></o:p></p><p class=MsoNormal>  File "/usr/lib/python2.7/site-packages/spacecmd/misc.py", line 284, in do_login<o:p></o:p></p><p class=MsoNormal>    self.api_version = self.client.api.getVersion()<o:p></o:p></p><p class=MsoNormal>  File "/usr/lib64/python2.7/xmlrpclib.py", line 1233, in __call__<o:p></o:p></p><p class=MsoNormal>    return self.__send(self.__name, args)<o:p></o:p></p><p class=MsoNormal>  File "/usr/lib64/python2.7/xmlrpclib.py", line 1587, in __request<o:p></o:p></p><p class=MsoNormal>    verbose=self.__verbose<o:p></o:p></p><p class=MsoNormal>  File "/usr/lib64/python2.7/xmlrpclib.py", line 1273, in request<o:p></o:p></p><p class=MsoNormal>    return self.single_request(host, handler, request_body, verbose)<o:p></o:p></p><p class=MsoNormal>  File "/usr/lib64/python2.7/xmlrpclib.py", line 1321, in single_request<o:p></o:p></p><p class=MsoNormal>    response.msg,<o:p></o:p></p><p class=MsoNormal>xmlrpclib.ProtocolError: <ProtocolError for oelsandbox.nedelta.com/rpc/api: 500 Internal Server Error><o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Everything has been running fine up until today.  I did a yum security update yesterday and the only update was a kernel update.  I rebooted the server.<o:p></o:p></p><p class=MsoNormal>All spacewalk services were restarted and they all seem to be running.<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Tail of up2date log<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>[Wed Aug 30 10:52:31 2017] up2date Updating package profile<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 14:52:30 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 14:52:30 2017] up2date successfully retrieved authentication token from up2date server<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 18:52:30 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 18:52:30 2017] up2date successfully retrieved authentication token from up2date server<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 22:52:31 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Wed Aug 30 22:52:31 2017] up2date successfully retrieved authentication token from up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 02:52:31 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 02:52:31 2017] up2date successfully retrieved authentication token from up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 06:52:31 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 06:52:31 2017] up2date successfully retrieved authentication token from up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:32:52 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:32:53 2017] up2date A protocol error occurred: Internal Server Error , attempt #1,<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:35:25 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:35:32 2017] up2date A protocol error occurred: Internal Server Error , attempt #1,<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:35:48 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:36:18 2017] up2date A protocol error occurred: Internal Server Error , attempt #1,<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:48:08 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:48:38 2017] up2date A protocol error occurred: Internal Server Error , attempt #1,<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:55:08 2017] up2date logging into up2date server<o:p></o:p></p><p class=MsoNormal>[Thu Aug 31 12:55:35 2017] up2date A protocol error occurred: Internal Server Error , attempt #1,<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>[root@oelsandbox log]# uname -r<o:p></o:p></p><p class=MsoNormal>3.8.13-118.19.4.el7uek.x86_64<o:p></o:p></p><p class=MsoNormal>[root@oelsandbox log]# uptrack-uname -r<o:p></o:p></p><p class=MsoNormal>3.8.13-118.19.4.el7uek.x86_64<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Does anyone have any idea what might be the cause of this?<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Thank you<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p></div></body></html>