<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">

<head>
<meta http-equiv=Content-Type content="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 12 (filtered medium)">
<style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page Section1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.Section1
        {page:Section1;}
-->
</style>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
</head>

<body lang=EN-US link=blue vlink=purple>

<div class=Section1>

<p class=MsoNormal><span lang=EN-GB>Hello,<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>I am trying to solve a mystery. We have 2
replicated FreeIPA servers.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Today they both stopped receiving requests because
the Directory Server had begun to refuse connections.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>The relevant message is “Not
listening for new connections - too many fds open”<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>That’s all well and good: I can
increase the file descriptor allowance.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>However, the reason the fds limit was
reached was a massive number of connections from the servers themselves.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Can someone provide me with an idea for
what this might be?<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>We received 1024 connections in under 1
second: Here is an example dirsrv access log entry:<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>[22/Oct/2009:12:29:53 +0200] conn=679021
fd=464 slot=464 connection from 127.0.0.1 to 127.0.0.1<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>[22/Oct/2009:12:29:53 +0200] conn=679021
op=0 BIND dn="uid=kdc,cn=sysaccounts,cn=etc,dc=live,dc=tipp<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>24,dc=net" method=128 version=3<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>[22/Oct/2009:12:29:53 +0200] conn=679021
op=0 RESULT err=0 tag=97 nentries=0 etime=0 dn="uid=kdc,cn=<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>sysaccounts,cn=etc,dc=live,dc=tipp24,dc=net"<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Some final notes:<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Both servers stopped one after the other.
First server A, then 1 second afterwards, server B.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>I’m pretty stuck as to what might
have caused this.<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB><o:p> </o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Cheers<o:p></o:p></span></p>

<p class=MsoNormal><span lang=EN-GB>Andy<o:p></o:p></span></p>

</div>

</body>

</html>