<div dir="ltr">You can certainly run multiple instances of the content server.  It just needs a connection to the database and access to the storage.<div><br></div><div>Have you tuned the number of worker processes in Gunicorn?  It defaults to 1, but should almost certainly be increased for any sort of volume.  <a href="https://docs.gunicorn.org/en/stable/settings.html#worker-processes">https://docs.gunicorn.org/en/stable/settings.html#worker-processes</a></div><div><br></div><div>There are several moving pieces, but that's really all I had to touch here.</div><div><br></div><div>--Danny</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Jun 22, 2021 at 10:34 AM Bin Li (BLOOMBERG/ 120 PARK) <<a href="mailto:bli111@bloomberg.net">bli111@bloomberg.net</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div><div style="white-space:pre-wrap;font-size:small;font-family:"Courier New",Courier,"BB.FixedWidth"">We recently add more clients to use the pulp content server. The processes run out the file descriptor first. We then increased both nginx and pulp-content by creating a override.conf <div>/etc/systemd/system/pulpcore-content.service.d # cat override.conf </div><div>[Service]</div><div>LimitNOFILE=65536</div><div><br><div>and updated nginx.conf</div><div># Gunicorn docs suggest this value.</div><div>worker_processes 1;</div><div>events {</div><div>    worker_connections 10000;  # increase if you have lots of clients</div><div>    accept_mutex off;  # set to 'on' if nginx worker_processes > 1</div><div>}</div><div><br></div><div>worker_rlimit_nofile    20000;</div><div><br></div><div><br></div><div>Now we are keep getting this error.</div></div><div>2021/06/22 11:26:36 [error] 78373#0: *112823 upstream timed out (110: Connection timed out) while connecting to upstream, client:</div><div><br></div><div>It looks like pulp-content server cannot keep up with requests. Is there anything we could do to increase the performance of the content server?</div></div></div>_______________________________________________<br>
Pulp-list mailing list<br>
<a href="mailto:Pulp-list@redhat.com" target="_blank">Pulp-list@redhat.com</a><br>
<a href="https://listman.redhat.com/mailman/listinfo/pulp-list" rel="noreferrer" target="_blank">https://listman.redhat.com/mailman/listinfo/pulp-list</a></blockquote></div>