<div dir="ltr">Hi Brian,<br><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Jul 17, 2018 at 3:27 AM, Brian Stinson <span dir="ltr"><<a href="mailto:bstinson@redhat.com" target="_blank">bstinson@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On Jul 16 11:37, Praveen Kumar wrote:<br>
> On Mon, Jul 16, 2018, 11:33 AM Lalatendu Mohanty <<a href="mailto:lmohanty@redhat.com">lmohanty@redhat.com</a>><br>
> wrote:<br>
> <br>
> > Hi,<br>
> ><br>
> > On Mon, Jul 16, 2018 at 5:31 AM, <<a href="mailto:ci@centos.org">ci@centos.org</a>> wrote:<br>
> ><br>
> >> The build has failed. Check the build URL for failure logs:<br>
> >> <a href="https://ci.centos.org/job/minishift-nightly-centos/218/" rel="noreferrer" target="_blank">https://ci.centos.org/job/<wbr>minishift-nightly-centos/218/</a><br>
> ><br>
> ><br>
> > Our nightly builds are failing because of a CICO issue.  Here is the error<br>
> > from last test run.<br>
> ><br>
</span>> > *00:01:21* ++ cico node get -f value -c ip_address -c comment --retry-count 12*00:01:25* Starting new HTTP connection (1): <a href="http://admin.ci.centos.org" rel="noreferrer" target="_blank">admin.ci.centos.org</a>*00:01:28* Resetting dropped connection: <a href="http://admin.ci.centos.org" rel="noreferrer" target="_blank">admin.ci.centos.org</a>*00:01:30* + [[ '' != '' ]]*00:01:30* + echo 'CICO: Unable to get Node.'*00:01:30* CICO: Unable to get Node.*00:01:30* + exit 1*00:01:30* Build step 'Execute shell' marked build as failure*00:01:30* Email was triggered for: Failure - Any*00:01:30* Sending email for trigger: Failure - Any<br>
> > xxxxxx<br>
> > *00:01:31* Finished: FAILURE<br>
<span class="">> ><br>
> ><br>
> > We have been seeing issues like this for our nightly runs. Refer [1]. How<br>
> > can we fix the issue from CentOS ci side?<br>
> ><br>
> <br>
> Most of time this is cause of failure, looks like a certain time nodes are<br>
> not allocated, better to ask Fabian or any other person who is responsible<br>
> for ci infra.<br>
> <br>
> <br>
> > [1] <a href="https://ci.centos.org/job/minishift-nightly-centos/218/" rel="noreferrer" target="_blank">https://ci.centos.org/job/<wbr>minishift-nightly-centos/218/</a><br>
> ><br>
> > -Lala<br>
> ><br>
> ><br>
> > ______________________________<wbr>_________________<br>
> > Ci-users mailing list<br>
> > <a href="mailto:Ci-users@centos.org">Ci-users@centos.org</a><br>
> > <a href="https://lists.centos.org/mailman/listinfo/ci-users" rel="noreferrer" target="_blank">https://lists.centos.org/<wbr>mailman/listinfo/ci-users</a><br>
> ><br>
<br>
</span>You have a few nightly jobs that all start at midnight. Recall that<br>
duffy has a rate limit of 6 sessions over 5 minutes.<br>
<br>
If you can stagger some of these nightly jobs so that they don't run at<br>
once you should be able to get machines.<br></blockquote><div><br></div><div>We doubt on this reason :)</div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<br>
The appropriate cron line looks like this, and will run the job at a<br>
random time during the midnight hour: <br>
<br>
H 0 * * *<br></blockquote><div><br></div><div>Thanks for your suggestion. :)</div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<span class="HOEnZb"><font color="#888888"><br>
--Brian<br>
</font></span><div class="HOEnZb"><div class="h5">______________________________<wbr>_________________<br>
Ci-users mailing list<br>
<a href="mailto:Ci-users@centos.org">Ci-users@centos.org</a><br>
<a href="https://lists.centos.org/mailman/listinfo/ci-users" rel="noreferrer" target="_blank">https://lists.centos.org/<wbr>mailman/listinfo/ci-users</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div style="font-family:arial;font-size:small">Regards,</div><div style="font-family:arial;font-size:small">Budh Ram Gurung</div></div></div></div></div>
</div></div>