<div dir="auto"><div><br><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Aug 20, 2021, 5:16 PM Neal Gompa <<a href="mailto:ngompa13@gmail.com">ngompa13@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Fri, Aug 20, 2021 at 4:09 PM Josh Boyer <<a href="mailto:jwboyer@redhat.com" target="_blank" rel="noreferrer">jwboyer@redhat.com</a>> wrote:<br>
><br>
> On Fri, Aug 20, 2021 at 3:36 PM Neal Gompa <<a href="mailto:ngompa13@gmail.com" target="_blank" rel="noreferrer">ngompa13@gmail.com</a>> wrote:<br>
> ><br>
> > On Fri, Aug 20, 2021 at 2:41 PM Josh Boyer <<a href="mailto:jwboyer@redhat.com" target="_blank" rel="noreferrer">jwboyer@redhat.com</a>> wrote:<br>
> > ><br>
> > > On Fri, Aug 20, 2021 at 1:37 PM Carl George <<a href="mailto:carl@redhat.com" target="_blank" rel="noreferrer">carl@redhat.com</a>> wrote:<br>
> > > ><br>
> > > > On Fri, Aug 20, 2021 at 11:35 AM Neal Gompa <<a href="mailto:ngompa13@gmail.com" target="_blank" rel="noreferrer">ngompa13@gmail.com</a>> wrote:<br>
> > > > ><br>
> > > > > On Fri, Aug 20, 2021 at 12:28 PM Johnny Hughes <<a href="mailto:johnny@centos.org" target="_blank" rel="noreferrer">johnny@centos.org</a>> wrote:<br>
> > > > > ><br>
> > > > > > On 8/19/21 11:21 PM, John R. Dennison wrote:<br>
> > > > > > > On Fri, Aug 20, 2021 at 06:05:49AM +0200, Steven Rosenberg via CentOS-devel wrote:<br>
> > > > > > >> Even emails like I see for for CentOS 7 would be ok.<br>
> > > > > > ><br>
> > > > > > > Considering that people have had nearly 2 years to get such notices out<br>
> > > > > > > for 8 and it's still not happened I wouldn't hold my breath if I were<br>
> > > > > > > you.<br>
> > > > > > ><br>
> > > > > ><br>
> > > > > > I would provide the information if i could, it is not easy to do because<br>
> > > > > > of modularity.<br>
> > > > > ><br>
> > > > > > The thing that builds el8 modules is called MBS .. if you look at MBS<br>
> > > > > > operations, one of the things that gets generated as part of the<br>
> > > > > > filename.  Here is an example:<br>
> > > > > ><br>
> > > > > > <a href="https://koji.mbox.centos.org/koji/buildinfo?buildID=18783" rel="noreferrer noreferrer" target="_blank">https://koji.mbox.centos.org/koji/buildinfo?buildID=18783</a><br>
> > > > > ><br>
> > > > > > Part of the file name is dynamic, created by MBS at build time.  For<br>
> > > > > > example, one of the Source RPM filenames generated is:<br>
> > > > > ><br>
> > > > > > runc-1.0.0-74.rc95.module_el8.4.0+886+c9a8d9ad.src.rpm<br>
> > > > > ><br>
> > > > > > That is not it's filename in RHEL8.  In RHEL 8 .. the filename is:<br>
> > > > > ><br>
> > > > > > runc-1.0.0-74.rc95.module+el8.4.0+11822+6cc1e7d7.src.rpm<br>
> > > > > ><br>
> > > > > > There is no easy way to figure out the file names that match up between<br>
> > > > > > the two systems.  I took me 15 minutes to figure out that one filename,<br>
> > > > > > this does not scale.<br>
> > > > ><br>
> > > > > Everything prior to ".module" should be unique, identifiable, and<br>
> > > > > identical between RHEL and CentOS. MBS whacks %dist to add MBS<br>
> > > ><br>
> > > > Not exactly.  Sometimes RHEL maintainers add digits after %dist, which<br>
> > > > results in NVRs like foo-1.0-1.module_el8.4.0+123+a0a0a0a0.1.  It's<br>
> > > > not impossible to parse, but it's much more complicated that just<br>
> > > > ignoring everything after ".module".<br>
> > > ><br>
> > > > > information at the end. So there is some mapping. Additionally, when<br>
> > > > > the RPMs are imported from RHEL into CentOS, the original NVR is<br>
> > > > > present as a tag. Ignoring transmodrifier remapping modulemd commits<br>
> > > > > between RHEL and CentOS, you have enough baseline references to be<br>
> > > > > able to connect the dots because the RHEL dist-git shorthash is<br>
> > > > > present in the import tag, which would exist in the imported modulemd<br>
> > > > > before transmodification.<br>
> > > > ><br>
> > > > > That process could be automated, but I was never particularly<br>
> > > > > motivated to do it because of the historical attitude around providing<br>
> > > > > errata for CentOS users like Fedora users get.<br>
> > > ><br>
> > > > I'm not aware of any policy against allowing this in the project.  If<br>
> > > > there is I hope board members will speak up and clarify that.  I<br>
> > > > suspect it's more of a resource thing than anything.<br>
> > ><br>
> > > I think lack of awareness of a publicly documented policy against<br>
> > > allowing this in the project is likely true, but also irrelevant.  We<br>
> > > don't have a policy against allowing a FreeBSD kernel or using<br>
> > > Ubuntu's version of gcc, yet we wouldn't do those.  In the absence of<br>
> > > meticulously detailed bylaws, we have historical precedent setting<br>
> > > defacto policy.  I don't expect this to change.<br>
> > ><br>
> > > That being said, an update metadata mechanism for CentOS Stream is<br>
> > > certainly hampered by resource constraints both in terms of tooling<br>
> > > and in terms of the impact on the people developing the OS through the<br>
> > > CentOS Stream project.  For a continuously developed and continuously<br>
> > > delivered OS, we expect a large amount of churn on a day to day basis.<br>
> > > Updates are a regular occurence, and they're important either because<br>
> > > of fixes or because of new features.  Changes are documented in MRs,<br>
> > > RPM changelogs, and referenced bugs for those interested.<br>
> > ><br>
> ><br>
> > It's always been possible to have updateinfo generated as build<br>
> > submissions go through. That's literally how it's done in Fedora with<br>
> > Bodhi.<br>
> ><br>
> > It's not that much of a stretch to say "deploy Bodhi, make voting<br>
> > advisory or turn it off, and have builds submitted through it with the<br>
> > right information and auto-release based on gating checks". That<br>
> > structured data can be pulled in and used for Red Hat update<br>
> > advisories internally too, which simplifies the pipeline to validate<br>
> > and release updates. Or if you have a beef against Bodhi, then why not<br>
> > use the tooling Scientific Linux created to make updateinfo? Troy and<br>
> > Pat are very familiar with it, and it's publicly available:<br>
> > <a href="https://pagure.io/python-Updateinfo" rel="noreferrer noreferrer" target="_blank">https://pagure.io/python-Updateinfo</a><br>
> ><br>
> > Okay, let's say we can't do it for CentOS Stream 8 because of resource<br>
> > constraints. Well then, what about CentOS Stream 9, where the RHEL<br>
> > developers themselves are submitting the builds? There's no logical<br>
> > resourcing problem there. Deploy Bodhi for update submissions and tie<br>
><br>
> You have clearly never worked on making a change to a RHEL package :).<br>
> I will promise you that there are already a significant number of<br>
> steps that developers must do to even get to the point where they can<br>
> file an MR.  Putting more process and tooling and hurdles in their way<br>
> before the code even gets into RHEL is absolutely a resource problem<br>
> and I am not going to sign them up to do that.  If anything, we're<br>
> trying to simplify even though many will tell you it doesn't look like<br>
> that.<br>
><br>
> I know you meant that with good intention, but it's easy to read it as<br>
> "there's no resourcing problem because someone else has to do the<br>
> work."<br>
><br>
<br>
I certainly have made changes to RHEL packages. My name exists in<br>
changelogs and commits in enough packages in RHEL and CentOS Stream<br>
that I think that would be an unfair characterization. :)</blockquote></div></div><div dir="auto"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<br>
I'm aware of most of the steps for making package changes in RHEL, and<br>
I already am aware that packagers for RHEL have to go through the<br>
effort of declaring what an update is, what it's for, and whether it<br>
requires relogin/reboot to fully apply.</blockquote></div></div><div dir="auto"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"> These are the core properties<br>
that are defined in updateinfo. Defining them to push a build in<br>
CentOS Stream is something that I don't think is an unreasonable ask.<br>
It's the same thing we ask community folks in Fedora to do, after all.<br></blockquote></div></div><div dir="auto"><br></div><div dir="auto">We don't ask the Fedora community to do it twice through two different tools though.  Again, I'm not adding more process to an already arduous process.</div><div dir="auto"><br></div><div dir="auto">Also, it's a case of frequency as well.  An errata in RHEL has to be finalized officially once before it's released.  Some maintainers do it multiple times as they go, but many do not.  Bugs attached, notes updated, etc need to be completed before GA, every 6 months.  Your proposal would require them to do this for every build.  That's expensive.</div><div dir="auto"><br></div><div dir="auto"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
> > the gating into the auto-release criteria. The Fedora CI folks were<br>
> > already doing that for Fedora Rawhide, so it's no stretch to have it<br>
> > for CentOS Stream too.<br>
> ><br>
> > The idea is not new: I've talked to the CentOS project folks about it<br>
> > many times in the past. They get *extremely* uncomfortable and tell me<br>
> > that they can't do it for various reasons even though they want to.<br>
> > It's one of the biggest complaints everyone has about the project.<br>
> > It's made worse by the fact that none of the ecosystem tooling for<br>
> > updates works in any useful manner without updateinfo. RPM changelogs<br>
> > are no substitute because no automation works with that. You know that<br>
> > as well as everyone else here.<br>
><br>
> Producing that information isn't only about tooling, and the fact that<br>
> people would immediately rely on it for automation makes it difficult<br>
> to suggest anyone else doing it on the side is a viable solution.  If<br>
> it's wrong, that has bad consequences.  I'd certainly be against it<br>
> under the project umbrella if it wasn't part of the official delivery<br>
> anyway.<br>
><br>
> I still question the utility of it though.  It's a continuous delivery<br>
> model.  You have to update.  Want to know if you have all available<br>
> bug fixes?  Update.  If your bug isn't fixed, it doesn't change the<br>
> fact that you have all *available* bug fixes.  There are no batches or<br>
> releases.  It's called Stream for a reason.<br>
><br>
<br>
That doesn't mean I shouldn't have the ability to configure<br>
dnf-automatic to apply all updates automatically that don't require<br>
relogin and reboot and then have it email me to notify me for updates<br>
that *do* require that so I can schedule time to actually go and apply<br>
it.</blockquote></div></div><div dir="auto"><br></div><div dir="auto">The list that sets needs reboot via errata is literally hard coded to a few packages, and we have other tools being introduced that will actually measure this via runtime heuristics via dnf plugins.  I'm happy to just give you the list, (kernel, glibc, systemd, maybe one or two others) and you're welcome to use the improved tools already in the distro.</div><div dir="auto"><br></div><div dir="auto">josh</div></div>