<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=utf-8"><meta name=Generator content="Microsoft Word 15 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:PMingLiU;
        panose-1:2 2 5 0 0 0 0 0 0 0;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:"\@PMingLiU";
        panose-1:2 2 5 0 0 0 0 0 0 0;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D'>Chris,<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D'>Check your cpuinfo from flag which did not indicate any ‘VMX’ support for your CPU virtualization support on the board.<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D'>Xlord<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D'><o:p> </o:p></span></p><div><div style='border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in'><p class=MsoNormal><b><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'>From:</span></b><span style='font-size:11.0pt;font-family:"Calibri",sans-serif'> CentOS-virt [mailto:centos-virt-bounces@centos.org] <b>On Behalf Of </b>Chris Wik<br><b>Sent:</b> Wednesday, March 1, 2017 7:07 AM<br><b>To:</b> Discussion about the virtualization on CentOS <centos-virt@centos.org><br><b>Subject:</b> Re: [CentOS-virt] NUMA placement failed, performance might be affected<o:p></o:p></span></p></div></div><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Solved.<o:p></o:p></p><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>For the archives:<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Noticed in xl info output that only 1 core was recognised, even though nr_cpus should show 16 on this box.<o:p></o:p></p><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Tried rebooting and selecting the old .34 kernel, console printed "smpboot: do_boot_cpu failed(-1) to wakeup CPU#1" and CentOS failed to boot. Powered down the box fully and started back up with the latest .44 kernel and everything is working fine now.<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Not enough of an expert to know if this is a bug in the kernel, a problem with the BIOS, bad hardware, a completely random stroke of bad luck or a cosmic sign. Happy it works now. If anyone has experienced this and has any suggestions they would be received with gratitude.<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Chris<o:p></o:p></p></div><div><p class=MsoNormal style='margin-bottom:12.0pt'><br>--<br>Chris Wik<br>Anu Internet Services<br><a href="http://www.anu.net">www.anu.net</a> | <a href="http://www.cwik.ch">www.cwik.ch</a><br><br><o:p></o:p></p><div><p class=MsoNormal style='margin-bottom:12.0pt'><strong>From: </strong>Chris Wik <<a href="mailto:chris@anu.net">chris@anu.net</a>> <br><strong>To: </strong><<a href="mailto:centos-virt@centos.org">centos-virt@centos.org</a>> <br><strong>Sent: </strong>28/02/2017 11:36 PM <br><strong>Subject: </strong>[CentOS-virt] NUMA placement failed, performance might be affected <o:p></o:p></p><blockquote style='border:none;border-left:solid #CCCCCC 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-right:0in'><div><div><p class=MsoNormal>I just did a yum update on a CentOS 7 / Xen 4.6 server which took me from kernel-3.18.34-20.el7.x86_64 -> kernel-3.18.44-20.el7.x86_64<o:p></o:p></p></div></div><div><p class=MsoNormal><o:p> </o:p></p></div><p class=MsoNormal>After rebooting, the following notice is printed immediately upon xl create'ing a domain: libxl: notice: libxl_numa.c:499:libxl__get_numa_candidate: NUMA placement failed, performance might be affected<o:p></o:p></p><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Indeed performance is significantly degraded. This issue didn't happen on the older kernel. Any ideas where it came from or how it can be fixed?<o:p></o:p></p><div><p class=MsoNormal><o:p> </o:p></p></div><div><div><p class=MsoNormal># cat /proc/cpuinfo <o:p></o:p></p></div><div><p class=MsoNormal>processor     : 0<o:p></o:p></p></div><div><p class=MsoNormal>vendor_id    : GenuineIntel<o:p></o:p></p></div><div><p class=MsoNormal>cpu family   : 6<o:p></o:p></p></div><div><p class=MsoNormal>model                      : 63<o:p></o:p></p></div><div><p class=MsoNormal>model name : Intel(R) Xeon(R) CPU E5-2637 v3 @ 3.50GHz<o:p></o:p></p></div><div><p class=MsoNormal>stepping       : 2<o:p></o:p></p></div><div><p class=MsoNormal>microcode    : 0x36<o:p></o:p></p></div><div><p class=MsoNormal>cpu MHz                 : 3500.090<o:p></o:p></p></div><div><p class=MsoNormal>cache size    : 15360 KB<o:p></o:p></p></div><div><p class=MsoNormal>physical id   : 0<o:p></o:p></p></div><div><p class=MsoNormal>siblings        : 1<o:p></o:p></p></div><div><p class=MsoNormal>core id                     : 0<o:p></o:p></p></div><div><p class=MsoNormal>cpu cores     : 1<o:p></o:p></p></div><div><p class=MsoNormal>apicid                       : 0<o:p></o:p></p></div><div><p class=MsoNormal>initial apicid : 0<o:p></o:p></p></div><div><p class=MsoNormal>fpu               : yes<o:p></o:p></p></div><div><p class=MsoNormal>fpu_exception         : yes<o:p></o:p></p></div><div><p class=MsoNormal>cpuid level   : 15<o:p></o:p></p></div><div><p class=MsoNormal>wp               : yes<o:p></o:p></p></div><div><p class=MsoNormal>flags             : fpu de tsc msr pae mce cx8 apic sep mca cmov pat clflush acpi mmx fxsr sse sse2 ss ht syscall nx lm constant_tsc arch_perfmon rep_good nopl nonstop_tsc eagerfpu pni pclmulqdq monitor est ssse3 fma cx16 sse4_1 sse4_2 movbe popcnt tsc_deadline_timer aes xsave avx f16c rdrand hypervisor lahf_lm abm ida arat epb pln pts dtherm fsgsbase bmi1 avx2 bmi2 erms xsaveopt<o:p></o:p></p></div><div><p class=MsoNormal>bugs             :<o:p></o:p></p></div><div><p class=MsoNormal>bogomips     : 7000.18<o:p></o:p></p></div><div><p class=MsoNormal>clflush size   : 64<o:p></o:p></p></div><div><p class=MsoNormal>cache_alignment      : 64<o:p></o:p></p></div><div><p class=MsoNormal>address sizes            : 46 bits physical, 48 bits virtual<o:p></o:p></p></div><div><p class=MsoNormal>power management:<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><div><p class=MsoNormal># xl info<o:p></o:p></p></div><div><p class=MsoNormal>host                   : ****.localdomain<o:p></o:p></p></div><div><p class=MsoNormal>release                : 3.18.44-20.el7.x86_64<o:p></o:p></p></div><div><p class=MsoNormal>version                : #1 SMP Tue Oct 25 11:42:52 UTC 2016<o:p></o:p></p></div><div><p class=MsoNormal>machine                : x86_64<o:p></o:p></p></div><div><p class=MsoNormal>nr_cpus                : 1<o:p></o:p></p></div><div><p class=MsoNormal>max_cpu_id             : 15<o:p></o:p></p></div><div><p class=MsoNormal>nr_nodes               : 2<o:p></o:p></p></div><div><p class=MsoNormal>cores_per_socket       : 1<o:p></o:p></p></div><div><p class=MsoNormal>threads_per_core       : 1<o:p></o:p></p></div><div><p class=MsoNormal>cpu_mhz                : 3500<o:p></o:p></p></div><div><p class=MsoNormal>hw_caps                : bfebfbff:2c100800:00000000:00007f00:77fefbff:00000000:00000021:000037ab<o:p></o:p></p></div><div><p class=MsoNormal>virt_caps              : hvm hvm_directio<o:p></o:p></p></div><div><p class=MsoNormal>total_memory           : 130958<o:p></o:p></p></div><div><p class=MsoNormal>free_memory            : 28003<o:p></o:p></p></div><div><p class=MsoNormal>sharing_freed_memory   : 0<o:p></o:p></p></div><div><p class=MsoNormal>sharing_used_memory    : 0<o:p></o:p></p></div><div><p class=MsoNormal>outstanding_claims     : 0<o:p></o:p></p></div><div><p class=MsoNormal>free_cpus              : 0<o:p></o:p></p></div><div><p class=MsoNormal>xen_major              : 4<o:p></o:p></p></div><div><p class=MsoNormal>xen_minor              : 6<o:p></o:p></p></div><div><p class=MsoNormal>xen_extra              : .3-7.el7<o:p></o:p></p></div><div><p class=MsoNormal>xen_version            : 4.6.3-7.el7<o:p></o:p></p></div><div><p class=MsoNormal>xen_caps               : xen-3.0-x86_64 xen-3.0-x86_32p hvm-3.0-x86_32 hvm-3.0-x86_32p hvm-3.0-x86_64 <o:p></o:p></p></div><div><p class=MsoNormal>xen_scheduler          : credit<o:p></o:p></p></div><div><p class=MsoNormal>xen_pagesize           : 4096<o:p></o:p></p></div><div><p class=MsoNormal>platform_params        : virt_start=0xffff800000000000<o:p></o:p></p></div><div><p class=MsoNormal>xen_changeset          : Wed Feb 15 02:12:22 2017 -0600 git:c359c64-dirty<o:p></o:p></p></div><div><p class=MsoNormal>xen_commandline        : placeholder dom0_mem=1024M,max:1024M cpuinfo com1=115200,8n1 console=com1,tty loglvl=all guest_loglvl=all<o:p></o:p></p></div><div><p class=MsoNormal>cc_compiler            : gcc (GCC) 4.8.5 20150623 (Red Hat 4.8.5-11)<o:p></o:p></p></div><div><p class=MsoNormal>cc_compile_by          : mockbuild<o:p></o:p></p></div><div><p class=MsoNormal>cc_compile_domain      : centos.org<o:p></o:p></p></div><div><p class=MsoNormal>cc_compile_date        : Wed Feb 15 12:18:43 UTC 2017<o:p></o:p></p></div><div><p class=MsoNormal>xend_config_format     : 4<o:p></o:p></p></div></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Thanks in advance,<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Chris<o:p></o:p></p></div><p class=MsoNormal><br>--<br>Chris Wik<br>Anu Internet Services<br><a href="http://www.anu.net" target="_blank">www.anu.net</a> | <a href="http://www.cwik.ch" target="_blank">www.cwik.ch</a><o:p></o:p></p></div></div><p class=MsoNormal><br><br>_______________________________________________ <br>CentOS-virt mailing list <br><a href="mailto:CentOS-virt@centos.org">CentOS-virt@centos.org</a> <br><a href="https://lists.centos.org/mailman/listinfo/centos-virt">https://lists.centos.org/mailman/listinfo/centos-virt</a> <o:p></o:p></p></blockquote></div></div></div></div></body></html>