<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; color: rgb(0, 0, 0); font-size: 18px; font-family: Calibri, sans-serif;">
<div>Hi All,</div>
<div><br>
</div>
<div>If I may I second the request. We also use Connectx-2 (QDR Infiniband). I believe they have sam driver with the 10GE cards, mlnx4 . Thats what we use:</div>
<div><br>
</div>
<div>08:00.0 InfiniBand [0c06]: Mellanox Technologies MT25408A0-FCC-QI ConnectX, Dual Port 40Gb/s InfiniBand / 10GigE Adapter IC with PCIe 2.0 x8 5.0GT/s In... (rev a0)</div>
<div><br>
</div>
<div>
<div>
<div>
<div>--&nbsp;</div>
<div>Grigory Shamov</div>
</div>
<div>WestGrid Site Lead / HPC Specialist</div>
<div>University of Manitoba</div>
<div>E2-588&nbsp;EITC Building,&nbsp;</div>
<div>(204) 474-9625</div>
<div><br>
</div>
</div>
</div>
<div><br>
</div>
<span id="OLK_SRC_BODY_SECTION">
<div style="font-family:Calibri; font-size:11pt; text-align:left; color:black; BORDER-BOTTOM: medium none; BORDER-LEFT: medium none; PADDING-BOTTOM: 0in; PADDING-LEFT: 0in; PADDING-RIGHT: 0in; BORDER-TOP: #b5c4df 1pt solid; BORDER-RIGHT: medium none; PADDING-TOP: 3pt">
<span style="font-weight:bold">From: </span>&lt;<a href="mailto:elrepo-bounces@lists.elrepo.org">elrepo-bounces@lists.elrepo.org</a>&gt; on behalf of Jeremy Reben &lt;<a href="mailto:jeremy.reben@gmail.com">jeremy.reben@gmail.com</a>&gt;<br>
<span style="font-weight:bold">Reply-To: </span>EL Repo General Mailing List &lt;<a href="mailto:elrepo@lists.elrepo.org">elrepo@lists.elrepo.org</a>&gt;<br>
<span style="font-weight:bold">Date: </span>Thursday, April 16, 2020 at 1:59 PM<br>
<span style="font-weight:bold">To: </span>EL Repo General Mailing List &lt;<a href="mailto:elrepo@lists.elrepo.org">elrepo@lists.elrepo.org</a>&gt;<br>
<span style="font-weight:bold">Subject: </span>Re: [elrepo] Support for older Mellanox network cards in RHEL 8.<br>
</div>
<div><br>
</div>
<div>
<div><span style="font-family: Calibri;"><span style="font-size: 11pt">
<table style="background-color:#fbe3b3;border: 1px solid black">
<tbody>
<tr>
<td><font style="color:#462c1d"><strong>Caution:</strong> This message was sent from outside the University of Manitoba.<span></span></font></td>
</tr>
</tbody>
</table>
</span></span><br>
<div dir="ltr">
<div>0d:00.0 Ethernet controller [0200]: Mellanox Technologies MT26448 [ConnectX EN 10GigE, PCIe 2.0 5GT/s] [15b3:6750] (rev b0)</div>
<div><br>
</div>
<div>0d:00.0 Ethernet controller: Mellanox Technologies MT26448 [ConnectX EN 10GigE, PCIe 2.0 5GT/s] (rev b0)</div>
&nbsp; &nbsp; &nbsp; &nbsp; Subsystem: Mellanox Technologies Device 0021<br>
&nbsp; &nbsp; &nbsp; &nbsp; Physical Slot: 3<br>
&nbsp; &nbsp; &nbsp; &nbsp; Control: I/O- Mem&#43; BusMaster&#43; SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR&#43; FastB2B- DisINTx-<br>
&nbsp; &nbsp; &nbsp; &nbsp; Status: Cap&#43; 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast &gt;TAbort- &lt;TAbort- &lt;MAbort- &gt;SERR- &lt;PERR- INTx-<br>
&nbsp; &nbsp; &nbsp; &nbsp; Latency: 0, Cache Line Size: 32 bytes<br>
&nbsp; &nbsp; &nbsp; &nbsp; Interrupt: pin A routed to IRQ 11<br>
&nbsp; &nbsp; &nbsp; &nbsp; NUMA node: 0<br>
&nbsp; &nbsp; &nbsp; &nbsp; Region 0: Memory at c7c00000 (64-bit, non-prefetchable) [size=1M]<br>
&nbsp; &nbsp; &nbsp; &nbsp; Region 2: Memory at c5800000 (64-bit, prefetchable) [size=8M]<br>
&nbsp; &nbsp; &nbsp; &nbsp; Expansion ROM at c7b00000 [disabled] [size=1M]<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [40] Power Management version 3<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Flags: PMEClk- DSI- D1- D2- AuxCurrent=0mA PME(D0-,D1-,D2-,D3hot-,D3cold-)<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Status: D0 NoSoftRst- PME-Enable- DSel=0 DScale=0 PME-<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [48] Vital Product Data<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Product Name: HP ConnectX-2 SFP&#43;<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Read-only fields:<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [PN] Part number: 666172-001<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [EC] Engineering changes: A1<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [SN] Serial number: IL214805EG<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [V0] Vendor specific: PCIe Gen2 x8<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [RV] Reserved: checksum good, 0 byte(s) reserved<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Read/write fields:<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [V1] Vendor specific: N/A<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [YA] Asset tag: N/A<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; [RW] Read-write area: 102 byte(s) free<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; End<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [9c] MSI-X: Enable- Count=128 Masked-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Vector table: BAR=0 offset=0007c000<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; PBA: BAR=0 offset=0007d000<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [60] Express (v2) Endpoint, MSI 00<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; DevCap: MaxPayload 256 bytes, PhantFunc 0, Latency L0s &lt;64ns, L1 unlimited<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ExtTag- AttnBtn- AttnInd- PwrInd- RBE&#43; FLReset&#43; SlotPowerLimit 0.000W<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; DevCtl: Report errors: Correctable- Non-Fatal- Fatal- Unsupported-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; RlxdOrd- ExtTag- PhantFunc- AuxPwr- NoSnoop- FLReset-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; MaxPayload 256 bytes, MaxReadReq 512 bytes<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; DevSta: CorrErr- UncorrErr- FatalErr- UnsuppReq- AuxPwr- TransPend-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; LnkCap: Port #8, Speed 5GT/s, Width x8, ASPM L0s, Exit Latency L0s unlimited<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; LnkCtl: ASPM Disabled; RCB 64 bytes Disabled- CommClk-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; LnkSta: Speed 5GT/s, Width x8, TrErr- Train- SlotClk- DLActive- BWMgmt- ABWMgmt-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; DevCap2: Completion Timeout: Range ABCD, TimeoutDis&#43;, LTR-, OBFF Not Supported<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;AtomicOpsCap: 32bit- 64bit- 128bitCAS-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis-, LTR-, OBFF Disabled<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;AtomicOpsCtl: ReqEn-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; LnkCtl2: Target Link Speed: 5GT/s, EnterCompliance- SpeedDis-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Transmit Margin: Normal Operating Range, EnterModifiedCompliance- ComplianceSOS-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Compliance De-emphasis: -6dB<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; LnkSta2: Current De-emphasis Level: -6dB, EqualizationComplete-, EqualizationPhase1-<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;EqualizationPhase2-, EqualizationPhase3-, LinkEqualizationRequest-<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [100 v1] Alternative Routing-ID Interpretation (ARI)<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ARICap: MFVC- ACS-, Next Function: 0<br>
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; ARICtl: MFVC- ACS-, Function Group: 0<br>
&nbsp; &nbsp; &nbsp; &nbsp; Capabilities: [148 v1] Device Serial Number 00-02-c9-03-00-52-b9-12</div>
<br>
<div class="gmail_quote">
<div dir="ltr" class="gmail_attr">On Wed, Apr 15, 2020 at 4:00 PM Akemi Yagi &lt;<a href="mailto:amyagi@gmail.com">amyagi@gmail.com</a>&gt; wrote:<br>
</div>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
On Wed, Apr 15, 2020 at 12:48 AM Jeremy Reben &lt;<a href="mailto:jeremy.reben@gmail.com" target="_blank">jeremy.reben@gmail.com</a>&gt; wrote:<br>
&gt;<br>
&gt; I have an ancient MT26448 that worked in Fedora 28 and I would assume in CentOS 7.<br>
&gt; I had found a help ticket for ConnectX2 devices that it only required compiling the kmod with CONFIG_MLX4_CORE_GEN2 to enable support and was hoping it would be something similar for my card; that I believe to be of the first generation.<br>
&gt; The relevant trouble ticket can be found at <a href="https://bugs.centos.org/view.php?id=16726" rel="noreferrer" target="_blank">
https://bugs.centos.org/view.php?id=16726</a><br>
&gt; I hate to see perfectly good hardware become trash due to &quot;progression&quot;.<br>
<br>
Hi Jeremy,<br>
<br>
It wouldl help if you can show us your device IDs [xxxx:yyyy] as<br>
reported by 'lspci -nn'.<br>
<br>
Akemi<br>
_______________________________________________<br>
elrepo mailing list<br>
<a href="mailto:elrepo@lists.elrepo.org" target="_blank">elrepo@lists.elrepo.org</a><br>
<a href="http://lists.elrepo.org/mailman/listinfo/elrepo" rel="noreferrer" target="_blank">http://lists.elrepo.org/mailman/listinfo/elrepo</a><br>
</blockquote>
</div>
</div>
</div>
</span>
</body>
</html>