• Banana Pi BPI-W3 RK3588平台驱动调试篇 [ PCIE篇一 ] - PCIE的开发指南


    RK3588平台驱动调试篇 [ PCIE篇 ] - PCIE的开发指南

    1、PCIE接口概述

    PCIe(Peripheral Component Interconnect Express)是一种用于连接计算机内部组件的高速接口标准。以下是关于PCIe接口的简要介绍:

    • 高速传输: PCIe接口提供了高速的数据传输通道,可用于连接各种硬件设备,如图形卡、存储设备、网络适配器等。它的速度通常以每秒传输的数据位数(例如PCIe x1、x4、x8、x16等)来表示,每个通道的带宽可以根据需要扩展。
    • 点对点连接: PCIe采用点对点连接的架构,这意味着每个设备都直接连接到主板上的PCIe插槽,而不需要与其他设备共享带宽。这有助于减少延迟并提高性能。
    • 热插拔支持: PCIe接口支持热插拔,允许用户在计算机运行时添加或移除PCIe设备,而不需要重新启动计算机。
    • 广泛应用: PCIe接口广泛用于连接图形卡、固态硬盘(SSD)、扩展卡、网络适配器和其他高性能设备。这使得计算机用户可以根据需要扩展和升级系统的性能和功能。

    PCIe接口是一种计算机硬件连接标准,它提供了高速、高性能的数据传输通道,支持多种设备的连接。

    2、传输速率简介

    PCIe 分类、速度,按lane的个数分有 x1 x2 x4 x8 x16 (最大可支持32个通道),按代来分 有 gen1 gen2 gen3 gen4

    PCIe gen1 和 PCIe gen2 采用的编解码方式是 8b/10b,PCIe gen3 和 之后的 采用的是 128b/130b 的编码方式。

    8b/10b 意思是说,当我们要传输8b的数据时,实际在通道上传输的是10b的数据,解码的时候,我们希望得到的是8b的有效数据。这样,相当于有效的带宽是实际带宽的 80%。

    同理128b/130b,是传输128bit数据实际线路中传输的是130bit数据。

    速率图中的单位间的关系:

    传输速率单位 GT/s,表示 千兆传输/秒,是实际每秒传输的位数,他不包括额外吞吐量的开销位。

    两个例子:

    PCIe gen1 x1 传输速率 2.5GT/s = 2500MT/s = ( 2500 / 10 ) MB/s

    PCIe gen3 x1 传输速率 8GT/s = 8000MT/s = ( 8000 / 130 ) x ( 128/8 ) MB/s= 984.6153... MB/s

    PCIe 可⽤带宽:吞吐量 = 传输速率 * 编码⽅案

    例如:PCIe 2.0 协议的每⼀条 Lane ⽀持58 / 10 = 4 Gbps = 500 MB/s 的速率,Pcie 2.0 x 8的通道为例,x8的可⽤带宽为 48 = 32 Gbps = 4 GB/s。

    3、 芯片PCIE资源

    3.1 硬件介绍

    RK3588共有5个PCIe的控制器,硬件IP是⼀样的,配置不⼀样,其中⼀个4Lane DM模式可以⽀持作为EP使⽤,另外⼀个2Lane和3个1Lane控制器均只能作为RC使⽤。RK3588有两种PCIe PHY,其中⼀种为pcie3.0PHY,含2个Port共4个Lane,另⼀种是pcie2.0的PHY有3个,每个都是2.0 1Lane,跟SATA和USB combo使⽤。pcie3.0 PHY的4Lane可以根据实际需求拆分使⽤,拆分后需要合理配置对应的控制器。

    3.2 kernel dts解析之PCIe

    控制器在DTS对应节点名称:

    资源

    模式

    dts节点

    可用phy

    内部DMA

    PCIe
    Gen3 x 4lane

    RC/EP

    pcie3x4:
    pcie@fe150000

    pcie30phy

    PCIe
    Gen3 x 2lane

    RC only

    pcie3x2:
    pcie@fe160000

    pcie30phy

    PCIe
    Gen3 x 1lane

    RC only

    pcie2x1l0:
    pcie@fe170000

    pcie30phy,
    combphy1_ps

    PCIe
    Gen3 x 1lane

    RC only

    pcie2x1l1:
    pcie@fe180000

    pcie30phy,
    combphy2_psu

    PCIe
    Gen3 x 1lane

    RC only

    pcie2x1l2:
    pcie@fe190000

    combphy0_ps

    在kernel/arch/arm64/boot/dts/rockchip/rk3588.dtsi下有具体描述

    使用限制

    1. pcie30phy拆分后,pcie30x4控制器,⼯作于2Lane模式时只能固定配合pcie30phy的port0,⼯作于 1Lane模式时,只能固定配合pcie30phy的port0lane0;
    2. pcie30phy拆分后,pcie30x2控制器,⼯作于2Lane模式时只能固定配合pcie30phy的port1,⼯作于 1Lane模式时,只能固定配合pcie30phy的port1lane0;
    3. pcie30phy拆分为4个1Lane,pcie3phy的port0lane1只能固定配合pcie2x1l0控制器,pcie3phy的 port1lane1只能固定配合pcie2x1l1控制器;
    4. pcie30x4控制器⼯作于EP模式,可以使⽤4Lane模式,或者2Lane模式使⽤pcie30phy的port0, pcie30phy的port1中2lane可以作为RC配合其他控制器使⽤。默认使⽤common clock作为reference clock时,⽆法实现pcie30phy port0的lane0⼯作于EP模式,lane1⼯作于RC模式配合其他控制器使 ⽤,因为Port0的两个lane是共⽤⼀个输⼊的reference clock,RC和EP同时使⽤clock可能会有冲突。
    5. RK3588 pcie30phy 如果只使⽤其中⼀个port,另⼀个port也需要供电,refclk等其他信号可接地。

    4、PCIe 使用配置

    4.1 简介

    Armsom-W3开发板上有 1 个 PCIe3.0 x 4 接口和一个PCIe2.0接口,如图

    可以插入对应模组使用, 如图:

    4.2 硬件设计

    PCIe3.0 x 4 接口:

    PCIe 2.0接口:

    4.3 软件配置

    一般根据原理图在 DTS 中配置供电引脚、复位引脚,选择正确的 pcie 控制器节点和 PHY 节点使能就可以。

    kernel/arch/arm64/boot/dts/rockchip/rk3588-armsom-w3.dts中配置如下:

    1. / {
    2. vcc12v_dcin: vcc12v-dcin {
    3. compatible = "regulator-fixed";
    4. regulator-name = "vcc12v_dcin";
    5. regulator-always-on;
    6. regulator-boot-on;
    7. regulator-min-microvolt = <12000000>;
    8. regulator-max-microvolt = <12000000>;
    9. };
    10. vcc5v0_sys: vcc5v0-sys {
    11. compatible = "regulator-fixed";
    12. regulator-name = "vcc5v0_sys";
    13. regulator-always-on;
    14. regulator-boot-on;
    15. regulator-min-microvolt = <5000000>;
    16. regulator-max-microvolt = <5000000>;
    17. vin-supply = <&vcc12v_dcin>;
    18. };
    19. vcc3v3_pcie2x1l0: vcc3v3-pcie2x1l0 {
    20. compatible = "regulator-fixed";
    21. regulator-name = "vcc3v3_pcie2x1l0";
    22. regulator-min-microvolt = <3300000>;
    23. regulator-max-microvolt = <3300000>;
    24. enable-active-high;
    25. regulator-boot-on;
    26. regulator-always-on;
    27. gpios = <&gpio1 RK_PD2 GPIO_ACTIVE_HIGH>;
    28. startup-delay-us = <50000>;
    29. vin-supply = <&vcc5v0_sys>;
    30. };
    31. vcc3v3_pcie30: vcc3v3-pcie30 {
    32. compatible = "regulator-fixed";
    33. regulator-name = "vcc3v3_pcie30";
    34. regulator-min-microvolt = <3300000>;
    35. regulator-max-microvolt = <3300000>;
    36. enable-active-high;
    37. gpios = <&gpio1 RK_PA4 GPIO_ACTIVE_HIGH>;
    38. startup-delay-us = <5000>;
    39. vin-supply = <&vcc5v0_sys>;
    40. };
    41. }
    42. &pcie2x1l0 {
    43. reset-gpios = <&gpio4 RK_PA5 GPIO_ACTIVE_HIGH>;
    44. vpcie3v3-supply = <&vcc3v3_pcie2x1l0>;
    45. status = "okay";
    46. };
    47. &combphy1_ps {
    48. status = "okay";
    49. };
    50. &pcie30phy {
    51. rockchip,pcie30-phymode = <PHY_MODE_PCIE_AGGREGATION>;
    52. status = "okay";
    53. };
    54. &pcie3x4 {
    55. reset-gpios = <&gpio4 RK_PB6 GPIO_ACTIVE_HIGH>;
    56. vpcie3v3-supply = <&vcc3v3_pcie30>;
    57. status = "okay";
    58. };

    pcie30phy、combphy1_ps:PHY 节点

    pcie3x4、pcie2x1l0:pcie3x4 控制器节点

    reset-gpios:复位引脚属性

    vcc3v3_pcie2x1l0、vcc3v3_pcie30:供电引脚节点

    4.4 其他PCIE配置的实例

    RK3588的控制器和PHY较多,按配置要点进⾏配置即可,这⾥还有⼏个典型范例供参考:

    4.4.1 ⽰例1 pcie3.0phy拆分2个2Lane RC, 3个PCIe 2.0 1Lane

    1. / {
    2. vcc3v3_pcie30: vcc3v3-pcie30 {
    3. compatible = "regulator-fixed";
    4. regulator-name = "vcc3v3_pcie30";
    5. regulator-min-microvolt = <3300000>;
    6. regulator-max-microvolt = <3300000>;
    7. enable-active-high;
    8. gpios = <&gpio3 RK_PC3 GPIO_ACTIVE_HIGH>;
    9. startup-delay-us = <5000>;
    10. vin-supply = <&vcc12v_dcin>;
    11. };
    12. };
    13. &combphy0_ps {
    14. status = "okay";
    15. };
    16. &combphy1_ps {
    17. status = "okay";
    18. };
    19. &combphy2_psu {
    20. status = "okay";
    21. };
    22. &pcie2x1l0 {
    23. phys = <&combphy1_ps PHY_TYPE_PCIE>;
    24. reset-gpios = <&gpio4 RK_PA5 GPIO_ACTIVE_HIGH>;
    25. vpcie3v3-supply = <&vcc3v3_pcie30>;
    26. status = "okay";
    27. };
    28. &pcie2x1l1 {
    29. phys = <&combphy2_psu PHY_TYPE_PCIE>;
    30. reset-gpios = <&gpio4 RK_PA2 GPIO_ACTIVE_HIGH>;
    31. vpcie3v3-supply = <&vcc3v3_pcie30>;
    32. status = "okay";
    33. };
    34. &pcie2x1l2 {
    35. reset-gpios = <&gpio4 RK_PC1 GPIO_ACTIVE_HIGH>;
    36. vpcie3v3-supply = <&vcc3v3_pcie30>;
    37. status = "okay";
    38. };
    39. &pcie30phy {
    40. /*pcie30phy的组合使⽤模式:
    41. PHY_MODE_PCIE_NANBNB /* P1:PCIe3x2 + P0:PCIe3x2 */
    42. PHY_MODE_PCIE_NANBBI /* P1:PCIe3x2 + P0:PCIe3x1*2 */
    43. PHY_MODE_PCIE_NABINB /* P1:PCIe3x1*2 + P0:PCIe3x2 */
    44. PHY_MODE_PCIE_NABIBI /* P1:PCIe3x1*2 + P0:PCIe3x1*2 */
    45. */
    46. rockchip,pcie30-phymode = <PHY_MODE_PCIE_NANBNB>;
    47. status = "okay";
    48. };
    49. &pcie3x2 {
    50. reset-gpios = <&gpio4 RK_PB0 GPIO_ACTIVE_HIGH>;
    51. vpcie3v3-supply = <&vcc3v3_pcie30>;
    52. status = "okay";
    53. };
    54. &pcie3x4 {
    55. num-lanes = <2>;//拆分为2lan使用
    56. reset-gpios = <&gpio4 RK_PB6 GPIO_ACTIVE_HIGH>;
    57. vpcie3v3-supply = <&vcc3v3_pcie30>;
    58. status = "okay";
    59. };

    4.4.2 ⽰例2 pcie3.0phy拆分为4个1Lane, 1个使⽤PCIe 2.0 1 Lane

    1. / {
    2. vcc3v3_pcie30: vcc3v3-pcie30 {
    3. compatible = "regulator-fixed";
    4. regulator-name = "vcc3v3_pcie30";
    5. regulator-min-microvolt = <3300000>;
    6. regulator-max-microvolt = <3300000>;
    7. enable-active-high;
    8. gpios = <&gpio3 RK_PC3 GPIO_ACTIVE_HIGH>;
    9. startup-delay-us = <5000>;
    10. vin-supply = <&vcc12v_dcin>;
    11. };
    12. };
    13. &combphy0_ps {
    14. status = "okay";
    15. };
    16. &pcie2x1l0 {
    17. phys = <&pcie30phy>;
    18. reset-gpios = <&gpio4 RK_PA5 GPIO_ACTIVE_HIGH>;
    19. vpcie3v3-supply = <&vcc3v3_pcie30>;
    20. status = "okay";
    21. };
    22. &pcie2x1l1 {
    23. phys = <&pcie30phy>;
    24. reset-gpios = <&gpio4 RK_PA2 GPIO_ACTIVE_HIGH>;
    25. vpcie3v3-supply = <&vcc3v3_pcie30>;
    26. status = "okay";
    27. };
    28. &pcie2x1l2 {
    29. reset-gpios = <&gpio4 RK_PC1 GPIO_ACTIVE_HIGH>;
    30. vpcie3v3-supply = <&vcc3v3_pcie30>;
    31. status = "okay";
    32. };
    33. &pcie30phy {
    34. rockchip,pcie30-phymode = <PHY_MODE_PCIE_NABIBI>;
    35. status = "okay";
    36. };
    37. &pcie3x2 {
    38. num-lanes = <1>;
    39. reset-gpios = <&gpio4 RK_PB0 GPIO_ACTIVE_HIGH>;
    40. vpcie3v3-supply = <&vcc3v3_pcie30>;
    41. status = "okay";
    42. };
    43. &pcie3x4 {
    44. num-lanes = <1>;
    45. reset-gpios = <&gpio4 RK_PB6 GPIO_ACTIVE_HIGH>;
    46. vpcie3v3-supply = <&vcc3v3_pcie30>;
    47. status = "okay";
    48. };

    pcie30phy拆分为4个1Lane时,port0lane0固定配合pcie3x4控制器,pcie3phy的port0lane1固定配合pcie2x1l0控制器,port1lane0固定配合pcie3x2控制器,pcie3phy的port1lane1固定配合pcie2x1l1控制器,加上combphy0_ps固定配合pcie2x1l2。

  • 相关阅读:
    浅谈图片展示、图片自适应解决方案
    如何在Django中使用模板
    强大的JTAG边界扫描(1):基本原理介绍
    java计算机毕业设计基于springboo+vue的校园二手闲置物品交易系统
    Kafka消息发送可靠性分析
    【C++】—— 装饰器模式
    Istio服务网格进阶⑥:Istio服务网格之流量治理超时配置
    比特币的蒙提霍尔问题
    【干活分享-年薪百万以上】Java高端人才应具备的能力
    Java NIO模型(提供代码示例)
  • 原文地址:https://blog.csdn.net/sinovoip/article/details/134004802