drivers/net/netvsc/hn_var.h

   1 /* SPDX-License-Identifier: BSD-3-Clause
   2  * Copyright (c) 2009-2018 Microsoft Corp.
   3  * Copyright (c) 2016 Brocade Communications Systems, Inc.
   4  * Copyright (c) 2012 NetApp Inc.
   5  * Copyright (c) 2012 Citrix Inc.
   6  * All rights reserved.
   7  */
   8
   9 /*
  10  * Tunable ethdev params
  11  */
  12 #define HN_MIN_RX_BUF_SIZE      1024
  13 #define HN_MAX_XFER_LEN         2048
  14 #define HN_MAX_MAC_ADDRS        1
  15 #define HN_MAX_CHANNELS         64
  16
  17 /* Claimed to be 12232B */
  18 #define HN_MTU_MAX              (9 * 1024)
  19
  20 /* Retry interval */
  21 #define HN_CHAN_INTERVAL_US     100
  22
  23 /* Host monitor interval */
  24 #define HN_CHAN_LATENCY_NS      50000
  25
  26 /* Buffers need to be aligned */
  27 #ifndef PAGE_SIZE
  28 #define PAGE_SIZE 4096
  29 #endif
  30
  31 #ifndef PAGE_MASK
  32 #define PAGE_MASK (PAGE_SIZE - 1)
  33 #endif
  34
  35 struct hn_data;
  36 struct hn_txdesc;
  37
  38 struct hn_stats {
  39         uint64_t        packets;
  40         uint64_t        bytes;
  41         uint64_t        errors;
  42         uint64_t        ring_full;
  43         uint64_t        multicast;
  44         uint64_t        broadcast;
  45         /* Size bins in array as RFC 2819, undersized [0], 64 [1], etc */
  46         uint64_t        size_bins[8];
  47 };
  48
  49 struct hn_tx_queue {
  50         struct hn_data  *hv;
  51         struct vmbus_channel *chan;
  52         uint16_t        port_id;
  53         uint16_t        queue_id;
  54         uint32_t        free_thresh;
  55
  56         /* Applied packet transmission aggregation limits. */
  57         uint32_t        agg_szmax;
  58         uint32_t        agg_pktmax;
  59         uint32_t        agg_align;
  60
  61         /* Packet transmission aggregation states */
  62         struct hn_txdesc *agg_txd;
  63         uint32_t        agg_pktleft;
  64         uint32_t        agg_szleft;
  65         struct rndis_packet_msg *agg_prevpkt;
  66
  67         struct hn_stats stats;
  68 };
  69
  70 struct hn_rx_queue {
  71         struct hn_data  *hv;
  72         struct vmbus_channel *chan;
  73         struct rte_mempool *mb_pool;
  74         struct rte_ring *rx_ring;
  75
  76         rte_spinlock_t ring_lock;
  77         uint32_t event_sz;
  78         uint16_t port_id;
  79         uint16_t queue_id;
  80         struct hn_stats stats;
  81
  82         void *event_buf;
  83 };
  84
  85
  86 /* multi-packet data from host */
  87 struct hn_rx_bufinfo {
  88         struct vmbus_channel *chan;
  89         struct hn_data *hv;
  90         uint64_t        xactid;
  91         struct rte_mbuf_ext_shared_info shinfo;
  92 } __rte_cache_aligned;
  93
  94 #define HN_INVALID_PORT UINT16_MAX
  95
  96 struct hn_data {
  97         struct rte_vmbus_device *vmbus;
  98         struct hn_rx_queue *primary;
  99         rte_spinlock_t  vf_lock;
 100         uint16_t        port_id;
 101         uint16_t        vf_port;
 102
 103         uint8_t         vf_present;
 104         uint8_t         closed;
 105         uint8_t         vlan_strip;
 106
 107         uint32_t        link_status;
 108         uint32_t        link_speed;
 109
 110         struct rte_mem_resource *rxbuf_res;     /* UIO resource for Rx */
 111         struct hn_rx_bufinfo *rxbuf_info;
 112         uint32_t        rxbuf_section_cnt;      /* # of Rx sections */
 113         volatile uint32_t rxbuf_outstanding;
 114         uint16_t        max_queues;             /* Max available queues */
 115         uint16_t        num_queues;
 116         uint64_t        rss_offloads;
 117
 118         struct rte_mem_resource *chim_res;      /* UIO resource for Tx */
 119         struct rte_mempool *tx_pool;            /* Tx descriptors */
 120         uint32_t        chim_szmax;             /* Max size per buffer */
 121         uint32_t        chim_cnt;               /* Max packets per buffer */
 122
 123         uint32_t        latency;
 124         uint32_t        nvs_ver;
 125         uint32_t        ndis_ver;
 126         uint32_t        rndis_agg_size;
 127         uint32_t        rndis_agg_pkts;
 128         uint32_t        rndis_agg_align;
 129
 130         volatile uint32_t  rndis_pending;
 131         rte_atomic32_t  rndis_req_id;
 132         uint8_t         rndis_resp[256];
 133
 134         uint32_t        rss_hash;
 135         uint8_t         rss_key[40];
 136         uint16_t        rss_ind[128];
 137
 138         struct rte_ether_addr mac_addr;
 139
 140         struct rte_eth_dev_owner owner;
 141         struct rte_intr_handle vf_intr;
 142
 143         struct vmbus_channel *channels[HN_MAX_CHANNELS];
 144 };
 145
 146 static inline struct vmbus_channel *
 147 hn_primary_chan(const struct hn_data *hv)
 148 {
 149         return hv->channels[0];
 150 }
 151
 152 uint32_t hn_process_events(struct hn_data *hv, uint16_t queue_id,
 153                        uint32_t tx_limit);
 154
 155 uint16_t hn_xmit_pkts(void *tx_queue, struct rte_mbuf **tx_pkts,
 156                       uint16_t nb_pkts);
 157 uint16_t hn_recv_pkts(void *rx_queue, struct rte_mbuf **rx_pkts,
 158                       uint16_t nb_pkts);
 159
 160 int     hn_tx_pool_init(struct rte_eth_dev *dev);
 161 void    hn_tx_pool_uninit(struct rte_eth_dev *dev);
 162 int     hn_dev_link_update(struct rte_eth_dev *dev, int wait);
 163 int     hn_dev_tx_queue_setup(struct rte_eth_dev *dev, uint16_t queue_idx,
 164                               uint16_t nb_desc, unsigned int socket_id,
 165                               const struct rte_eth_txconf *tx_conf);
 166 void    hn_dev_tx_queue_release(void *arg);
 167 void    hn_dev_tx_queue_info(struct rte_eth_dev *dev, uint16_t queue_idx,
 168                              struct rte_eth_txq_info *qinfo);
 169 int     hn_dev_tx_done_cleanup(void *arg, uint32_t free_cnt);
 170
 171 struct hn_rx_queue *hn_rx_queue_alloc(struct hn_data *hv,
 172                                       uint16_t queue_id,
 173                                       unsigned int socket_id);
 174 int     hn_dev_rx_queue_setup(struct rte_eth_dev *dev,
 175                               uint16_t queue_idx, uint16_t nb_desc,
 176                               unsigned int socket_id,
 177                               const struct rte_eth_rxconf *rx_conf,
 178                               struct rte_mempool *mp);
 179 void    hn_dev_rx_queue_release(void *arg);
 180 void    hn_dev_free_queues(struct rte_eth_dev *dev);
 181
 182 /* Check if VF is attached */
 183 static inline bool
 184 hn_vf_attached(const struct hn_data *hv)
 185 {
 186         return hv->vf_port != HN_INVALID_PORT;
 187 }
 188
 189 /* Get VF device for existing netvsc device */
 190 static inline struct rte_eth_dev *
 191 hn_get_vf_dev(const struct hn_data *hv)
 192 {
 193         uint16_t vf_port = hv->vf_port;
 194
 195         /* make sure vf_port is loaded */
 196         rte_smp_rmb();
 197
 198         if (vf_port == HN_INVALID_PORT)
 199                 return NULL;
 200         else
 201                 return &rte_eth_devices[vf_port];
 202 }
 203
 204 int     hn_vf_info_get(struct hn_data *hv,
 205                        struct rte_eth_dev_info *info);
 206 int     hn_vf_add(struct rte_eth_dev *dev, struct hn_data *hv);
 207 int     hn_vf_configure(struct rte_eth_dev *dev,
 208                         const struct rte_eth_conf *dev_conf);
 209 const uint32_t *hn_vf_supported_ptypes(struct rte_eth_dev *dev);
 210 int     hn_vf_start(struct rte_eth_dev *dev);
 211 void    hn_vf_reset(struct rte_eth_dev *dev);
 212 void    hn_vf_stop(struct rte_eth_dev *dev);
 213 void    hn_vf_close(struct rte_eth_dev *dev);
 214
 215 int     hn_vf_allmulticast_enable(struct rte_eth_dev *dev);
 216 int     hn_vf_allmulticast_disable(struct rte_eth_dev *dev);
 217 int     hn_vf_promiscuous_enable(struct rte_eth_dev *dev);
 218 int     hn_vf_promiscuous_disable(struct rte_eth_dev *dev);
 219 int     hn_vf_mc_addr_list(struct rte_eth_dev *dev,
 220                            struct rte_ether_addr *mc_addr_set,
 221                            uint32_t nb_mc_addr);
 222
 223 int     hn_vf_link_update(struct rte_eth_dev *dev,
 224                           int wait_to_complete);
 225 int     hn_vf_tx_queue_setup(struct rte_eth_dev *dev,
 226                              uint16_t queue_idx, uint16_t nb_desc,
 227                              unsigned int socket_id,
 228                              const struct rte_eth_txconf *tx_conf);
 229 void    hn_vf_tx_queue_release(struct hn_data *hv, uint16_t queue_id);
 230 int     hn_vf_rx_queue_setup(struct rte_eth_dev *dev,
 231                              uint16_t queue_idx, uint16_t nb_desc,
 232                              unsigned int socket_id,
 233                              const struct rte_eth_rxconf *rx_conf,
 234                              struct rte_mempool *mp);
 235 void    hn_vf_rx_queue_release(struct hn_data *hv, uint16_t queue_id);
 236
 237 int     hn_vf_stats_get(struct rte_eth_dev *dev, struct rte_eth_stats *stats);
 238 int     hn_vf_stats_reset(struct rte_eth_dev *dev);
 239 int     hn_vf_xstats_get_names(struct rte_eth_dev *dev,
 240                                struct rte_eth_xstat_name *xstats_names,
 241                                unsigned int size);
 242 int     hn_vf_xstats_get(struct rte_eth_dev *dev,
 243                          struct rte_eth_xstat *xstats,
 244                          unsigned int offset, unsigned int n);
 245 int     hn_vf_xstats_reset(struct rte_eth_dev *dev);
 246 int     hn_vf_rss_hash_update(struct rte_eth_dev *dev,
 247                               struct rte_eth_rss_conf *rss_conf);
 248 int     hn_vf_reta_hash_update(struct rte_eth_dev *dev,
 249                                struct rte_eth_rss_reta_entry64 *reta_conf,
 250                                uint16_t reta_size);