30208d4e53717d8c687089b5323395aa2837a90c
[dpdk.git] / drivers / net / iavf / iavf.h
1 /* SPDX-License-Identifier: BSD-3-Clause
2  * Copyright(c) 2017 Intel Corporation
3  */
4
5 #ifndef _IAVF_ETHDEV_H_
6 #define _IAVF_ETHDEV_H_
7
8 #include <rte_kvargs.h>
9 #include <iavf_prototype.h>
10 #include <iavf_adminq_cmd.h>
11 #include <iavf_type.h>
12
13 #include "iavf_log.h"
14
15 #define IAVF_AQ_LEN               32
16 #define IAVF_AQ_BUF_SZ            4096
17 #define IAVF_RESET_WAIT_CNT       50
18 #define IAVF_BUF_SIZE_MIN         1024
19 #define IAVF_FRAME_SIZE_MAX       9728
20 #define IAVF_QUEUE_BASE_ADDR_UNIT 128
21
22 #define IAVF_MAX_NUM_QUEUES       16
23
24 #define IAVF_NUM_MACADDR_MAX      64
25
26 #define IAVF_DEFAULT_RX_PTHRESH      8
27 #define IAVF_DEFAULT_RX_HTHRESH      8
28 #define IAVF_DEFAULT_RX_WTHRESH      0
29
30 #define IAVF_DEFAULT_RX_FREE_THRESH  32
31
32 #define IAVF_DEFAULT_TX_PTHRESH      32
33 #define IAVF_DEFAULT_TX_HTHRESH      0
34 #define IAVF_DEFAULT_TX_WTHRESH      0
35
36 #define IAVF_DEFAULT_TX_FREE_THRESH  32
37 #define IAVF_DEFAULT_TX_RS_THRESH 32
38
39 #define IAVF_BASIC_OFFLOAD_CAPS  ( \
40         VF_BASE_MODE_OFFLOADS | \
41         VIRTCHNL_VF_OFFLOAD_WB_ON_ITR | \
42         VIRTCHNL_VF_OFFLOAD_RX_POLLING)
43
44 #define IAVF_RSS_OFFLOAD_ALL ( \
45         ETH_RSS_FRAG_IPV4 |         \
46         ETH_RSS_NONFRAG_IPV4_TCP |  \
47         ETH_RSS_NONFRAG_IPV4_UDP |  \
48         ETH_RSS_NONFRAG_IPV4_SCTP | \
49         ETH_RSS_NONFRAG_IPV4_OTHER)
50
51 #define IAVF_MISC_VEC_ID                RTE_INTR_VEC_ZERO_OFFSET
52 #define IAVF_RX_VEC_START               RTE_INTR_VEC_RXTX_OFFSET
53
54 /* Default queue interrupt throttling time in microseconds */
55 #define IAVF_ITR_INDEX_DEFAULT          0
56 #define IAVF_QUEUE_ITR_INTERVAL_DEFAULT 32 /* 32 us */
57 #define IAVF_QUEUE_ITR_INTERVAL_MAX     8160 /* 8160 us */
58
59 /* The overhead from MTU to max frame size.
60  * Considering QinQ packet, the VLAN tag needs to be counted twice.
61  */
62 #define IAVF_VLAN_TAG_SIZE               4
63 #define IAVF_ETH_OVERHEAD \
64         (RTE_ETHER_HDR_LEN + RTE_ETHER_CRC_LEN + IAVF_VLAN_TAG_SIZE * 2)
65
66 #define IAVF_32_BIT_WIDTH (CHAR_BIT * 4)
67 #define IAVF_48_BIT_WIDTH (CHAR_BIT * 6)
68 #define IAVF_48_BIT_MASK  RTE_LEN2MASK(IAVF_48_BIT_WIDTH, uint64_t)
69
70 #define IAVF_RX_DESC_EXT_STATUS_FLEXBH_MASK  0x03
71 #define IAVF_RX_DESC_EXT_STATUS_FLEXBH_FD_ID 0x01
72
73 struct iavf_adapter;
74 struct iavf_rx_queue;
75 struct iavf_tx_queue;
76
77 /* Structure that defines a VSI, associated with a adapter. */
78 struct iavf_vsi {
79         struct iavf_adapter *adapter; /* Backreference to associated adapter */
80         uint16_t vsi_id;
81         uint16_t nb_qps;         /* Number of queue pairs VSI can occupy */
82         uint16_t nb_used_qps;    /* Number of queue pairs VSI uses */
83         uint16_t max_macaddrs;   /* Maximum number of MAC addresses */
84         uint16_t base_vector;
85         uint16_t msix_intr;      /* The MSIX interrupt binds to VSI */
86         struct virtchnl_eth_stats eth_stats_offset;
87 };
88
89 struct rte_flow;
90 TAILQ_HEAD(iavf_flow_list, rte_flow);
91
92 struct iavf_flow_parser_node;
93 TAILQ_HEAD(iavf_parser_list, iavf_flow_parser_node);
94
95 struct iavf_fdir_conf {
96         struct virtchnl_fdir_add add_fltr;
97         struct virtchnl_fdir_del del_fltr;
98         uint64_t input_set;
99         uint32_t flow_id;
100 };
101
102 struct iavf_fdir_info {
103         struct iavf_fdir_conf conf;
104 };
105
106 /* TODO: is that correct to assume the max number to be 16 ?*/
107 #define IAVF_MAX_MSIX_VECTORS   16
108
109 /* Structure to store private data specific for VF instance. */
110 struct iavf_info {
111         uint16_t num_queue_pairs;
112         uint16_t max_pkt_len; /* Maximum packet length */
113         uint16_t mac_num;     /* Number of MAC addresses */
114         bool promisc_unicast_enabled;
115         bool promisc_multicast_enabled;
116
117         struct virtchnl_version_info virtchnl_version;
118         struct virtchnl_vf_resource *vf_res; /* VF resource */
119         struct virtchnl_vsi_resource *vsi_res; /* LAN VSI */
120         uint64_t supported_rxdid;
121
122         volatile enum virtchnl_ops pend_cmd; /* pending command not finished */
123         uint32_t cmd_retval; /* return value of the cmd response from PF */
124         uint8_t *aq_resp; /* buffer to store the adminq response from PF */
125
126         /* Event from pf */
127         bool dev_closed;
128         bool link_up;
129         uint32_t link_speed;
130
131         struct iavf_vsi vsi;
132         bool vf_reset;
133         uint64_t flags;
134
135         uint8_t *rss_lut;
136         uint8_t *rss_key;
137         uint16_t nb_msix;   /* number of MSI-X interrupts on Rx */
138         uint16_t msix_base; /* msix vector base from */
139         /* queue bitmask for each vector */
140         uint16_t rxq_map[IAVF_MAX_MSIX_VECTORS];
141         struct iavf_flow_list flow_list;
142         rte_spinlock_t flow_ops_lock;
143         struct iavf_parser_list rss_parser_list;
144         struct iavf_parser_list dist_parser_list;
145
146         struct iavf_fdir_info fdir; /* flow director info */
147 };
148
149 #define IAVF_MAX_PKT_TYPE 1024
150
151 /* Structure to store private data for each VF instance. */
152 struct iavf_adapter {
153         struct iavf_hw hw;
154         struct rte_eth_dev *eth_dev;
155         struct iavf_info vf;
156
157         bool rx_bulk_alloc_allowed;
158         /* For vector PMD */
159         bool rx_vec_allowed;
160         bool tx_vec_allowed;
161         const uint32_t *ptype_tbl;
162         bool stopped;
163         uint16_t fdir_ref_cnt;
164 };
165
166 /* IAVF_DEV_PRIVATE_TO */
167 #define IAVF_DEV_PRIVATE_TO_ADAPTER(adapter) \
168         ((struct iavf_adapter *)adapter)
169 #define IAVF_DEV_PRIVATE_TO_VF(adapter) \
170         (&((struct iavf_adapter *)adapter)->vf)
171 #define IAVF_DEV_PRIVATE_TO_HW(adapter) \
172         (&((struct iavf_adapter *)adapter)->hw)
173
174 /* IAVF_VSI_TO */
175 #define IAVF_VSI_TO_HW(vsi) \
176         (&(((struct iavf_vsi *)vsi)->adapter->hw))
177 #define IAVF_VSI_TO_VF(vsi) \
178         (&(((struct iavf_vsi *)vsi)->adapter->vf))
179 #define IAVF_VSI_TO_ETH_DEV(vsi) \
180         (((struct iavf_vsi *)vsi)->adapter->eth_dev)
181
182 static inline void
183 iavf_init_adminq_parameter(struct iavf_hw *hw)
184 {
185         hw->aq.num_arq_entries = IAVF_AQ_LEN;
186         hw->aq.num_asq_entries = IAVF_AQ_LEN;
187         hw->aq.arq_buf_size = IAVF_AQ_BUF_SZ;
188         hw->aq.asq_buf_size = IAVF_AQ_BUF_SZ;
189 }
190
191 static inline uint16_t
192 iavf_calc_itr_interval(int16_t interval)
193 {
194         if (interval < 0 || interval > IAVF_QUEUE_ITR_INTERVAL_MAX)
195                 interval = IAVF_QUEUE_ITR_INTERVAL_DEFAULT;
196
197         /* Convert to hardware count, as writing each 1 represents 2 us */
198         return interval / 2;
199 }
200
201 /* structure used for sending and checking response of virtchnl ops */
202 struct iavf_cmd_info {
203         enum virtchnl_ops ops;
204         uint8_t *in_args;       /* buffer for sending */
205         uint32_t in_args_size;  /* buffer size for sending */
206         uint8_t *out_buffer;    /* buffer for response */
207         uint32_t out_size;      /* buffer size for response */
208 };
209
210 /* notify current command done. Only call in case execute
211  * _atomic_set_cmd successfully.
212  */
213 static inline void
214 _notify_cmd(struct iavf_info *vf, uint32_t msg_ret)
215 {
216         vf->cmd_retval = msg_ret;
217         rte_wmb();
218         vf->pend_cmd = VIRTCHNL_OP_UNKNOWN;
219 }
220
221 /* clear current command. Only call in case execute
222  * _atomic_set_cmd successfully.
223  */
224 static inline void
225 _clear_cmd(struct iavf_info *vf)
226 {
227         rte_wmb();
228         vf->pend_cmd = VIRTCHNL_OP_UNKNOWN;
229         vf->cmd_retval = VIRTCHNL_STATUS_SUCCESS;
230 }
231
232 /* Check there is pending cmd in execution. If none, set new command. */
233 static inline int
234 _atomic_set_cmd(struct iavf_info *vf, enum virtchnl_ops ops)
235 {
236         int ret = rte_atomic32_cmpset(&vf->pend_cmd, VIRTCHNL_OP_UNKNOWN, ops);
237
238         if (!ret)
239                 PMD_DRV_LOG(ERR, "There is incomplete cmd %d", vf->pend_cmd);
240
241         return !ret;
242 }
243
244 int iavf_check_api_version(struct iavf_adapter *adapter);
245 int iavf_get_vf_resource(struct iavf_adapter *adapter);
246 void iavf_handle_virtchnl_msg(struct rte_eth_dev *dev);
247 int iavf_enable_vlan_strip(struct iavf_adapter *adapter);
248 int iavf_disable_vlan_strip(struct iavf_adapter *adapter);
249 int iavf_switch_queue(struct iavf_adapter *adapter, uint16_t qid,
250                      bool rx, bool on);
251 int iavf_enable_queues(struct iavf_adapter *adapter);
252 int iavf_disable_queues(struct iavf_adapter *adapter);
253 int iavf_configure_rss_lut(struct iavf_adapter *adapter);
254 int iavf_configure_rss_key(struct iavf_adapter *adapter);
255 int iavf_configure_queues(struct iavf_adapter *adapter);
256 int iavf_get_supported_rxdid(struct iavf_adapter *adapter);
257 int iavf_config_irq_map(struct iavf_adapter *adapter);
258 void iavf_add_del_all_mac_addr(struct iavf_adapter *adapter, bool add);
259 int iavf_dev_link_update(struct rte_eth_dev *dev,
260                         __rte_unused int wait_to_complete);
261 int iavf_query_stats(struct iavf_adapter *adapter,
262                     struct virtchnl_eth_stats **pstats);
263 int iavf_config_promisc(struct iavf_adapter *adapter, bool enable_unicast,
264                        bool enable_multicast);
265 int iavf_add_del_eth_addr(struct iavf_adapter *adapter,
266                          struct rte_ether_addr *addr, bool add);
267 int iavf_add_del_vlan(struct iavf_adapter *adapter, uint16_t vlanid, bool add);
268 int iavf_fdir_add(struct iavf_adapter *adapter, struct iavf_fdir_conf *filter);
269 int iavf_fdir_del(struct iavf_adapter *adapter, struct iavf_fdir_conf *filter);
270 int iavf_fdir_check(struct iavf_adapter *adapter,
271                 struct iavf_fdir_conf *filter);
272 #endif /* _IAVF_ETHDEV_H_ */