ethdev: add siblings iterators
[dpdk.git] / lib / librte_ethdev / rte_ethdev.h
1 /* SPDX-License-Identifier: BSD-3-Clause
2  * Copyright(c) 2010-2017 Intel Corporation
3  */
4
5 #ifndef _RTE_ETHDEV_H_
6 #define _RTE_ETHDEV_H_
7
8 /**
9  * @file
10  *
11  * RTE Ethernet Device API
12  *
13  * The Ethernet Device API is composed of two parts:
14  *
15  * - The application-oriented Ethernet API that includes functions to setup
16  *   an Ethernet device (configure it, setup its RX and TX queues and start it),
17  *   to get its MAC address, the speed and the status of its physical link,
18  *   to receive and to transmit packets, and so on.
19  *
20  * - The driver-oriented Ethernet API that exports functions allowing
21  *   an Ethernet Poll Mode Driver (PMD) to allocate an Ethernet device instance,
22  *   create memzone for HW rings and process registered callbacks, and so on.
23  *   PMDs should include rte_ethdev_driver.h instead of this header.
24  *
25  * By default, all the functions of the Ethernet Device API exported by a PMD
26  * are lock-free functions which assume to not be invoked in parallel on
27  * different logical cores to work on the same target object.  For instance,
28  * the receive function of a PMD cannot be invoked in parallel on two logical
29  * cores to poll the same RX queue [of the same port]. Of course, this function
30  * can be invoked in parallel by different logical cores on different RX queues.
31  * It is the responsibility of the upper level application to enforce this rule.
32  *
33  * If needed, parallel accesses by multiple logical cores to shared queues
34  * shall be explicitly protected by dedicated inline lock-aware functions
35  * built on top of their corresponding lock-free functions of the PMD API.
36  *
37  * In all functions of the Ethernet API, the Ethernet device is
38  * designated by an integer >= 0 named the device port identifier.
39  *
40  * At the Ethernet driver level, Ethernet devices are represented by a generic
41  * data structure of type *rte_eth_dev*.
42  *
43  * Ethernet devices are dynamically registered during the PCI probing phase
44  * performed at EAL initialization time.
45  * When an Ethernet device is being probed, an *rte_eth_dev* structure and
46  * a new port identifier are allocated for that device. Then, the eth_dev_init()
47  * function supplied by the Ethernet driver matching the probed PCI
48  * device is invoked to properly initialize the device.
49  *
50  * The role of the device init function consists of resetting the hardware,
51  * checking access to Non-volatile Memory (NVM), reading the MAC address
52  * from NVM etc.
53  *
54  * If the device init operation is successful, the correspondence between
55  * the port identifier assigned to the new device and its associated
56  * *rte_eth_dev* structure is effectively registered.
57  * Otherwise, both the *rte_eth_dev* structure and the port identifier are
58  * freed.
59  *
60  * The functions exported by the application Ethernet API to setup a device
61  * designated by its port identifier must be invoked in the following order:
62  *     - rte_eth_dev_configure()
63  *     - rte_eth_tx_queue_setup()
64  *     - rte_eth_rx_queue_setup()
65  *     - rte_eth_dev_start()
66  *
67  * Then, the network application can invoke, in any order, the functions
68  * exported by the Ethernet API to get the MAC address of a given device, to
69  * get the speed and the status of a device physical link, to receive/transmit
70  * [burst of] packets, and so on.
71  *
72  * If the application wants to change the configuration (i.e. call
73  * rte_eth_dev_configure(), rte_eth_tx_queue_setup(), or
74  * rte_eth_rx_queue_setup()), it must call rte_eth_dev_stop() first to stop the
75  * device and then do the reconfiguration before calling rte_eth_dev_start()
76  * again. The transmit and receive functions should not be invoked when the
77  * device is stopped.
78  *
79  * Please note that some configuration is not stored between calls to
80  * rte_eth_dev_stop()/rte_eth_dev_start(). The following configuration will
81  * be retained:
82  *
83  *     - MTU
84  *     - flow control settings
85  *     - receive mode configuration (promiscuous mode, all-multicast mode,
86  *       hardware checksum mode, RSS/VMDQ settings etc.)
87  *     - VLAN filtering configuration
88  *     - default MAC address
89  *     - MAC addresses supplied to MAC address array
90  *     - flow director filtering mode (but not filtering rules)
91  *     - NIC queue statistics mappings
92  *
93  * Any other configuration will not be stored and will need to be re-entered
94  * before a call to rte_eth_dev_start().
95  *
96  * Finally, a network application can close an Ethernet device by invoking the
97  * rte_eth_dev_close() function.
98  *
99  * Each function of the application Ethernet API invokes a specific function
100  * of the PMD that controls the target device designated by its port
101  * identifier.
102  * For this purpose, all device-specific functions of an Ethernet driver are
103  * supplied through a set of pointers contained in a generic structure of type
104  * *eth_dev_ops*.
105  * The address of the *eth_dev_ops* structure is stored in the *rte_eth_dev*
106  * structure by the device init function of the Ethernet driver, which is
107  * invoked during the PCI probing phase, as explained earlier.
108  *
109  * In other words, each function of the Ethernet API simply retrieves the
110  * *rte_eth_dev* structure associated with the device port identifier and
111  * performs an indirect invocation of the corresponding driver function
112  * supplied in the *eth_dev_ops* structure of the *rte_eth_dev* structure.
113  *
114  * For performance reasons, the address of the burst-oriented RX and TX
115  * functions of the Ethernet driver are not contained in the *eth_dev_ops*
116  * structure. Instead, they are directly stored at the beginning of the
117  * *rte_eth_dev* structure to avoid an extra indirect memory access during
118  * their invocation.
119  *
120  * RTE ethernet device drivers do not use interrupts for transmitting or
121  * receiving. Instead, Ethernet drivers export Poll-Mode receive and transmit
122  * functions to applications.
123  * Both receive and transmit functions are packet-burst oriented to minimize
124  * their cost per packet through the following optimizations:
125  *
126  * - Sharing among multiple packets the incompressible cost of the
127  *   invocation of receive/transmit functions.
128  *
129  * - Enabling receive/transmit functions to take advantage of burst-oriented
130  *   hardware features (L1 cache, prefetch instructions, NIC head/tail
131  *   registers) to minimize the number of CPU cycles per packet, for instance,
132  *   by avoiding useless read memory accesses to ring descriptors, or by
133  *   systematically using arrays of pointers that exactly fit L1 cache line
134  *   boundaries and sizes.
135  *
136  * The burst-oriented receive function does not provide any error notification,
137  * to avoid the corresponding overhead. As a hint, the upper-level application
138  * might check the status of the device link once being systematically returned
139  * a 0 value by the receive function of the driver for a given number of tries.
140  */
141
142 #ifdef __cplusplus
143 extern "C" {
144 #endif
145
146 #include <stdint.h>
147
148 /* Use this macro to check if LRO API is supported */
149 #define RTE_ETHDEV_HAS_LRO_SUPPORT
150
151 #include <rte_compat.h>
152 #include <rte_log.h>
153 #include <rte_interrupts.h>
154 #include <rte_dev.h>
155 #include <rte_devargs.h>
156 #include <rte_errno.h>
157 #include <rte_common.h>
158 #include <rte_config.h>
159
160 #include "rte_ether.h"
161 #include "rte_eth_ctrl.h"
162 #include "rte_dev_info.h"
163
164 extern int rte_eth_dev_logtype;
165
166 #define RTE_ETHDEV_LOG(level, ...) \
167         rte_log(RTE_LOG_ ## level, rte_eth_dev_logtype, "" __VA_ARGS__)
168
169 struct rte_mbuf;
170
171 /**
172  * Initializes a device iterator.
173  *
174  * This iterator allows accessing a list of devices matching some devargs.
175  *
176  * @param iter
177  *   Device iterator handle initialized by the function.
178  *   The fields bus_str and cls_str might be dynamically allocated,
179  *   and could be freed by calling rte_eth_iterator_cleanup().
180  *
181  * @param devargs
182  *   Device description string.
183  *
184  * @return
185  *   0 on successful initialization, negative otherwise.
186  */
187 int rte_eth_iterator_init(struct rte_dev_iterator *iter, const char *devargs);
188
189 /**
190  * Iterates on devices with devargs filter.
191  * The ownership is not checked.
192  *
193  * The next port id is returned, and the iterator is updated.
194  *
195  * @param iter
196  *   Device iterator handle initialized by rte_eth_iterator_init().
197  *   Some fields bus_str and cls_str might be freed when no more port is found,
198  *   by calling rte_eth_iterator_cleanup().
199  *
200  * @return
201  *   A port id if found, RTE_MAX_ETHPORTS otherwise.
202  */
203 uint16_t rte_eth_iterator_next(struct rte_dev_iterator *iter);
204
205 /**
206  * Free some allocated fields of the iterator.
207  *
208  * This function is automatically called by rte_eth_iterator_next()
209  * on the last iteration (i.e. when no more matching port is found).
210  *
211  * It is safe to call this function twice; it will do nothing more.
212  *
213  * @param iter
214  *   Device iterator handle initialized by rte_eth_iterator_init().
215  *   The fields bus_str and cls_str are freed if needed.
216  */
217 void rte_eth_iterator_cleanup(struct rte_dev_iterator *iter);
218
219 /**
220  * Macro to iterate over all ethdev ports matching some devargs.
221  *
222  * If a break is done before the end of the loop,
223  * the function rte_eth_iterator_cleanup() must be called.
224  *
225  * @param id
226  *   Iterated port id of type uint16_t.
227  * @param devargs
228  *   Device parameters input as string of type char*.
229  * @param iter
230  *   Iterator handle of type struct rte_dev_iterator, used internally.
231  */
232 #define RTE_ETH_FOREACH_MATCHING_DEV(id, devargs, iter) \
233         for (rte_eth_iterator_init(iter, devargs), \
234              id = rte_eth_iterator_next(iter); \
235              id != RTE_MAX_ETHPORTS; \
236              id = rte_eth_iterator_next(iter))
237
238 /**
239  * A structure used to retrieve statistics for an Ethernet port.
240  * Not all statistics fields in struct rte_eth_stats are supported
241  * by any type of network interface card (NIC). If any statistics
242  * field is not supported, its value is 0.
243  */
244 struct rte_eth_stats {
245         uint64_t ipackets;  /**< Total number of successfully received packets. */
246         uint64_t opackets;  /**< Total number of successfully transmitted packets.*/
247         uint64_t ibytes;    /**< Total number of successfully received bytes. */
248         uint64_t obytes;    /**< Total number of successfully transmitted bytes. */
249         uint64_t imissed;
250         /**< Total of RX packets dropped by the HW,
251          * because there are no available buffer (i.e. RX queues are full).
252          */
253         uint64_t ierrors;   /**< Total number of erroneous received packets. */
254         uint64_t oerrors;   /**< Total number of failed transmitted packets. */
255         uint64_t rx_nombuf; /**< Total number of RX mbuf allocation failures. */
256         uint64_t q_ipackets[RTE_ETHDEV_QUEUE_STAT_CNTRS];
257         /**< Total number of queue RX packets. */
258         uint64_t q_opackets[RTE_ETHDEV_QUEUE_STAT_CNTRS];
259         /**< Total number of queue TX packets. */
260         uint64_t q_ibytes[RTE_ETHDEV_QUEUE_STAT_CNTRS];
261         /**< Total number of successfully received queue bytes. */
262         uint64_t q_obytes[RTE_ETHDEV_QUEUE_STAT_CNTRS];
263         /**< Total number of successfully transmitted queue bytes. */
264         uint64_t q_errors[RTE_ETHDEV_QUEUE_STAT_CNTRS];
265         /**< Total number of queue packets received that are dropped. */
266 };
267
268 /**
269  * Device supported speeds bitmap flags
270  */
271 #define ETH_LINK_SPEED_AUTONEG  (0 <<  0)  /**< Autonegotiate (all speeds) */
272 #define ETH_LINK_SPEED_FIXED    (1 <<  0)  /**< Disable autoneg (fixed speed) */
273 #define ETH_LINK_SPEED_10M_HD   (1 <<  1)  /**<  10 Mbps half-duplex */
274 #define ETH_LINK_SPEED_10M      (1 <<  2)  /**<  10 Mbps full-duplex */
275 #define ETH_LINK_SPEED_100M_HD  (1 <<  3)  /**< 100 Mbps half-duplex */
276 #define ETH_LINK_SPEED_100M     (1 <<  4)  /**< 100 Mbps full-duplex */
277 #define ETH_LINK_SPEED_1G       (1 <<  5)  /**<   1 Gbps */
278 #define ETH_LINK_SPEED_2_5G     (1 <<  6)  /**< 2.5 Gbps */
279 #define ETH_LINK_SPEED_5G       (1 <<  7)  /**<   5 Gbps */
280 #define ETH_LINK_SPEED_10G      (1 <<  8)  /**<  10 Gbps */
281 #define ETH_LINK_SPEED_20G      (1 <<  9)  /**<  20 Gbps */
282 #define ETH_LINK_SPEED_25G      (1 << 10)  /**<  25 Gbps */
283 #define ETH_LINK_SPEED_40G      (1 << 11)  /**<  40 Gbps */
284 #define ETH_LINK_SPEED_50G      (1 << 12)  /**<  50 Gbps */
285 #define ETH_LINK_SPEED_56G      (1 << 13)  /**<  56 Gbps */
286 #define ETH_LINK_SPEED_100G     (1 << 14)  /**< 100 Gbps */
287
288 /**
289  * Ethernet numeric link speeds in Mbps
290  */
291 #define ETH_SPEED_NUM_NONE         0 /**< Not defined */
292 #define ETH_SPEED_NUM_10M         10 /**<  10 Mbps */
293 #define ETH_SPEED_NUM_100M       100 /**< 100 Mbps */
294 #define ETH_SPEED_NUM_1G        1000 /**<   1 Gbps */
295 #define ETH_SPEED_NUM_2_5G      2500 /**< 2.5 Gbps */
296 #define ETH_SPEED_NUM_5G        5000 /**<   5 Gbps */
297 #define ETH_SPEED_NUM_10G      10000 /**<  10 Gbps */
298 #define ETH_SPEED_NUM_20G      20000 /**<  20 Gbps */
299 #define ETH_SPEED_NUM_25G      25000 /**<  25 Gbps */
300 #define ETH_SPEED_NUM_40G      40000 /**<  40 Gbps */
301 #define ETH_SPEED_NUM_50G      50000 /**<  50 Gbps */
302 #define ETH_SPEED_NUM_56G      56000 /**<  56 Gbps */
303 #define ETH_SPEED_NUM_100G    100000 /**< 100 Gbps */
304
305 /**
306  * A structure used to retrieve link-level information of an Ethernet port.
307  */
308 __extension__
309 struct rte_eth_link {
310         uint32_t link_speed;        /**< ETH_SPEED_NUM_ */
311         uint16_t link_duplex  : 1;  /**< ETH_LINK_[HALF/FULL]_DUPLEX */
312         uint16_t link_autoneg : 1;  /**< ETH_LINK_[AUTONEG/FIXED] */
313         uint16_t link_status  : 1;  /**< ETH_LINK_[DOWN/UP] */
314 } __attribute__((aligned(8)));      /**< aligned for atomic64 read/write */
315
316 /* Utility constants */
317 #define ETH_LINK_HALF_DUPLEX 0 /**< Half-duplex connection (see link_duplex). */
318 #define ETH_LINK_FULL_DUPLEX 1 /**< Full-duplex connection (see link_duplex). */
319 #define ETH_LINK_DOWN        0 /**< Link is down (see link_status). */
320 #define ETH_LINK_UP          1 /**< Link is up (see link_status). */
321 #define ETH_LINK_FIXED       0 /**< No autonegotiation (see link_autoneg). */
322 #define ETH_LINK_AUTONEG     1 /**< Autonegotiated (see link_autoneg). */
323
324 /**
325  * A structure used to configure the ring threshold registers of an RX/TX
326  * queue for an Ethernet port.
327  */
328 struct rte_eth_thresh {
329         uint8_t pthresh; /**< Ring prefetch threshold. */
330         uint8_t hthresh; /**< Ring host threshold. */
331         uint8_t wthresh; /**< Ring writeback threshold. */
332 };
333
334 /**
335  *  Simple flags are used for rte_eth_conf.rxmode.mq_mode.
336  */
337 #define ETH_MQ_RX_RSS_FLAG  0x1
338 #define ETH_MQ_RX_DCB_FLAG  0x2
339 #define ETH_MQ_RX_VMDQ_FLAG 0x4
340
341 /**
342  *  A set of values to identify what method is to be used to route
343  *  packets to multiple queues.
344  */
345 enum rte_eth_rx_mq_mode {
346         /** None of DCB,RSS or VMDQ mode */
347         ETH_MQ_RX_NONE = 0,
348
349         /** For RX side, only RSS is on */
350         ETH_MQ_RX_RSS = ETH_MQ_RX_RSS_FLAG,
351         /** For RX side,only DCB is on. */
352         ETH_MQ_RX_DCB = ETH_MQ_RX_DCB_FLAG,
353         /** Both DCB and RSS enable */
354         ETH_MQ_RX_DCB_RSS = ETH_MQ_RX_RSS_FLAG | ETH_MQ_RX_DCB_FLAG,
355
356         /** Only VMDQ, no RSS nor DCB */
357         ETH_MQ_RX_VMDQ_ONLY = ETH_MQ_RX_VMDQ_FLAG,
358         /** RSS mode with VMDQ */
359         ETH_MQ_RX_VMDQ_RSS = ETH_MQ_RX_RSS_FLAG | ETH_MQ_RX_VMDQ_FLAG,
360         /** Use VMDQ+DCB to route traffic to queues */
361         ETH_MQ_RX_VMDQ_DCB = ETH_MQ_RX_VMDQ_FLAG | ETH_MQ_RX_DCB_FLAG,
362         /** Enable both VMDQ and DCB in VMDq */
363         ETH_MQ_RX_VMDQ_DCB_RSS = ETH_MQ_RX_RSS_FLAG | ETH_MQ_RX_DCB_FLAG |
364                                  ETH_MQ_RX_VMDQ_FLAG,
365 };
366
367 /**
368  * for rx mq mode backward compatible
369  */
370 #define ETH_RSS                       ETH_MQ_RX_RSS
371 #define VMDQ_DCB                      ETH_MQ_RX_VMDQ_DCB
372 #define ETH_DCB_RX                    ETH_MQ_RX_DCB
373
374 /**
375  * A set of values to identify what method is to be used to transmit
376  * packets using multi-TCs.
377  */
378 enum rte_eth_tx_mq_mode {
379         ETH_MQ_TX_NONE    = 0,  /**< It is in neither DCB nor VT mode. */
380         ETH_MQ_TX_DCB,          /**< For TX side,only DCB is on. */
381         ETH_MQ_TX_VMDQ_DCB,     /**< For TX side,both DCB and VT is on. */
382         ETH_MQ_TX_VMDQ_ONLY,    /**< Only VT on, no DCB */
383 };
384
385 /**
386  * for tx mq mode backward compatible
387  */
388 #define ETH_DCB_NONE                ETH_MQ_TX_NONE
389 #define ETH_VMDQ_DCB_TX             ETH_MQ_TX_VMDQ_DCB
390 #define ETH_DCB_TX                  ETH_MQ_TX_DCB
391
392 /**
393  * A structure used to configure the RX features of an Ethernet port.
394  */
395 struct rte_eth_rxmode {
396         /** The multi-queue packet distribution mode to be used, e.g. RSS. */
397         enum rte_eth_rx_mq_mode mq_mode;
398         uint32_t max_rx_pkt_len;  /**< Only used if JUMBO_FRAME enabled. */
399         uint16_t split_hdr_size;  /**< hdr buf size (header_split enabled).*/
400         /**
401          * Per-port Rx offloads to be set using DEV_RX_OFFLOAD_* flags.
402          * Only offloads set on rx_offload_capa field on rte_eth_dev_info
403          * structure are allowed to be set.
404          */
405         uint64_t offloads;
406 };
407
408 /**
409  * VLAN types to indicate if it is for single VLAN, inner VLAN or outer VLAN.
410  * Note that single VLAN is treated the same as inner VLAN.
411  */
412 enum rte_vlan_type {
413         ETH_VLAN_TYPE_UNKNOWN = 0,
414         ETH_VLAN_TYPE_INNER, /**< Inner VLAN. */
415         ETH_VLAN_TYPE_OUTER, /**< Single VLAN, or outer VLAN. */
416         ETH_VLAN_TYPE_MAX,
417 };
418
419 /**
420  * A structure used to describe a vlan filter.
421  * If the bit corresponding to a VID is set, such VID is on.
422  */
423 struct rte_vlan_filter_conf {
424         uint64_t ids[64];
425 };
426
427 /**
428  * A structure used to configure the Receive Side Scaling (RSS) feature
429  * of an Ethernet port.
430  * If not NULL, the *rss_key* pointer of the *rss_conf* structure points
431  * to an array holding the RSS key to use for hashing specific header
432  * fields of received packets. The length of this array should be indicated
433  * by *rss_key_len* below. Otherwise, a default random hash key is used by
434  * the device driver.
435  *
436  * The *rss_key_len* field of the *rss_conf* structure indicates the length
437  * in bytes of the array pointed by *rss_key*. To be compatible, this length
438  * will be checked in i40e only. Others assume 40 bytes to be used as before.
439  *
440  * The *rss_hf* field of the *rss_conf* structure indicates the different
441  * types of IPv4/IPv6 packets to which the RSS hashing must be applied.
442  * Supplying an *rss_hf* equal to zero disables the RSS feature.
443  */
444 struct rte_eth_rss_conf {
445         uint8_t *rss_key;    /**< If not NULL, 40-byte hash key. */
446         uint8_t rss_key_len; /**< hash key length in bytes. */
447         uint64_t rss_hf;     /**< Hash functions to apply - see below. */
448 };
449
450 /*
451  * The RSS offload types are defined based on flow types which are defined
452  * in rte_eth_ctrl.h. Different NIC hardwares may support different RSS offload
453  * types. The supported flow types or RSS offload types can be queried by
454  * rte_eth_dev_info_get().
455  */
456 #define ETH_RSS_IPV4               (1ULL << RTE_ETH_FLOW_IPV4)
457 #define ETH_RSS_FRAG_IPV4          (1ULL << RTE_ETH_FLOW_FRAG_IPV4)
458 #define ETH_RSS_NONFRAG_IPV4_TCP   (1ULL << RTE_ETH_FLOW_NONFRAG_IPV4_TCP)
459 #define ETH_RSS_NONFRAG_IPV4_UDP   (1ULL << RTE_ETH_FLOW_NONFRAG_IPV4_UDP)
460 #define ETH_RSS_NONFRAG_IPV4_SCTP  (1ULL << RTE_ETH_FLOW_NONFRAG_IPV4_SCTP)
461 #define ETH_RSS_NONFRAG_IPV4_OTHER (1ULL << RTE_ETH_FLOW_NONFRAG_IPV4_OTHER)
462 #define ETH_RSS_IPV6               (1ULL << RTE_ETH_FLOW_IPV6)
463 #define ETH_RSS_FRAG_IPV6          (1ULL << RTE_ETH_FLOW_FRAG_IPV6)
464 #define ETH_RSS_NONFRAG_IPV6_TCP   (1ULL << RTE_ETH_FLOW_NONFRAG_IPV6_TCP)
465 #define ETH_RSS_NONFRAG_IPV6_UDP   (1ULL << RTE_ETH_FLOW_NONFRAG_IPV6_UDP)
466 #define ETH_RSS_NONFRAG_IPV6_SCTP  (1ULL << RTE_ETH_FLOW_NONFRAG_IPV6_SCTP)
467 #define ETH_RSS_NONFRAG_IPV6_OTHER (1ULL << RTE_ETH_FLOW_NONFRAG_IPV6_OTHER)
468 #define ETH_RSS_L2_PAYLOAD         (1ULL << RTE_ETH_FLOW_L2_PAYLOAD)
469 #define ETH_RSS_IPV6_EX            (1ULL << RTE_ETH_FLOW_IPV6_EX)
470 #define ETH_RSS_IPV6_TCP_EX        (1ULL << RTE_ETH_FLOW_IPV6_TCP_EX)
471 #define ETH_RSS_IPV6_UDP_EX        (1ULL << RTE_ETH_FLOW_IPV6_UDP_EX)
472 #define ETH_RSS_PORT               (1ULL << RTE_ETH_FLOW_PORT)
473 #define ETH_RSS_VXLAN              (1ULL << RTE_ETH_FLOW_VXLAN)
474 #define ETH_RSS_GENEVE             (1ULL << RTE_ETH_FLOW_GENEVE)
475 #define ETH_RSS_NVGRE              (1ULL << RTE_ETH_FLOW_NVGRE)
476
477 #define ETH_RSS_IP ( \
478         ETH_RSS_IPV4 | \
479         ETH_RSS_FRAG_IPV4 | \
480         ETH_RSS_NONFRAG_IPV4_OTHER | \
481         ETH_RSS_IPV6 | \
482         ETH_RSS_FRAG_IPV6 | \
483         ETH_RSS_NONFRAG_IPV6_OTHER | \
484         ETH_RSS_IPV6_EX)
485
486 #define ETH_RSS_UDP ( \
487         ETH_RSS_NONFRAG_IPV4_UDP | \
488         ETH_RSS_NONFRAG_IPV6_UDP | \
489         ETH_RSS_IPV6_UDP_EX)
490
491 #define ETH_RSS_TCP ( \
492         ETH_RSS_NONFRAG_IPV4_TCP | \
493         ETH_RSS_NONFRAG_IPV6_TCP | \
494         ETH_RSS_IPV6_TCP_EX)
495
496 #define ETH_RSS_SCTP ( \
497         ETH_RSS_NONFRAG_IPV4_SCTP | \
498         ETH_RSS_NONFRAG_IPV6_SCTP)
499
500 #define ETH_RSS_TUNNEL ( \
501         ETH_RSS_VXLAN  | \
502         ETH_RSS_GENEVE | \
503         ETH_RSS_NVGRE)
504
505 /**< Mask of valid RSS hash protocols */
506 #define ETH_RSS_PROTO_MASK ( \
507         ETH_RSS_IPV4 | \
508         ETH_RSS_FRAG_IPV4 | \
509         ETH_RSS_NONFRAG_IPV4_TCP | \
510         ETH_RSS_NONFRAG_IPV4_UDP | \
511         ETH_RSS_NONFRAG_IPV4_SCTP | \
512         ETH_RSS_NONFRAG_IPV4_OTHER | \
513         ETH_RSS_IPV6 | \
514         ETH_RSS_FRAG_IPV6 | \
515         ETH_RSS_NONFRAG_IPV6_TCP | \
516         ETH_RSS_NONFRAG_IPV6_UDP | \
517         ETH_RSS_NONFRAG_IPV6_SCTP | \
518         ETH_RSS_NONFRAG_IPV6_OTHER | \
519         ETH_RSS_L2_PAYLOAD | \
520         ETH_RSS_IPV6_EX | \
521         ETH_RSS_IPV6_TCP_EX | \
522         ETH_RSS_IPV6_UDP_EX | \
523         ETH_RSS_PORT  | \
524         ETH_RSS_VXLAN | \
525         ETH_RSS_GENEVE | \
526         ETH_RSS_NVGRE)
527
528 /*
529  * Definitions used for redirection table entry size.
530  * Some RSS RETA sizes may not be supported by some drivers, check the
531  * documentation or the description of relevant functions for more details.
532  */
533 #define ETH_RSS_RETA_SIZE_64  64
534 #define ETH_RSS_RETA_SIZE_128 128
535 #define ETH_RSS_RETA_SIZE_256 256
536 #define ETH_RSS_RETA_SIZE_512 512
537 #define RTE_RETA_GROUP_SIZE   64
538
539 /* Definitions used for VMDQ and DCB functionality */
540 #define ETH_VMDQ_MAX_VLAN_FILTERS   64 /**< Maximum nb. of VMDQ vlan filters. */
541 #define ETH_DCB_NUM_USER_PRIORITIES 8  /**< Maximum nb. of DCB priorities. */
542 #define ETH_VMDQ_DCB_NUM_QUEUES     128 /**< Maximum nb. of VMDQ DCB queues. */
543 #define ETH_DCB_NUM_QUEUES          128 /**< Maximum nb. of DCB queues. */
544
545 /* DCB capability defines */
546 #define ETH_DCB_PG_SUPPORT      0x00000001 /**< Priority Group(ETS) support. */
547 #define ETH_DCB_PFC_SUPPORT     0x00000002 /**< Priority Flow Control support. */
548
549 /* Definitions used for VLAN Offload functionality */
550 #define ETH_VLAN_STRIP_OFFLOAD   0x0001 /**< VLAN Strip  On/Off */
551 #define ETH_VLAN_FILTER_OFFLOAD  0x0002 /**< VLAN Filter On/Off */
552 #define ETH_VLAN_EXTEND_OFFLOAD  0x0004 /**< VLAN Extend On/Off */
553
554 /* Definitions used for mask VLAN setting */
555 #define ETH_VLAN_STRIP_MASK   0x0001 /**< VLAN Strip  setting mask */
556 #define ETH_VLAN_FILTER_MASK  0x0002 /**< VLAN Filter  setting mask*/
557 #define ETH_VLAN_EXTEND_MASK  0x0004 /**< VLAN Extend  setting mask*/
558 #define ETH_VLAN_ID_MAX       0x0FFF /**< VLAN ID is in lower 12 bits*/
559
560 /* Definitions used for receive MAC address   */
561 #define ETH_NUM_RECEIVE_MAC_ADDR  128 /**< Maximum nb. of receive mac addr. */
562
563 /* Definitions used for unicast hash  */
564 #define ETH_VMDQ_NUM_UC_HASH_ARRAY  128 /**< Maximum nb. of UC hash array. */
565
566 /* Definitions used for VMDQ pool rx mode setting */
567 #define ETH_VMDQ_ACCEPT_UNTAG   0x0001 /**< accept untagged packets. */
568 #define ETH_VMDQ_ACCEPT_HASH_MC 0x0002 /**< accept packets in multicast table . */
569 #define ETH_VMDQ_ACCEPT_HASH_UC 0x0004 /**< accept packets in unicast table. */
570 #define ETH_VMDQ_ACCEPT_BROADCAST   0x0008 /**< accept broadcast packets. */
571 #define ETH_VMDQ_ACCEPT_MULTICAST   0x0010 /**< multicast promiscuous. */
572
573 /** Maximum nb. of vlan per mirror rule */
574 #define ETH_MIRROR_MAX_VLANS       64
575
576 #define ETH_MIRROR_VIRTUAL_POOL_UP     0x01  /**< Virtual Pool uplink Mirroring. */
577 #define ETH_MIRROR_UPLINK_PORT         0x02  /**< Uplink Port Mirroring. */
578 #define ETH_MIRROR_DOWNLINK_PORT       0x04  /**< Downlink Port Mirroring. */
579 #define ETH_MIRROR_VLAN                0x08  /**< VLAN Mirroring. */
580 #define ETH_MIRROR_VIRTUAL_POOL_DOWN   0x10  /**< Virtual Pool downlink Mirroring. */
581
582 /**
583  * A structure used to configure VLAN traffic mirror of an Ethernet port.
584  */
585 struct rte_eth_vlan_mirror {
586         uint64_t vlan_mask; /**< mask for valid VLAN ID. */
587         /** VLAN ID list for vlan mirroring. */
588         uint16_t vlan_id[ETH_MIRROR_MAX_VLANS];
589 };
590
591 /**
592  * A structure used to configure traffic mirror of an Ethernet port.
593  */
594 struct rte_eth_mirror_conf {
595         uint8_t rule_type; /**< Mirroring rule type */
596         uint8_t dst_pool;  /**< Destination pool for this mirror rule. */
597         uint64_t pool_mask; /**< Bitmap of pool for pool mirroring */
598         /** VLAN ID setting for VLAN mirroring. */
599         struct rte_eth_vlan_mirror vlan;
600 };
601
602 /**
603  * A structure used to configure 64 entries of Redirection Table of the
604  * Receive Side Scaling (RSS) feature of an Ethernet port. To configure
605  * more than 64 entries supported by hardware, an array of this structure
606  * is needed.
607  */
608 struct rte_eth_rss_reta_entry64 {
609         uint64_t mask;
610         /**< Mask bits indicate which entries need to be updated/queried. */
611         uint16_t reta[RTE_RETA_GROUP_SIZE];
612         /**< Group of 64 redirection table entries. */
613 };
614
615 /**
616  * This enum indicates the possible number of traffic classes
617  * in DCB configurations
618  */
619 enum rte_eth_nb_tcs {
620         ETH_4_TCS = 4, /**< 4 TCs with DCB. */
621         ETH_8_TCS = 8  /**< 8 TCs with DCB. */
622 };
623
624 /**
625  * This enum indicates the possible number of queue pools
626  * in VMDQ configurations.
627  */
628 enum rte_eth_nb_pools {
629         ETH_8_POOLS = 8,    /**< 8 VMDq pools. */
630         ETH_16_POOLS = 16,  /**< 16 VMDq pools. */
631         ETH_32_POOLS = 32,  /**< 32 VMDq pools. */
632         ETH_64_POOLS = 64   /**< 64 VMDq pools. */
633 };
634
635 /* This structure may be extended in future. */
636 struct rte_eth_dcb_rx_conf {
637         enum rte_eth_nb_tcs nb_tcs; /**< Possible DCB TCs, 4 or 8 TCs */
638         /** Traffic class each UP mapped to. */
639         uint8_t dcb_tc[ETH_DCB_NUM_USER_PRIORITIES];
640 };
641
642 struct rte_eth_vmdq_dcb_tx_conf {
643         enum rte_eth_nb_pools nb_queue_pools; /**< With DCB, 16 or 32 pools. */
644         /** Traffic class each UP mapped to. */
645         uint8_t dcb_tc[ETH_DCB_NUM_USER_PRIORITIES];
646 };
647
648 struct rte_eth_dcb_tx_conf {
649         enum rte_eth_nb_tcs nb_tcs; /**< Possible DCB TCs, 4 or 8 TCs. */
650         /** Traffic class each UP mapped to. */
651         uint8_t dcb_tc[ETH_DCB_NUM_USER_PRIORITIES];
652 };
653
654 struct rte_eth_vmdq_tx_conf {
655         enum rte_eth_nb_pools nb_queue_pools; /**< VMDq mode, 64 pools. */
656 };
657
658 /**
659  * A structure used to configure the VMDQ+DCB feature
660  * of an Ethernet port.
661  *
662  * Using this feature, packets are routed to a pool of queues, based
663  * on the vlan id in the vlan tag, and then to a specific queue within
664  * that pool, using the user priority vlan tag field.
665  *
666  * A default pool may be used, if desired, to route all traffic which
667  * does not match the vlan filter rules.
668  */
669 struct rte_eth_vmdq_dcb_conf {
670         enum rte_eth_nb_pools nb_queue_pools; /**< With DCB, 16 or 32 pools */
671         uint8_t enable_default_pool; /**< If non-zero, use a default pool */
672         uint8_t default_pool; /**< The default pool, if applicable */
673         uint8_t nb_pool_maps; /**< We can have up to 64 filters/mappings */
674         struct {
675                 uint16_t vlan_id; /**< The vlan id of the received frame */
676                 uint64_t pools;   /**< Bitmask of pools for packet rx */
677         } pool_map[ETH_VMDQ_MAX_VLAN_FILTERS]; /**< VMDq vlan pool maps. */
678         uint8_t dcb_tc[ETH_DCB_NUM_USER_PRIORITIES];
679         /**< Selects a queue in a pool */
680 };
681
682 /**
683  * A structure used to configure the VMDQ feature of an Ethernet port when
684  * not combined with the DCB feature.
685  *
686  * Using this feature, packets are routed to a pool of queues. By default,
687  * the pool selection is based on the MAC address, the vlan id in the
688  * vlan tag as specified in the pool_map array.
689  * Passing the ETH_VMDQ_ACCEPT_UNTAG in the rx_mode field allows pool
690  * selection using only the MAC address. MAC address to pool mapping is done
691  * using the rte_eth_dev_mac_addr_add function, with the pool parameter
692  * corresponding to the pool id.
693  *
694  * Queue selection within the selected pool will be done using RSS when
695  * it is enabled or revert to the first queue of the pool if not.
696  *
697  * A default pool may be used, if desired, to route all traffic which
698  * does not match the vlan filter rules or any pool MAC address.
699  */
700 struct rte_eth_vmdq_rx_conf {
701         enum rte_eth_nb_pools nb_queue_pools; /**< VMDq only mode, 8 or 64 pools */
702         uint8_t enable_default_pool; /**< If non-zero, use a default pool */
703         uint8_t default_pool; /**< The default pool, if applicable */
704         uint8_t enable_loop_back; /**< Enable VT loop back */
705         uint8_t nb_pool_maps; /**< We can have up to 64 filters/mappings */
706         uint32_t rx_mode; /**< Flags from ETH_VMDQ_ACCEPT_* */
707         struct {
708                 uint16_t vlan_id; /**< The vlan id of the received frame */
709                 uint64_t pools;   /**< Bitmask of pools for packet rx */
710         } pool_map[ETH_VMDQ_MAX_VLAN_FILTERS]; /**< VMDq vlan pool maps. */
711 };
712
713 /**
714  * A structure used to configure the TX features of an Ethernet port.
715  */
716 struct rte_eth_txmode {
717         enum rte_eth_tx_mq_mode mq_mode; /**< TX multi-queues mode. */
718         /**
719          * Per-port Tx offloads to be set using DEV_TX_OFFLOAD_* flags.
720          * Only offloads set on tx_offload_capa field on rte_eth_dev_info
721          * structure are allowed to be set.
722          */
723         uint64_t offloads;
724
725         /* For i40e specifically */
726         uint16_t pvid;
727         __extension__
728         uint8_t hw_vlan_reject_tagged : 1,
729                 /**< If set, reject sending out tagged pkts */
730                 hw_vlan_reject_untagged : 1,
731                 /**< If set, reject sending out untagged pkts */
732                 hw_vlan_insert_pvid : 1;
733                 /**< If set, enable port based VLAN insertion */
734 };
735
736 /**
737  * A structure used to configure an RX ring of an Ethernet port.
738  */
739 struct rte_eth_rxconf {
740         struct rte_eth_thresh rx_thresh; /**< RX ring threshold registers. */
741         uint16_t rx_free_thresh; /**< Drives the freeing of RX descriptors. */
742         uint8_t rx_drop_en; /**< Drop packets if no descriptors are available. */
743         uint8_t rx_deferred_start; /**< Do not start queue with rte_eth_dev_start(). */
744         /**
745          * Per-queue Rx offloads to be set using DEV_RX_OFFLOAD_* flags.
746          * Only offloads set on rx_queue_offload_capa or rx_offload_capa
747          * fields on rte_eth_dev_info structure are allowed to be set.
748          */
749         uint64_t offloads;
750 };
751
752 /**
753  * A structure used to configure a TX ring of an Ethernet port.
754  */
755 struct rte_eth_txconf {
756         struct rte_eth_thresh tx_thresh; /**< TX ring threshold registers. */
757         uint16_t tx_rs_thresh; /**< Drives the setting of RS bit on TXDs. */
758         uint16_t tx_free_thresh; /**< Start freeing TX buffers if there are
759                                       less free descriptors than this value. */
760
761         uint8_t tx_deferred_start; /**< Do not start queue with rte_eth_dev_start(). */
762         /**
763          * Per-queue Tx offloads to be set  using DEV_TX_OFFLOAD_* flags.
764          * Only offloads set on tx_queue_offload_capa or tx_offload_capa
765          * fields on rte_eth_dev_info structure are allowed to be set.
766          */
767         uint64_t offloads;
768 };
769
770 /**
771  * A structure contains information about HW descriptor ring limitations.
772  */
773 struct rte_eth_desc_lim {
774         uint16_t nb_max;   /**< Max allowed number of descriptors. */
775         uint16_t nb_min;   /**< Min allowed number of descriptors. */
776         uint16_t nb_align; /**< Number of descriptors should be aligned to. */
777
778         /**
779          * Max allowed number of segments per whole packet.
780          *
781          * - For TSO packet this is the total number of data descriptors allowed
782          *   by device.
783          *
784          * @see nb_mtu_seg_max
785          */
786         uint16_t nb_seg_max;
787
788         /**
789          * Max number of segments per one MTU.
790          *
791          * - For non-TSO packet, this is the maximum allowed number of segments
792          *   in a single transmit packet.
793          *
794          * - For TSO packet each segment within the TSO may span up to this
795          *   value.
796          *
797          * @see nb_seg_max
798          */
799         uint16_t nb_mtu_seg_max;
800 };
801
802 /**
803  * This enum indicates the flow control mode
804  */
805 enum rte_eth_fc_mode {
806         RTE_FC_NONE = 0, /**< Disable flow control. */
807         RTE_FC_RX_PAUSE, /**< RX pause frame, enable flowctrl on TX side. */
808         RTE_FC_TX_PAUSE, /**< TX pause frame, enable flowctrl on RX side. */
809         RTE_FC_FULL      /**< Enable flow control on both side. */
810 };
811
812 /**
813  * A structure used to configure Ethernet flow control parameter.
814  * These parameters will be configured into the register of the NIC.
815  * Please refer to the corresponding data sheet for proper value.
816  */
817 struct rte_eth_fc_conf {
818         uint32_t high_water;  /**< High threshold value to trigger XOFF */
819         uint32_t low_water;   /**< Low threshold value to trigger XON */
820         uint16_t pause_time;  /**< Pause quota in the Pause frame */
821         uint16_t send_xon;    /**< Is XON frame need be sent */
822         enum rte_eth_fc_mode mode;  /**< Link flow control mode */
823         uint8_t mac_ctrl_frame_fwd; /**< Forward MAC control frames */
824         uint8_t autoneg;      /**< Use Pause autoneg */
825 };
826
827 /**
828  * A structure used to configure Ethernet priority flow control parameter.
829  * These parameters will be configured into the register of the NIC.
830  * Please refer to the corresponding data sheet for proper value.
831  */
832 struct rte_eth_pfc_conf {
833         struct rte_eth_fc_conf fc; /**< General flow control parameter. */
834         uint8_t priority;          /**< VLAN User Priority. */
835 };
836
837 /**
838  *  Memory space that can be configured to store Flow Director filters
839  *  in the board memory.
840  */
841 enum rte_fdir_pballoc_type {
842         RTE_FDIR_PBALLOC_64K = 0,  /**< 64k. */
843         RTE_FDIR_PBALLOC_128K,     /**< 128k. */
844         RTE_FDIR_PBALLOC_256K,     /**< 256k. */
845 };
846
847 /**
848  *  Select report mode of FDIR hash information in RX descriptors.
849  */
850 enum rte_fdir_status_mode {
851         RTE_FDIR_NO_REPORT_STATUS = 0, /**< Never report FDIR hash. */
852         RTE_FDIR_REPORT_STATUS, /**< Only report FDIR hash for matching pkts. */
853         RTE_FDIR_REPORT_STATUS_ALWAYS, /**< Always report FDIR hash. */
854 };
855
856 /**
857  * A structure used to configure the Flow Director (FDIR) feature
858  * of an Ethernet port.
859  *
860  * If mode is RTE_FDIR_DISABLE, the pballoc value is ignored.
861  */
862 struct rte_fdir_conf {
863         enum rte_fdir_mode mode; /**< Flow Director mode. */
864         enum rte_fdir_pballoc_type pballoc; /**< Space for FDIR filters. */
865         enum rte_fdir_status_mode status;  /**< How to report FDIR hash. */
866         /** RX queue of packets matching a "drop" filter in perfect mode. */
867         uint8_t drop_queue;
868         struct rte_eth_fdir_masks mask;
869         struct rte_eth_fdir_flex_conf flex_conf;
870         /**< Flex payload configuration. */
871 };
872
873 /**
874  * UDP tunneling configuration.
875  * Used to config the UDP port for a type of tunnel.
876  * NICs need the UDP port to identify the tunnel type.
877  * Normally a type of tunnel has a default UDP port, this structure can be used
878  * in case if the users want to change or support more UDP port.
879  */
880 struct rte_eth_udp_tunnel {
881         uint16_t udp_port; /**< UDP port used for the tunnel. */
882         uint8_t prot_type; /**< Tunnel type. Defined in rte_eth_tunnel_type. */
883 };
884
885 /**
886  * A structure used to enable/disable specific device interrupts.
887  */
888 struct rte_intr_conf {
889         /** enable/disable lsc interrupt. 0 (default) - disable, 1 enable */
890         uint32_t lsc:1;
891         /** enable/disable rxq interrupt. 0 (default) - disable, 1 enable */
892         uint32_t rxq:1;
893         /** enable/disable rmv interrupt. 0 (default) - disable, 1 enable */
894         uint32_t rmv:1;
895 };
896
897 /**
898  * A structure used to configure an Ethernet port.
899  * Depending upon the RX multi-queue mode, extra advanced
900  * configuration settings may be needed.
901  */
902 struct rte_eth_conf {
903         uint32_t link_speeds; /**< bitmap of ETH_LINK_SPEED_XXX of speeds to be
904                                 used. ETH_LINK_SPEED_FIXED disables link
905                                 autonegotiation, and a unique speed shall be
906                                 set. Otherwise, the bitmap defines the set of
907                                 speeds to be advertised. If the special value
908                                 ETH_LINK_SPEED_AUTONEG (0) is used, all speeds
909                                 supported are advertised. */
910         struct rte_eth_rxmode rxmode; /**< Port RX configuration. */
911         struct rte_eth_txmode txmode; /**< Port TX configuration. */
912         uint32_t lpbk_mode; /**< Loopback operation mode. By default the value
913                                  is 0, meaning the loopback mode is disabled.
914                                  Read the datasheet of given ethernet controller
915                                  for details. The possible values of this field
916                                  are defined in implementation of each driver. */
917         struct {
918                 struct rte_eth_rss_conf rss_conf; /**< Port RSS configuration */
919                 struct rte_eth_vmdq_dcb_conf vmdq_dcb_conf;
920                 /**< Port vmdq+dcb configuration. */
921                 struct rte_eth_dcb_rx_conf dcb_rx_conf;
922                 /**< Port dcb RX configuration. */
923                 struct rte_eth_vmdq_rx_conf vmdq_rx_conf;
924                 /**< Port vmdq RX configuration. */
925         } rx_adv_conf; /**< Port RX filtering configuration. */
926         union {
927                 struct rte_eth_vmdq_dcb_tx_conf vmdq_dcb_tx_conf;
928                 /**< Port vmdq+dcb TX configuration. */
929                 struct rte_eth_dcb_tx_conf dcb_tx_conf;
930                 /**< Port dcb TX configuration. */
931                 struct rte_eth_vmdq_tx_conf vmdq_tx_conf;
932                 /**< Port vmdq TX configuration. */
933         } tx_adv_conf; /**< Port TX DCB configuration (union). */
934         /** Currently,Priority Flow Control(PFC) are supported,if DCB with PFC
935             is needed,and the variable must be set ETH_DCB_PFC_SUPPORT. */
936         uint32_t dcb_capability_en;
937         struct rte_fdir_conf fdir_conf; /**< FDIR configuration. */
938         struct rte_intr_conf intr_conf; /**< Interrupt mode configuration. */
939 };
940
941 /**
942  * RX offload capabilities of a device.
943  */
944 #define DEV_RX_OFFLOAD_VLAN_STRIP  0x00000001
945 #define DEV_RX_OFFLOAD_IPV4_CKSUM  0x00000002
946 #define DEV_RX_OFFLOAD_UDP_CKSUM   0x00000004
947 #define DEV_RX_OFFLOAD_TCP_CKSUM   0x00000008
948 #define DEV_RX_OFFLOAD_TCP_LRO     0x00000010
949 #define DEV_RX_OFFLOAD_QINQ_STRIP  0x00000020
950 #define DEV_RX_OFFLOAD_OUTER_IPV4_CKSUM 0x00000040
951 #define DEV_RX_OFFLOAD_MACSEC_STRIP     0x00000080
952 #define DEV_RX_OFFLOAD_HEADER_SPLIT     0x00000100
953 #define DEV_RX_OFFLOAD_VLAN_FILTER      0x00000200
954 #define DEV_RX_OFFLOAD_VLAN_EXTEND      0x00000400
955 #define DEV_RX_OFFLOAD_JUMBO_FRAME      0x00000800
956 #define DEV_RX_OFFLOAD_SCATTER          0x00002000
957 #define DEV_RX_OFFLOAD_TIMESTAMP        0x00004000
958 #define DEV_RX_OFFLOAD_SECURITY         0x00008000
959 #define DEV_RX_OFFLOAD_KEEP_CRC         0x00010000
960 #define DEV_RX_OFFLOAD_SCTP_CKSUM       0x00020000
961 #define DEV_RX_OFFLOAD_OUTER_UDP_CKSUM  0x00040000
962
963 #define DEV_RX_OFFLOAD_CHECKSUM (DEV_RX_OFFLOAD_IPV4_CKSUM | \
964                                  DEV_RX_OFFLOAD_UDP_CKSUM | \
965                                  DEV_RX_OFFLOAD_TCP_CKSUM)
966 #define DEV_RX_OFFLOAD_VLAN (DEV_RX_OFFLOAD_VLAN_STRIP | \
967                              DEV_RX_OFFLOAD_VLAN_FILTER | \
968                              DEV_RX_OFFLOAD_VLAN_EXTEND)
969
970 /*
971  * If new Rx offload capabilities are defined, they also must be
972  * mentioned in rte_rx_offload_names in rte_ethdev.c file.
973  */
974
975 /**
976  * TX offload capabilities of a device.
977  */
978 #define DEV_TX_OFFLOAD_VLAN_INSERT 0x00000001
979 #define DEV_TX_OFFLOAD_IPV4_CKSUM  0x00000002
980 #define DEV_TX_OFFLOAD_UDP_CKSUM   0x00000004
981 #define DEV_TX_OFFLOAD_TCP_CKSUM   0x00000008
982 #define DEV_TX_OFFLOAD_SCTP_CKSUM  0x00000010
983 #define DEV_TX_OFFLOAD_TCP_TSO     0x00000020
984 #define DEV_TX_OFFLOAD_UDP_TSO     0x00000040
985 #define DEV_TX_OFFLOAD_OUTER_IPV4_CKSUM 0x00000080 /**< Used for tunneling packet. */
986 #define DEV_TX_OFFLOAD_QINQ_INSERT 0x00000100
987 #define DEV_TX_OFFLOAD_VXLAN_TNL_TSO    0x00000200    /**< Used for tunneling packet. */
988 #define DEV_TX_OFFLOAD_GRE_TNL_TSO      0x00000400    /**< Used for tunneling packet. */
989 #define DEV_TX_OFFLOAD_IPIP_TNL_TSO     0x00000800    /**< Used for tunneling packet. */
990 #define DEV_TX_OFFLOAD_GENEVE_TNL_TSO   0x00001000    /**< Used for tunneling packet. */
991 #define DEV_TX_OFFLOAD_MACSEC_INSERT    0x00002000
992 #define DEV_TX_OFFLOAD_MT_LOCKFREE      0x00004000
993 /**< Multiple threads can invoke rte_eth_tx_burst() concurrently on the same
994  * tx queue without SW lock.
995  */
996 #define DEV_TX_OFFLOAD_MULTI_SEGS       0x00008000
997 /**< Device supports multi segment send. */
998 #define DEV_TX_OFFLOAD_MBUF_FAST_FREE   0x00010000
999 /**< Device supports optimization for fast release of mbufs.
1000  *   When set application must guarantee that per-queue all mbufs comes from
1001  *   the same mempool and has refcnt = 1.
1002  */
1003 #define DEV_TX_OFFLOAD_SECURITY         0x00020000
1004 /**
1005  * Device supports generic UDP tunneled packet TSO.
1006  * Application must set PKT_TX_TUNNEL_UDP and other mbuf fields required
1007  * for tunnel TSO.
1008  */
1009 #define DEV_TX_OFFLOAD_UDP_TNL_TSO      0x00040000
1010 /**
1011  * Device supports generic IP tunneled packet TSO.
1012  * Application must set PKT_TX_TUNNEL_IP and other mbuf fields required
1013  * for tunnel TSO.
1014  */
1015 #define DEV_TX_OFFLOAD_IP_TNL_TSO       0x00080000
1016 /** Device supports outer UDP checksum */
1017 #define DEV_TX_OFFLOAD_OUTER_UDP_CKSUM  0x00100000
1018 /**
1019  * Device supports match on metadata Tx offload..
1020  * Application must set PKT_TX_METADATA and mbuf metadata field.
1021  */
1022 #define DEV_TX_OFFLOAD_MATCH_METADATA   0x00200000
1023
1024 #define RTE_ETH_DEV_CAPA_RUNTIME_RX_QUEUE_SETUP 0x00000001
1025 /**< Device supports Rx queue setup after device started*/
1026 #define RTE_ETH_DEV_CAPA_RUNTIME_TX_QUEUE_SETUP 0x00000002
1027 /**< Device supports Tx queue setup after device started*/
1028
1029 /*
1030  * If new Tx offload capabilities are defined, they also must be
1031  * mentioned in rte_tx_offload_names in rte_ethdev.c file.
1032  */
1033
1034 /*
1035  * Fallback default preferred Rx/Tx port parameters.
1036  * These are used if an application requests default parameters
1037  * but the PMD does not provide preferred values.
1038  */
1039 #define RTE_ETH_DEV_FALLBACK_RX_RINGSIZE 512
1040 #define RTE_ETH_DEV_FALLBACK_TX_RINGSIZE 512
1041 #define RTE_ETH_DEV_FALLBACK_RX_NBQUEUES 1
1042 #define RTE_ETH_DEV_FALLBACK_TX_NBQUEUES 1
1043
1044 /**
1045  * Preferred Rx/Tx port parameters.
1046  * There are separate instances of this structure for transmission
1047  * and reception respectively.
1048  */
1049 struct rte_eth_dev_portconf {
1050         uint16_t burst_size; /**< Device-preferred burst size */
1051         uint16_t ring_size; /**< Device-preferred size of queue rings */
1052         uint16_t nb_queues; /**< Device-preferred number of queues */
1053 };
1054
1055 /**
1056  * Default values for switch domain id when ethdev does not support switch
1057  * domain definitions.
1058  */
1059 #define RTE_ETH_DEV_SWITCH_DOMAIN_ID_INVALID    (0)
1060
1061 /**
1062  * Ethernet device associated switch information
1063  */
1064 struct rte_eth_switch_info {
1065         const char *name;       /**< switch name */
1066         uint16_t domain_id;     /**< switch domain id */
1067         uint16_t port_id;
1068         /**<
1069          * mapping to the devices physical switch port as enumerated from the
1070          * perspective of the embedded interconnect/switch. For SR-IOV enabled
1071          * device this may correspond to the VF_ID of each virtual function,
1072          * but each driver should explicitly define the mapping of switch
1073          * port identifier to that physical interconnect/switch
1074          */
1075 };
1076
1077 /**
1078  * Ethernet device information
1079  */
1080
1081 /**
1082  * A structure used to retrieve the contextual information of
1083  * an Ethernet device, such as the controlling driver of the
1084  * device, etc...
1085  */
1086 struct rte_eth_dev_info {
1087         struct rte_device *device; /** Generic device information */
1088         const char *driver_name; /**< Device Driver name. */
1089         unsigned int if_index; /**< Index to bound host interface, or 0 if none.
1090                 Use if_indextoname() to translate into an interface name. */
1091         uint16_t min_mtu;       /**< Minimum MTU allowed */
1092         uint16_t max_mtu;       /**< Maximum MTU allowed */
1093         const uint32_t *dev_flags; /**< Device flags */
1094         uint32_t min_rx_bufsize; /**< Minimum size of RX buffer. */
1095         uint32_t max_rx_pktlen; /**< Maximum configurable length of RX pkt. */
1096         uint16_t max_rx_queues; /**< Maximum number of RX queues. */
1097         uint16_t max_tx_queues; /**< Maximum number of TX queues. */
1098         uint32_t max_mac_addrs; /**< Maximum number of MAC addresses. */
1099         uint32_t max_hash_mac_addrs;
1100         /** Maximum number of hash MAC addresses for MTA and UTA. */
1101         uint16_t max_vfs; /**< Maximum number of VFs. */
1102         uint16_t max_vmdq_pools; /**< Maximum number of VMDq pools. */
1103         uint64_t rx_offload_capa;
1104         /**< All RX offload capabilities including all per-queue ones */
1105         uint64_t tx_offload_capa;
1106         /**< All TX offload capabilities including all per-queue ones */
1107         uint64_t rx_queue_offload_capa;
1108         /**< Device per-queue RX offload capabilities. */
1109         uint64_t tx_queue_offload_capa;
1110         /**< Device per-queue TX offload capabilities. */
1111         uint16_t reta_size;
1112         /**< Device redirection table size, the total number of entries. */
1113         uint8_t hash_key_size; /**< Hash key size in bytes */
1114         /** Bit mask of RSS offloads, the bit offset also means flow type */
1115         uint64_t flow_type_rss_offloads;
1116         struct rte_eth_rxconf default_rxconf; /**< Default RX configuration */
1117         struct rte_eth_txconf default_txconf; /**< Default TX configuration */
1118         uint16_t vmdq_queue_base; /**< First queue ID for VMDQ pools. */
1119         uint16_t vmdq_queue_num;  /**< Queue number for VMDQ pools. */
1120         uint16_t vmdq_pool_base;  /**< First ID of VMDQ pools. */
1121         struct rte_eth_desc_lim rx_desc_lim;  /**< RX descriptors limits */
1122         struct rte_eth_desc_lim tx_desc_lim;  /**< TX descriptors limits */
1123         uint32_t speed_capa;  /**< Supported speeds bitmap (ETH_LINK_SPEED_). */
1124         /** Configured number of rx/tx queues */
1125         uint16_t nb_rx_queues; /**< Number of RX queues. */
1126         uint16_t nb_tx_queues; /**< Number of TX queues. */
1127         /** Rx parameter recommendations */
1128         struct rte_eth_dev_portconf default_rxportconf;
1129         /** Tx parameter recommendations */
1130         struct rte_eth_dev_portconf default_txportconf;
1131         /** Generic device capabilities (RTE_ETH_DEV_CAPA_). */
1132         uint64_t dev_capa;
1133         /**
1134          * Switching information for ports on a device with a
1135          * embedded managed interconnect/switch.
1136          */
1137         struct rte_eth_switch_info switch_info;
1138 };
1139
1140 /**
1141  * Ethernet device RX queue information structure.
1142  * Used to retrieve information about configured queue.
1143  */
1144 struct rte_eth_rxq_info {
1145         struct rte_mempool *mp;     /**< mempool used by that queue. */
1146         struct rte_eth_rxconf conf; /**< queue config parameters. */
1147         uint8_t scattered_rx;       /**< scattered packets RX supported. */
1148         uint16_t nb_desc;           /**< configured number of RXDs. */
1149 } __rte_cache_min_aligned;
1150
1151 /**
1152  * Ethernet device TX queue information structure.
1153  * Used to retrieve information about configured queue.
1154  */
1155 struct rte_eth_txq_info {
1156         struct rte_eth_txconf conf; /**< queue config parameters. */
1157         uint16_t nb_desc;           /**< configured number of TXDs. */
1158 } __rte_cache_min_aligned;
1159
1160 /** Maximum name length for extended statistics counters */
1161 #define RTE_ETH_XSTATS_NAME_SIZE 64
1162
1163 /**
1164  * An Ethernet device extended statistic structure
1165  *
1166  * This structure is used by rte_eth_xstats_get() to provide
1167  * statistics that are not provided in the generic *rte_eth_stats*
1168  * structure.
1169  * It maps a name id, corresponding to an index in the array returned
1170  * by rte_eth_xstats_get_names(), to a statistic value.
1171  */
1172 struct rte_eth_xstat {
1173         uint64_t id;        /**< The index in xstats name array. */
1174         uint64_t value;     /**< The statistic counter value. */
1175 };
1176
1177 /**
1178  * A name element for extended statistics.
1179  *
1180  * An array of this structure is returned by rte_eth_xstats_get_names().
1181  * It lists the names of extended statistics for a PMD. The *rte_eth_xstat*
1182  * structure references these names by their array index.
1183  */
1184 struct rte_eth_xstat_name {
1185         char name[RTE_ETH_XSTATS_NAME_SIZE]; /**< The statistic name. */
1186 };
1187
1188 #define ETH_DCB_NUM_TCS    8
1189 #define ETH_MAX_VMDQ_POOL  64
1190
1191 /**
1192  * A structure used to get the information of queue and
1193  * TC mapping on both TX and RX paths.
1194  */
1195 struct rte_eth_dcb_tc_queue_mapping {
1196         /** rx queues assigned to tc per Pool */
1197         struct {
1198                 uint8_t base;
1199                 uint8_t nb_queue;
1200         } tc_rxq[ETH_MAX_VMDQ_POOL][ETH_DCB_NUM_TCS];
1201         /** rx queues assigned to tc per Pool */
1202         struct {
1203                 uint8_t base;
1204                 uint8_t nb_queue;
1205         } tc_txq[ETH_MAX_VMDQ_POOL][ETH_DCB_NUM_TCS];
1206 };
1207
1208 /**
1209  * A structure used to get the information of DCB.
1210  * It includes TC UP mapping and queue TC mapping.
1211  */
1212 struct rte_eth_dcb_info {
1213         uint8_t nb_tcs;        /**< number of TCs */
1214         uint8_t prio_tc[ETH_DCB_NUM_USER_PRIORITIES]; /**< Priority to tc */
1215         uint8_t tc_bws[ETH_DCB_NUM_TCS]; /**< TX BW percentage for each TC */
1216         /** rx queues assigned to tc */
1217         struct rte_eth_dcb_tc_queue_mapping tc_queue;
1218 };
1219
1220 /**
1221  * RX/TX queue states
1222  */
1223 #define RTE_ETH_QUEUE_STATE_STOPPED 0
1224 #define RTE_ETH_QUEUE_STATE_STARTED 1
1225
1226 #define RTE_ETH_ALL RTE_MAX_ETHPORTS
1227
1228 /* Macros to check for valid port */
1229 #define RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, retval) do { \
1230         if (!rte_eth_dev_is_valid_port(port_id)) { \
1231                 RTE_ETHDEV_LOG(ERR, "Invalid port_id=%u\n", port_id); \
1232                 return retval; \
1233         } \
1234 } while (0)
1235
1236 #define RTE_ETH_VALID_PORTID_OR_RET(port_id) do { \
1237         if (!rte_eth_dev_is_valid_port(port_id)) { \
1238                 RTE_ETHDEV_LOG(ERR, "Invalid port_id=%u\n", port_id); \
1239                 return; \
1240         } \
1241 } while (0)
1242
1243 /**
1244  * l2 tunnel configuration.
1245  */
1246
1247 /**< l2 tunnel enable mask */
1248 #define ETH_L2_TUNNEL_ENABLE_MASK       0x00000001
1249 /**< l2 tunnel insertion mask */
1250 #define ETH_L2_TUNNEL_INSERTION_MASK    0x00000002
1251 /**< l2 tunnel stripping mask */
1252 #define ETH_L2_TUNNEL_STRIPPING_MASK    0x00000004
1253 /**< l2 tunnel forwarding mask */
1254 #define ETH_L2_TUNNEL_FORWARDING_MASK   0x00000008
1255
1256 /**
1257  * Function type used for RX packet processing packet callbacks.
1258  *
1259  * The callback function is called on RX with a burst of packets that have
1260  * been received on the given port and queue.
1261  *
1262  * @param port_id
1263  *   The Ethernet port on which RX is being performed.
1264  * @param queue
1265  *   The queue on the Ethernet port which is being used to receive the packets.
1266  * @param pkts
1267  *   The burst of packets that have just been received.
1268  * @param nb_pkts
1269  *   The number of packets in the burst pointed to by "pkts".
1270  * @param max_pkts
1271  *   The max number of packets that can be stored in the "pkts" array.
1272  * @param user_param
1273  *   The arbitrary user parameter passed in by the application when the callback
1274  *   was originally configured.
1275  * @return
1276  *   The number of packets returned to the user.
1277  */
1278 typedef uint16_t (*rte_rx_callback_fn)(uint16_t port_id, uint16_t queue,
1279         struct rte_mbuf *pkts[], uint16_t nb_pkts, uint16_t max_pkts,
1280         void *user_param);
1281
1282 /**
1283  * Function type used for TX packet processing packet callbacks.
1284  *
1285  * The callback function is called on TX with a burst of packets immediately
1286  * before the packets are put onto the hardware queue for transmission.
1287  *
1288  * @param port_id
1289  *   The Ethernet port on which TX is being performed.
1290  * @param queue
1291  *   The queue on the Ethernet port which is being used to transmit the packets.
1292  * @param pkts
1293  *   The burst of packets that are about to be transmitted.
1294  * @param nb_pkts
1295  *   The number of packets in the burst pointed to by "pkts".
1296  * @param user_param
1297  *   The arbitrary user parameter passed in by the application when the callback
1298  *   was originally configured.
1299  * @return
1300  *   The number of packets to be written to the NIC.
1301  */
1302 typedef uint16_t (*rte_tx_callback_fn)(uint16_t port_id, uint16_t queue,
1303         struct rte_mbuf *pkts[], uint16_t nb_pkts, void *user_param);
1304
1305 /**
1306  * Possible states of an ethdev port.
1307  */
1308 enum rte_eth_dev_state {
1309         /** Device is unused before being probed. */
1310         RTE_ETH_DEV_UNUSED = 0,
1311         /** Device is attached when allocated in probing. */
1312         RTE_ETH_DEV_ATTACHED,
1313         /** Device is in removed state when plug-out is detected. */
1314         RTE_ETH_DEV_REMOVED,
1315 };
1316
1317 struct rte_eth_dev_sriov {
1318         uint8_t active;               /**< SRIOV is active with 16, 32 or 64 pools */
1319         uint8_t nb_q_per_pool;        /**< rx queue number per pool */
1320         uint16_t def_vmdq_idx;        /**< Default pool num used for PF */
1321         uint16_t def_pool_q_idx;      /**< Default pool queue start reg index */
1322 };
1323 #define RTE_ETH_DEV_SRIOV(dev)         ((dev)->data->sriov)
1324
1325 #define RTE_ETH_NAME_MAX_LEN RTE_DEV_NAME_MAX_LEN
1326
1327 #define RTE_ETH_DEV_NO_OWNER 0
1328
1329 #define RTE_ETH_MAX_OWNER_NAME_LEN 64
1330
1331 struct rte_eth_dev_owner {
1332         uint64_t id; /**< The owner unique identifier. */
1333         char name[RTE_ETH_MAX_OWNER_NAME_LEN]; /**< The owner name. */
1334 };
1335
1336 /**
1337  * Port is released (i.e. totally freed and data erased) on close.
1338  * Temporary flag for PMD migration to new rte_eth_dev_close() behaviour.
1339  */
1340 #define RTE_ETH_DEV_CLOSE_REMOVE 0x0001
1341 /** Device supports link state interrupt */
1342 #define RTE_ETH_DEV_INTR_LSC     0x0002
1343 /** Device is a bonded slave */
1344 #define RTE_ETH_DEV_BONDED_SLAVE 0x0004
1345 /** Device supports device removal interrupt */
1346 #define RTE_ETH_DEV_INTR_RMV     0x0008
1347 /** Device is port representor */
1348 #define RTE_ETH_DEV_REPRESENTOR  0x0010
1349 /** Device does not support MAC change after started */
1350 #define RTE_ETH_DEV_NOLIVE_MAC_ADDR  0x0020
1351
1352 /**
1353  * Iterates over valid ethdev ports owned by a specific owner.
1354  *
1355  * @param port_id
1356  *   The id of the next possible valid owned port.
1357  * @param       owner_id
1358  *  The owner identifier.
1359  *  RTE_ETH_DEV_NO_OWNER means iterate over all valid ownerless ports.
1360  * @return
1361  *   Next valid port id owned by owner_id, RTE_MAX_ETHPORTS if there is none.
1362  */
1363 uint64_t rte_eth_find_next_owned_by(uint16_t port_id,
1364                 const uint64_t owner_id);
1365
1366 /**
1367  * Macro to iterate over all enabled ethdev ports owned by a specific owner.
1368  */
1369 #define RTE_ETH_FOREACH_DEV_OWNED_BY(p, o) \
1370         for (p = rte_eth_find_next_owned_by(0, o); \
1371              (unsigned int)p < (unsigned int)RTE_MAX_ETHPORTS; \
1372              p = rte_eth_find_next_owned_by(p + 1, o))
1373
1374 /**
1375  * Iterates over valid ethdev ports.
1376  *
1377  * @param port_id
1378  *   The id of the next possible valid port.
1379  * @return
1380  *   Next valid port id, RTE_MAX_ETHPORTS if there is none.
1381  */
1382 uint16_t rte_eth_find_next(uint16_t port_id);
1383
1384 /**
1385  * Macro to iterate over all enabled and ownerless ethdev ports.
1386  */
1387 #define RTE_ETH_FOREACH_DEV(p) \
1388         RTE_ETH_FOREACH_DEV_OWNED_BY(p, RTE_ETH_DEV_NO_OWNER)
1389
1390 /**
1391  * @warning
1392  * @b EXPERIMENTAL: this API may change without prior notice.
1393  *
1394  * Iterates over ethdev ports of a specified device.
1395  *
1396  * @param port_id_start
1397  *   The id of the next possible valid port.
1398  * @param parent
1399  *   The generic device behind the ports to iterate.
1400  * @return
1401  *   Next port id of the device, possibly port_id_start,
1402  *   RTE_MAX_ETHPORTS if there is none.
1403  */
1404 uint16_t __rte_experimental
1405 rte_eth_find_next_of(uint16_t port_id_start,
1406                 const struct rte_device *parent);
1407
1408 /**
1409  * Macro to iterate over all ethdev ports of a specified device.
1410  *
1411  * @param port_id
1412  *   The id of the matching port being iterated.
1413  * @param parent
1414  *   The rte_device pointer matching the iterated ports.
1415  */
1416 #define RTE_ETH_FOREACH_DEV_OF(port_id, parent) \
1417         for (port_id = rte_eth_find_next_of(0, parent); \
1418                 port_id < RTE_MAX_ETHPORTS; \
1419                 port_id = rte_eth_find_next_of(port_id + 1, parent))
1420
1421 /**
1422  * @warning
1423  * @b EXPERIMENTAL: this API may change without prior notice.
1424  *
1425  * Iterates over sibling ethdev ports (i.e. sharing the same rte_device).
1426  *
1427  * @param port_id_start
1428  *   The id of the next possible valid sibling port.
1429  * @param ref_port_id
1430  *   The id of a reference port to compare rte_device with.
1431  * @return
1432  *   Next sibling port id, possibly port_id_start or ref_port_id itself,
1433  *   RTE_MAX_ETHPORTS if there is none.
1434  */
1435 uint16_t __rte_experimental
1436 rte_eth_find_next_sibling(uint16_t port_id_start,
1437                 uint16_t ref_port_id);
1438
1439 /**
1440  * Macro to iterate over all ethdev ports sharing the same rte_device
1441  * as the specified port.
1442  * Note: the specified reference port is part of the loop iterations.
1443  *
1444  * @param port_id
1445  *   The id of the matching port being iterated.
1446  * @param ref_port_id
1447  *   The id of the port being compared.
1448  */
1449 #define RTE_ETH_FOREACH_DEV_SIBLING(port_id, ref_port_id) \
1450         for (port_id = rte_eth_find_next_sibling(0, ref_port_id); \
1451                 port_id < RTE_MAX_ETHPORTS; \
1452                 port_id = rte_eth_find_next_sibling(port_id + 1, ref_port_id))
1453
1454 /**
1455  * @warning
1456  * @b EXPERIMENTAL: this API may change without prior notice.
1457  *
1458  * Get a new unique owner identifier.
1459  * An owner identifier is used to owns Ethernet devices by only one DPDK entity
1460  * to avoid multiple management of device by different entities.
1461  *
1462  * @param       owner_id
1463  *   Owner identifier pointer.
1464  * @return
1465  *   Negative errno value on error, 0 on success.
1466  */
1467 int __rte_experimental rte_eth_dev_owner_new(uint64_t *owner_id);
1468
1469 /**
1470  * @warning
1471  * @b EXPERIMENTAL: this API may change without prior notice.
1472  *
1473  * Set an Ethernet device owner.
1474  *
1475  * @param       port_id
1476  *  The identifier of the port to own.
1477  * @param       owner
1478  *  The owner pointer.
1479  * @return
1480  *  Negative errno value on error, 0 on success.
1481  */
1482 int __rte_experimental rte_eth_dev_owner_set(const uint16_t port_id,
1483                 const struct rte_eth_dev_owner *owner);
1484
1485 /**
1486  * @warning
1487  * @b EXPERIMENTAL: this API may change without prior notice.
1488  *
1489  * Unset Ethernet device owner to make the device ownerless.
1490  *
1491  * @param       port_id
1492  *  The identifier of port to make ownerless.
1493  * @param       owner_id
1494  *  The owner identifier.
1495  * @return
1496  *  0 on success, negative errno value on error.
1497  */
1498 int __rte_experimental rte_eth_dev_owner_unset(const uint16_t port_id,
1499                 const uint64_t owner_id);
1500
1501 /**
1502  * @warning
1503  * @b EXPERIMENTAL: this API may change without prior notice.
1504  *
1505  * Remove owner from all Ethernet devices owned by a specific owner.
1506  *
1507  * @param       owner_id
1508  *  The owner identifier.
1509  */
1510 void __rte_experimental rte_eth_dev_owner_delete(const uint64_t owner_id);
1511
1512 /**
1513  * @warning
1514  * @b EXPERIMENTAL: this API may change without prior notice.
1515  *
1516  * Get the owner of an Ethernet device.
1517  *
1518  * @param       port_id
1519  *  The port identifier.
1520  * @param       owner
1521  *  The owner structure pointer to fill.
1522  * @return
1523  *  0 on success, negative errno value on error..
1524  */
1525 int __rte_experimental rte_eth_dev_owner_get(const uint16_t port_id,
1526                 struct rte_eth_dev_owner *owner);
1527
1528 /**
1529  * Get the total number of Ethernet devices that have been successfully
1530  * initialized by the matching Ethernet driver during the PCI probing phase
1531  * and that are available for applications to use. These devices must be
1532  * accessed by using the ``RTE_ETH_FOREACH_DEV()`` macro to deal with
1533  * non-contiguous ranges of devices.
1534  * These non-contiguous ranges can be created by calls to hotplug functions or
1535  * by some PMDs.
1536  *
1537  * @return
1538  *   - The total number of usable Ethernet devices.
1539  */
1540 __rte_deprecated
1541 uint16_t rte_eth_dev_count(void);
1542
1543 /**
1544  * Get the number of ports which are usable for the application.
1545  *
1546  * These devices must be iterated by using the macro
1547  * ``RTE_ETH_FOREACH_DEV`` or ``RTE_ETH_FOREACH_DEV_OWNED_BY``
1548  * to deal with non-contiguous ranges of devices.
1549  *
1550  * @return
1551  *   The count of available Ethernet devices.
1552  */
1553 uint16_t rte_eth_dev_count_avail(void);
1554
1555 /**
1556  * Get the total number of ports which are allocated.
1557  *
1558  * Some devices may not be available for the application.
1559  *
1560  * @return
1561  *   The total count of Ethernet devices.
1562  */
1563 uint16_t __rte_experimental rte_eth_dev_count_total(void);
1564
1565 /**
1566  * Convert a numerical speed in Mbps to a bitmap flag that can be used in
1567  * the bitmap link_speeds of the struct rte_eth_conf
1568  *
1569  * @param speed
1570  *   Numerical speed value in Mbps
1571  * @param duplex
1572  *   ETH_LINK_[HALF/FULL]_DUPLEX (only for 10/100M speeds)
1573  * @return
1574  *   0 if the speed cannot be mapped
1575  */
1576 uint32_t rte_eth_speed_bitflag(uint32_t speed, int duplex);
1577
1578 /**
1579  * Get DEV_RX_OFFLOAD_* flag name.
1580  *
1581  * @param offload
1582  *   Offload flag.
1583  * @return
1584  *   Offload name or 'UNKNOWN' if the flag cannot be recognised.
1585  */
1586 const char *rte_eth_dev_rx_offload_name(uint64_t offload);
1587
1588 /**
1589  * Get DEV_TX_OFFLOAD_* flag name.
1590  *
1591  * @param offload
1592  *   Offload flag.
1593  * @return
1594  *   Offload name or 'UNKNOWN' if the flag cannot be recognised.
1595  */
1596 const char *rte_eth_dev_tx_offload_name(uint64_t offload);
1597
1598 /**
1599  * Configure an Ethernet device.
1600  * This function must be invoked first before any other function in the
1601  * Ethernet API. This function can also be re-invoked when a device is in the
1602  * stopped state.
1603  *
1604  * @param port_id
1605  *   The port identifier of the Ethernet device to configure.
1606  * @param nb_rx_queue
1607  *   The number of receive queues to set up for the Ethernet device.
1608  * @param nb_tx_queue
1609  *   The number of transmit queues to set up for the Ethernet device.
1610  * @param eth_conf
1611  *   The pointer to the configuration data to be used for the Ethernet device.
1612  *   The *rte_eth_conf* structure includes:
1613  *     -  the hardware offload features to activate, with dedicated fields for
1614  *        each statically configurable offload hardware feature provided by
1615  *        Ethernet devices, such as IP checksum or VLAN tag stripping for
1616  *        example.
1617  *        The Rx offload bitfield API is obsolete and will be deprecated.
1618  *        Applications should set the ignore_bitfield_offloads bit on *rxmode*
1619  *        structure and use offloads field to set per-port offloads instead.
1620  *     -  Any offloading set in eth_conf->[rt]xmode.offloads must be within
1621  *        the [rt]x_offload_capa returned from rte_eth_dev_info_get().
1622  *        Any type of device supported offloading set in the input argument
1623  *        eth_conf->[rt]xmode.offloads to rte_eth_dev_configure() is enabled
1624  *        on all queues and it can't be disabled in rte_eth_[rt]x_queue_setup()
1625  *     -  the Receive Side Scaling (RSS) configuration when using multiple RX
1626  *        queues per port. Any RSS hash function set in eth_conf->rss_conf.rss_hf
1627  *        must be within the flow_type_rss_offloads provided by drivers via
1628  *        rte_eth_dev_info_get() API.
1629  *
1630  *   Embedding all configuration information in a single data structure
1631  *   is the more flexible method that allows the addition of new features
1632  *   without changing the syntax of the API.
1633  * @return
1634  *   - 0: Success, device configured.
1635  *   - <0: Error code returned by the driver configuration function.
1636  */
1637 int rte_eth_dev_configure(uint16_t port_id, uint16_t nb_rx_queue,
1638                 uint16_t nb_tx_queue, const struct rte_eth_conf *eth_conf);
1639
1640 /**
1641  * @warning
1642  * @b EXPERIMENTAL: this API may change without prior notice.
1643  *
1644  * Check if an Ethernet device was physically removed.
1645  *
1646  * @param port_id
1647  *   The port identifier of the Ethernet device.
1648  * @return
1649  *   1 when the Ethernet device is removed, otherwise 0.
1650  */
1651 int __rte_experimental
1652 rte_eth_dev_is_removed(uint16_t port_id);
1653
1654 /**
1655  * Allocate and set up a receive queue for an Ethernet device.
1656  *
1657  * The function allocates a contiguous block of memory for *nb_rx_desc*
1658  * receive descriptors from a memory zone associated with *socket_id*
1659  * and initializes each receive descriptor with a network buffer allocated
1660  * from the memory pool *mb_pool*.
1661  *
1662  * @param port_id
1663  *   The port identifier of the Ethernet device.
1664  * @param rx_queue_id
1665  *   The index of the receive queue to set up.
1666  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
1667  *   to rte_eth_dev_configure().
1668  * @param nb_rx_desc
1669  *   The number of receive descriptors to allocate for the receive ring.
1670  * @param socket_id
1671  *   The *socket_id* argument is the socket identifier in case of NUMA.
1672  *   The value can be *SOCKET_ID_ANY* if there is no NUMA constraint for
1673  *   the DMA memory allocated for the receive descriptors of the ring.
1674  * @param rx_conf
1675  *   The pointer to the configuration data to be used for the receive queue.
1676  *   NULL value is allowed, in which case default RX configuration
1677  *   will be used.
1678  *   The *rx_conf* structure contains an *rx_thresh* structure with the values
1679  *   of the Prefetch, Host, and Write-Back threshold registers of the receive
1680  *   ring.
1681  *   In addition it contains the hardware offloads features to activate using
1682  *   the DEV_RX_OFFLOAD_* flags.
1683  *   If an offloading set in rx_conf->offloads
1684  *   hasn't been set in the input argument eth_conf->rxmode.offloads
1685  *   to rte_eth_dev_configure(), it is a new added offloading, it must be
1686  *   per-queue type and it is enabled for the queue.
1687  *   No need to repeat any bit in rx_conf->offloads which has already been
1688  *   enabled in rte_eth_dev_configure() at port level. An offloading enabled
1689  *   at port level can't be disabled at queue level.
1690  * @param mb_pool
1691  *   The pointer to the memory pool from which to allocate *rte_mbuf* network
1692  *   memory buffers to populate each descriptor of the receive ring.
1693  * @return
1694  *   - 0: Success, receive queue correctly set up.
1695  *   - -EIO: if device is removed.
1696  *   - -EINVAL: The size of network buffers which can be allocated from the
1697  *      memory pool does not fit the various buffer sizes allowed by the
1698  *      device controller.
1699  *   - -ENOMEM: Unable to allocate the receive ring descriptors or to
1700  *      allocate network memory buffers from the memory pool when
1701  *      initializing receive descriptors.
1702  */
1703 int rte_eth_rx_queue_setup(uint16_t port_id, uint16_t rx_queue_id,
1704                 uint16_t nb_rx_desc, unsigned int socket_id,
1705                 const struct rte_eth_rxconf *rx_conf,
1706                 struct rte_mempool *mb_pool);
1707
1708 /**
1709  * Allocate and set up a transmit queue for an Ethernet device.
1710  *
1711  * @param port_id
1712  *   The port identifier of the Ethernet device.
1713  * @param tx_queue_id
1714  *   The index of the transmit queue to set up.
1715  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
1716  *   to rte_eth_dev_configure().
1717  * @param nb_tx_desc
1718  *   The number of transmit descriptors to allocate for the transmit ring.
1719  * @param socket_id
1720  *   The *socket_id* argument is the socket identifier in case of NUMA.
1721  *   Its value can be *SOCKET_ID_ANY* if there is no NUMA constraint for
1722  *   the DMA memory allocated for the transmit descriptors of the ring.
1723  * @param tx_conf
1724  *   The pointer to the configuration data to be used for the transmit queue.
1725  *   NULL value is allowed, in which case default TX configuration
1726  *   will be used.
1727  *   The *tx_conf* structure contains the following data:
1728  *   - The *tx_thresh* structure with the values of the Prefetch, Host, and
1729  *     Write-Back threshold registers of the transmit ring.
1730  *     When setting Write-Back threshold to the value greater then zero,
1731  *     *tx_rs_thresh* value should be explicitly set to one.
1732  *   - The *tx_free_thresh* value indicates the [minimum] number of network
1733  *     buffers that must be pending in the transmit ring to trigger their
1734  *     [implicit] freeing by the driver transmit function.
1735  *   - The *tx_rs_thresh* value indicates the [minimum] number of transmit
1736  *     descriptors that must be pending in the transmit ring before setting the
1737  *     RS bit on a descriptor by the driver transmit function.
1738  *     The *tx_rs_thresh* value should be less or equal then
1739  *     *tx_free_thresh* value, and both of them should be less then
1740  *     *nb_tx_desc* - 3.
1741  *   - The *offloads* member contains Tx offloads to be enabled.
1742  *     If an offloading set in tx_conf->offloads
1743  *     hasn't been set in the input argument eth_conf->txmode.offloads
1744  *     to rte_eth_dev_configure(), it is a new added offloading, it must be
1745  *     per-queue type and it is enabled for the queue.
1746  *     No need to repeat any bit in tx_conf->offloads which has already been
1747  *     enabled in rte_eth_dev_configure() at port level. An offloading enabled
1748  *     at port level can't be disabled at queue level.
1749  *
1750  *     Note that setting *tx_free_thresh* or *tx_rs_thresh* value to 0 forces
1751  *     the transmit function to use default values.
1752  * @return
1753  *   - 0: Success, the transmit queue is correctly set up.
1754  *   - -ENOMEM: Unable to allocate the transmit ring descriptors.
1755  */
1756 int rte_eth_tx_queue_setup(uint16_t port_id, uint16_t tx_queue_id,
1757                 uint16_t nb_tx_desc, unsigned int socket_id,
1758                 const struct rte_eth_txconf *tx_conf);
1759
1760 /**
1761  * Return the NUMA socket to which an Ethernet device is connected
1762  *
1763  * @param port_id
1764  *   The port identifier of the Ethernet device
1765  * @return
1766  *   The NUMA socket id to which the Ethernet device is connected or
1767  *   a default of zero if the socket could not be determined.
1768  *   -1 is returned is the port_id value is out of range.
1769  */
1770 int rte_eth_dev_socket_id(uint16_t port_id);
1771
1772 /**
1773  * Check if port_id of device is attached
1774  *
1775  * @param port_id
1776  *   The port identifier of the Ethernet device
1777  * @return
1778  *   - 0 if port is out of range or not attached
1779  *   - 1 if device is attached
1780  */
1781 int rte_eth_dev_is_valid_port(uint16_t port_id);
1782
1783 /**
1784  * Start specified RX queue of a port. It is used when rx_deferred_start
1785  * flag of the specified queue is true.
1786  *
1787  * @param port_id
1788  *   The port identifier of the Ethernet device
1789  * @param rx_queue_id
1790  *   The index of the rx queue to update the ring.
1791  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
1792  *   to rte_eth_dev_configure().
1793  * @return
1794  *   - 0: Success, the receive queue is started.
1795  *   - -EINVAL: The port_id or the queue_id out of range.
1796  *   - -EIO: if device is removed.
1797  *   - -ENOTSUP: The function not supported in PMD driver.
1798  */
1799 int rte_eth_dev_rx_queue_start(uint16_t port_id, uint16_t rx_queue_id);
1800
1801 /**
1802  * Stop specified RX queue of a port
1803  *
1804  * @param port_id
1805  *   The port identifier of the Ethernet device
1806  * @param rx_queue_id
1807  *   The index of the rx queue to update the ring.
1808  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
1809  *   to rte_eth_dev_configure().
1810  * @return
1811  *   - 0: Success, the receive queue is stopped.
1812  *   - -EINVAL: The port_id or the queue_id out of range.
1813  *   - -EIO: if device is removed.
1814  *   - -ENOTSUP: The function not supported in PMD driver.
1815  */
1816 int rte_eth_dev_rx_queue_stop(uint16_t port_id, uint16_t rx_queue_id);
1817
1818 /**
1819  * Start TX for specified queue of a port. It is used when tx_deferred_start
1820  * flag of the specified queue is true.
1821  *
1822  * @param port_id
1823  *   The port identifier of the Ethernet device
1824  * @param tx_queue_id
1825  *   The index of the tx queue to update the ring.
1826  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
1827  *   to rte_eth_dev_configure().
1828  * @return
1829  *   - 0: Success, the transmit queue is started.
1830  *   - -EINVAL: The port_id or the queue_id out of range.
1831  *   - -EIO: if device is removed.
1832  *   - -ENOTSUP: The function not supported in PMD driver.
1833  */
1834 int rte_eth_dev_tx_queue_start(uint16_t port_id, uint16_t tx_queue_id);
1835
1836 /**
1837  * Stop specified TX queue of a port
1838  *
1839  * @param port_id
1840  *   The port identifier of the Ethernet device
1841  * @param tx_queue_id
1842  *   The index of the tx queue to update the ring.
1843  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
1844  *   to rte_eth_dev_configure().
1845  * @return
1846  *   - 0: Success, the transmit queue is stopped.
1847  *   - -EINVAL: The port_id or the queue_id out of range.
1848  *   - -EIO: if device is removed.
1849  *   - -ENOTSUP: The function not supported in PMD driver.
1850  */
1851 int rte_eth_dev_tx_queue_stop(uint16_t port_id, uint16_t tx_queue_id);
1852
1853 /**
1854  * Start an Ethernet device.
1855  *
1856  * The device start step is the last one and consists of setting the configured
1857  * offload features and in starting the transmit and the receive units of the
1858  * device.
1859  *
1860  * Device RTE_ETH_DEV_NOLIVE_MAC_ADDR flag causes MAC address to be set before
1861  * PMD port start callback function is invoked.
1862  *
1863  * On success, all basic functions exported by the Ethernet API (link status,
1864  * receive/transmit, and so on) can be invoked.
1865  *
1866  * @param port_id
1867  *   The port identifier of the Ethernet device.
1868  * @return
1869  *   - 0: Success, Ethernet device started.
1870  *   - <0: Error code of the driver device start function.
1871  */
1872 int rte_eth_dev_start(uint16_t port_id);
1873
1874 /**
1875  * Stop an Ethernet device. The device can be restarted with a call to
1876  * rte_eth_dev_start()
1877  *
1878  * @param port_id
1879  *   The port identifier of the Ethernet device.
1880  */
1881 void rte_eth_dev_stop(uint16_t port_id);
1882
1883 /**
1884  * Link up an Ethernet device.
1885  *
1886  * Set device link up will re-enable the device rx/tx
1887  * functionality after it is previously set device linked down.
1888  *
1889  * @param port_id
1890  *   The port identifier of the Ethernet device.
1891  * @return
1892  *   - 0: Success, Ethernet device linked up.
1893  *   - <0: Error code of the driver device link up function.
1894  */
1895 int rte_eth_dev_set_link_up(uint16_t port_id);
1896
1897 /**
1898  * Link down an Ethernet device.
1899  * The device rx/tx functionality will be disabled if success,
1900  * and it can be re-enabled with a call to
1901  * rte_eth_dev_set_link_up()
1902  *
1903  * @param port_id
1904  *   The port identifier of the Ethernet device.
1905  */
1906 int rte_eth_dev_set_link_down(uint16_t port_id);
1907
1908 /**
1909  * Close a stopped Ethernet device. The device cannot be restarted!
1910  * The function frees all port resources if the driver supports
1911  * the flag RTE_ETH_DEV_CLOSE_REMOVE.
1912  *
1913  * @param port_id
1914  *   The port identifier of the Ethernet device.
1915  */
1916 void rte_eth_dev_close(uint16_t port_id);
1917
1918 /**
1919  * Reset a Ethernet device and keep its port id.
1920  *
1921  * When a port has to be reset passively, the DPDK application can invoke
1922  * this function. For example when a PF is reset, all its VFs should also
1923  * be reset. Normally a DPDK application can invoke this function when
1924  * RTE_ETH_EVENT_INTR_RESET event is detected, but can also use it to start
1925  * a port reset in other circumstances.
1926  *
1927  * When this function is called, it first stops the port and then calls the
1928  * PMD specific dev_uninit( ) and dev_init( ) to return the port to initial
1929  * state, in which no Tx and Rx queues are setup, as if the port has been
1930  * reset and not started. The port keeps the port id it had before the
1931  * function call.
1932  *
1933  * After calling rte_eth_dev_reset( ), the application should use
1934  * rte_eth_dev_configure( ), rte_eth_rx_queue_setup( ),
1935  * rte_eth_tx_queue_setup( ), and rte_eth_dev_start( )
1936  * to reconfigure the device as appropriate.
1937  *
1938  * Note: To avoid unexpected behavior, the application should stop calling
1939  * Tx and Rx functions before calling rte_eth_dev_reset( ). For thread
1940  * safety, all these controlling functions should be called from the same
1941  * thread.
1942  *
1943  * @param port_id
1944  *   The port identifier of the Ethernet device.
1945  *
1946  * @return
1947  *   - (0) if successful.
1948  *   - (-EINVAL) if port identifier is invalid.
1949  *   - (-ENOTSUP) if hardware doesn't support this function.
1950  *   - (-EPERM) if not ran from the primary process.
1951  *   - (-EIO) if re-initialisation failed or device is removed.
1952  *   - (-ENOMEM) if the reset failed due to OOM.
1953  *   - (-EAGAIN) if the reset temporarily failed and should be retried later.
1954  */
1955 int rte_eth_dev_reset(uint16_t port_id);
1956
1957 /**
1958  * Enable receipt in promiscuous mode for an Ethernet device.
1959  *
1960  * @param port_id
1961  *   The port identifier of the Ethernet device.
1962  */
1963 void rte_eth_promiscuous_enable(uint16_t port_id);
1964
1965 /**
1966  * Disable receipt in promiscuous mode for an Ethernet device.
1967  *
1968  * @param port_id
1969  *   The port identifier of the Ethernet device.
1970  */
1971 void rte_eth_promiscuous_disable(uint16_t port_id);
1972
1973 /**
1974  * Return the value of promiscuous mode for an Ethernet device.
1975  *
1976  * @param port_id
1977  *   The port identifier of the Ethernet device.
1978  * @return
1979  *   - (1) if promiscuous is enabled
1980  *   - (0) if promiscuous is disabled.
1981  *   - (-1) on error
1982  */
1983 int rte_eth_promiscuous_get(uint16_t port_id);
1984
1985 /**
1986  * Enable the receipt of any multicast frame by an Ethernet device.
1987  *
1988  * @param port_id
1989  *   The port identifier of the Ethernet device.
1990  */
1991 void rte_eth_allmulticast_enable(uint16_t port_id);
1992
1993 /**
1994  * Disable the receipt of all multicast frames by an Ethernet device.
1995  *
1996  * @param port_id
1997  *   The port identifier of the Ethernet device.
1998  */
1999 void rte_eth_allmulticast_disable(uint16_t port_id);
2000
2001 /**
2002  * Return the value of allmulticast mode for an Ethernet device.
2003  *
2004  * @param port_id
2005  *   The port identifier of the Ethernet device.
2006  * @return
2007  *   - (1) if allmulticast is enabled
2008  *   - (0) if allmulticast is disabled.
2009  *   - (-1) on error
2010  */
2011 int rte_eth_allmulticast_get(uint16_t port_id);
2012
2013 /**
2014  * Retrieve the status (ON/OFF), the speed (in Mbps) and the mode (HALF-DUPLEX
2015  * or FULL-DUPLEX) of the physical link of an Ethernet device. It might need
2016  * to wait up to 9 seconds in it.
2017  *
2018  * @param port_id
2019  *   The port identifier of the Ethernet device.
2020  * @param link
2021  *   A pointer to an *rte_eth_link* structure to be filled with
2022  *   the status, the speed and the mode of the Ethernet device link.
2023  */
2024 void rte_eth_link_get(uint16_t port_id, struct rte_eth_link *link);
2025
2026 /**
2027  * Retrieve the status (ON/OFF), the speed (in Mbps) and the mode (HALF-DUPLEX
2028  * or FULL-DUPLEX) of the physical link of an Ethernet device. It is a no-wait
2029  * version of rte_eth_link_get().
2030  *
2031  * @param port_id
2032  *   The port identifier of the Ethernet device.
2033  * @param link
2034  *   A pointer to an *rte_eth_link* structure to be filled with
2035  *   the status, the speed and the mode of the Ethernet device link.
2036  */
2037 void rte_eth_link_get_nowait(uint16_t port_id, struct rte_eth_link *link);
2038
2039 /**
2040  * Retrieve the general I/O statistics of an Ethernet device.
2041  *
2042  * @param port_id
2043  *   The port identifier of the Ethernet device.
2044  * @param stats
2045  *   A pointer to a structure of type *rte_eth_stats* to be filled with
2046  *   the values of device counters for the following set of statistics:
2047  *   - *ipackets* with the total of successfully received packets.
2048  *   - *opackets* with the total of successfully transmitted packets.
2049  *   - *ibytes*   with the total of successfully received bytes.
2050  *   - *obytes*   with the total of successfully transmitted bytes.
2051  *   - *ierrors*  with the total of erroneous received packets.
2052  *   - *oerrors*  with the total of failed transmitted packets.
2053  * @return
2054  *   Zero if successful. Non-zero otherwise.
2055  */
2056 int rte_eth_stats_get(uint16_t port_id, struct rte_eth_stats *stats);
2057
2058 /**
2059  * Reset the general I/O statistics of an Ethernet device.
2060  *
2061  * @param port_id
2062  *   The port identifier of the Ethernet device.
2063  * @return
2064  *   - (0) if device notified to reset stats.
2065  *   - (-ENOTSUP) if hardware doesn't support.
2066  *   - (-ENODEV) if *port_id* invalid.
2067  */
2068 int rte_eth_stats_reset(uint16_t port_id);
2069
2070 /**
2071  * Retrieve names of extended statistics of an Ethernet device.
2072  *
2073  * There is an assumption that 'xstat_names' and 'xstats' arrays are matched
2074  * by array index:
2075  *  xstats_names[i].name => xstats[i].value
2076  *
2077  * And the array index is same with id field of 'struct rte_eth_xstat':
2078  *  xstats[i].id == i
2079  *
2080  * This assumption makes key-value pair matching less flexible but simpler.
2081  *
2082  * @param port_id
2083  *   The port identifier of the Ethernet device.
2084  * @param xstats_names
2085  *   An rte_eth_xstat_name array of at least *size* elements to
2086  *   be filled. If set to NULL, the function returns the required number
2087  *   of elements.
2088  * @param size
2089  *   The size of the xstats_names array (number of elements).
2090  * @return
2091  *   - A positive value lower or equal to size: success. The return value
2092  *     is the number of entries filled in the stats table.
2093  *   - A positive value higher than size: error, the given statistics table
2094  *     is too small. The return value corresponds to the size that should
2095  *     be given to succeed. The entries in the table are not valid and
2096  *     shall not be used by the caller.
2097  *   - A negative value on error (invalid port id).
2098  */
2099 int rte_eth_xstats_get_names(uint16_t port_id,
2100                 struct rte_eth_xstat_name *xstats_names,
2101                 unsigned int size);
2102
2103 /**
2104  * Retrieve extended statistics of an Ethernet device.
2105  *
2106  * There is an assumption that 'xstat_names' and 'xstats' arrays are matched
2107  * by array index:
2108  *  xstats_names[i].name => xstats[i].value
2109  *
2110  * And the array index is same with id field of 'struct rte_eth_xstat':
2111  *  xstats[i].id == i
2112  *
2113  * This assumption makes key-value pair matching less flexible but simpler.
2114  *
2115  * @param port_id
2116  *   The port identifier of the Ethernet device.
2117  * @param xstats
2118  *   A pointer to a table of structure of type *rte_eth_xstat*
2119  *   to be filled with device statistics ids and values.
2120  *   This parameter can be set to NULL if n is 0.
2121  * @param n
2122  *   The size of the xstats array (number of elements).
2123  * @return
2124  *   - A positive value lower or equal to n: success. The return value
2125  *     is the number of entries filled in the stats table.
2126  *   - A positive value higher than n: error, the given statistics table
2127  *     is too small. The return value corresponds to the size that should
2128  *     be given to succeed. The entries in the table are not valid and
2129  *     shall not be used by the caller.
2130  *   - A negative value on error (invalid port id).
2131  */
2132 int rte_eth_xstats_get(uint16_t port_id, struct rte_eth_xstat *xstats,
2133                 unsigned int n);
2134
2135 /**
2136  * Retrieve names of extended statistics of an Ethernet device.
2137  *
2138  * @param port_id
2139  *   The port identifier of the Ethernet device.
2140  * @param xstats_names
2141  *   An rte_eth_xstat_name array of at least *size* elements to
2142  *   be filled. If set to NULL, the function returns the required number
2143  *   of elements.
2144  * @param ids
2145  *   IDs array given by app to retrieve specific statistics
2146  * @param size
2147  *   The size of the xstats_names array (number of elements).
2148  * @return
2149  *   - A positive value lower or equal to size: success. The return value
2150  *     is the number of entries filled in the stats table.
2151  *   - A positive value higher than size: error, the given statistics table
2152  *     is too small. The return value corresponds to the size that should
2153  *     be given to succeed. The entries in the table are not valid and
2154  *     shall not be used by the caller.
2155  *   - A negative value on error (invalid port id).
2156  */
2157 int
2158 rte_eth_xstats_get_names_by_id(uint16_t port_id,
2159         struct rte_eth_xstat_name *xstats_names, unsigned int size,
2160         uint64_t *ids);
2161
2162 /**
2163  * Retrieve extended statistics of an Ethernet device.
2164  *
2165  * @param port_id
2166  *   The port identifier of the Ethernet device.
2167  * @param ids
2168  *   A pointer to an ids array passed by application. This tells which
2169  *   statistics values function should retrieve. This parameter
2170  *   can be set to NULL if size is 0. In this case function will retrieve
2171  *   all avalible statistics.
2172  * @param values
2173  *   A pointer to a table to be filled with device statistics values.
2174  * @param size
2175  *   The size of the ids array (number of elements).
2176  * @return
2177  *   - A positive value lower or equal to size: success. The return value
2178  *     is the number of entries filled in the stats table.
2179  *   - A positive value higher than size: error, the given statistics table
2180  *     is too small. The return value corresponds to the size that should
2181  *     be given to succeed. The entries in the table are not valid and
2182  *     shall not be used by the caller.
2183  *   - A negative value on error (invalid port id).
2184  */
2185 int rte_eth_xstats_get_by_id(uint16_t port_id, const uint64_t *ids,
2186                              uint64_t *values, unsigned int size);
2187
2188 /**
2189  * Gets the ID of a statistic from its name.
2190  *
2191  * This function searches for the statistics using string compares, and
2192  * as such should not be used on the fast-path. For fast-path retrieval of
2193  * specific statistics, store the ID as provided in *id* from this function,
2194  * and pass the ID to rte_eth_xstats_get()
2195  *
2196  * @param port_id The port to look up statistics from
2197  * @param xstat_name The name of the statistic to return
2198  * @param[out] id A pointer to an app-supplied uint64_t which should be
2199  *                set to the ID of the stat if the stat exists.
2200  * @return
2201  *    0 on success
2202  *    -ENODEV for invalid port_id,
2203  *    -EIO if device is removed,
2204  *    -EINVAL if the xstat_name doesn't exist in port_id
2205  */
2206 int rte_eth_xstats_get_id_by_name(uint16_t port_id, const char *xstat_name,
2207                 uint64_t *id);
2208
2209 /**
2210  * Reset extended statistics of an Ethernet device.
2211  *
2212  * @param port_id
2213  *   The port identifier of the Ethernet device.
2214  */
2215 void rte_eth_xstats_reset(uint16_t port_id);
2216
2217 /**
2218  *  Set a mapping for the specified transmit queue to the specified per-queue
2219  *  statistics counter.
2220  *
2221  * @param port_id
2222  *   The port identifier of the Ethernet device.
2223  * @param tx_queue_id
2224  *   The index of the transmit queue for which a queue stats mapping is required.
2225  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
2226  *   to rte_eth_dev_configure().
2227  * @param stat_idx
2228  *   The per-queue packet statistics functionality number that the transmit
2229  *   queue is to be assigned.
2230  *   The value must be in the range [0, RTE_ETHDEV_QUEUE_STAT_CNTRS - 1].
2231  * @return
2232  *   Zero if successful. Non-zero otherwise.
2233  */
2234 int rte_eth_dev_set_tx_queue_stats_mapping(uint16_t port_id,
2235                 uint16_t tx_queue_id, uint8_t stat_idx);
2236
2237 /**
2238  *  Set a mapping for the specified receive queue to the specified per-queue
2239  *  statistics counter.
2240  *
2241  * @param port_id
2242  *   The port identifier of the Ethernet device.
2243  * @param rx_queue_id
2244  *   The index of the receive queue for which a queue stats mapping is required.
2245  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2246  *   to rte_eth_dev_configure().
2247  * @param stat_idx
2248  *   The per-queue packet statistics functionality number that the receive
2249  *   queue is to be assigned.
2250  *   The value must be in the range [0, RTE_ETHDEV_QUEUE_STAT_CNTRS - 1].
2251  * @return
2252  *   Zero if successful. Non-zero otherwise.
2253  */
2254 int rte_eth_dev_set_rx_queue_stats_mapping(uint16_t port_id,
2255                                            uint16_t rx_queue_id,
2256                                            uint8_t stat_idx);
2257
2258 /**
2259  * Retrieve the Ethernet address of an Ethernet device.
2260  *
2261  * @param port_id
2262  *   The port identifier of the Ethernet device.
2263  * @param mac_addr
2264  *   A pointer to a structure of type *ether_addr* to be filled with
2265  *   the Ethernet address of the Ethernet device.
2266  */
2267 void rte_eth_macaddr_get(uint16_t port_id, struct ether_addr *mac_addr);
2268
2269 /**
2270  * Retrieve the contextual information of an Ethernet device.
2271  *
2272  * As part of this function, a number of of fields in dev_info will be
2273  * initialized as follows:
2274  *
2275  * rx_desc_lim = lim
2276  * tx_desc_lim = lim
2277  *
2278  * Where lim is defined within the rte_eth_dev_info_get as
2279  *
2280  *  const struct rte_eth_desc_lim lim = {
2281  *      .nb_max = UINT16_MAX,
2282  *      .nb_min = 0,
2283  *      .nb_align = 1,
2284  *  };
2285  *
2286  * device = dev->device
2287  * min_mtu = ETHER_MIN_MTU
2288  * max_mtu = UINT16_MAX
2289  *
2290  * The following fields will be populated if support for dev_infos_get()
2291  * exists for the device and the rte_eth_dev 'dev' has been populated
2292  * successfully with a call to it:
2293  *
2294  * driver_name = dev->device->driver->name
2295  * nb_rx_queues = dev->data->nb_rx_queues
2296  * nb_tx_queues = dev->data->nb_tx_queues
2297  * dev_flags = &dev->data->dev_flags
2298  *
2299  * @param port_id
2300  *   The port identifier of the Ethernet device.
2301  * @param dev_info
2302  *   A pointer to a structure of type *rte_eth_dev_info* to be filled with
2303  *   the contextual information of the Ethernet device.
2304  */
2305 void rte_eth_dev_info_get(uint16_t port_id, struct rte_eth_dev_info *dev_info);
2306
2307 /**
2308  * Retrieve the firmware version of a device.
2309  *
2310  * @param port_id
2311  *   The port identifier of the device.
2312  * @param fw_version
2313  *   A pointer to a string array storing the firmware version of a device,
2314  *   the string includes terminating null. This pointer is allocated by caller.
2315  * @param fw_size
2316  *   The size of the string array pointed by fw_version, which should be
2317  *   large enough to store firmware version of the device.
2318  * @return
2319  *   - (0) if successful.
2320  *   - (-ENOTSUP) if operation is not supported.
2321  *   - (-ENODEV) if *port_id* invalid.
2322  *   - (-EIO) if device is removed.
2323  *   - (>0) if *fw_size* is not enough to store firmware version, return
2324  *          the size of the non truncated string.
2325  */
2326 int rte_eth_dev_fw_version_get(uint16_t port_id,
2327                                char *fw_version, size_t fw_size);
2328
2329 /**
2330  * Retrieve the supported packet types of an Ethernet device.
2331  *
2332  * When a packet type is announced as supported, it *must* be recognized by
2333  * the PMD. For instance, if RTE_PTYPE_L2_ETHER, RTE_PTYPE_L2_ETHER_VLAN
2334  * and RTE_PTYPE_L3_IPV4 are announced, the PMD must return the following
2335  * packet types for these packets:
2336  * - Ether/IPv4              -> RTE_PTYPE_L2_ETHER | RTE_PTYPE_L3_IPV4
2337  * - Ether/Vlan/IPv4         -> RTE_PTYPE_L2_ETHER_VLAN | RTE_PTYPE_L3_IPV4
2338  * - Ether/[anything else]   -> RTE_PTYPE_L2_ETHER
2339  * - Ether/Vlan/[anything else] -> RTE_PTYPE_L2_ETHER_VLAN
2340  *
2341  * When a packet is received by a PMD, the most precise type must be
2342  * returned among the ones supported. However a PMD is allowed to set
2343  * packet type that is not in the supported list, at the condition that it
2344  * is more precise. Therefore, a PMD announcing no supported packet types
2345  * can still set a matching packet type in a received packet.
2346  *
2347  * @note
2348  *   Better to invoke this API after the device is already started or rx burst
2349  *   function is decided, to obtain correct supported ptypes.
2350  * @note
2351  *   if a given PMD does not report what ptypes it supports, then the supported
2352  *   ptype count is reported as 0.
2353  * @param port_id
2354  *   The port identifier of the Ethernet device.
2355  * @param ptype_mask
2356  *   A hint of what kind of packet type which the caller is interested in.
2357  * @param ptypes
2358  *   An array pointer to store adequate packet types, allocated by caller.
2359  * @param num
2360  *  Size of the array pointed by param ptypes.
2361  * @return
2362  *   - (>=0) Number of supported ptypes. If the number of types exceeds num,
2363  *           only num entries will be filled into the ptypes array, but the full
2364  *           count of supported ptypes will be returned.
2365  *   - (-ENODEV) if *port_id* invalid.
2366  */
2367 int rte_eth_dev_get_supported_ptypes(uint16_t port_id, uint32_t ptype_mask,
2368                                      uint32_t *ptypes, int num);
2369
2370 /**
2371  * Retrieve the MTU of an Ethernet device.
2372  *
2373  * @param port_id
2374  *   The port identifier of the Ethernet device.
2375  * @param mtu
2376  *   A pointer to a uint16_t where the retrieved MTU is to be stored.
2377  * @return
2378  *   - (0) if successful.
2379  *   - (-ENODEV) if *port_id* invalid.
2380  */
2381 int rte_eth_dev_get_mtu(uint16_t port_id, uint16_t *mtu);
2382
2383 /**
2384  * Change the MTU of an Ethernet device.
2385  *
2386  * @param port_id
2387  *   The port identifier of the Ethernet device.
2388  * @param mtu
2389  *   A uint16_t for the MTU to be applied.
2390  * @return
2391  *   - (0) if successful.
2392  *   - (-ENOTSUP) if operation is not supported.
2393  *   - (-ENODEV) if *port_id* invalid.
2394  *   - (-EIO) if device is removed.
2395  *   - (-EINVAL) if *mtu* invalid, validation of mtu can occur within
2396  *     rte_eth_dev_set_mtu if dev_infos_get is supported by the device or
2397  *     when the mtu is set using dev->dev_ops->mtu_set.
2398  *   - (-EBUSY) if operation is not allowed when the port is running
2399  */
2400 int rte_eth_dev_set_mtu(uint16_t port_id, uint16_t mtu);
2401
2402 /**
2403  * Enable/Disable hardware filtering by an Ethernet device of received
2404  * VLAN packets tagged with a given VLAN Tag Identifier.
2405  *
2406  * @param port_id
2407  *   The port identifier of the Ethernet device.
2408  * @param vlan_id
2409  *   The VLAN Tag Identifier whose filtering must be enabled or disabled.
2410  * @param on
2411  *   If > 0, enable VLAN filtering of VLAN packets tagged with *vlan_id*.
2412  *   Otherwise, disable VLAN filtering of VLAN packets tagged with *vlan_id*.
2413  * @return
2414  *   - (0) if successful.
2415  *   - (-ENOSUP) if hardware-assisted VLAN filtering not configured.
2416  *   - (-ENODEV) if *port_id* invalid.
2417  *   - (-EIO) if device is removed.
2418  *   - (-ENOSYS) if VLAN filtering on *port_id* disabled.
2419  *   - (-EINVAL) if *vlan_id* > 4095.
2420  */
2421 int rte_eth_dev_vlan_filter(uint16_t port_id, uint16_t vlan_id, int on);
2422
2423 /**
2424  * Enable/Disable hardware VLAN Strip by a rx queue of an Ethernet device.
2425  * 82599/X540/X550 can support VLAN stripping at the rx queue level
2426  *
2427  * @param port_id
2428  *   The port identifier of the Ethernet device.
2429  * @param rx_queue_id
2430  *   The index of the receive queue for which a queue stats mapping is required.
2431  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2432  *   to rte_eth_dev_configure().
2433  * @param on
2434  *   If 1, Enable VLAN Stripping of the receive queue of the Ethernet port.
2435  *   If 0, Disable VLAN Stripping of the receive queue of the Ethernet port.
2436  * @return
2437  *   - (0) if successful.
2438  *   - (-ENOSUP) if hardware-assisted VLAN stripping not configured.
2439  *   - (-ENODEV) if *port_id* invalid.
2440  *   - (-EINVAL) if *rx_queue_id* invalid.
2441  */
2442 int rte_eth_dev_set_vlan_strip_on_queue(uint16_t port_id, uint16_t rx_queue_id,
2443                 int on);
2444
2445 /**
2446  * Set the Outer VLAN Ether Type by an Ethernet device, it can be inserted to
2447  * the VLAN Header. This is a register setup available on some Intel NIC, not
2448  * but all, please check the data sheet for availability.
2449  *
2450  * @param port_id
2451  *   The port identifier of the Ethernet device.
2452  * @param vlan_type
2453  *   The vlan type.
2454  * @param tag_type
2455  *   The Tag Protocol ID
2456  * @return
2457  *   - (0) if successful.
2458  *   - (-ENOSUP) if hardware-assisted VLAN TPID setup is not supported.
2459  *   - (-ENODEV) if *port_id* invalid.
2460  *   - (-EIO) if device is removed.
2461  */
2462 int rte_eth_dev_set_vlan_ether_type(uint16_t port_id,
2463                                     enum rte_vlan_type vlan_type,
2464                                     uint16_t tag_type);
2465
2466 /**
2467  * Set VLAN offload configuration on an Ethernet device
2468  * Enable/Disable Extended VLAN by an Ethernet device, This is a register setup
2469  * available on some Intel NIC, not but all, please check the data sheet for
2470  * availability.
2471  * Enable/Disable VLAN Strip can be done on rx queue for certain NIC, but here
2472  * the configuration is applied on the port level.
2473  *
2474  * @param port_id
2475  *   The port identifier of the Ethernet device.
2476  * @param offload_mask
2477  *   The VLAN Offload bit mask can be mixed use with "OR"
2478  *       ETH_VLAN_STRIP_OFFLOAD
2479  *       ETH_VLAN_FILTER_OFFLOAD
2480  *       ETH_VLAN_EXTEND_OFFLOAD
2481  * @return
2482  *   - (0) if successful.
2483  *   - (-ENOSUP) if hardware-assisted VLAN filtering not configured.
2484  *   - (-ENODEV) if *port_id* invalid.
2485  *   - (-EIO) if device is removed.
2486  */
2487 int rte_eth_dev_set_vlan_offload(uint16_t port_id, int offload_mask);
2488
2489 /**
2490  * Read VLAN Offload configuration from an Ethernet device
2491  *
2492  * @param port_id
2493  *   The port identifier of the Ethernet device.
2494  * @return
2495  *   - (>0) if successful. Bit mask to indicate
2496  *       ETH_VLAN_STRIP_OFFLOAD
2497  *       ETH_VLAN_FILTER_OFFLOAD
2498  *       ETH_VLAN_EXTEND_OFFLOAD
2499  *   - (-ENODEV) if *port_id* invalid.
2500  */
2501 int rte_eth_dev_get_vlan_offload(uint16_t port_id);
2502
2503 /**
2504  * Set port based TX VLAN insertion on or off.
2505  *
2506  * @param port_id
2507  *  The port identifier of the Ethernet device.
2508  * @param pvid
2509  *  Port based TX VLAN identifier together with user priority.
2510  * @param on
2511  *  Turn on or off the port based TX VLAN insertion.
2512  *
2513  * @return
2514  *   - (0) if successful.
2515  *   - negative if failed.
2516  */
2517 int rte_eth_dev_set_vlan_pvid(uint16_t port_id, uint16_t pvid, int on);
2518
2519 typedef void (*buffer_tx_error_fn)(struct rte_mbuf **unsent, uint16_t count,
2520                 void *userdata);
2521
2522 /**
2523  * Structure used to buffer packets for future TX
2524  * Used by APIs rte_eth_tx_buffer and rte_eth_tx_buffer_flush
2525  */
2526 struct rte_eth_dev_tx_buffer {
2527         buffer_tx_error_fn error_callback;
2528         void *error_userdata;
2529         uint16_t size;           /**< Size of buffer for buffered tx */
2530         uint16_t length;         /**< Number of packets in the array */
2531         struct rte_mbuf *pkts[];
2532         /**< Pending packets to be sent on explicit flush or when full */
2533 };
2534
2535 /**
2536  * Calculate the size of the tx buffer.
2537  *
2538  * @param sz
2539  *   Number of stored packets.
2540  */
2541 #define RTE_ETH_TX_BUFFER_SIZE(sz) \
2542         (sizeof(struct rte_eth_dev_tx_buffer) + (sz) * sizeof(struct rte_mbuf *))
2543
2544 /**
2545  * Initialize default values for buffered transmitting
2546  *
2547  * @param buffer
2548  *   Tx buffer to be initialized.
2549  * @param size
2550  *   Buffer size
2551  * @return
2552  *   0 if no error
2553  */
2554 int
2555 rte_eth_tx_buffer_init(struct rte_eth_dev_tx_buffer *buffer, uint16_t size);
2556
2557 /**
2558  * Configure a callback for buffered packets which cannot be sent
2559  *
2560  * Register a specific callback to be called when an attempt is made to send
2561  * all packets buffered on an ethernet port, but not all packets can
2562  * successfully be sent. The callback registered here will be called only
2563  * from calls to rte_eth_tx_buffer() and rte_eth_tx_buffer_flush() APIs.
2564  * The default callback configured for each queue by default just frees the
2565  * packets back to the calling mempool. If additional behaviour is required,
2566  * for example, to count dropped packets, or to retry transmission of packets
2567  * which cannot be sent, this function should be used to register a suitable
2568  * callback function to implement the desired behaviour.
2569  * The example callback "rte_eth_count_unsent_packet_callback()" is also
2570  * provided as reference.
2571  *
2572  * @param buffer
2573  *   The port identifier of the Ethernet device.
2574  * @param callback
2575  *   The function to be used as the callback.
2576  * @param userdata
2577  *   Arbitrary parameter to be passed to the callback function
2578  * @return
2579  *   0 on success, or -1 on error with rte_errno set appropriately
2580  */
2581 int
2582 rte_eth_tx_buffer_set_err_callback(struct rte_eth_dev_tx_buffer *buffer,
2583                 buffer_tx_error_fn callback, void *userdata);
2584
2585 /**
2586  * Callback function for silently dropping unsent buffered packets.
2587  *
2588  * This function can be passed to rte_eth_tx_buffer_set_err_callback() to
2589  * adjust the default behavior when buffered packets cannot be sent. This
2590  * function drops any unsent packets silently and is used by tx buffered
2591  * operations as default behavior.
2592  *
2593  * NOTE: this function should not be called directly, instead it should be used
2594  *       as a callback for packet buffering.
2595  *
2596  * NOTE: when configuring this function as a callback with
2597  *       rte_eth_tx_buffer_set_err_callback(), the final, userdata parameter
2598  *       should point to an uint64_t value.
2599  *
2600  * @param pkts
2601  *   The previously buffered packets which could not be sent
2602  * @param unsent
2603  *   The number of unsent packets in the pkts array
2604  * @param userdata
2605  *   Not used
2606  */
2607 void
2608 rte_eth_tx_buffer_drop_callback(struct rte_mbuf **pkts, uint16_t unsent,
2609                 void *userdata);
2610
2611 /**
2612  * Callback function for tracking unsent buffered packets.
2613  *
2614  * This function can be passed to rte_eth_tx_buffer_set_err_callback() to
2615  * adjust the default behavior when buffered packets cannot be sent. This
2616  * function drops any unsent packets, but also updates a user-supplied counter
2617  * to track the overall number of packets dropped. The counter should be an
2618  * uint64_t variable.
2619  *
2620  * NOTE: this function should not be called directly, instead it should be used
2621  *       as a callback for packet buffering.
2622  *
2623  * NOTE: when configuring this function as a callback with
2624  *       rte_eth_tx_buffer_set_err_callback(), the final, userdata parameter
2625  *       should point to an uint64_t value.
2626  *
2627  * @param pkts
2628  *   The previously buffered packets which could not be sent
2629  * @param unsent
2630  *   The number of unsent packets in the pkts array
2631  * @param userdata
2632  *   Pointer to an uint64_t value, which will be incremented by unsent
2633  */
2634 void
2635 rte_eth_tx_buffer_count_callback(struct rte_mbuf **pkts, uint16_t unsent,
2636                 void *userdata);
2637
2638 /**
2639  * Request the driver to free mbufs currently cached by the driver. The
2640  * driver will only free the mbuf if it is no longer in use. It is the
2641  * application's responsibity to ensure rte_eth_tx_buffer_flush(..) is
2642  * called if needed.
2643  *
2644  * @param port_id
2645  *   The port identifier of the Ethernet device.
2646  * @param queue_id
2647  *   The index of the transmit queue through which output packets must be
2648  *   sent.
2649  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
2650  *   to rte_eth_dev_configure().
2651  * @param free_cnt
2652  *   Maximum number of packets to free. Use 0 to indicate all possible packets
2653  *   should be freed. Note that a packet may be using multiple mbufs.
2654  * @return
2655  *   Failure: < 0
2656  *     -ENODEV: Invalid interface
2657  *     -EIO: device is removed
2658  *     -ENOTSUP: Driver does not support function
2659  *   Success: >= 0
2660  *     0-n: Number of packets freed. More packets may still remain in ring that
2661  *     are in use.
2662  */
2663 int
2664 rte_eth_tx_done_cleanup(uint16_t port_id, uint16_t queue_id, uint32_t free_cnt);
2665
2666 /**
2667  * Subtypes for IPsec offload event(@ref RTE_ETH_EVENT_IPSEC) raised by
2668  * eth device.
2669  */
2670 enum rte_eth_event_ipsec_subtype {
2671         RTE_ETH_EVENT_IPSEC_UNKNOWN = 0,
2672                         /**< Unknown event type */
2673         RTE_ETH_EVENT_IPSEC_ESN_OVERFLOW,
2674                         /**< Sequence number overflow */
2675         RTE_ETH_EVENT_IPSEC_SA_TIME_EXPIRY,
2676                         /**< Soft time expiry of SA */
2677         RTE_ETH_EVENT_IPSEC_SA_BYTE_EXPIRY,
2678                         /**< Soft byte expiry of SA */
2679         RTE_ETH_EVENT_IPSEC_MAX
2680                         /**< Max value of this enum */
2681 };
2682
2683 /**
2684  * Descriptor for @ref RTE_ETH_EVENT_IPSEC event. Used by eth dev to send extra
2685  * information of the IPsec offload event.
2686  */
2687 struct rte_eth_event_ipsec_desc {
2688         enum rte_eth_event_ipsec_subtype subtype;
2689                         /**< Type of RTE_ETH_EVENT_IPSEC_* event */
2690         uint64_t metadata;
2691                         /**< Event specific metadata
2692                          *
2693                          * For the following events, *userdata* registered
2694                          * with the *rte_security_session* would be returned
2695                          * as metadata,
2696                          *
2697                          * - @ref RTE_ETH_EVENT_IPSEC_ESN_OVERFLOW
2698                          * - @ref RTE_ETH_EVENT_IPSEC_SA_TIME_EXPIRY
2699                          * - @ref RTE_ETH_EVENT_IPSEC_SA_BYTE_EXPIRY
2700                          *
2701                          * @see struct rte_security_session_conf
2702                          *
2703                          */
2704 };
2705
2706 /**
2707  * The eth device event type for interrupt, and maybe others in the future.
2708  */
2709 enum rte_eth_event_type {
2710         RTE_ETH_EVENT_UNKNOWN,  /**< unknown event type */
2711         RTE_ETH_EVENT_INTR_LSC, /**< lsc interrupt event */
2712         RTE_ETH_EVENT_QUEUE_STATE,
2713                                 /**< queue state event (enabled/disabled) */
2714         RTE_ETH_EVENT_INTR_RESET,
2715                         /**< reset interrupt event, sent to VF on PF reset */
2716         RTE_ETH_EVENT_VF_MBOX,  /**< message from the VF received by PF */
2717         RTE_ETH_EVENT_MACSEC,   /**< MACsec offload related event */
2718         RTE_ETH_EVENT_INTR_RMV, /**< device removal event */
2719         RTE_ETH_EVENT_NEW,      /**< port is probed */
2720         RTE_ETH_EVENT_DESTROY,  /**< port is released */
2721         RTE_ETH_EVENT_IPSEC,    /**< IPsec offload related event */
2722         RTE_ETH_EVENT_MAX       /**< max value of this enum */
2723 };
2724
2725 typedef int (*rte_eth_dev_cb_fn)(uint16_t port_id,
2726                 enum rte_eth_event_type event, void *cb_arg, void *ret_param);
2727 /**< user application callback to be registered for interrupts */
2728
2729 /**
2730  * Register a callback function for port event.
2731  *
2732  * @param port_id
2733  *  Port id.
2734  *  RTE_ETH_ALL means register the event for all port ids.
2735  * @param event
2736  *  Event interested.
2737  * @param cb_fn
2738  *  User supplied callback function to be called.
2739  * @param cb_arg
2740  *  Pointer to the parameters for the registered callback.
2741  *
2742  * @return
2743  *  - On success, zero.
2744  *  - On failure, a negative value.
2745  */
2746 int rte_eth_dev_callback_register(uint16_t port_id,
2747                         enum rte_eth_event_type event,
2748                 rte_eth_dev_cb_fn cb_fn, void *cb_arg);
2749
2750 /**
2751  * Unregister a callback function for port event.
2752  *
2753  * @param port_id
2754  *  Port id.
2755  *  RTE_ETH_ALL means unregister the event for all port ids.
2756  * @param event
2757  *  Event interested.
2758  * @param cb_fn
2759  *  User supplied callback function to be called.
2760  * @param cb_arg
2761  *  Pointer to the parameters for the registered callback. -1 means to
2762  *  remove all for the same callback address and same event.
2763  *
2764  * @return
2765  *  - On success, zero.
2766  *  - On failure, a negative value.
2767  */
2768 int rte_eth_dev_callback_unregister(uint16_t port_id,
2769                         enum rte_eth_event_type event,
2770                 rte_eth_dev_cb_fn cb_fn, void *cb_arg);
2771
2772 /**
2773  * When there is no rx packet coming in Rx Queue for a long time, we can
2774  * sleep lcore related to RX Queue for power saving, and enable rx interrupt
2775  * to be triggered when Rx packet arrives.
2776  *
2777  * The rte_eth_dev_rx_intr_enable() function enables rx queue
2778  * interrupt on specific rx queue of a port.
2779  *
2780  * @param port_id
2781  *   The port identifier of the Ethernet device.
2782  * @param queue_id
2783  *   The index of the receive queue from which to retrieve input packets.
2784  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2785  *   to rte_eth_dev_configure().
2786  * @return
2787  *   - (0) if successful.
2788  *   - (-ENOTSUP) if underlying hardware OR driver doesn't support
2789  *     that operation.
2790  *   - (-ENODEV) if *port_id* invalid.
2791  *   - (-EIO) if device is removed.
2792  */
2793 int rte_eth_dev_rx_intr_enable(uint16_t port_id, uint16_t queue_id);
2794
2795 /**
2796  * When lcore wakes up from rx interrupt indicating packet coming, disable rx
2797  * interrupt and returns to polling mode.
2798  *
2799  * The rte_eth_dev_rx_intr_disable() function disables rx queue
2800  * interrupt on specific rx queue of a port.
2801  *
2802  * @param port_id
2803  *   The port identifier of the Ethernet device.
2804  * @param queue_id
2805  *   The index of the receive queue from which to retrieve input packets.
2806  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2807  *   to rte_eth_dev_configure().
2808  * @return
2809  *   - (0) if successful.
2810  *   - (-ENOTSUP) if underlying hardware OR driver doesn't support
2811  *     that operation.
2812  *   - (-ENODEV) if *port_id* invalid.
2813  *   - (-EIO) if device is removed.
2814  */
2815 int rte_eth_dev_rx_intr_disable(uint16_t port_id, uint16_t queue_id);
2816
2817 /**
2818  * RX Interrupt control per port.
2819  *
2820  * @param port_id
2821  *   The port identifier of the Ethernet device.
2822  * @param epfd
2823  *   Epoll instance fd which the intr vector associated to.
2824  *   Using RTE_EPOLL_PER_THREAD allows to use per thread epoll instance.
2825  * @param op
2826  *   The operation be performed for the vector.
2827  *   Operation type of {RTE_INTR_EVENT_ADD, RTE_INTR_EVENT_DEL}.
2828  * @param data
2829  *   User raw data.
2830  * @return
2831  *   - On success, zero.
2832  *   - On failure, a negative value.
2833  */
2834 int rte_eth_dev_rx_intr_ctl(uint16_t port_id, int epfd, int op, void *data);
2835
2836 /**
2837  * RX Interrupt control per queue.
2838  *
2839  * @param port_id
2840  *   The port identifier of the Ethernet device.
2841  * @param queue_id
2842  *   The index of the receive queue from which to retrieve input packets.
2843  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2844  *   to rte_eth_dev_configure().
2845  * @param epfd
2846  *   Epoll instance fd which the intr vector associated to.
2847  *   Using RTE_EPOLL_PER_THREAD allows to use per thread epoll instance.
2848  * @param op
2849  *   The operation be performed for the vector.
2850  *   Operation type of {RTE_INTR_EVENT_ADD, RTE_INTR_EVENT_DEL}.
2851  * @param data
2852  *   User raw data.
2853  * @return
2854  *   - On success, zero.
2855  *   - On failure, a negative value.
2856  */
2857 int rte_eth_dev_rx_intr_ctl_q(uint16_t port_id, uint16_t queue_id,
2858                               int epfd, int op, void *data);
2859
2860 /**
2861  * @warning
2862  * @b EXPERIMENTAL: this API may change without prior notice.
2863  *
2864  * Get interrupt fd per Rx queue.
2865  *
2866  * @param port_id
2867  *   The port identifier of the Ethernet device.
2868  * @param queue_id
2869  *   The index of the receive queue from which to retrieve input packets.
2870  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
2871  *   to rte_eth_dev_configure().
2872  * @return
2873  *   - (>=0) the interrupt fd associated to the requested Rx queue if
2874  *           successful.
2875  *   - (-1) on error.
2876  */
2877 int __rte_experimental
2878 rte_eth_dev_rx_intr_ctl_q_get_fd(uint16_t port_id, uint16_t queue_id);
2879
2880 /**
2881  * Turn on the LED on the Ethernet device.
2882  * This function turns on the LED on the Ethernet device.
2883  *
2884  * @param port_id
2885  *   The port identifier of the Ethernet device.
2886  * @return
2887  *   - (0) if successful.
2888  *   - (-ENOTSUP) if underlying hardware OR driver doesn't support
2889  *     that operation.
2890  *   - (-ENODEV) if *port_id* invalid.
2891  *   - (-EIO) if device is removed.
2892  */
2893 int  rte_eth_led_on(uint16_t port_id);
2894
2895 /**
2896  * Turn off the LED on the Ethernet device.
2897  * This function turns off the LED on the Ethernet device.
2898  *
2899  * @param port_id
2900  *   The port identifier of the Ethernet device.
2901  * @return
2902  *   - (0) if successful.
2903  *   - (-ENOTSUP) if underlying hardware OR driver doesn't support
2904  *     that operation.
2905  *   - (-ENODEV) if *port_id* invalid.
2906  *   - (-EIO) if device is removed.
2907  */
2908 int  rte_eth_led_off(uint16_t port_id);
2909
2910 /**
2911  * Get current status of the Ethernet link flow control for Ethernet device
2912  *
2913  * @param port_id
2914  *   The port identifier of the Ethernet device.
2915  * @param fc_conf
2916  *   The pointer to the structure where to store the flow control parameters.
2917  * @return
2918  *   - (0) if successful.
2919  *   - (-ENOTSUP) if hardware doesn't support flow control.
2920  *   - (-ENODEV)  if *port_id* invalid.
2921  *   - (-EIO)  if device is removed.
2922  */
2923 int rte_eth_dev_flow_ctrl_get(uint16_t port_id,
2924                               struct rte_eth_fc_conf *fc_conf);
2925
2926 /**
2927  * Configure the Ethernet link flow control for Ethernet device
2928  *
2929  * @param port_id
2930  *   The port identifier of the Ethernet device.
2931  * @param fc_conf
2932  *   The pointer to the structure of the flow control parameters.
2933  * @return
2934  *   - (0) if successful.
2935  *   - (-ENOTSUP) if hardware doesn't support flow control mode.
2936  *   - (-ENODEV)  if *port_id* invalid.
2937  *   - (-EINVAL)  if bad parameter
2938  *   - (-EIO)     if flow control setup failure or device is removed.
2939  */
2940 int rte_eth_dev_flow_ctrl_set(uint16_t port_id,
2941                               struct rte_eth_fc_conf *fc_conf);
2942
2943 /**
2944  * Configure the Ethernet priority flow control under DCB environment
2945  * for Ethernet device.
2946  *
2947  * @param port_id
2948  * The port identifier of the Ethernet device.
2949  * @param pfc_conf
2950  * The pointer to the structure of the priority flow control parameters.
2951  * @return
2952  *   - (0) if successful.
2953  *   - (-ENOTSUP) if hardware doesn't support priority flow control mode.
2954  *   - (-ENODEV)  if *port_id* invalid.
2955  *   - (-EINVAL)  if bad parameter
2956  *   - (-EIO)     if flow control setup failure or device is removed.
2957  */
2958 int rte_eth_dev_priority_flow_ctrl_set(uint16_t port_id,
2959                                 struct rte_eth_pfc_conf *pfc_conf);
2960
2961 /**
2962  * Add a MAC address to an internal array of addresses used to enable whitelist
2963  * filtering to accept packets only if the destination MAC address matches.
2964  *
2965  * @param port_id
2966  *   The port identifier of the Ethernet device.
2967  * @param mac_addr
2968  *   The MAC address to add.
2969  * @param pool
2970  *   VMDq pool index to associate address with (if VMDq is enabled). If VMDq is
2971  *   not enabled, this should be set to 0.
2972  * @return
2973  *   - (0) if successfully added or *mac_addr* was already added.
2974  *   - (-ENOTSUP) if hardware doesn't support this feature.
2975  *   - (-ENODEV) if *port* is invalid.
2976  *   - (-EIO) if device is removed.
2977  *   - (-ENOSPC) if no more MAC addresses can be added.
2978  *   - (-EINVAL) if MAC address is invalid.
2979  */
2980 int rte_eth_dev_mac_addr_add(uint16_t port_id, struct ether_addr *mac_addr,
2981                                 uint32_t pool);
2982
2983 /**
2984  * Remove a MAC address from the internal array of addresses.
2985  *
2986  * @param port_id
2987  *   The port identifier of the Ethernet device.
2988  * @param mac_addr
2989  *   MAC address to remove.
2990  * @return
2991  *   - (0) if successful, or *mac_addr* didn't exist.
2992  *   - (-ENOTSUP) if hardware doesn't support.
2993  *   - (-ENODEV) if *port* invalid.
2994  *   - (-EADDRINUSE) if attempting to remove the default MAC address
2995  */
2996 int rte_eth_dev_mac_addr_remove(uint16_t port_id, struct ether_addr *mac_addr);
2997
2998 /**
2999  * Set the default MAC address.
3000  *
3001  * @param port_id
3002  *   The port identifier of the Ethernet device.
3003  * @param mac_addr
3004  *   New default MAC address.
3005  * @return
3006  *   - (0) if successful, or *mac_addr* didn't exist.
3007  *   - (-ENOTSUP) if hardware doesn't support.
3008  *   - (-ENODEV) if *port* invalid.
3009  *   - (-EINVAL) if MAC address is invalid.
3010  */
3011 int rte_eth_dev_default_mac_addr_set(uint16_t port_id,
3012                 struct ether_addr *mac_addr);
3013
3014 /**
3015  * Update Redirection Table(RETA) of Receive Side Scaling of Ethernet device.
3016  *
3017  * @param port_id
3018  *   The port identifier of the Ethernet device.
3019  * @param reta_conf
3020  *   RETA to update.
3021  * @param reta_size
3022  *   Redirection table size. The table size can be queried by
3023  *   rte_eth_dev_info_get().
3024  * @return
3025  *   - (0) if successful.
3026  *   - (-ENOTSUP) if hardware doesn't support.
3027  *   - (-EINVAL) if bad parameter.
3028  *   - (-EIO) if device is removed.
3029  */
3030 int rte_eth_dev_rss_reta_update(uint16_t port_id,
3031                                 struct rte_eth_rss_reta_entry64 *reta_conf,
3032                                 uint16_t reta_size);
3033
3034  /**
3035  * Query Redirection Table(RETA) of Receive Side Scaling of Ethernet device.
3036  *
3037  * @param port_id
3038  *   The port identifier of the Ethernet device.
3039  * @param reta_conf
3040  *   RETA to query.
3041  * @param reta_size
3042  *   Redirection table size. The table size can be queried by
3043  *   rte_eth_dev_info_get().
3044  * @return
3045  *   - (0) if successful.
3046  *   - (-ENOTSUP) if hardware doesn't support.
3047  *   - (-EINVAL) if bad parameter.
3048  *   - (-EIO) if device is removed.
3049  */
3050 int rte_eth_dev_rss_reta_query(uint16_t port_id,
3051                                struct rte_eth_rss_reta_entry64 *reta_conf,
3052                                uint16_t reta_size);
3053
3054  /**
3055  * Updates unicast hash table for receiving packet with the given destination
3056  * MAC address, and the packet is routed to all VFs for which the RX mode is
3057  * accept packets that match the unicast hash table.
3058  *
3059  * @param port_id
3060  *   The port identifier of the Ethernet device.
3061  * @param addr
3062  *   Unicast MAC address.
3063  * @param on
3064  *    1 - Set an unicast hash bit for receiving packets with the MAC address.
3065  *    0 - Clear an unicast hash bit.
3066  * @return
3067  *   - (0) if successful.
3068  *   - (-ENOTSUP) if hardware doesn't support.
3069   *  - (-ENODEV) if *port_id* invalid.
3070  *   - (-EIO) if device is removed.
3071  *   - (-EINVAL) if bad parameter.
3072  */
3073 int rte_eth_dev_uc_hash_table_set(uint16_t port_id, struct ether_addr *addr,
3074                                   uint8_t on);
3075
3076  /**
3077  * Updates all unicast hash bitmaps for receiving packet with any Unicast
3078  * Ethernet MAC addresses,the packet is routed to all VFs for which the RX
3079  * mode is accept packets that match the unicast hash table.
3080  *
3081  * @param port_id
3082  *   The port identifier of the Ethernet device.
3083  * @param on
3084  *    1 - Set all unicast hash bitmaps for receiving all the Ethernet
3085  *         MAC addresses
3086  *    0 - Clear all unicast hash bitmaps
3087  * @return
3088  *   - (0) if successful.
3089  *   - (-ENOTSUP) if hardware doesn't support.
3090   *  - (-ENODEV) if *port_id* invalid.
3091  *   - (-EIO) if device is removed.
3092  *   - (-EINVAL) if bad parameter.
3093  */
3094 int rte_eth_dev_uc_all_hash_table_set(uint16_t port_id, uint8_t on);
3095
3096 /**
3097  * Set a traffic mirroring rule on an Ethernet device
3098  *
3099  * @param port_id
3100  *   The port identifier of the Ethernet device.
3101  * @param mirror_conf
3102  *   The pointer to the traffic mirroring structure describing the mirroring rule.
3103  *   The *rte_eth_vm_mirror_conf* structure includes the type of mirroring rule,
3104  *   destination pool and the value of rule if enable vlan or pool mirroring.
3105  *
3106  * @param rule_id
3107  *   The index of traffic mirroring rule, we support four separated rules.
3108  * @param on
3109  *   1 - Enable a mirroring rule.
3110  *   0 - Disable a mirroring rule.
3111  * @return
3112  *   - (0) if successful.
3113  *   - (-ENOTSUP) if hardware doesn't support this feature.
3114  *   - (-ENODEV) if *port_id* invalid.
3115  *   - (-EIO) if device is removed.
3116  *   - (-EINVAL) if the mr_conf information is not correct.
3117  */
3118 int rte_eth_mirror_rule_set(uint16_t port_id,
3119                         struct rte_eth_mirror_conf *mirror_conf,
3120                         uint8_t rule_id,
3121                         uint8_t on);
3122
3123 /**
3124  * Reset a traffic mirroring rule on an Ethernet device.
3125  *
3126  * @param port_id
3127  *   The port identifier of the Ethernet device.
3128  * @param rule_id
3129  *   The index of traffic mirroring rule, we support four separated rules.
3130  * @return
3131  *   - (0) if successful.
3132  *   - (-ENOTSUP) if hardware doesn't support this feature.
3133  *   - (-ENODEV) if *port_id* invalid.
3134  *   - (-EIO) if device is removed.
3135  *   - (-EINVAL) if bad parameter.
3136  */
3137 int rte_eth_mirror_rule_reset(uint16_t port_id,
3138                                          uint8_t rule_id);
3139
3140 /**
3141  * Set the rate limitation for a queue on an Ethernet device.
3142  *
3143  * @param port_id
3144  *   The port identifier of the Ethernet device.
3145  * @param queue_idx
3146  *   The queue id.
3147  * @param tx_rate
3148  *   The tx rate in Mbps. Allocated from the total port link speed.
3149  * @return
3150  *   - (0) if successful.
3151  *   - (-ENOTSUP) if hardware doesn't support this feature.
3152  *   - (-ENODEV) if *port_id* invalid.
3153  *   - (-EIO) if device is removed.
3154  *   - (-EINVAL) if bad parameter.
3155  */
3156 int rte_eth_set_queue_rate_limit(uint16_t port_id, uint16_t queue_idx,
3157                         uint16_t tx_rate);
3158
3159  /**
3160  * Configuration of Receive Side Scaling hash computation of Ethernet device.
3161  *
3162  * @param port_id
3163  *   The port identifier of the Ethernet device.
3164  * @param rss_conf
3165  *   The new configuration to use for RSS hash computation on the port.
3166  * @return
3167  *   - (0) if successful.
3168  *   - (-ENODEV) if port identifier is invalid.
3169  *   - (-EIO) if device is removed.
3170  *   - (-ENOTSUP) if hardware doesn't support.
3171  *   - (-EINVAL) if bad parameter.
3172  */
3173 int rte_eth_dev_rss_hash_update(uint16_t port_id,
3174                                 struct rte_eth_rss_conf *rss_conf);
3175
3176  /**
3177  * Retrieve current configuration of Receive Side Scaling hash computation
3178  * of Ethernet device.
3179  *
3180  * @param port_id
3181  *   The port identifier of the Ethernet device.
3182  * @param rss_conf
3183  *   Where to store the current RSS hash configuration of the Ethernet device.
3184  * @return
3185  *   - (0) if successful.
3186  *   - (-ENODEV) if port identifier is invalid.
3187  *   - (-EIO) if device is removed.
3188  *   - (-ENOTSUP) if hardware doesn't support RSS.
3189  */
3190 int
3191 rte_eth_dev_rss_hash_conf_get(uint16_t port_id,
3192                               struct rte_eth_rss_conf *rss_conf);
3193
3194  /**
3195  * Add UDP tunneling port for a specific type of tunnel.
3196  * The packets with this UDP port will be identified as this type of tunnel.
3197  * Before enabling any offloading function for a tunnel, users can call this API
3198  * to change or add more UDP port for the tunnel. So the offloading function
3199  * can take effect on the packets with the specific UDP port.
3200  *
3201  * @param port_id
3202  *   The port identifier of the Ethernet device.
3203  * @param tunnel_udp
3204  *   UDP tunneling configuration.
3205  *
3206  * @return
3207  *   - (0) if successful.
3208  *   - (-ENODEV) if port identifier is invalid.
3209  *   - (-EIO) if device is removed.
3210  *   - (-ENOTSUP) if hardware doesn't support tunnel type.
3211  */
3212 int
3213 rte_eth_dev_udp_tunnel_port_add(uint16_t port_id,
3214                                 struct rte_eth_udp_tunnel *tunnel_udp);
3215
3216  /**
3217  * Delete UDP tunneling port a specific type of tunnel.
3218  * The packets with this UDP port will not be identified as this type of tunnel
3219  * any more.
3220  * Before enabling any offloading function for a tunnel, users can call this API
3221  * to delete a UDP port for the tunnel. So the offloading function will not take
3222  * effect on the packets with the specific UDP port.
3223  *
3224  * @param port_id
3225  *   The port identifier of the Ethernet device.
3226  * @param tunnel_udp
3227  *   UDP tunneling configuration.
3228  *
3229  * @return
3230  *   - (0) if successful.
3231  *   - (-ENODEV) if port identifier is invalid.
3232  *   - (-EIO) if device is removed.
3233  *   - (-ENOTSUP) if hardware doesn't support tunnel type.
3234  */
3235 int
3236 rte_eth_dev_udp_tunnel_port_delete(uint16_t port_id,
3237                                    struct rte_eth_udp_tunnel *tunnel_udp);
3238
3239 /**
3240  * Check whether the filter type is supported on an Ethernet device.
3241  * All the supported filter types are defined in 'rte_eth_ctrl.h'.
3242  *
3243  * @param port_id
3244  *   The port identifier of the Ethernet device.
3245  * @param filter_type
3246  *   Filter type.
3247  * @return
3248  *   - (0) if successful.
3249  *   - (-ENOTSUP) if hardware doesn't support this filter type.
3250  *   - (-ENODEV) if *port_id* invalid.
3251  *   - (-EIO) if device is removed.
3252  */
3253 int rte_eth_dev_filter_supported(uint16_t port_id,
3254                 enum rte_filter_type filter_type);
3255
3256 /**
3257  * Take operations to assigned filter type on an Ethernet device.
3258  * All the supported operations and filter types are defined in 'rte_eth_ctrl.h'.
3259  *
3260  * @param port_id
3261  *   The port identifier of the Ethernet device.
3262  * @param filter_type
3263  *   Filter type.
3264  * @param filter_op
3265  *   Type of operation.
3266  * @param arg
3267  *   A pointer to arguments defined specifically for the operation.
3268  * @return
3269  *   - (0) if successful.
3270  *   - (-ENOTSUP) if hardware doesn't support.
3271  *   - (-ENODEV) if *port_id* invalid.
3272  *   - (-EIO) if device is removed.
3273  *   - others depends on the specific operations implementation.
3274  */
3275 int rte_eth_dev_filter_ctrl(uint16_t port_id, enum rte_filter_type filter_type,
3276                         enum rte_filter_op filter_op, void *arg);
3277
3278 /**
3279  * Get DCB information on an Ethernet device.
3280  *
3281  * @param port_id
3282  *   The port identifier of the Ethernet device.
3283  * @param dcb_info
3284  *   dcb information.
3285  * @return
3286  *   - (0) if successful.
3287  *   - (-ENODEV) if port identifier is invalid.
3288  *   - (-EIO) if device is removed.
3289  *   - (-ENOTSUP) if hardware doesn't support.
3290  */
3291 int rte_eth_dev_get_dcb_info(uint16_t port_id,
3292                              struct rte_eth_dcb_info *dcb_info);
3293
3294 struct rte_eth_rxtx_callback;
3295
3296 /**
3297  * Add a callback to be called on packet RX on a given port and queue.
3298  *
3299  * This API configures a function to be called for each burst of
3300  * packets received on a given NIC port queue. The return value is a pointer
3301  * that can be used to later remove the callback using
3302  * rte_eth_remove_rx_callback().
3303  *
3304  * Multiple functions are called in the order that they are added.
3305  *
3306  * @param port_id
3307  *   The port identifier of the Ethernet device.
3308  * @param queue_id
3309  *   The queue on the Ethernet device on which the callback is to be added.
3310  * @param fn
3311  *   The callback function
3312  * @param user_param
3313  *   A generic pointer parameter which will be passed to each invocation of the
3314  *   callback function on this port and queue.
3315  *
3316  * @return
3317  *   NULL on error.
3318  *   On success, a pointer value which can later be used to remove the callback.
3319  */
3320 const struct rte_eth_rxtx_callback *
3321 rte_eth_add_rx_callback(uint16_t port_id, uint16_t queue_id,
3322                 rte_rx_callback_fn fn, void *user_param);
3323
3324 /**
3325  * Add a callback that must be called first on packet RX on a given port
3326  * and queue.
3327  *
3328  * This API configures a first function to be called for each burst of
3329  * packets received on a given NIC port queue. The return value is a pointer
3330  * that can be used to later remove the callback using
3331  * rte_eth_remove_rx_callback().
3332  *
3333  * Multiple functions are called in the order that they are added.
3334  *
3335  * @param port_id
3336  *   The port identifier of the Ethernet device.
3337  * @param queue_id
3338  *   The queue on the Ethernet device on which the callback is to be added.
3339  * @param fn
3340  *   The callback function
3341  * @param user_param
3342  *   A generic pointer parameter which will be passed to each invocation of the
3343  *   callback function on this port and queue.
3344  *
3345  * @return
3346  *   NULL on error.
3347  *   On success, a pointer value which can later be used to remove the callback.
3348  */
3349 const struct rte_eth_rxtx_callback *
3350 rte_eth_add_first_rx_callback(uint16_t port_id, uint16_t queue_id,
3351                 rte_rx_callback_fn fn, void *user_param);
3352
3353 /**
3354  * Add a callback to be called on packet TX on a given port and queue.
3355  *
3356  * This API configures a function to be called for each burst of
3357  * packets sent on a given NIC port queue. The return value is a pointer
3358  * that can be used to later remove the callback using
3359  * rte_eth_remove_tx_callback().
3360  *
3361  * Multiple functions are called in the order that they are added.
3362  *
3363  * @param port_id
3364  *   The port identifier of the Ethernet device.
3365  * @param queue_id
3366  *   The queue on the Ethernet device on which the callback is to be added.
3367  * @param fn
3368  *   The callback function
3369  * @param user_param
3370  *   A generic pointer parameter which will be passed to each invocation of the
3371  *   callback function on this port and queue.
3372  *
3373  * @return
3374  *   NULL on error.
3375  *   On success, a pointer value which can later be used to remove the callback.
3376  */
3377 const struct rte_eth_rxtx_callback *
3378 rte_eth_add_tx_callback(uint16_t port_id, uint16_t queue_id,
3379                 rte_tx_callback_fn fn, void *user_param);
3380
3381 /**
3382  * Remove an RX packet callback from a given port and queue.
3383  *
3384  * This function is used to removed callbacks that were added to a NIC port
3385  * queue using rte_eth_add_rx_callback().
3386  *
3387  * Note: the callback is removed from the callback list but it isn't freed
3388  * since the it may still be in use. The memory for the callback can be
3389  * subsequently freed back by the application by calling rte_free():
3390  *
3391  * - Immediately - if the port is stopped, or the user knows that no
3392  *   callbacks are in flight e.g. if called from the thread doing RX/TX
3393  *   on that queue.
3394  *
3395  * - After a short delay - where the delay is sufficient to allow any
3396  *   in-flight callbacks to complete.
3397  *
3398  * @param port_id
3399  *   The port identifier of the Ethernet device.
3400  * @param queue_id
3401  *   The queue on the Ethernet device from which the callback is to be removed.
3402  * @param user_cb
3403  *   User supplied callback created via rte_eth_add_rx_callback().
3404  *
3405  * @return
3406  *   - 0: Success. Callback was removed.
3407  *   - -ENOTSUP: Callback support is not available.
3408  *   - -EINVAL:  The port_id or the queue_id is out of range, or the callback
3409  *               is NULL or not found for the port/queue.
3410  */
3411 int rte_eth_remove_rx_callback(uint16_t port_id, uint16_t queue_id,
3412                 const struct rte_eth_rxtx_callback *user_cb);
3413
3414 /**
3415  * Remove a TX packet callback from a given port and queue.
3416  *
3417  * This function is used to removed callbacks that were added to a NIC port
3418  * queue using rte_eth_add_tx_callback().
3419  *
3420  * Note: the callback is removed from the callback list but it isn't freed
3421  * since the it may still be in use. The memory for the callback can be
3422  * subsequently freed back by the application by calling rte_free():
3423  *
3424  * - Immediately - if the port is stopped, or the user knows that no
3425  *   callbacks are in flight e.g. if called from the thread doing RX/TX
3426  *   on that queue.
3427  *
3428  * - After a short delay - where the delay is sufficient to allow any
3429  *   in-flight callbacks to complete.
3430  *
3431  * @param port_id
3432  *   The port identifier of the Ethernet device.
3433  * @param queue_id
3434  *   The queue on the Ethernet device from which the callback is to be removed.
3435  * @param user_cb
3436  *   User supplied callback created via rte_eth_add_tx_callback().
3437  *
3438  * @return
3439  *   - 0: Success. Callback was removed.
3440  *   - -ENOTSUP: Callback support is not available.
3441  *   - -EINVAL:  The port_id or the queue_id is out of range, or the callback
3442  *               is NULL or not found for the port/queue.
3443  */
3444 int rte_eth_remove_tx_callback(uint16_t port_id, uint16_t queue_id,
3445                 const struct rte_eth_rxtx_callback *user_cb);
3446
3447 /**
3448  * Retrieve information about given port's RX queue.
3449  *
3450  * @param port_id
3451  *   The port identifier of the Ethernet device.
3452  * @param queue_id
3453  *   The RX queue on the Ethernet device for which information
3454  *   will be retrieved.
3455  * @param qinfo
3456  *   A pointer to a structure of type *rte_eth_rxq_info_info* to be filled with
3457  *   the information of the Ethernet device.
3458  *
3459  * @return
3460  *   - 0: Success
3461  *   - -ENOTSUP: routine is not supported by the device PMD.
3462  *   - -EINVAL:  The port_id or the queue_id is out of range.
3463  */
3464 int rte_eth_rx_queue_info_get(uint16_t port_id, uint16_t queue_id,
3465         struct rte_eth_rxq_info *qinfo);
3466
3467 /**
3468  * Retrieve information about given port's TX queue.
3469  *
3470  * @param port_id
3471  *   The port identifier of the Ethernet device.
3472  * @param queue_id
3473  *   The TX queue on the Ethernet device for which information
3474  *   will be retrieved.
3475  * @param qinfo
3476  *   A pointer to a structure of type *rte_eth_txq_info_info* to be filled with
3477  *   the information of the Ethernet device.
3478  *
3479  * @return
3480  *   - 0: Success
3481  *   - -ENOTSUP: routine is not supported by the device PMD.
3482  *   - -EINVAL:  The port_id or the queue_id is out of range.
3483  */
3484 int rte_eth_tx_queue_info_get(uint16_t port_id, uint16_t queue_id,
3485         struct rte_eth_txq_info *qinfo);
3486
3487 /**
3488  * Retrieve device registers and register attributes (number of registers and
3489  * register size)
3490  *
3491  * @param port_id
3492  *   The port identifier of the Ethernet device.
3493  * @param info
3494  *   Pointer to rte_dev_reg_info structure to fill in. If info->data is
3495  *   NULL the function fills in the width and length fields. If non-NULL
3496  *   the registers are put into the buffer pointed at by the data field.
3497  * @return
3498  *   - (0) if successful.
3499  *   - (-ENOTSUP) if hardware doesn't support.
3500  *   - (-ENODEV) if *port_id* invalid.
3501  *   - (-EIO) if device is removed.
3502  *   - others depends on the specific operations implementation.
3503  */
3504 int rte_eth_dev_get_reg_info(uint16_t port_id, struct rte_dev_reg_info *info);
3505
3506 /**
3507  * Retrieve size of device EEPROM
3508  *
3509  * @param port_id
3510  *   The port identifier of the Ethernet device.
3511  * @return
3512  *   - (>=0) EEPROM size if successful.
3513  *   - (-ENOTSUP) if hardware doesn't support.
3514  *   - (-ENODEV) if *port_id* invalid.
3515  *   - (-EIO) if device is removed.
3516  *   - others depends on the specific operations implementation.
3517  */
3518 int rte_eth_dev_get_eeprom_length(uint16_t port_id);
3519
3520 /**
3521  * Retrieve EEPROM and EEPROM attribute
3522  *
3523  * @param port_id
3524  *   The port identifier of the Ethernet device.
3525  * @param info
3526  *   The template includes buffer for return EEPROM data and
3527  *   EEPROM attributes to be filled.
3528  * @return
3529  *   - (0) if successful.
3530  *   - (-ENOTSUP) if hardware doesn't support.
3531  *   - (-ENODEV) if *port_id* invalid.
3532  *   - (-EIO) if device is removed.
3533  *   - others depends on the specific operations implementation.
3534  */
3535 int rte_eth_dev_get_eeprom(uint16_t port_id, struct rte_dev_eeprom_info *info);
3536
3537 /**
3538  * Program EEPROM with provided data
3539  *
3540  * @param port_id
3541  *   The port identifier of the Ethernet device.
3542  * @param info
3543  *   The template includes EEPROM data for programming and
3544  *   EEPROM attributes to be filled
3545  * @return
3546  *   - (0) if successful.
3547  *   - (-ENOTSUP) if hardware doesn't support.
3548  *   - (-ENODEV) if *port_id* invalid.
3549  *   - (-EIO) if device is removed.
3550  *   - others depends on the specific operations implementation.
3551  */
3552 int rte_eth_dev_set_eeprom(uint16_t port_id, struct rte_dev_eeprom_info *info);
3553
3554 /**
3555  * @warning
3556  * @b EXPERIMENTAL: this API may change without prior notice.
3557  *
3558  * Retrieve the type and size of plugin module EEPROM
3559  *
3560  * @param port_id
3561  *   The port identifier of the Ethernet device.
3562  * @param modinfo
3563  *   The type and size of plugin module EEPROM.
3564  * @return
3565  *   - (0) if successful.
3566  *   - (-ENOTSUP) if hardware doesn't support.
3567  *   - (-ENODEV) if *port_id* invalid.
3568  *   - (-EIO) if device is removed.
3569  *   - others depends on the specific operations implementation.
3570  */
3571 int __rte_experimental
3572 rte_eth_dev_get_module_info(uint16_t port_id,
3573                             struct rte_eth_dev_module_info *modinfo);
3574
3575 /**
3576  * @warning
3577  * @b EXPERIMENTAL: this API may change without prior notice.
3578  *
3579  * Retrieve the data of plugin module EEPROM
3580  *
3581  * @param port_id
3582  *   The port identifier of the Ethernet device.
3583  * @param info
3584  *   The template includes the plugin module EEPROM attributes, and the
3585  *   buffer for return plugin module EEPROM data.
3586  * @return
3587  *   - (0) if successful.
3588  *   - (-ENOTSUP) if hardware doesn't support.
3589  *   - (-ENODEV) if *port_id* invalid.
3590  *   - (-EIO) if device is removed.
3591  *   - others depends on the specific operations implementation.
3592  */
3593 int __rte_experimental
3594 rte_eth_dev_get_module_eeprom(uint16_t port_id,
3595                               struct rte_dev_eeprom_info *info);
3596
3597 /**
3598  * Set the list of multicast addresses to filter on an Ethernet device.
3599  *
3600  * @param port_id
3601  *   The port identifier of the Ethernet device.
3602  * @param mc_addr_set
3603  *   The array of multicast addresses to set. Equal to NULL when the function
3604  *   is invoked to flush the set of filtered addresses.
3605  * @param nb_mc_addr
3606  *   The number of multicast addresses in the *mc_addr_set* array. Equal to 0
3607  *   when the function is invoked to flush the set of filtered addresses.
3608  * @return
3609  *   - (0) if successful.
3610  *   - (-ENODEV) if *port_id* invalid.
3611  *   - (-EIO) if device is removed.
3612  *   - (-ENOTSUP) if PMD of *port_id* doesn't support multicast filtering.
3613  *   - (-ENOSPC) if *port_id* has not enough multicast filtering resources.
3614  */
3615 int rte_eth_dev_set_mc_addr_list(uint16_t port_id,
3616                                  struct ether_addr *mc_addr_set,
3617                                  uint32_t nb_mc_addr);
3618
3619 /**
3620  * Enable IEEE1588/802.1AS timestamping for an Ethernet device.
3621  *
3622  * @param port_id
3623  *   The port identifier of the Ethernet device.
3624  *
3625  * @return
3626  *   - 0: Success.
3627  *   - -ENODEV: The port ID is invalid.
3628  *   - -EIO: if device is removed.
3629  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3630  */
3631 int rte_eth_timesync_enable(uint16_t port_id);
3632
3633 /**
3634  * Disable IEEE1588/802.1AS timestamping for an Ethernet device.
3635  *
3636  * @param port_id
3637  *   The port identifier of the Ethernet device.
3638  *
3639  * @return
3640  *   - 0: Success.
3641  *   - -ENODEV: The port ID is invalid.
3642  *   - -EIO: if device is removed.
3643  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3644  */
3645 int rte_eth_timesync_disable(uint16_t port_id);
3646
3647 /**
3648  * Read an IEEE1588/802.1AS RX timestamp from an Ethernet device.
3649  *
3650  * @param port_id
3651  *   The port identifier of the Ethernet device.
3652  * @param timestamp
3653  *   Pointer to the timestamp struct.
3654  * @param flags
3655  *   Device specific flags. Used to pass the RX timesync register index to
3656  *   i40e. Unused in igb/ixgbe, pass 0 instead.
3657  *
3658  * @return
3659  *   - 0: Success.
3660  *   - -EINVAL: No timestamp is available.
3661  *   - -ENODEV: The port ID is invalid.
3662  *   - -EIO: if device is removed.
3663  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3664  */
3665 int rte_eth_timesync_read_rx_timestamp(uint16_t port_id,
3666                 struct timespec *timestamp, uint32_t flags);
3667
3668 /**
3669  * Read an IEEE1588/802.1AS TX timestamp from an Ethernet device.
3670  *
3671  * @param port_id
3672  *   The port identifier of the Ethernet device.
3673  * @param timestamp
3674  *   Pointer to the timestamp struct.
3675  *
3676  * @return
3677  *   - 0: Success.
3678  *   - -EINVAL: No timestamp is available.
3679  *   - -ENODEV: The port ID is invalid.
3680  *   - -EIO: if device is removed.
3681  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3682  */
3683 int rte_eth_timesync_read_tx_timestamp(uint16_t port_id,
3684                 struct timespec *timestamp);
3685
3686 /**
3687  * Adjust the timesync clock on an Ethernet device.
3688  *
3689  * This is usually used in conjunction with other Ethdev timesync functions to
3690  * synchronize the device time using the IEEE1588/802.1AS protocol.
3691  *
3692  * @param port_id
3693  *   The port identifier of the Ethernet device.
3694  * @param delta
3695  *   The adjustment in nanoseconds.
3696  *
3697  * @return
3698  *   - 0: Success.
3699  *   - -ENODEV: The port ID is invalid.
3700  *   - -EIO: if device is removed.
3701  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3702  */
3703 int rte_eth_timesync_adjust_time(uint16_t port_id, int64_t delta);
3704
3705 /**
3706  * Read the time from the timesync clock on an Ethernet device.
3707  *
3708  * This is usually used in conjunction with other Ethdev timesync functions to
3709  * synchronize the device time using the IEEE1588/802.1AS protocol.
3710  *
3711  * @param port_id
3712  *   The port identifier of the Ethernet device.
3713  * @param time
3714  *   Pointer to the timespec struct that holds the time.
3715  *
3716  * @return
3717  *   - 0: Success.
3718  */
3719 int rte_eth_timesync_read_time(uint16_t port_id, struct timespec *time);
3720
3721 /**
3722  * Set the time of the timesync clock on an Ethernet device.
3723  *
3724  * This is usually used in conjunction with other Ethdev timesync functions to
3725  * synchronize the device time using the IEEE1588/802.1AS protocol.
3726  *
3727  * @param port_id
3728  *   The port identifier of the Ethernet device.
3729  * @param time
3730  *   Pointer to the timespec struct that holds the time.
3731  *
3732  * @return
3733  *   - 0: Success.
3734  *   - -EINVAL: No timestamp is available.
3735  *   - -ENODEV: The port ID is invalid.
3736  *   - -EIO: if device is removed.
3737  *   - -ENOTSUP: The function is not supported by the Ethernet driver.
3738  */
3739 int rte_eth_timesync_write_time(uint16_t port_id, const struct timespec *time);
3740
3741 /**
3742  * Config l2 tunnel ether type of an Ethernet device for filtering specific
3743  * tunnel packets by ether type.
3744  *
3745  * @param port_id
3746  *   The port identifier of the Ethernet device.
3747  * @param l2_tunnel
3748  *   l2 tunnel configuration.
3749  *
3750  * @return
3751  *   - (0) if successful.
3752  *   - (-ENODEV) if port identifier is invalid.
3753  *   - (-EIO) if device is removed.
3754  *   - (-ENOTSUP) if hardware doesn't support tunnel type.
3755  */
3756 int
3757 rte_eth_dev_l2_tunnel_eth_type_conf(uint16_t port_id,
3758                                     struct rte_eth_l2_tunnel_conf *l2_tunnel);
3759
3760 /**
3761  * Enable/disable l2 tunnel offload functions. Include,
3762  * 1, The ability of parsing a type of l2 tunnel of an Ethernet device.
3763  *    Filtering, forwarding and offloading this type of tunnel packets depend on
3764  *    this ability.
3765  * 2, Stripping the l2 tunnel tag.
3766  * 3, Insertion of the l2 tunnel tag.
3767  * 4, Forwarding the packets based on the l2 tunnel tag.
3768  *
3769  * @param port_id
3770  *   The port identifier of the Ethernet device.
3771  * @param l2_tunnel
3772  *   l2 tunnel parameters.
3773  * @param mask
3774  *   Indicate the offload function.
3775  * @param en
3776  *   Enable or disable this function.
3777  *
3778  * @return
3779  *   - (0) if successful.
3780  *   - (-ENODEV) if port identifier is invalid.
3781  *   - (-EIO) if device is removed.
3782  *   - (-ENOTSUP) if hardware doesn't support tunnel type.
3783  */
3784 int
3785 rte_eth_dev_l2_tunnel_offload_set(uint16_t port_id,
3786                                   struct rte_eth_l2_tunnel_conf *l2_tunnel,
3787                                   uint32_t mask,
3788                                   uint8_t en);
3789
3790 /**
3791 * Get the port id from device name. The device name should be specified
3792 * as below:
3793 * - PCIe address (Domain:Bus:Device.Function), for example- 0000:2:00.0
3794 * - SoC device name, for example- fsl-gmac0
3795 * - vdev dpdk name, for example- net_[pcap0|null0|tap0]
3796 *
3797 * @param name
3798 *  pci address or name of the device
3799 * @param port_id
3800 *   pointer to port identifier of the device
3801 * @return
3802 *   - (0) if successful and port_id is filled.
3803 *   - (-ENODEV or -EINVAL) on failure.
3804 */
3805 int
3806 rte_eth_dev_get_port_by_name(const char *name, uint16_t *port_id);
3807
3808 /**
3809 * Get the device name from port id. The device name is specified as below:
3810 * - PCIe address (Domain:Bus:Device.Function), for example- 0000:02:00.0
3811 * - SoC device name, for example- fsl-gmac0
3812 * - vdev dpdk name, for example- net_[pcap0|null0|tun0|tap0]
3813 *
3814 * @param port_id
3815 *   Port identifier of the device.
3816 * @param name
3817 *   Buffer of size RTE_ETH_NAME_MAX_LEN to store the name.
3818 * @return
3819 *   - (0) if successful.
3820 *   - (-EINVAL) on failure.
3821 */
3822 int
3823 rte_eth_dev_get_name_by_port(uint16_t port_id, char *name);
3824
3825 /**
3826  * Check that numbers of Rx and Tx descriptors satisfy descriptors limits from
3827  * the ethernet device information, otherwise adjust them to boundaries.
3828  *
3829  * @param port_id
3830  *   The port identifier of the Ethernet device.
3831  * @param nb_rx_desc
3832  *   A pointer to a uint16_t where the number of receive
3833  *   descriptors stored.
3834  * @param nb_tx_desc
3835  *   A pointer to a uint16_t where the number of transmit
3836  *   descriptors stored.
3837  * @return
3838  *   - (0) if successful.
3839  *   - (-ENOTSUP, -ENODEV or -EINVAL) on failure.
3840  */
3841 int rte_eth_dev_adjust_nb_rx_tx_desc(uint16_t port_id,
3842                                      uint16_t *nb_rx_desc,
3843                                      uint16_t *nb_tx_desc);
3844
3845 /**
3846  * Test if a port supports specific mempool ops.
3847  *
3848  * @param port_id
3849  *   Port identifier of the Ethernet device.
3850  * @param [in] pool
3851  *   The name of the pool operations to test.
3852  * @return
3853  *   - 0: best mempool ops choice for this port.
3854  *   - 1: mempool ops are supported for this port.
3855  *   - -ENOTSUP: mempool ops not supported for this port.
3856  *   - -ENODEV: Invalid port Identifier.
3857  *   - -EINVAL: Pool param is null.
3858  */
3859 int
3860 rte_eth_dev_pool_ops_supported(uint16_t port_id, const char *pool);
3861
3862 /**
3863  * Get the security context for the Ethernet device.
3864  *
3865  * @param port_id
3866  *   Port identifier of the Ethernet device
3867  * @return
3868  *   - NULL on error.
3869  *   - pointer to security context on success.
3870  */
3871 void *
3872 rte_eth_dev_get_sec_ctx(uint16_t port_id);
3873
3874
3875 #include <rte_ethdev_core.h>
3876
3877 /**
3878  *
3879  * Retrieve a burst of input packets from a receive queue of an Ethernet
3880  * device. The retrieved packets are stored in *rte_mbuf* structures whose
3881  * pointers are supplied in the *rx_pkts* array.
3882  *
3883  * The rte_eth_rx_burst() function loops, parsing the RX ring of the
3884  * receive queue, up to *nb_pkts* packets, and for each completed RX
3885  * descriptor in the ring, it performs the following operations:
3886  *
3887  * - Initialize the *rte_mbuf* data structure associated with the
3888  *   RX descriptor according to the information provided by the NIC into
3889  *   that RX descriptor.
3890  *
3891  * - Store the *rte_mbuf* data structure into the next entry of the
3892  *   *rx_pkts* array.
3893  *
3894  * - Replenish the RX descriptor with a new *rte_mbuf* buffer
3895  *   allocated from the memory pool associated with the receive queue at
3896  *   initialization time.
3897  *
3898  * When retrieving an input packet that was scattered by the controller
3899  * into multiple receive descriptors, the rte_eth_rx_burst() function
3900  * appends the associated *rte_mbuf* buffers to the first buffer of the
3901  * packet.
3902  *
3903  * The rte_eth_rx_burst() function returns the number of packets
3904  * actually retrieved, which is the number of *rte_mbuf* data structures
3905  * effectively supplied into the *rx_pkts* array.
3906  * A return value equal to *nb_pkts* indicates that the RX queue contained
3907  * at least *rx_pkts* packets, and this is likely to signify that other
3908  * received packets remain in the input queue. Applications implementing
3909  * a "retrieve as much received packets as possible" policy can check this
3910  * specific case and keep invoking the rte_eth_rx_burst() function until
3911  * a value less than *nb_pkts* is returned.
3912  *
3913  * This receive method has the following advantages:
3914  *
3915  * - It allows a run-to-completion network stack engine to retrieve and
3916  *   to immediately process received packets in a fast burst-oriented
3917  *   approach, avoiding the overhead of unnecessary intermediate packet
3918  *   queue/dequeue operations.
3919  *
3920  * - Conversely, it also allows an asynchronous-oriented processing
3921  *   method to retrieve bursts of received packets and to immediately
3922  *   queue them for further parallel processing by another logical core,
3923  *   for instance. However, instead of having received packets being
3924  *   individually queued by the driver, this approach allows the caller
3925  *   of the rte_eth_rx_burst() function to queue a burst of retrieved
3926  *   packets at a time and therefore dramatically reduce the cost of
3927  *   enqueue/dequeue operations per packet.
3928  *
3929  * - It allows the rte_eth_rx_burst() function of the driver to take
3930  *   advantage of burst-oriented hardware features (CPU cache,
3931  *   prefetch instructions, and so on) to minimize the number of CPU
3932  *   cycles per packet.
3933  *
3934  * To summarize, the proposed receive API enables many
3935  * burst-oriented optimizations in both synchronous and asynchronous
3936  * packet processing environments with no overhead in both cases.
3937  *
3938  * The rte_eth_rx_burst() function does not provide any error
3939  * notification to avoid the corresponding overhead. As a hint, the
3940  * upper-level application might check the status of the device link once
3941  * being systematically returned a 0 value for a given number of tries.
3942  *
3943  * @param port_id
3944  *   The port identifier of the Ethernet device.
3945  * @param queue_id
3946  *   The index of the receive queue from which to retrieve input packets.
3947  *   The value must be in the range [0, nb_rx_queue - 1] previously supplied
3948  *   to rte_eth_dev_configure().
3949  * @param rx_pkts
3950  *   The address of an array of pointers to *rte_mbuf* structures that
3951  *   must be large enough to store *nb_pkts* pointers in it.
3952  * @param nb_pkts
3953  *   The maximum number of packets to retrieve.
3954  * @return
3955  *   The number of packets actually retrieved, which is the number
3956  *   of pointers to *rte_mbuf* structures effectively supplied to the
3957  *   *rx_pkts* array.
3958  */
3959 static inline uint16_t
3960 rte_eth_rx_burst(uint16_t port_id, uint16_t queue_id,
3961                  struct rte_mbuf **rx_pkts, const uint16_t nb_pkts)
3962 {
3963         struct rte_eth_dev *dev = &rte_eth_devices[port_id];
3964         uint16_t nb_rx;
3965
3966 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
3967         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, 0);
3968         RTE_FUNC_PTR_OR_ERR_RET(*dev->rx_pkt_burst, 0);
3969
3970         if (queue_id >= dev->data->nb_rx_queues) {
3971                 RTE_ETHDEV_LOG(ERR, "Invalid RX queue_id=%u\n", queue_id);
3972                 return 0;
3973         }
3974 #endif
3975         nb_rx = (*dev->rx_pkt_burst)(dev->data->rx_queues[queue_id],
3976                                      rx_pkts, nb_pkts);
3977
3978 #ifdef RTE_ETHDEV_RXTX_CALLBACKS
3979         if (unlikely(dev->post_rx_burst_cbs[queue_id] != NULL)) {
3980                 struct rte_eth_rxtx_callback *cb =
3981                                 dev->post_rx_burst_cbs[queue_id];
3982
3983                 do {
3984                         nb_rx = cb->fn.rx(port_id, queue_id, rx_pkts, nb_rx,
3985                                                 nb_pkts, cb->param);
3986                         cb = cb->next;
3987                 } while (cb != NULL);
3988         }
3989 #endif
3990
3991         return nb_rx;
3992 }
3993
3994 /**
3995  * Get the number of used descriptors of a rx queue
3996  *
3997  * @param port_id
3998  *  The port identifier of the Ethernet device.
3999  * @param queue_id
4000  *  The queue id on the specific port.
4001  * @return
4002  *  The number of used descriptors in the specific queue, or:
4003  *     (-EINVAL) if *port_id* or *queue_id* is invalid
4004  *     (-ENOTSUP) if the device does not support this function
4005  */
4006 static inline int
4007 rte_eth_rx_queue_count(uint16_t port_id, uint16_t queue_id)
4008 {
4009         struct rte_eth_dev *dev;
4010
4011         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, -EINVAL);
4012         dev = &rte_eth_devices[port_id];
4013         RTE_FUNC_PTR_OR_ERR_RET(*dev->dev_ops->rx_queue_count, -ENOTSUP);
4014         if (queue_id >= dev->data->nb_rx_queues)
4015                 return -EINVAL;
4016
4017         return (int)(*dev->dev_ops->rx_queue_count)(dev, queue_id);
4018 }
4019
4020 /**
4021  * Check if the DD bit of the specific RX descriptor in the queue has been set
4022  *
4023  * @param port_id
4024  *  The port identifier of the Ethernet device.
4025  * @param queue_id
4026  *  The queue id on the specific port.
4027  * @param offset
4028  *  The offset of the descriptor ID from tail.
4029  * @return
4030  *  - (1) if the specific DD bit is set.
4031  *  - (0) if the specific DD bit is not set.
4032  *  - (-ENODEV) if *port_id* invalid.
4033  *  - (-ENOTSUP) if the device does not support this function
4034  */
4035 static inline int
4036 rte_eth_rx_descriptor_done(uint16_t port_id, uint16_t queue_id, uint16_t offset)
4037 {
4038         struct rte_eth_dev *dev = &rte_eth_devices[port_id];
4039         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, -ENODEV);
4040         RTE_FUNC_PTR_OR_ERR_RET(*dev->dev_ops->rx_descriptor_done, -ENOTSUP);
4041         return (*dev->dev_ops->rx_descriptor_done)( \
4042                 dev->data->rx_queues[queue_id], offset);
4043 }
4044
4045 #define RTE_ETH_RX_DESC_AVAIL    0 /**< Desc available for hw. */
4046 #define RTE_ETH_RX_DESC_DONE     1 /**< Desc done, filled by hw. */
4047 #define RTE_ETH_RX_DESC_UNAVAIL  2 /**< Desc used by driver or hw. */
4048
4049 /**
4050  * Check the status of a Rx descriptor in the queue
4051  *
4052  * It should be called in a similar context than the Rx function:
4053  * - on a dataplane core
4054  * - not concurrently on the same queue
4055  *
4056  * Since it's a dataplane function, no check is performed on port_id and
4057  * queue_id. The caller must therefore ensure that the port is enabled
4058  * and the queue is configured and running.
4059  *
4060  * Note: accessing to a random descriptor in the ring may trigger cache
4061  * misses and have a performance impact.
4062  *
4063  * @param port_id
4064  *  A valid port identifier of the Ethernet device which.
4065  * @param queue_id
4066  *  A valid Rx queue identifier on this port.
4067  * @param offset
4068  *  The offset of the descriptor starting from tail (0 is the next
4069  *  packet to be received by the driver).
4070  *
4071  * @return
4072  *  - (RTE_ETH_RX_DESC_AVAIL): Descriptor is available for the hardware to
4073  *    receive a packet.
4074  *  - (RTE_ETH_RX_DESC_DONE): Descriptor is done, it is filled by hw, but
4075  *    not yet processed by the driver (i.e. in the receive queue).
4076  *  - (RTE_ETH_RX_DESC_UNAVAIL): Descriptor is unavailable, either hold by
4077  *    the driver and not yet returned to hw, or reserved by the hw.
4078  *  - (-EINVAL) bad descriptor offset.
4079  *  - (-ENOTSUP) if the device does not support this function.
4080  *  - (-ENODEV) bad port or queue (only if compiled with debug).
4081  */
4082 static inline int
4083 rte_eth_rx_descriptor_status(uint16_t port_id, uint16_t queue_id,
4084         uint16_t offset)
4085 {
4086         struct rte_eth_dev *dev;
4087         void *rxq;
4088
4089 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4090         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, -ENODEV);
4091 #endif
4092         dev = &rte_eth_devices[port_id];
4093 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4094         if (queue_id >= dev->data->nb_rx_queues)
4095                 return -ENODEV;
4096 #endif
4097         RTE_FUNC_PTR_OR_ERR_RET(*dev->dev_ops->rx_descriptor_status, -ENOTSUP);
4098         rxq = dev->data->rx_queues[queue_id];
4099
4100         return (*dev->dev_ops->rx_descriptor_status)(rxq, offset);
4101 }
4102
4103 #define RTE_ETH_TX_DESC_FULL    0 /**< Desc filled for hw, waiting xmit. */
4104 #define RTE_ETH_TX_DESC_DONE    1 /**< Desc done, packet is transmitted. */
4105 #define RTE_ETH_TX_DESC_UNAVAIL 2 /**< Desc used by driver or hw. */
4106
4107 /**
4108  * Check the status of a Tx descriptor in the queue.
4109  *
4110  * It should be called in a similar context than the Tx function:
4111  * - on a dataplane core
4112  * - not concurrently on the same queue
4113  *
4114  * Since it's a dataplane function, no check is performed on port_id and
4115  * queue_id. The caller must therefore ensure that the port is enabled
4116  * and the queue is configured and running.
4117  *
4118  * Note: accessing to a random descriptor in the ring may trigger cache
4119  * misses and have a performance impact.
4120  *
4121  * @param port_id
4122  *  A valid port identifier of the Ethernet device which.
4123  * @param queue_id
4124  *  A valid Tx queue identifier on this port.
4125  * @param offset
4126  *  The offset of the descriptor starting from tail (0 is the place where
4127  *  the next packet will be send).
4128  *
4129  * @return
4130  *  - (RTE_ETH_TX_DESC_FULL) Descriptor is being processed by the hw, i.e.
4131  *    in the transmit queue.
4132  *  - (RTE_ETH_TX_DESC_DONE) Hardware is done with this descriptor, it can
4133  *    be reused by the driver.
4134  *  - (RTE_ETH_TX_DESC_UNAVAIL): Descriptor is unavailable, reserved by the
4135  *    driver or the hardware.
4136  *  - (-EINVAL) bad descriptor offset.
4137  *  - (-ENOTSUP) if the device does not support this function.
4138  *  - (-ENODEV) bad port or queue (only if compiled with debug).
4139  */
4140 static inline int rte_eth_tx_descriptor_status(uint16_t port_id,
4141         uint16_t queue_id, uint16_t offset)
4142 {
4143         struct rte_eth_dev *dev;
4144         void *txq;
4145
4146 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4147         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, -ENODEV);
4148 #endif
4149         dev = &rte_eth_devices[port_id];
4150 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4151         if (queue_id >= dev->data->nb_tx_queues)
4152                 return -ENODEV;
4153 #endif
4154         RTE_FUNC_PTR_OR_ERR_RET(*dev->dev_ops->tx_descriptor_status, -ENOTSUP);
4155         txq = dev->data->tx_queues[queue_id];
4156
4157         return (*dev->dev_ops->tx_descriptor_status)(txq, offset);
4158 }
4159
4160 /**
4161  * Send a burst of output packets on a transmit queue of an Ethernet device.
4162  *
4163  * The rte_eth_tx_burst() function is invoked to transmit output packets
4164  * on the output queue *queue_id* of the Ethernet device designated by its
4165  * *port_id*.
4166  * The *nb_pkts* parameter is the number of packets to send which are
4167  * supplied in the *tx_pkts* array of *rte_mbuf* structures, each of them
4168  * allocated from a pool created with rte_pktmbuf_pool_create().
4169  * The rte_eth_tx_burst() function loops, sending *nb_pkts* packets,
4170  * up to the number of transmit descriptors available in the TX ring of the
4171  * transmit queue.
4172  * For each packet to send, the rte_eth_tx_burst() function performs
4173  * the following operations:
4174  *
4175  * - Pick up the next available descriptor in the transmit ring.
4176  *
4177  * - Free the network buffer previously sent with that descriptor, if any.
4178  *
4179  * - Initialize the transmit descriptor with the information provided
4180  *   in the *rte_mbuf data structure.
4181  *
4182  * In the case of a segmented packet composed of a list of *rte_mbuf* buffers,
4183  * the rte_eth_tx_burst() function uses several transmit descriptors
4184  * of the ring.
4185  *
4186  * The rte_eth_tx_burst() function returns the number of packets it
4187  * actually sent. A return value equal to *nb_pkts* means that all packets
4188  * have been sent, and this is likely to signify that other output packets
4189  * could be immediately transmitted again. Applications that implement a
4190  * "send as many packets to transmit as possible" policy can check this
4191  * specific case and keep invoking the rte_eth_tx_burst() function until
4192  * a value less than *nb_pkts* is returned.
4193  *
4194  * It is the responsibility of the rte_eth_tx_burst() function to
4195  * transparently free the memory buffers of packets previously sent.
4196  * This feature is driven by the *tx_free_thresh* value supplied to the
4197  * rte_eth_dev_configure() function at device configuration time.
4198  * When the number of free TX descriptors drops below this threshold, the
4199  * rte_eth_tx_burst() function must [attempt to] free the *rte_mbuf*  buffers
4200  * of those packets whose transmission was effectively completed.
4201  *
4202  * If the PMD is DEV_TX_OFFLOAD_MT_LOCKFREE capable, multiple threads can
4203  * invoke this function concurrently on the same tx queue without SW lock.
4204  * @see rte_eth_dev_info_get, struct rte_eth_txconf::offloads
4205  *
4206  * @see rte_eth_tx_prepare to perform some prior checks or adjustments
4207  * for offloads.
4208  *
4209  * @param port_id
4210  *   The port identifier of the Ethernet device.
4211  * @param queue_id
4212  *   The index of the transmit queue through which output packets must be
4213  *   sent.
4214  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
4215  *   to rte_eth_dev_configure().
4216  * @param tx_pkts
4217  *   The address of an array of *nb_pkts* pointers to *rte_mbuf* structures
4218  *   which contain the output packets.
4219  * @param nb_pkts
4220  *   The maximum number of packets to transmit.
4221  * @return
4222  *   The number of output packets actually stored in transmit descriptors of
4223  *   the transmit ring. The return value can be less than the value of the
4224  *   *tx_pkts* parameter when the transmit ring is full or has been filled up.
4225  */
4226 static inline uint16_t
4227 rte_eth_tx_burst(uint16_t port_id, uint16_t queue_id,
4228                  struct rte_mbuf **tx_pkts, uint16_t nb_pkts)
4229 {
4230         struct rte_eth_dev *dev = &rte_eth_devices[port_id];
4231
4232 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4233         RTE_ETH_VALID_PORTID_OR_ERR_RET(port_id, 0);
4234         RTE_FUNC_PTR_OR_ERR_RET(*dev->tx_pkt_burst, 0);
4235
4236         if (queue_id >= dev->data->nb_tx_queues) {
4237                 RTE_ETHDEV_LOG(ERR, "Invalid TX queue_id=%u\n", queue_id);
4238                 return 0;
4239         }
4240 #endif
4241
4242 #ifdef RTE_ETHDEV_RXTX_CALLBACKS
4243         struct rte_eth_rxtx_callback *cb = dev->pre_tx_burst_cbs[queue_id];
4244
4245         if (unlikely(cb != NULL)) {
4246                 do {
4247                         nb_pkts = cb->fn.tx(port_id, queue_id, tx_pkts, nb_pkts,
4248                                         cb->param);
4249                         cb = cb->next;
4250                 } while (cb != NULL);
4251         }
4252 #endif
4253
4254         return (*dev->tx_pkt_burst)(dev->data->tx_queues[queue_id], tx_pkts, nb_pkts);
4255 }
4256
4257 /**
4258  * Process a burst of output packets on a transmit queue of an Ethernet device.
4259  *
4260  * The rte_eth_tx_prepare() function is invoked to prepare output packets to be
4261  * transmitted on the output queue *queue_id* of the Ethernet device designated
4262  * by its *port_id*.
4263  * The *nb_pkts* parameter is the number of packets to be prepared which are
4264  * supplied in the *tx_pkts* array of *rte_mbuf* structures, each of them
4265  * allocated from a pool created with rte_pktmbuf_pool_create().
4266  * For each packet to send, the rte_eth_tx_prepare() function performs
4267  * the following operations:
4268  *
4269  * - Check if packet meets devices requirements for tx offloads.
4270  *
4271  * - Check limitations about number of segments.
4272  *
4273  * - Check additional requirements when debug is enabled.
4274  *
4275  * - Update and/or reset required checksums when tx offload is set for packet.
4276  *
4277  * Since this function can modify packet data, provided mbufs must be safely
4278  * writable (e.g. modified data cannot be in shared segment).
4279  *
4280  * The rte_eth_tx_prepare() function returns the number of packets ready to be
4281  * sent. A return value equal to *nb_pkts* means that all packets are valid and
4282  * ready to be sent, otherwise stops processing on the first invalid packet and
4283  * leaves the rest packets untouched.
4284  *
4285  * When this functionality is not implemented in the driver, all packets are
4286  * are returned untouched.
4287  *
4288  * @param port_id
4289  *   The port identifier of the Ethernet device.
4290  *   The value must be a valid port id.
4291  * @param queue_id
4292  *   The index of the transmit queue through which output packets must be
4293  *   sent.
4294  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
4295  *   to rte_eth_dev_configure().
4296  * @param tx_pkts
4297  *   The address of an array of *nb_pkts* pointers to *rte_mbuf* structures
4298  *   which contain the output packets.
4299  * @param nb_pkts
4300  *   The maximum number of packets to process.
4301  * @return
4302  *   The number of packets correct and ready to be sent. The return value can be
4303  *   less than the value of the *tx_pkts* parameter when some packet doesn't
4304  *   meet devices requirements with rte_errno set appropriately:
4305  *   - -EINVAL: offload flags are not correctly set
4306  *   - -ENOTSUP: the offload feature is not supported by the hardware
4307  *
4308  */
4309
4310 #ifndef RTE_ETHDEV_TX_PREPARE_NOOP
4311
4312 static inline uint16_t
4313 rte_eth_tx_prepare(uint16_t port_id, uint16_t queue_id,
4314                 struct rte_mbuf **tx_pkts, uint16_t nb_pkts)
4315 {
4316         struct rte_eth_dev *dev;
4317
4318 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4319         if (!rte_eth_dev_is_valid_port(port_id)) {
4320                 RTE_ETHDEV_LOG(ERR, "Invalid TX port_id=%u\n", port_id);
4321                 rte_errno = EINVAL;
4322                 return 0;
4323         }
4324 #endif
4325
4326         dev = &rte_eth_devices[port_id];
4327
4328 #ifdef RTE_LIBRTE_ETHDEV_DEBUG
4329         if (queue_id >= dev->data->nb_tx_queues) {
4330                 RTE_ETHDEV_LOG(ERR, "Invalid TX queue_id=%u\n", queue_id);
4331                 rte_errno = EINVAL;
4332                 return 0;
4333         }
4334 #endif
4335
4336         if (!dev->tx_pkt_prepare)
4337                 return nb_pkts;
4338
4339         return (*dev->tx_pkt_prepare)(dev->data->tx_queues[queue_id],
4340                         tx_pkts, nb_pkts);
4341 }
4342
4343 #else
4344
4345 /*
4346  * Native NOOP operation for compilation targets which doesn't require any
4347  * preparations steps, and functional NOOP may introduce unnecessary performance
4348  * drop.
4349  *
4350  * Generally this is not a good idea to turn it on globally and didn't should
4351  * be used if behavior of tx_preparation can change.
4352  */
4353
4354 static inline uint16_t
4355 rte_eth_tx_prepare(__rte_unused uint16_t port_id,
4356                 __rte_unused uint16_t queue_id,
4357                 __rte_unused struct rte_mbuf **tx_pkts, uint16_t nb_pkts)
4358 {
4359         return nb_pkts;
4360 }
4361
4362 #endif
4363
4364 /**
4365  * Send any packets queued up for transmission on a port and HW queue
4366  *
4367  * This causes an explicit flush of packets previously buffered via the
4368  * rte_eth_tx_buffer() function. It returns the number of packets successfully
4369  * sent to the NIC, and calls the error callback for any unsent packets. Unless
4370  * explicitly set up otherwise, the default callback simply frees the unsent
4371  * packets back to the owning mempool.
4372  *
4373  * @param port_id
4374  *   The port identifier of the Ethernet device.
4375  * @param queue_id
4376  *   The index of the transmit queue through which output packets must be
4377  *   sent.
4378  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
4379  *   to rte_eth_dev_configure().
4380  * @param buffer
4381  *   Buffer of packets to be transmit.
4382  * @return
4383  *   The number of packets successfully sent to the Ethernet device. The error
4384  *   callback is called for any packets which could not be sent.
4385  */
4386 static inline uint16_t
4387 rte_eth_tx_buffer_flush(uint16_t port_id, uint16_t queue_id,
4388                 struct rte_eth_dev_tx_buffer *buffer)
4389 {
4390         uint16_t sent;
4391         uint16_t to_send = buffer->length;
4392
4393         if (to_send == 0)
4394                 return 0;
4395
4396         sent = rte_eth_tx_burst(port_id, queue_id, buffer->pkts, to_send);
4397
4398         buffer->length = 0;
4399
4400         /* All packets sent, or to be dealt with by callback below */
4401         if (unlikely(sent != to_send))
4402                 buffer->error_callback(&buffer->pkts[sent],
4403                                        (uint16_t)(to_send - sent),
4404                                        buffer->error_userdata);
4405
4406         return sent;
4407 }
4408
4409 /**
4410  * Buffer a single packet for future transmission on a port and queue
4411  *
4412  * This function takes a single mbuf/packet and buffers it for later
4413  * transmission on the particular port and queue specified. Once the buffer is
4414  * full of packets, an attempt will be made to transmit all the buffered
4415  * packets. In case of error, where not all packets can be transmitted, a
4416  * callback is called with the unsent packets as a parameter. If no callback
4417  * is explicitly set up, the unsent packets are just freed back to the owning
4418  * mempool. The function returns the number of packets actually sent i.e.
4419  * 0 if no buffer flush occurred, otherwise the number of packets successfully
4420  * flushed
4421  *
4422  * @param port_id
4423  *   The port identifier of the Ethernet device.
4424  * @param queue_id
4425  *   The index of the transmit queue through which output packets must be
4426  *   sent.
4427  *   The value must be in the range [0, nb_tx_queue - 1] previously supplied
4428  *   to rte_eth_dev_configure().
4429  * @param buffer
4430  *   Buffer used to collect packets to be sent.
4431  * @param tx_pkt
4432  *   Pointer to the packet mbuf to be sent.
4433  * @return
4434  *   0 = packet has been buffered for later transmission
4435  *   N > 0 = packet has been buffered, and the buffer was subsequently flushed,
4436  *     causing N packets to be sent, and the error callback to be called for
4437  *     the rest.
4438  */
4439 static __rte_always_inline uint16_t
4440 rte_eth_tx_buffer(uint16_t port_id, uint16_t queue_id,
4441                 struct rte_eth_dev_tx_buffer *buffer, struct rte_mbuf *tx_pkt)
4442 {
4443         buffer->pkts[buffer->length++] = tx_pkt;
4444         if (buffer->length < buffer->size)
4445                 return 0;
4446
4447         return rte_eth_tx_buffer_flush(port_id, queue_id, buffer);
4448 }
4449
4450 #ifdef __cplusplus
4451 }
4452 #endif
4453
4454 #endif /* _RTE_ETHDEV_H_ */