net/tap: access primary process queues from secondary
[dpdk.git] / doc / guides / rel_notes / release_18_11.rst
1 ..  SPDX-License-Identifier: BSD-3-Clause
2     Copyright 2018 The DPDK contributors
3
4 DPDK Release 18.11
5 ==================
6
7 .. **Read this first.**
8
9    The text in the sections below explains how to update the release notes.
10
11    Use proper spelling, capitalization and punctuation in all sections.
12
13    Variable and config names should be quoted as fixed width text:
14    ``LIKE_THIS``.
15
16    Build the docs and view the output file to ensure the changes are correct::
17
18       make doc-guides-html
19
20       xdg-open build/doc/html/guides/rel_notes/release_18_11.html
21
22
23 New Features
24 ------------
25
26 .. This section should contain new features added in this release.
27    Sample format:
28
29    * **Add a title in the past tense with a full stop.**
30
31      Add a short 1-2 sentence description in the past tense.
32      The description should be enough to allow someone scanning
33      the release notes to understand the new feature.
34
35      If the feature adds a lot of sub-features you can use a bullet list
36      like this:
37
38      * Added feature foo to do something.
39      * Enhanced feature bar to do something else.
40
41      Refer to the previous release notes for examples.
42
43      Suggested order in release notes items:
44      * Core libs (EAL, mempool, ring, mbuf, buses)
45      * Device abstraction libs and PMDs
46        - ethdev (lib, PMDs)
47        - cryptodev (lib, PMDs)
48        - eventdev (lib, PMDs)
49        - etc
50      * Other libs
51      * Apps, Examples, Tools (if significative)
52
53      This section is a comment. Do not overwrite or remove it.
54      Also, make sure to start the actual text at the margin.
55      =========================================================
56
57 * **Added support for using externally allocated memory in DPDK.**
58
59   DPDK has gained support for creating new ``rte_malloc`` heaps referencing
60   memory that was created outside of DPDK's own page allocator, and using that
61   memory natively with any other DPDK library or data structure.
62
63 * **Added hot-unplug handle mechanism.**
64
65   ``rte_dev_hotplug_handle_enable`` and ``rte_dev_hotplug_handle_disable`` are
66   for enabling or disabling hotplug handle mechanism.
67
68 * **Support device multi-process hotplug.**
69
70   Hotplug and hot-unplug for devices will now be supported in multiprocessing
71   scenario. Any ethdev devices created in the primary process will be regarded
72   as shared and will be available for all DPDK processes. Synchronization
73   between processes will be done using DPDK IPC.
74
75 * **Added new Flow API actions to rewrite fields in packet headers.**
76
77   Added new Flow API actions to:
78
79   * Modify source and destination IP addresses in the outermost IPv4/IPv6
80     headers.
81   * Modify source and destination port numbers in the outermost TCP/UDP
82     headers.
83
84 * **Added new Flow API action to swap MAC addresses in Ethernet header.**
85
86   Added new Flow API action to swap the source and destination MAC
87   addresses in the outermost Ethernet header.
88
89 * **Add support to offload more flow match and actions for CXGBE PMD**
90
91   Flow API support has been enhanced for CXGBE Poll Mode Driver to offload:
92
93   * Match items: destination MAC address.
94   * Action items: push/pop/rewrite vlan header,
95     rewrite IP addresses in outermost IPv4/IPv6 header,
96     rewrite port numbers in outermost TCP/UDP header,
97     swap MAC addresses in outermost Ethernet header.
98
99 * **Added a devarg to use the latest supported vector path in i40e.**
100   A new devarg ``use-latest-supported-vec`` was introduced to allow users to
101   choose the latest vector path that the platform supported. For example, users
102   can use AVX2 vector path on BDW/HSW to get better performance.
103
104 * **Added support for SR-IOV in netvsc PMD.**
105
106   The ``netvsc`` poll mode driver now supports the Accelerated Networking
107   SR-IOV option in Hyper-V and Azure. This is an alternative to the previous
108   vdev_netvsc, tap, and failsafe drivers combination.
109
110 * **Added a new net driver for Marvell Armada 3k device.**
111
112   Added the new ``mvneta`` net driver for Marvell Armada 3k device. See the
113   :doc:`../nics/mvneta` NIC guide for more details on this new driver.
114
115 * **Added NXP ENETC PMD.**
116
117   Added the new enetc driver for NXP enetc platform. See the
118   "ENETC Poll Mode Driver" document for more details on this new driver.
119
120 * **Added Ethernet poll mode driver for Aquantia aQtion family of 10G devices.**
121
122   Added the new ``atlantic`` ethernet poll mode driver for Aquantia XGBE devices.
123   See the :doc:`../nics/atlantic` nic driver guide for more details on this
124   driver.
125
126 * **Updated Solarflare network PMD.**
127
128   Updated the sfc_efx driver including the following changes:
129
130   * Added support for Rx scatter in EF10 datapath implementation.
131   * Added support for Rx descriptor status API in EF10 datapath implementation.
132   * Added support for TSO in EF10 datapath implementation.
133   * Added support for Tx descriptor status API in EF10 (ef10 and ef10_simple)
134     datapaths implementation.
135
136 * **Updated failsafe driver.**
137
138   Updated the failsafe driver including the following changes:
139
140   * Support for Rx and Tx queues start and stop.
141   * Support for Rx and Tx queues deferred start.
142   * Support for runtime Rx and Tx queues setup.
143   * Support multicast MAC address set.
144
145 * **Added a devarg to use PCAP interface physical MAC address.**
146   A new devarg ``phy_mac`` was introduced to allow users to use physical
147   MAC address of the selected PCAP interface.
148
149 * **Added TAP Rx/Tx queues sharing with a secondary process.**
150
151   A secondary process can attach a TAP device created in the primary process,
152   probe the queues, and process Rx/Tx in a secondary process.
153
154 * **Added classification and metering support to SoftNIC PMD.**
155
156   Added support for flow classification (rte_flow API), and metering and
157   policing (rte_mtr API) to the SoftNIC PMD.
158
159 * **Added Crypto support to Softnic PMD.**
160
161   The Softnic is now capable of processing symmetric crypto workloads such
162   as cipher, cipher-authentication chaining, and aead encryption and
163   decryption. This is achieved by calling DPDK Cryptodev APIs.
164
165 * **Added cryptodev port to port library.**
166
167   Cryptodev port is a shim layer in the port library that interacts with DPDK
168   Cryptodev PMDs including burst enqueuing and dequeuing crypto operations.
169
170 * **Added symmetric cryptographic actions to the pipeline library.**
171
172   In the pipeline library an added symmetric crypto action parsing and action
173   handler are implemented. The action allows automatically preparing the crypto
174   operation with the rules specified such as algorithm, key, and IV, etc for
175   the cryptodev port to process.
176
177 * **Added support for GEN3 devices to Intel QAT driver .**
178
179   Added support for the third generation of Intel QuickAssist devices.
180
181 * **Updated the QAT PMD.**
182
183   The QAT PMD was updated with additional support for:
184
185   * AES-CMAC algorithm.
186
187 * **Updated the AESNI MB PMD.**
188
189   The AESNI MB PMD has been updated with additional support for AES-GCM
190   algorithm support.
191
192 * **Added NXP CAAM JR PMD.**
193
194   Added the new caam job ring driver for NXP platforms. See the
195   "NXP CAAM JOB RING (caam_jr)" document for more details on this new driver.
196
197 * **Added Event Ethernet Tx Adapter.**
198
199   Added event ethernet Tx adapter library that  provides configuration and
200   data path APIs for the ethernet transmit stage of an event driven packet
201   processing application. These APIs abstract the implementation of the
202   transmit stage and allow the application to use eventdev PMD support or
203   a common implementation.
204
205 * **Added Distributed Software Eventdev PMD.**
206
207   Added the new Distributed Software Event Device (DSW), which is a
208   pure-software eventdev driver distributing the work of scheduling
209   among all eventdev ports and the lcores using them. DSW, compared to
210   the SW eventdev PMD, sacrifices load balancing performance to
211   gain better event scheduling throughput and scalability.
212
213 * **Added extendable bucket feature to hash library (rte_hash).**
214
215   This new “extendable bucket” feature provides 100% insertion guarantee to
216   the capacity specified by the user by extending hash table with extra
217   buckets when needed to accommodate the unlikely event of intensive hash
218   collisions.  In addition, the internal hashing algorithm was changed to use
219   partial-key hashing to improve memory efficiency and lookup performance.
220
221 * **Added lock free reader/writer concurrency to hash library (rte_hash).**
222
223   Lock free reader/writer concurrency prevents the readers from getting
224   blocked due to a pre-empted writer thread. This allows the hash library
225   to be used in scenarios where the writer thread runs on control plane.
226
227 * **Added Traffic Pattern Aware Power Control Library**
228
229   Added an experimental library. This extend Power Library and provide
230   empty_poll APIs. This feature measure how many times empty_poll are
231   executed per core, use the number of empty polls as a hint for system
232   power management.
233
234   See the :doc:`../prog_guide/power_man` section of the DPDK Programmers
235   Guide document for more information.
236
237 * **Added JSON power policy interface for containers.**
238
239   Extended the Power Library and vm_power_manager sample app to allow power
240   policies to be submitted via a FIFO using JSON formatted strings. Previously
241   limited to Virtual Machines, this feature extends power policy functionality
242   to containers and host applications that need to have their cores frequency
243   controlled based on the rules contained in the policy.
244
245 * **Added ability to switch queue deferred start flag on testpmd app.**
246
247   Added a console command to testpmd app, giving ability to switch
248   ``rx_deferred_start`` or ``tx_deferred_start`` flag of the specified queue of
249   the specified port. The port must be stopped before the command call in order
250   to reconfigure queues.
251
252 * **Add a new sample for vDPA**
253
254   The vdpa sample application creates vhost-user sockets by using the
255   vDPA backend. vDPA stands for vhost Data Path Acceleration which utilizes
256   virtio ring compatible devices to serve virtio driver directly to enable
257   datapath acceleration. As vDPA driver can help to set up vhost datapath,
258   this application doesn't need to launch dedicated worker threads for vhost
259   enqueue/dequeue operations.
260
261
262 API Changes
263 -----------
264
265 .. This section should contain API changes. Sample format:
266
267    * Add a short 1-2 sentence description of the API change.
268      Use fixed width quotes for ``function_names`` or ``struct_names``.
269      Use the past tense.
270
271    This section is a comment. Do not overwrite or remove it.
272    Also, make sure to start the actual text at the margin.
273    =========================================================
274
275 * eal: ``rte_memseg_list`` structure now has an additional flag indicating
276   whether the memseg list is externally allocated. This will have implications
277   for any users of memseg-walk-related functions, as they will now have to skip
278   externally allocated segments in most cases if the intent is to only iterate
279   over internal DPDK memory.
280   ``socket_id`` parameter across the entire DPDK has gained additional meaning,
281   as some socket ID's will now be representing externally allocated memory. No
282   changes will be required for existing code as backwards compatibility will be
283   kept, and those who do not use this feature will not see these extra socket
284   ID's. Any new API's must not check socket ID parameters themselves, and must
285   instead leave it to the memory subsystem to decide whether socket ID is a
286   valid one.
287
288 * eal: The following devargs functions, which were deprecated in 18.05,
289   were removed in 18.11:
290   ``rte_eal_parse_devargs_str()``, ``rte_eal_devargs_add()``,
291   ``rte_eal_devargs_type_count()``, and ``rte_eal_devargs_dump()``.
292
293 * eal: The parameters of the function ``rte_devargs_remove()`` have changed
294   from bus and device names to ``struct rte_devargs``.
295
296 * eal: The scope of ``rte_eal_hotplug_add()``/``rte_dev_probe()``
297   and ``rte_eal_hotplug_remove()``/``rte_dev_remove()`` is extended.
298   In multi-process model, they will guarantee that the device is
299   attached or detached on all processes.
300
301 * mbuf: The ``__rte_mbuf_raw_free()`` and ``__rte_pktmbuf_prefree_seg()``
302   functions were deprecated since 17.05 and are replaced by
303   ``rte_mbuf_raw_free()`` and ``rte_pktmbuf_prefree_seg()``.
304
305 * A new device flag, RTE_ETH_DEV_NOLIVE_MAC_ADDR, changes the order of
306   actions inside rte_eth_dev_start regarding MAC set. Some NICs do not
307   support MAC changes once the port has started and with this new device
308   flag the MAC can be properly configured in any case. This is particularly
309   important for bonding.
310
311 * The default behaviour of CRC strip offload changed. Without any specific Rx
312   offload flag, default behavior by PMD is now to strip CRC.
313   DEV_RX_OFFLOAD_CRC_STRIP offload flag has been removed.
314   To request keeping CRC, application should set ``DEV_RX_OFFLOAD_KEEP_CRC`` Rx
315   offload.
316
317 * eventdev: Type of 2nd parameter to ``rte_event_eth_rx_adapter_caps_get()``
318   has been changed from uint8_t to uint16_t.
319
320
321 ABI Changes
322 -----------
323
324 .. This section should contain ABI changes. Sample format:
325
326    * Add a short 1-2 sentence description of the ABI change
327      that was announced in the previous releases and made in this release.
328      Use fixed width quotes for ``function_names`` or ``struct_names``.
329      Use the past tense.
330
331    This section is a comment. Do not overwrite or remove it.
332    Also, make sure to start the actual text at the margin.
333    =========================================================
334
335 * eal: added ``legacy_mem`` and ``single_file_segments`` values to
336        ``rte_config`` structure on account of improving DPDK usability when
337        using either ``--legacy-mem`` or ``--single-file-segments`` flags.
338
339 * eal: EAL library ABI version was changed due to previously announced work on
340        supporting external memory in DPDK:
341          - structure ``rte_memseg_list`` now has a new field indicating length
342            of memory addressed by the segment list
343          - structure ``rte_memseg_list`` now has a new flag indicating whether
344            the memseg list refers to external memory
345          - structure ``rte_malloc_heap`` now has a new field indicating socket
346            ID the malloc heap belongs to
347          - structure ``rte_mem_config`` has had its ``malloc_heaps`` array
348            resized from ``RTE_MAX_NUMA_NODES`` to ``RTE_MAX_HEAPS`` value
349          - structure ``rte_malloc_heap`` now has a ``heap_name`` member
350          - structure ``rte_eal_memconfig`` has been extended to contain next
351            socket ID for externally allocated segments
352
353 * eal: The structure ``rte_device`` got a new field to reference a ``rte_bus``.
354   It is changing the size of the ``struct rte_device`` and the inherited
355   device structures of all buses.
356
357
358 Removed Items
359 -------------
360
361 .. This section should contain removed items in this release. Sample format:
362
363    * Add a short 1-2 sentence description of the removed item
364      in the past tense.
365
366    This section is a comment. Do not overwrite or remove it.
367    Also, make sure to start the actual text at the margin.
368    =========================================================
369
370
371 Shared Library Versions
372 -----------------------
373
374 .. Update any library version updated in this release
375    and prepend with a ``+`` sign, like this:
376
377      librte_acl.so.2
378    + librte_cfgfile.so.2
379      librte_cmdline.so.2
380
381    This section is a comment. Do not overwrite or remove it.
382    =========================================================
383
384 The libraries prepended with a plus sign were incremented in this version.
385
386 .. code-block:: diff
387
388      librte_acl.so.2
389      librte_bbdev.so.1
390      librte_bitratestats.so.2
391      librte_bpf.so.1
392    + librte_bus_dpaa.so.2
393    + librte_bus_fslmc.so.2
394    + librte_bus_ifpga.so.2
395    + librte_bus_pci.so.2
396    + librte_bus_vdev.so.2
397    + librte_bus_vmbus.so.2
398      librte_cfgfile.so.2
399      librte_cmdline.so.2
400      librte_compressdev.so.1
401      librte_cryptodev.so.5
402      librte_distributor.so.1
403    + librte_eal.so.9
404      librte_efd.so.1
405    + librte_ethdev.so.11
406    + librte_eventdev.so.6
407      librte_flow_classify.so.1
408      librte_gro.so.1
409      librte_gso.so.1
410      librte_hash.so.2
411      librte_ip_frag.so.1
412      librte_jobstats.so.1
413      librte_kni.so.2
414      librte_kvargs.so.1
415      librte_latencystats.so.1
416      librte_lpm.so.2
417      librte_mbuf.so.4
418      librte_member.so.1
419      librte_mempool.so.5
420      librte_meter.so.2
421      librte_metrics.so.1
422      librte_net.so.1
423      librte_pci.so.1
424      librte_pdump.so.2
425      librte_pipeline.so.3
426      librte_pmd_bnxt.so.2
427      librte_pmd_bond.so.2
428      librte_pmd_i40e.so.2
429      librte_pmd_ixgbe.so.2
430      librte_pmd_dpaa2_qdma.so.1
431      librte_pmd_ring.so.2
432      librte_pmd_softnic.so.1
433      librte_pmd_vhost.so.2
434      librte_port.so.3
435      librte_power.so.1
436      librte_rawdev.so.1
437      librte_reorder.so.1
438      librte_ring.so.2
439      librte_sched.so.1
440      librte_security.so.1
441      librte_table.so.3
442      librte_timer.so.1
443      librte_vhost.so.4
444
445
446 Known Issues
447 ------------
448
449 .. This section should contain new known issues in this release. Sample format:
450
451    * **Add title in present tense with full stop.**
452
453      Add a short 1-2 sentence description of the known issue
454      in the present tense. Add information on any known workarounds.
455
456    This section is a comment. Do not overwrite or remove it.
457    Also, make sure to start the actual text at the margin.
458    =========================================================
459
460 * When using SR-IOV (VF) support with netvsc PMD and the Mellanox mlx5 bifurcated
461   driver; the Linux netvsc device must be brought up before the netvsc device is
462   unbound and passed to the DPDK.
463
464
465 Tested Platforms
466 ----------------
467
468 .. This section should contain a list of platforms that were tested
469    with this release.
470
471    The format is:
472
473    * <vendor> platform with <vendor> <type of devices> combinations
474
475      * List of CPU
476      * List of OS
477      * List of devices
478      * Other relevant details...
479
480    This section is a comment. Do not overwrite or remove it.
481    Also, make sure to start the actual text at the margin.
482    =========================================================