app/testpmd: add ability to split outgoing packets
[dpdk.git] / doc / guides / testpmd_app_ug / testpmd_funcs.rst
old mode 100755 (executable)
new mode 100644 (file)
index c0d0033..44cb965
@@ -1,5 +1,5 @@
 ..  BSD LICENSE
-    Copyright(c) 2010-2014 Intel Corporation. All rights reserved.
+    Copyright(c) 2010-2015 Intel Corporation. All rights reserved.
     All rights reserved.
 
     Redistribution and use in source and binary forms, with or without
     (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
     OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
 
+.. _testpmd_runtime:
+
 Testpmd Runtime Functions
 =========================
 
-Where the testpmd application is started in interactive mode, (-i|--interactive),
+Where the testpmd application is started in interactive mode, (``-i|--interactive``),
 it displays a prompt that can be used to start and stop forwarding,
-configure the application, display statistics, set the Flow Director and other tasks.
-
-.. code-block:: console
+configure the application, display statistics, set the Flow Director and other tasks::
 
-    testpmd>
+   testpmd>
 
 The testpmd prompt has some, limited, readline support.
-Common bash command- line functions such as Ctrl+a and Ctrl+e to go to the start and end of the prompt line are supported
+Common bash command-line functions such as ``Ctrl+a`` and ``Ctrl+e`` to go to the start and end of the prompt line are supported
 as well as access to the command history via the up-arrow.
 
 There is also support for tab completion.
-If you type a partial command and hit <TAB> you get a list of the available completions:
+If you type a partial command and hit ``<TAB>`` you get a list of the available completions:
 
 .. code-block:: console
 
-    testpmd> show port <TAB>
+   testpmd> show port <TAB>
+
+       info [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap|dcb_tc X
+       info [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap|dcb_tc all
+       stats [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap|dcb_tc X
+       stats [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap|dcb_tc all
+       ...
+
+
+.. note::
 
-        info [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap X
-        info [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap all
-        stats [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap X
-        stats [Mul-choice STRING]: show|clear port info|stats|fdir|stat_qmap all
-        ...
+   Some examples in this document are too long to fit on one line are are shown wrapped at `"\\"` for display purposes::
+
+      testpmd> set flow_ctrl rx (on|off) tx (on|off) (high_water) (low_water) \
+               (pause_time) (send_xon) (port_id)
+
+In the real ``testpmd>`` prompt these commands should be on a single line.
 
 Help Functions
 --------------
@@ -64,17 +74,16 @@ These are divided into sections and can be accessed using help, help section or
 
 .. code-block:: console
 
-    testpmd> help
+   testpmd> help
+
+       help control    : Start and stop forwarding.
+       help display    : Displaying port, stats and config information.
+       help config     : Configuration information.
+       help ports      : Configuring ports.
+       help registers  : Reading and setting port registers.
+       help filters    : Filters configuration help.
+       help all        : All of the above sections.
 
-        Help is available for the following sections:
-        help control    : Start and stop forwarding.
-        help display    : Displaying port, stats and config information.
-        help config     : Configuration information.
-        help ports      : Configuring ports.
-        help flowdir    : Flow Director filter help.
-        help registers  : Reading and setting port registers.
-        help filters    : Filters configuration help.
-        help all        : All of the above sections.
 
 Control Functions
 -----------------
@@ -82,30 +91,31 @@ Control Functions
 start
 ~~~~~
 
-Start packet forwarding with current configuration:
+Start packet forwarding with current configuration::
 
-start
+   testpmd> start
 
 start tx_first
 ~~~~~~~~~~~~~~
 
-Start packet forwarding with current configuration after sending one burst of packets:
+Start packet forwarding with current configuration after sending one burst of packets::
 
-start tx_first
+   testpmd> start tx_first
 
 stop
 ~~~~
 
-Stop packet forwarding, and display accumulated statistics:
+Stop packet forwarding, and display accumulated statistics::
 
-stop
+   testpmd> stop
 
 quit
 ~~~~
 
-Quit to prompt in Linux or reboot on Baremetal:
+Quit to prompt::
+
+   testpmd> quit
 
-quit
 
 Display Functions
 -----------------
@@ -116,116 +126,185 @@ testpmd configuration or the NIC status.
 show port
 ~~~~~~~~~
 
-Display information for a given port or all ports:
+Display information for a given port or all ports::
 
-show port (info|stats|fdir|stat_qmap) (port_id|all)
+   testpmd> show port (info|stats|fdir|stat_qmap|dcb_tc) (port_id|all)
 
 The available information categories are:
 
-info    : General port information such as MAC address.
+* ``info``: General port information such as MAC address.
+
+* ``stats``: RX/TX statistics.
 
-stats   : RX/TX statistics.
+* ``fdir``: Flow Director information and statistics.
 
-fdir    : Flow Director information and statistics.
+* ``stat_qmap``: Queue statistics mapping.
 
-stat_qmap : Queue statistics mapping.
+* ``dcb_tc``: DCB information such as TC mapping.
 
 For example:
 
 .. code-block:: console
 
-    testpmd> show port info 0
+   testpmd> show port info 0
+
+   ********************* Infos for port 0 *********************
+
+   MAC address: XX:XX:XX:XX:XX:XX
+   Connect to socket: 0
+   memory allocation on the socket: 0
+   Link status: up
+   Link speed: 40000 Mbps
+   Link duplex: full-duplex
+   Promiscuous mode: enabled
+   Allmulticast mode: disabled
+   Maximum number of MAC addresses: 64
+   Maximum number of MAC addresses of hash filtering: 0
+   VLAN offload:
+       strip on
+       filter on
+       qinq(extend) off
+   Redirection table size: 512
+   Supported flow types:
+     ipv4-frag
+     ipv4-tcp
+     ipv4-udp
+     ipv4-sctp
+     ipv4-other
+     ipv6-frag
+     ipv6-tcp
+     ipv6-udp
+     ipv6-sctp
+     ipv6-other
+     l2_payload
+
+show port rss reta
+~~~~~~~~~~~~~~~~~~
+
+Display the rss redirection table entry indicated by masks on port X::
 
-    ********************* Infos for port 0 *********************
+   testpmd> show port (port_id) rss reta (size) (mask0, mask1...)
 
-    MAC address: XX:XX:XX:XX:XX:XX
-    Link status: up
-    Link speed: 10000 Mbps
-    Link duplex: full-duplex
-    Promiscuous mode: enabled
-    Allmulticast mode: disabled
-    Maximum number of MAC addresses: 127
-    VLAN offload:
-        strip on
-        filter on
-        qinq(extend) off
+size is used to indicate the hardware supported reta size
 
 show port rss-hash
 ~~~~~~~~~~~~~~~~~~
 
-Display the RSS hash functions and RSS hash key of port (port_id).
+Display the RSS hash functions and RSS hash key of a port::
 
-show port (port_id) rss-hash [key] clear port
-~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+   testpmd> show port (port_id) rss-hash ipv4|ipv4-frag|ipv4-tcp|ipv4-udp|ipv4-sctp|ipv4-other|ipv6|ipv6-frag|ipv6-tcp|ipv6-udp|ipv6-sctp|ipv6-other|l2-payload|ipv6-ex|ipv6-tcp-ex|ipv6-udp-ex [key]
 
-Clear the port statistics for a given port or for all ports:
+clear port
+~~~~~~~~~~
 
-clear port (info|stats|fdir|stat_qmap) (port_id|all)
+Clear the port statistics for a given port or for all ports::
 
-For example:
+   testpmd> clear port (info|stats|fdir|stat_qmap) (port_id|all)
 
-.. code-block:: console
+For example::
 
-    testpmd> clear port stats all
+   testpmd> clear port stats all
 
 show config
 ~~~~~~~~~~~
 
 Displays the configuration of the application.
-The configuration comes from the command-line, the runtime or the application defaults:
+The configuration comes from the command-line, the runtime or the application defaults::
 
-show config (rxtx|cores|fwd)
+   testpmd> show config (rxtx|cores|fwd|txpkts)
 
 The available information categories are:
 
-rxtx  : RX/TX configuration items.
+* ``rxtx``: RX/TX configuration items.
+
+* ``cores``: List of forwarding cores.
 
-cores : List of forwarding cores.
+* ``fwd``: Packet forwarding configuration.
 
-fwd   : Packet forwarding configuration.
+* ``txpkts``: Packets to TX configuration.
 
 For example:
 
 .. code-block:: console
 
-    testpmd> show config rxtx
+   testpmd> show config rxtx
+
+   io packet forwarding - CRC stripping disabled - packets/burst=16
+   nb forwarding cores=2 - nb forwarding ports=1
+   RX queues=1 - RX desc=128 - RX free threshold=0
+   RX threshold registers: pthresh=8 hthresh=8 wthresh=4
+   TX queues=1 - TX desc=512 - TX free threshold=0
+   TX threshold registers: pthresh=36 hthresh=0 wthresh=0
+   TX RS bit threshold=0 - TXQ flags=0x0
+
+set fwd
+~~~~~~~
+
+Set the packet forwarding mode::
+
+   testpmd> set fwd (io|mac|mac_retry|macswap|flowgen| \
+                     rxonly|txonly|csum|icmpecho)
+
+The available information categories are:
+
+* ``io``: Forwards packets "as-is" in I/O mode.
+  This is the fastest possible forwarding operation as it does not access packets data.
+  This is the default mode.
+
+* ``mac``: Changes the source and the destination Ethernet addresses of packets before forwarding them.
+
+* ``mac_retry``: Same as "mac" forwarding mode, but includes retries if the destination queue is full.
+
+* ``macswap``: MAC swap forwarding mode.
+  Swaps the source and the destination Ethernet addresses of packets before forwarding them.
+
+* ``flowgen``: Multi-flow generation mode.
+  Originates a number of flows (with varying destination IP addresses), and terminate receive traffic.
+
+* ``rxonly``: Receives packets but doesn't transmit them.
+
+* ``txonly``: Generates and transmits packets without receiving any.
+
+* ``csum``: Changes the checksum field with hardware or software methods depending on the offload flags on the packet.
+
+* ``icmpecho``: Receives a burst of packets, lookup for IMCP echo requests and, if any, send back ICMP echo replies.
+
+* ``ieee1588``: Demonstrate L2 IEEE1588 V2 PTP timestamping for RX and TX. Requires ``CONFIG_RTE_LIBRTE_IEEE1588=y``.
+
+Note: TX timestamping is only available in the "Full Featured" TX path. To force ``testpmd`` into this mode set ``--txqflags=0``.
+
+Example::
+
+   testpmd> set fwd rxonly
+
+   Set rxonly packet forwarding mode
 
-    io packet forwarding - CRC stripping disabled - packets/burst=16
-    nb forwarding cores=2 - nb forwarding ports=1
-    RX queues=1 - RX desc=128 - RX free threshold=0
-    RX threshold registers: pthresh=8 hthresh=8 wthresh=4
-    TX queues=1 - TX desc=512 - TX free threshold=0
-    TX threshold registers: pthresh=36 hthresh=0 wthresh=0
-    TX RS bit threshold=0 - TXQ flags=0x0
 
 read rxd
 ~~~~~~~~
 
-Display an RX descriptor for a port RX queue:
+Display an RX descriptor for a port RX queue::
 
-read rxd (port_id) (queue_id) (rxd_id)
+   testpmd> read rxd (port_id) (queue_id) (rxd_id)
 
-For example:
-
-.. code-block:: console
+For example::
 
-    testpmd> read rxd 0 0 4
+   testpmd> read rxd 0 0 4
         0x0000000B - 0x001D0180 / 0x0000000B - 0x001D0180
 
 read txd
 ~~~~~~~~
 
-Display a TX descriptor for a port TX queue:
+Display a TX descriptor for a port TX queue::
 
-read txd (port_id) (queue_id) (txd_id)
+   testpmd> read txd (port_id) (queue_id) (txd_id)
 
-For example:
-
-.. code-block:: console
+For example::
 
-    testpmd> read txd 0 0 4
+   testpmd> read txd 0 0 4
         0x00000001 - 0x24C3C440 / 0x000F0000 - 0x2330003C
 
+
 Configuration Functions
 -----------------------
 
@@ -235,21 +314,21 @@ This section details the available configuration functions that are available.
 
 .. note::
 
-    Configuration changes only become active when forwarding is started/restarted.
+   Configuration changes only become active when forwarding is started/restarted.
 
 set default
 ~~~~~~~~~~~
 
-Reset forwarding to the default configuration:
+Reset forwarding to the default configuration::
 
-set default
+   testpmd> set default
 
 set verbose
 ~~~~~~~~~~~
 
-Set the debug verbosity level:
+Set the debug verbosity level::
 
-set verbose (level)
+   testpmd> set verbose (level)
 
 Currently the only available levels are 0 (silent except for error) and 1 (fully verbose).
 
@@ -260,1333 +339,1536 @@ Set the number of ports used by the application:
 
 set nbport (num)
 
-This is equivalent to the --nb-ports command-line option.
+This is equivalent to the ``--nb-ports`` command-line option.
 
 set nbcore
 ~~~~~~~~~~
 
-Set the number of cores used by the application:
+Set the number of cores used by the application::
 
-set nbcore (num)
+   testpmd> set nbcore (num)
 
-This is equivalent to the --nb-cores command-line option.
+This is equivalent to the ``--nb-cores`` command-line option.
 
 .. note::
 
-    The number of cores used must not be greater than number of ports used multiplied by the number of queues per port.
+   The number of cores used must not be greater than number of ports used multiplied by the number of queues per port.
 
 set coremask
 ~~~~~~~~~~~~
 
-Set the forwarding cores hexadecimal mask:
+Set the forwarding cores hexadecimal mask::
 
-set coremask (mask)
+   testpmd> set coremask (mask)
 
-This is equivalent to the --coremask command-line option.
+This is equivalent to the ``--coremask`` command-line option.
 
 .. note::
 
-    The master lcore is reserved for command line parsing only and cannot be masked on for packet forwarding.
+   The master lcore is reserved for command line parsing only and cannot be masked on for packet forwarding.
 
 set portmask
 ~~~~~~~~~~~~
 
-Set the forwarding ports hexadecimal mask:
+Set the forwarding ports hexadecimal mask::
 
-set portmask (mask)
+   testpmd> set portmask (mask)
 
-This is equivalent to the --portmask command-line option.
+This is equivalent to the ``--portmask`` command-line option.
 
 set burst
 ~~~~~~~~~
 
-Set number of packets per burst:
+Set number of packets per burst::
 
-set burst (num)
+   testpmd> set burst (num)
 
-This is equivalent to the --burst command-line option.
+This is equivalent to the ``--burst command-line`` option.
 
-In mac_retry forwarding mode, the transmit delay time and number of retries can also be set.
+In ``mac_retry`` forwarding mode, the transmit delay time and number of retries can also be set::
 
-set burst tx delay (micrseconds) retry (num)
+   testpmd> set burst tx delay (micrseconds) retry (num)
 
 set txpkts
 ~~~~~~~~~~
 
-Set the length of each segment of the TX-ONLY packets:
+Set the length of each segment of the TX-ONLY packets::
 
-set txpkts (x[,y]*)
+   testpmd> set txpkts (x[,y]*)
 
 Where x[,y]* represents a CSV list of values, without white space.
 
+set txsplit
+~~~~~~~~~~~
+
+Set the split policy for the TX packets, applicable for TX-ONLY and CSUM forwarding modes::
+
+   testpmd> set txsplit (off|on|rand)
+
+Where:
+
+* ``off`` disable packet copy & split for CSUM mode.
+
+* ``on`` split outgoing packet into multiple segments. Size of each segment
+  and number of segments per packet is determined by ``set txpkts`` command
+  (see above).
+
+* ``rand`` same as 'on', but number of segments per each packet is a random value between 1 and total number of segments.
+
 set corelist
 ~~~~~~~~~~~~
 
-Set the list of forwarding cores:
+Set the list of forwarding cores::
 
-set corelist (x[,y]*)
+   testpmd> set corelist (x[,y]*)
 
 For example, to change the forwarding cores:
 
 .. code-block:: console
 
-    testpmd> set corelist 3,1
-    testpmd> show config fwd
+   testpmd> set corelist 3,1
+   testpmd> show config fwd
 
-    io packet forwarding - ports=2 - cores=2 - streams=2 - NUMA support disabled
-    Logical Core 3 (socket 0) forwards packets on 1 streams:
-    RX P=0/Q=0 (socket 0) -> TX P=1/Q=0 (socket 0) peer=02:00:00:00:00:01
-    Logical Core 1 (socket 0) forwards packets on 1 streams:
-    RX P=1/Q=0 (socket 0) -> TX P=0/Q=0 (socket 0) peer=02:00:00:00:00:00
+   io packet forwarding - ports=2 - cores=2 - streams=2 - NUMA support disabled
+   Logical Core 3 (socket 0) forwards packets on 1 streams:
+   RX P=0/Q=0 (socket 0) -> TX P=1/Q=0 (socket 0) peer=02:00:00:00:00:01
+   Logical Core 1 (socket 0) forwards packets on 1 streams:
+   RX P=1/Q=0 (socket 0) -> TX P=0/Q=0 (socket 0) peer=02:00:00:00:00:00
 
 .. note::
 
-    The cores are used in the same order as specified on the command line.
+   The cores are used in the same order as specified on the command line.
 
 set portlist
 ~~~~~~~~~~~~
 
-Set the list of forwarding ports:
+Set the list of forwarding ports::
 
-set portlist (x[,y]*)
+   testpmd> set portlist (x[,y]*)
 
 For example, to change the port forwarding:
 
 .. code-block:: console
 
-    testpmd> set portlist 0,2,1,3
-    testpmd> show config fwd
+   testpmd> set portlist 0,2,1,3
+   testpmd> show config fwd
 
-    io packet forwarding - ports=4 - cores=1 - streams=4
-    Logical Core 3 (socket 0) forwards packets on 4 streams:
-    RX P=0/Q=0 (socket 0) -> TX P=2/Q=0 (socket 0) peer=02:00:00:00:00:01
-    RX P=2/Q=0 (socket 0) -> TX P=0/Q=0 (socket 0) peer=02:00:00:00:00:00
-    RX P=1/Q=0 (socket 0) -> TX P=3/Q=0 (socket 0) peer=02:00:00:00:00:03
-    RX P=3/Q=0 (socket 0) -> TX P=1/Q=0 (socket 0) peer=02:00:00:00:00:02
+   io packet forwarding - ports=4 - cores=1 - streams=4
+   Logical Core 3 (socket 0) forwards packets on 4 streams:
+   RX P=0/Q=0 (socket 0) -> TX P=2/Q=0 (socket 0) peer=02:00:00:00:00:01
+   RX P=2/Q=0 (socket 0) -> TX P=0/Q=0 (socket 0) peer=02:00:00:00:00:00
+   RX P=1/Q=0 (socket 0) -> TX P=3/Q=0 (socket 0) peer=02:00:00:00:00:03
+   RX P=3/Q=0 (socket 0) -> TX P=1/Q=0 (socket 0) peer=02:00:00:00:00:02
 
 vlan set strip
 ~~~~~~~~~~~~~~
 
-Set the VLAN strip on a port:
+Set the VLAN strip on a port::
 
-vlan set strip (on|off) (port_id)
+   testpmd> vlan set strip (on|off) (port_id)
 
 vlan set stripq
 ~~~~~~~~~~~~~~~
 
-Set the VLAN strip for a queue on a port:
+Set the VLAN strip for a queue on a port::
 
-vlan set stripq (on|off) (port_id,queue_id)
+   testpmd> vlan set stripq (on|off) (port_id,queue_id)
 
 vlan set filter
 ~~~~~~~~~~~~~~~
 
-Set the VLAN filter on a port:
+Set the VLAN filter on a port::
 
-vlan set filter (on|off) (port_id)
+   testpmd> vlan set filter (on|off) (port_id)
 
 vlan set qinq
 ~~~~~~~~~~~~~
 
-Set the VLAN QinQ (extended queue in queue) on for a port:
+Set the VLAN QinQ (extended queue in queue) on for a port::
 
-vlan set qinq (on|off) (port_id)
+   testpmd> vlan set qinq (on|off) (port_id)
 
 vlan set tpid
 ~~~~~~~~~~~~~
 
-Set the outer VLAN TPID for packet filtering on a port:
+Set the outer VLAN TPID for packet filtering on a port::
 
-vlan set tpid (value) (port_id)
+   testpmd> vlan set tpid (value) (port_id)
 
 .. note::
 
-    TPID value must be a 16-bit number (value <= 65536).
+   TPID value must be a 16-bit number (value <= 65536).
 
 rx_vlan add
 ~~~~~~~~~~~
 
-Add a VLAN ID, or all identifiers, to the set of VLAN identifiers filtered by port ID:
+Add a VLAN ID, or all identifiers, to the set of VLAN identifiers filtered by port ID::
 
-rx_vlan add (vlan_id|all) (port_id)
+   testpmd> rx_vlan add (vlan_id|all) (port_id)
 
 .. note::
 
-    VLAN filter must be set on that port. VLAN ID < 4096.
+   VLAN filter must be set on that port. VLAN ID < 4096.
+   Depending on the NIC used, number of vlan_ids may be limited to the maximum entries
+   in VFTA table. This is important if enabling all vlan_ids.
 
 rx_vlan rm
 ~~~~~~~~~~
 
-Remove a VLAN ID, or all identifiers, from the set of VLAN identifiers filtered by port ID:
+Remove a VLAN ID, or all identifiers, from the set of VLAN identifiers filtered by port ID::
+
+   testpmd> rx_vlan rm (vlan_id|all) (port_id)
 
-rx_vlan rm (vlan_id|all) (port_id)
+rx_vlan add (for VF)
+~~~~~~~~~~~~~~~~~~~~
 
-rx_vlan add(for VF)
+Add a VLAN ID, to the set of VLAN identifiers filtered for VF(s) for port ID::
+
+   testpmd> rx_vlan add (vlan_id) port (port_id) vf (vf_mask)
+
+rx_vlan rm (for VF)
 ~~~~~~~~~~~~~~~~~~~
 
-Add a VLAN ID, to the set of VLAN identifiers filtered for VF(s) for port ID:
+Remove a VLAN ID, from the set of VLAN identifiers filtered for VF(s) for port ID::
 
-rx_vlan add (vlan_id) port (port_id) vf (vf_mask)
+   testpmd> rx_vlan rm (vlan_id) port (port_id) vf (vf_mask)
 
-rx_vlan rm(for VF)
-~~~~~~~~~~~~~~~~~~
+rx_vlan set tpid
+~~~~~~~~~~~~~~~~
 
-Remove a VLAN ID, from the set of VLAN identifiers filtered for VF(s) for port ID:
+Set the outer VLAN TPID for packet filtering on a port::
 
-rx_vlan rm (vlan_id) port (port_id) vf (vf_mask)
+   testpmd> rx_vlan set tpid (value) (port_id)
 
-tx_rate (for Queue)
-~~~~~~~~~~~~~~~~~~~
+tunnel_filter add
+~~~~~~~~~~~~~~~~~
 
-Set TX rate limitation for queue of a port ID:
+Add a tunnel filter on a port::
 
-set port (port_id) queue (queue_id) rate (rate_value)
+   testpmd> tunnel_filter add (port_id) (outer_mac) (inner_mac) (ip_addr) \
+            (inner_vlan) (tunnel_type) (filter_type) (tenant_id) (queue_id)
 
-tx_rate (for VF)
-~~~~~~~~~~~~~~~~
+tunnel_filter remove
+~~~~~~~~~~~~~~~~~~~~
 
-Set TX rate limitation for queues in VF of a port ID:
+Remove a tunnel filter on a port::
 
-set port (port_id) vf (vf_id) rate (rate_value) queue_mask (queue_mask)
+   testpmd> tunnel_filter rm (port_id) (outer_mac) (inner_mac) (ip_addr) \
+            (inner_vlan) (tunnel_type) (filter_type) (tenant_id) (queue_id)
 
-rx_vlan set tpid
-~~~~~~~~~~~~~~~~
+rx_vxlan_port add
+~~~~~~~~~~~~~~~~~
 
-Set the outer VLAN TPID for packet filtering on a port:
+Add an UDP port for VXLAN packet filter on a port::
 
-rx_vlan set tpid (value) (port_id)
+   testpmd> rx_vxlan_port add (udp_port) (port_id)
+
+rx_vxlan_port remove
+~~~~~~~~~~~~~~~~~~~~
+
+Remove an UDP port for VXLAN packet filter on a port::
+
+   testpmd> rx_vxlan_port rm (udp_port) (port_id)
 
 tx_vlan set
 ~~~~~~~~~~~
 
-Set hardware insertion of VLAN ID in packets sent on a port:
+Set hardware insertion of VLAN IDs in packets sent on a port::
+
+   testpmd> tx_vlan set (port_id) vlan_id[, vlan_id_outer]
+
+For example, set a single VLAN ID (5) insertion on port 0::
+
+   tx_vlan set 0 5
+
+Or, set double VLAN ID (inner: 2, outer: 3) insertion on port 1::
+
+   tx_vlan set 1 2 3
 
-tx_vlan set (vlan_id) (port_id)
 
 tx_vlan set pvid
 ~~~~~~~~~~~~~~~~
 
-Set port based hardware insertion of VLAN ID in pacekts sent on a port:
+Set port based hardware insertion of VLAN ID in packets sent on a port::
 
-tx_vlan set pvid (port_id) (vlan_id) (on|off)
+   testpmd> tx_vlan set pvid (port_id) (vlan_id) (on|off)
 
 tx_vlan reset
 ~~~~~~~~~~~~~
 
-Disable hardware insertion of a VLAN header in packets sent on a port:
+Disable hardware insertion of a VLAN header in packets sent on a port::
 
-tx_vlan reset (port_id)
+   testpmd> tx_vlan reset (port_id)
 
-tx_checksum set mask
-~~~~~~~~~~~~~~~~~~~~
+csum set
+~~~~~~~~
 
-Enable hardware insertion of checksum offload with a 4-bit mask, 0x0 - 0xF, in packets sent on a port:
+Select hardware or software calculation of the checksum when
+transmitting a packet using the ``csum`` forwarding engine::
 
-tx_checksum set (mask) (port_id)
+   testpmd> csum set (ip|udp|tcp|sctp|outer-ip) (hw|sw) (port_id)
 
-The bits in the mask are:
+Where:
 
-bit 0 - if set insert ip checksum offload
+* ``ip|udp|tcp|sctp`` always relate to  the inner layer.
 
-bit 1 - if set insert udp checksum offload
+* ``outer-ip`` relates to the outer IP layer (only for IPv4) in the case where the packet is recognized
+  as a tunnel packet by the forwarding engine (vxlan, gre and ipip are
+  supported). See also the ``csum parse-tunnel`` command.
 
-bit 2 - if set insert tcp checksum offload
+.. note::
 
-bit 3 - if set insert sctp checksum offload
+   Check the NIC Datasheet for hardware limits.
 
-.. note::
+csum parse-tunnel
+~~~~~~~~~~~~~~~~~
 
-    Check the NIC Datasheet for hardware limits.
+Define how tunneled packets should be handled by the csum forward
+engine::
 
+   testpmd> csum parse-tunnel (on|off) (tx_port_id)
 
-set fwd
-~~~~~~~
+If enabled, the csum forward engine will try to recognize supported
+tunnel headers (vxlan, gre, ipip).
 
-Set the packet forwarding mode:
+If disabled, treat tunnel packets as non-tunneled packets (a inner
+header is handled as a packet payload).
 
-set fwd (io|mac|mac_retry|macswap|flowgen|rxonly|txonly|csum|icmpecho)
+.. note::
 
-The available information categories are:
+   The port argument is the TX port like in the ``csum set`` command.
 
-*   io: forwards packets "as-is" in I/O mode.
-    This is the fastest possible forwarding operation as it does not access packets data.
-    This is the default mode.
+Example:
 
-*   mac: changes the source and the destination Ethernet addresses of packets before forwarding them.
+Consider a packet in packet like the following::
 
-*   mac_retry: same as "mac" forwarding mode, but includes retries if the destination queue is full.
+   eth_out/ipv4_out/udp_out/vxlan/eth_in/ipv4_in/tcp_in
 
-*   macswap: MAC swap forwarding mode.
-    Swaps the source and the destination Ethernet addresses of packets before forwarding them.
+* If parse-tunnel is enabled, the ``ip|udp|tcp|sctp`` parameters of ``csum set``
+  command relate to the inner headers (here ``ipv4_in`` and ``tcp_in``), and the
+  ``outer-ip parameter`` relates to the outer headers (here ``ipv4_out``).
 
-*   flowgen: multi-flow generation mode.
-    Originates a bunch of flows (varying destination IP addresses), and terminate receive traffic.
+* If parse-tunnel is disabled, the ``ip|udp|tcp|sctp`` parameters of ``csum  set``
+   command relate to the outer headers, here ``ipv4_out`` and ``udp_out``.
 
-*   rxonly: receives packets but doesn't transmit them.
+csum show
+~~~~~~~~~
 
-*   txonly: generates and transmits packets without receiving any.
+Display tx checksum offload configuration::
 
-*   csum: changes the checksum field with HW or SW methods depending on the offload flags on the packet.
+   testpmd> csum show (port_id)
 
-*   icmpecho: receives a burst of packets, lookup for IMCP echo requests and, if any, send back ICMP echo replies.
+tso set
+~~~~~~~
 
+Enable TCP Segmentation Offload (TSO) in the ``csum`` forwarding engine::
 
-Example:
+   testpmd> tso set (segsize) (port_id)
 
-.. code-block:: console
+.. note::
 
-    testpmd> set fwd rxonly
+   Check the NIC datasheet for hardware limits.
 
-    Set rxonly packet forwarding mode
+tso show
+~~~~~~~~
+
+Display the status of TCP Segmentation Offload::
+
+   testpmd> tso show (port_id)
 
 mac_addr add
 ~~~~~~~~~~~~
 
-Add an alternative MAC address to a port:
+Add an alternative MAC address to a port::
 
-mac_addr add (port_id) (XX:XX:XX:XX:XX:XX)
+   testpmd> mac_addr add (port_id) (XX:XX:XX:XX:XX:XX)
 
 mac_addr remove
 ~~~~~~~~~~~~~~~
 
-Remove a MAC address from a port:
+Remove a MAC address from a port::
 
-mac_addr remove (port_id) (XX:XX:XX:XX:XX:XX)
+   testpmd> mac_addr remove (port_id) (XX:XX:XX:XX:XX:XX)
 
 mac_addr add(for VF)
 ~~~~~~~~~~~~~~~~~~~~
 
-Add an alternative MAC address for a VF to a port:
+Add an alternative MAC address for a VF to a port::
 
-mac_add add port (port_id) vf (vf_id) (XX:XX:XX:XX:XX:XX)
+   testpmd> mac_add add port (port_id) vf (vf_id) (XX:XX:XX:XX:XX:XX)
 
 set port-uta
 ~~~~~~~~~~~~
 
-Set the unicast hash filter(s) on/off for a port X:
+Set the unicast hash filter(s) on/off for a port::
 
-set port (port_id) uta (XX:XX:XX:XX:XX:XX|all) (on|off)
+   testpmd> set port (port_id) uta (XX:XX:XX:XX:XX:XX|all) (on|off)
 
 set promisc
 ~~~~~~~~~~~
 
 Set the promiscuous mode on for a port or for all ports.
-In promiscuous mode packets are not dropped if they aren't for the specified MAC address:
+In promiscuous mode packets are not dropped if they aren't for the specified MAC address::
 
-set promisc (port_id|all) (on|off)
+   testpmd> set promisc (port_id|all) (on|off)
 
 set allmulti
 ~~~~~~~~~~~~
 
-Set the allmulti mode for a port or for all ports:
+Set the allmulti mode for a port or for all ports::
 
-set allmulti (port_id|all) (on|off)
+   testpmd> set allmulti (port_id|all) (on|off)
 
 Same as the ifconfig (8) option. Controls how multicast packets are handled.
 
 set flow_ctrl rx
 ~~~~~~~~~~~~~~~~
 
-Set the link flow control parameter on a port:
+Set the link flow control parameter on a port::
 
-set flow_ctrl rx (on|off) tx (on|off) (high_water) (low_water) \
-(pause_time) (send_xon) (port_id)
+   testpmd> set flow_ctrl rx (on|off) tx (on|off) (high_water) (low_water) \
+            (pause_time) (send_xon) mac_ctrl_frame_fwd (on|off) \
+           autoneg (on|off) (port_id)
 
 Where:
 
-high_water (integer): High threshold value to trigger XOFF.
+* ``high_water`` (integer): High threshold value to trigger XOFF.
+
+* ``low_water`` (integer): Low threshold value to trigger XON.
 
-low_water (integer) : Low threshold value to trigger XON.
+* ``pause_time`` (integer): Pause quota in the Pause frame.
 
-pause_time (integer): Pause quota in the Pause frame.
+* ``send_xon`` (0/1): Send XON frame.
 
-send_xon (0/1) : Send XON frame.
+* ``mac_ctrl_frame_fwd``: Enable receiving MAC control frames.
 
-mac_ctrl_frame_fwd : Enable receiving MAC control frames
+* ``autoneg``: Change the auto-negotiation para mete.
 
 set pfc_ctrl rx
 ~~~~~~~~~~~~~~~
 
-Set the priority flow control parameter on a port:
+Set the priority flow control parameter on a port::
 
-set pfc_ctrl rx (on|off) tx (on|off) (high_water) (low_water) \ (pause_time) (priority) (port_id)
+   testpmd> set pfc_ctrl rx (on|off) tx (on|off) (high_water) (low_water) \
+            (pause_time) (priority) (port_id)
 
 Where:
 
-priority (0-7): VLAN User Priority.
+* ``high_water`` (integer): High threshold value.
+
+* ``low_water`` (integer): Low threshold value.
+
+* ``pause_time`` (integer): Pause quota in the Pause frame.
+
+* ``priority`` (0-7): VLAN User Priority.
 
 set stat_qmap
 ~~~~~~~~~~~~~
 
-Set statistics mapping (qmapping 0..15) for RX/TX queue on port:
+Set statistics mapping (qmapping 0..15) for RX/TX queue on port::
 
-set stat_qmap (tx|rx) (port_id) (queue_id) (qmapping)
+   testpmd> set stat_qmap (tx|rx) (port_id) (queue_id) (qmapping)
 
-For example, to set rx queue 2 on port 0 to mapping 5:
+For example, to set rx queue 2 on port 0 to mapping 5::
 
-.. code-block:: console
+   testpmd>set stat_qmap rx 0 2 5
 
-     testpmd>set stat_qmap rx 0 2 5
+set port - rx/tx (for VF)
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-set port - rx/tx(for VF)
-~~~~~~~~~~~~~~~~~~~~~~~~
+Set VF receive/transmit from a port::
 
-Set VF receive/transmit from a port:
+   testpmd> set port (port_id) vf (vf_id) (rx|tx) (on|off)
 
-set port (port_id) vf (vf_id) (rx|tx) (on|off)
+set port - mac address filter (for VF)
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+
+Add/Remove unicast or multicast MAC addr filter for a VF::
+
+   testpmd> set port (port_id) vf (vf_id) (mac_addr) \
+            (exact-mac|exact-mac-vlan|hashmac|hashmac-vlan) (on|off)
 
 set port - rx mode(for VF)
 ~~~~~~~~~~~~~~~~~~~~~~~~~~
 
-Set the VF receive mode of a port:
+Set the VF receive mode of a port::
 
-set port (port_id) vf (vf_id) rxmode (AUPE|ROPE|BAM|MPE) (on|off)
+   testpmd> set port (port_id) vf (vf_id) \
+            rxmode (AUPE|ROPE|BAM|MPE) (on|off)
 
 The available receive modes are:
 
-*  AUPE: accepts untagged VLAN.
+* ``AUPE``: Accepts untagged VLAN.
+
+* ``ROPE``: Accepts unicast hash.
 
-*  ROPE: accepts unicast hash.
+* ``BAM``: Accepts broadcast packets.
 
-*  BAM: accepts broadcast packets
+* ``MPE``: Accepts all multicast packets.
 
-*  MPE: accepts all multicast packets
+set port - tx_rate (for Queue)
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+
+Set TX rate limitation for a queue on a port::
+
+   testpmd> set port (port_id) queue (queue_id) rate (rate_value)
+
+set port - tx_rate (for VF)
+~~~~~~~~~~~~~~~~~~~~~~~~~~~
+
+Set TX rate limitation for queues in VF on a port::
+
+   testpmd> set port (port_id) vf (vf_id) rate (rate_value) queue_mask (queue_mask)
 
 set port - mirror rule
 ~~~~~~~~~~~~~~~~~~~~~~
 
-Set port or vlan type mirror rule for a port.
+Set pool or vlan type mirror rule for a port::
 
-set port (port_id) mirror-rule (rule_id) (pool-mirror|vlan-mirror) (poolmask|vlanid[,vlanid]*) dst-pool (pool_id) (on|off)
+   testpmd> set port (port_id) mirror-rule (rule_id) \
+            (pool-mirror-up|pool-mirror-down|vlan-mirror) \
+            (poolmask|vlanid[,vlanid]*) dst-pool (pool_id) (on|off)
 
-For example to enable mirror traffic with vlan 0,1 to pool 0:
+Set link mirror rule for a port::
 
-.. code-block:: console
+   testpmd> set port (port_id) mirror-rule (rule_id) \
+           (uplink-mirror|downlink-mirror) dst-pool (pool_id) (on|off)
 
-    set port 0 mirror-rule 0 vlan-mirror 0,1 dst-pool 0 on
+For example to enable mirror traffic with vlan 0,1 to pool 0::
+
+   set port 0 mirror-rule 0 vlan-mirror 0,1 dst-pool 0 on
 
 reset port - mirror rule
 ~~~~~~~~~~~~~~~~~~~~~~~~
 
-Reset a mirror rule for a port.
+Reset a mirror rule for a port::
 
-reset port (port_id) mirror-rule (rule_id)
+   testpmd> reset port (port_id) mirror-rule (rule_id)
 
 set flush_rx
 ~~~~~~~~~~~~
 
-Flush (default) or don't flush RX streams before forwarding.
-Mainly used with PCAP drivers to avoid the default behavior of flushing the first 512 packets on RX streams.
+Set the flush on RX streams before forwarding.
+The default is flush ``on``.
+Mainly used with PCAP drivers to turn off the default behavior of flushing the first 512 packets on RX streams::
 
-set flush_rx off
+   testpmd> set flush_rx off
 
 set bypass mode
 ~~~~~~~~~~~~~~~
 
-Set the bypass mode for the lowest port on bypass enabled NIC.
+Set the bypass mode for the lowest port on bypass enabled NIC::
 
-set bypass mode (normal|bypass|isolate) (port_id)
+   testpmd> set bypass mode (normal|bypass|isolate) (port_id)
 
 set bypass event
 ~~~~~~~~~~~~~~~~
 
-Set the event required to initiate specified bypass mode for the lowest port on a bypass enabled NIC where:
+Set the event required to initiate specified bypass mode for the lowest port on a bypass enabled::
+
+   testpmd> set bypass event (timeout|os_on|os_off|power_on|power_off) \
+            mode (normal|bypass|isolate) (port_id)
+
+Where:
 
-*   timeout: enable bypass after watchdog timeout.
+* ``timeout``: Enable bypass after watchdog timeout.
 
-*   os_on: enable bypass when OS/board is powered on.
+* ``os_on``: Enable bypass when OS/board is powered on.
 
-*   os_off: enable bypass when OS/board is powered off.
+* ``os_off``: Enable bypass when OS/board is powered off.
 
-*   power_on: enable bypass when power supply is turned on.
+* ``power_on``: Enable bypass when power supply is turned on.
 
-*   power_off: enable bypass when power supply is turned off.
+* ``power_off``: Enable bypass when power supply is turned off.
 
-set bypass event (timeout|os_on|os_off|power_on|power_off) mode (normal|bypass|isolate) (port_id)
 
 set bypass timeout
 ~~~~~~~~~~~~~~~~~~
 
-Set the bypass watchdog timeout to 'n' seconds where 0 = instant.
+Set the bypass watchdog timeout to ``n`` seconds where 0 = instant::
 
-set bypass timeout (0|1.5|2|3|4|8|16|32)
+   testpmd> set bypass timeout (0|1.5|2|3|4|8|16|32)
 
 show bypass config
 ~~~~~~~~~~~~~~~~~~
 
-Show the bypass configuration for a bypass enabled NIC using the lowest port on the NIC.
+Show the bypass configuration for a bypass enabled NIC using the lowest port on the NIC::
 
-show bypass config (port_id)
+   testpmd> show bypass config (port_id)
 
-add_ethertype_filter
-~~~~~~~~~~~~~~~~~~~~
+set link up
+~~~~~~~~~~~
 
-Add a L2 Ethertype filter, which identify packets by their L2 Ethertype mainly assign them to a receive queue.
+Set link up for a port::
 
-add_ethertype_filter (port_id) ethertype (eth_value) priority (enable|disable) (pri_value) queue (queue_id) index (idx)
+   testpmd> set link-up port (port id)
 
-The available information parameters are:
+set link down
+~~~~~~~~~~~~~
 
-*   port_id:  the port which the Ethertype filter assigned on.
+Set link down for a port::
 
-*   eth_value: the EtherType value want to match,
-    for example 0x0806 for ARP packet. 0x0800 (IPv4) and 0x86DD (IPv6) are invalid.
+   testpmd> set link-down port (port id)
 
-*   enable: user priority participates in the match.
 
-*   disable: user priority doesn't participate in the match.
+Port Functions
+--------------
 
-*   pri_value: user priority value that want to match.
+The following sections show functions for configuring ports.
 
-*   queue_id : The receive queue associated with this EtherType filter
+.. note::
 
-*   index: the index of this EtherType filter
+   Port configuration changes only become active when forwarding is started/restarted.
 
-Example:
+port attach
+~~~~~~~~~~~
+
+Attach a port specified by pci address or virtual device args.
+
+To attach a new pci device, the device should be recognized by kernel first.
+Then it should be moved under DPDK management.
+Finally the port can be attached to testpmd.
+
+For example, to move a pci device using ixgbe under DPDK management:
 
 .. code-block:: console
 
-    testpmd> add_ethertype_filter 0 ethertype 0x0806 priority disable 0 queue 3 index 0
-    Assign ARP packet to receive queue 3
+   # Check the status of the available devices.
+   ./tools/dpdk_nic_bind.py --status
 
-remove_ethertype_filter
-~~~~~~~~~~~~~~~~~~~~~~~
+   Network devices using DPDK-compatible driver
+   ============================================
+   <none>
 
-Remove a L2 Ethertype filter
+   Network devices using kernel driver
+   ===================================
+   0000:0a:00.0 '82599ES 10-Gigabit' if=eth2 drv=ixgbe unused=
 
-remove_ethertype_filter (port_id) index (idx)
 
-get_ethertype_filter
-~~~~~~~~~~~~~~~~~~~~
+   # Bind the device to igb_uio.
+   sudo ./tools/dpdk_nic_bind.py -b igb_uio 0000:0a:00.0
 
-Get and display a L2 Ethertype filter
 
-get_ethertype_filter (port_id) index (idx)
+   # Recheck the status of the devices.
+   ./tools/dpdk_nic_bind.py --status
+   Network devices using DPDK-compatible driver
+   ============================================
+   0000:0a:00.0 '82599ES 10-Gigabit' drv=igb_uio unused=
 
-Example:
+To attach a port created by virtual device, above steps are not needed.
 
-.. code-block:: console
+port attach (identifier)
 
-    testpmd> get_ethertype_filter 0 index 0
+For example, to attach a port whose pci address is 0000:0a:00.0.
 
-    filter[0]:
-        ethertype: 0x0806
-        priority: disable, 0
-        queue: 3
+.. code-block:: console
 
-add_2tuple_filter
-~~~~~~~~~~~~~~~~~
+   testpmd> port attach 0000:0a:00.0
+   Attaching a new port...
+   EAL: PCI device 0000:0a:00.0 on NUMA socket -1
+   EAL:   probe driver: 8086:10fb rte_ixgbe_pmd
+   EAL:   PCI memory mapped at 0x7f83bfa00000
+   EAL:   PCI memory mapped at 0x7f83bfa80000
+   PMD: eth_ixgbe_dev_init(): MAC: 2, PHY: 18, SFP+: 5
+   PMD: eth_ixgbe_dev_init(): port 0 vendorID=0x8086 deviceID=0x10fb
+   Port 0 is attached. Now total ports is 1
+   Done
 
-Add a 2-tuple filter,
-which identify packets by specific protocol and destination TCP/UDP port
-and forwards packets into one of the receive queues.
+For example, to attach a port created by pcap PMD.
 
-add_2tuple_filter (port_id) protocol (pro_value) (pro_mask) dst_port (port_value) (port_mask)
-flags (flg_value) priority (prio_value) queue (queue_id) index (idx)
+.. code-block:: console
 
-The available information parameters are:
+   testpmd> port attach eth_pcap0
+   Attaching a new port...
+   PMD: Initializing pmd_pcap for eth_pcap0
+   PMD: Creating pcap-backed ethdev on numa socket 0
+   Port 0 is attached. Now total ports is 1
+   Done
 
-*   port_id: the port which the 2-tuple filter assigned on.
+In this case, identifier is ``eth_pcap0``.
+This identifier format is the same as ``--vdev`` format of DPDK applications.
 
-*   pro_value: IP L4 protocol
+For example, to re-attach a bonded port which has been previously detached,
+the mode and slave parameters must be given.
 
-*   pro_mask: protocol participates in the match or not, 1 means participate
+.. code-block:: console
 
-*   port_value: destination port in L4.
+   testpmd> port attach eth_bond_0,mode=0,slave=1
+   Attaching a new port...
+   EAL: Initializing pmd_bond for eth_bond_0
+   EAL: Create bonded device eth_bond_0 on port 0 in mode 0 on socket 0.
+   Port 0 is attached. Now total ports is 1
+   Done
 
-*   port_mask: destination port participates in the match or not, 1 means participate.
 
-*   flg_value: TCP control bits. The non-zero value is invalid, when the pro_value is not set to 0x06 (TCP).
+port detach
+~~~~~~~~~~~
 
-*   prio_value: the priority of this filter.
+Detach a specific port.
 
-*   queue_id: The receive queue associated with this 2-tuple filter
+Before detaching a port, the port should be closed::
 
-*   index: the index of this 2-tuple filter
+   testpmd> port detach (port_id)
 
-Example:
+For example, to detach a pci device port 0.
 
 .. code-block:: console
 
-    testpmd> add_2tuple_filter 0 protocol 0x06 1 dst_port 32 1 flags 0x02 priority 3 queue 3 index 0
+   testpmd> port close 0
+   Closing ports...
+   Done
 
-remove_2tuple_filter
-~~~~~~~~~~~~~~~~~~~~
+   testpmd> port detach 0
+   Detaching a port...
+   EAL: PCI device 0000:0a:00.0 on NUMA socket -1
+   EAL:   remove driver: 8086:10fb rte_ixgbe_pmd
+   EAL:   PCI memory unmapped at 0x7f83bfa00000
+   EAL:   PCI memory unmapped at 0x7f83bfa80000
+   Done
 
-Remove a 2-tuple filter
 
-remove_2tuple_filter (port_id) index (idx)
+For example, to detach a virtual device port 0.
 
-get_2tuple_filter
-~~~~~~~~~~~~~~~~~
+.. code-block:: console
 
-Get and display a 2-tuple filter
+   testpmd> port close 0
+   Closing ports...
+   Done
 
-get_2tuple_filter (port_id) index (idx)
+   testpmd> port detach 0
+   Detaching a port...
+   PMD: Closing pcap ethdev on numa socket 0
+   Port 'eth_pcap0' is detached. Now total ports is 0
+   Done
 
-Example:
+To remove a pci device completely from the system, first detach the port from testpmd.
+Then the device should be moved under kernel management.
+Finally the device can be removed using kernel pci hotplug functionality.
+
+For example, to move a pci device under kernel management:
 
 .. code-block:: console
 
-    testpmd> get_2tuple_filter 0 index 0
+   sudo ./tools/dpdk_nic_bind.py -b ixgbe 0000:0a:00.0
 
-    filter[0]:
-        Destination Port: 0x0020 mask: 1
-        protocol: 0x06 mask:1 tcp_flags: 0x02
-        priority: 3   queue: 3
+   ./tools/dpdk_nic_bind.py --status
 
-add_5tuple_filter
-~~~~~~~~~~~~~~~~~
+   Network devices using DPDK-compatible driver
+   ============================================
+   <none>
 
-Add a 5-tuple filter,
-which consists of a 5-tuple (protocol, source and destination IP addresses, source and destination TCP/UDP/SCTP port)
-and routes packets into one of the receive queues.
+   Network devices using kernel driver
+   ===================================
+   0000:0a:00.0 '82599ES 10-Gigabit' if=eth2 drv=ixgbe unused=igb_uio
 
-add_5tuple_filter (port_id) dst_ip (dst_address) src_ip (src_address) dst_port (dst_port_value) src_port (src_port_value)
-protocol (protocol_value) mask (mask_value) flags (flags_value) priority (prio_value) queue (queue_id) index (idx)
+To remove a port created by a virtual device, above steps are not needed.
 
-The available information parameters are:
-
-*   port_id: the port which the 5-tuple filter assigned on.
+port start
+~~~~~~~~~~
 
-*   dst_address: destination IP address.
+Start all ports or a specific port::
 
-*   src_address: source IP address.
+   testpmd> port start (port_id|all)
 
-*   dst_port_value: TCP/UDP destination port.
+port stop
+~~~~~~~~~
 
-*   src_port_value: TCP/UDP source port.
+Stop all ports or a specific port::
 
-*   protocol_value: L4 protocol.
+   testpmd> port stop (port_id|all)
 
-*   mask_value: participates in the match or not by bit for field above, 1b means participate
+port close
+~~~~~~~~~~
 
-*   flags_value: TCP control bits. The non-zero value is invalid, when the protocol_value is not set to 0x06 (TCP).
+Close all ports or a specific port::
 
-*   prio_value: the priority of this filter.
+   testpmd> port close (port_id|all)
 
-*   queue_id: The receive queue associated with this 5-tuple filter.
+port start/stop queue
+~~~~~~~~~~~~~~~~~~~~~
 
-*   index: the index of this 5-tuple filter
+Start/stop a rx/tx queue on a specific port::
 
-Example:
+   testpmd> port (port_id) (rxq|txq) (queue_id) (start|stop)
 
-.. code-block:: console
+Only take effect when port is started.
 
-    testpmd> add_5tuple_filter 1 dst_ip 2.2.2.5 src_ip 2.2.2.4 dst_port 64 src_port 32 protocol 0x06 mask 0x1F flags 0x0 priority 3 queue 3 index 0
+port config - speed
+~~~~~~~~~~~~~~~~~~~
 
-remove_5tuple_filter
-~~~~~~~~~~~~~~~~~~~~
+Set the speed and duplex mode for all ports or a specific port::
 
-Remove a 5-tuple filter
+   testpmd> port config (port_id|all) speed (10|100|1000|10000|auto) \
+            duplex (half|full|auto)
 
-remove_5tuple_filter (port_id) index (idx)
+port config - queues/descriptors
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
 
-get_5tuple_filter
-~~~~~~~~~~~~~~~~~
+Set number of queues/descriptors for rxq, txq, rxd and txd::
 
-Get and display a 5-tuple filter
+   testpmd> port config all (rxq|txq|rxd|txd) (value)
 
-get_5tuple_filter (port_id) index (idx)
+This is equivalent to the ``--rxq``, ``--txq``, ``--rxd`` and ``--txd`` command-line options.
 
-Example:
+port config - max-pkt-len
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-.. code-block:: console
+Set the maximum packet length::
 
-    testpmd> get_5tuple_filter 1 index 0
+   testpmd> port config all max-pkt-len (value)
 
-    filter[0]:
-        Destination IP: 0x02020205 mask: 1
-        Source IP: 0x02020204 mask: 1
-        Destination Port: 0x0040 mask: 1
-        Source Port: 0x0020 mask: 1
-        protocol: 0x06 mask: 1
-        priority: 3 flags: 0x00 queue: 3
+This is equivalent to the ``--max-pkt-len`` command-line option.
 
-add_syn_filter
-~~~~~~~~~~~~~~
+port config - CRC Strip
+~~~~~~~~~~~~~~~~~~~~~~~
 
-Add SYN filter, which can forward TCP packets whose *SYN* flag is set into a separate queue.
+Set hardware CRC stripping on or off for all ports::
 
-add_syn_filter (port_id) priority (high|low) queue (queue_id)
+   testpmd> port config all crc-strip (on|off)
 
-The available information parameters are:
+CRC stripping is off by default.
 
-*   port_id: the port which the SYN filter assigned on.
+The ``on`` option is equivalent to the ``--crc-strip`` command-line option.
 
-*   high: this SYN filter has higher priority than other filters.
+port config - RX Checksum
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-*   low: this SYN filter has lower priority than other filters.
+Set hardware RX checksum offload to on or off for all ports::
 
-*   queue_id: The receive queue associated with this SYN filter
+   testpmd> port config all rx-cksum (on|off)
 
-Example:
+Checksum offload is off by default.
 
-.. code-block:: console
+The ``on`` option is equivalent to the ``--enable-rx-cksum`` command-line option.
 
-    testpmd> add_syn_filter 0 priority high queue 3,
+port config - VLAN
+~~~~~~~~~~~~~~~~~~
 
-remove_syn_filter
-~~~~~~~~~~~~~~~~~
+Set hardware VLAN on or off for all ports::
 
-Remove SYN filter
+   testpmd> port config all hw-vlan (on|off)
 
-remove_syn_filter (port_id)
+Hardware VLAN is on by default.
 
-get_syn_filter
-~~~~~~~~~~~~~~
+The ``off`` option is equivalent to the ``--disable-hw-vlan`` command-line option.
 
-Get and display SYN filter
+port config - VLAN filter
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-get_syn_filter (port_id)
+Set hardware VLAN filter on or off for all ports::
 
-Example:
+   testpmd> port config all hw-vlan-filter (on|off)
 
-.. code-block:: console
+Hardware VLAN filter is on by default.
 
-    testpmd> get_syn_filter 0
+The ``off`` option is equivalent to the ``--disable-hw-vlan-filter`` command-line option.
 
-    syn filter: on, priority: high, queue: 3
+port config - VLAN strip
+~~~~~~~~~~~~~~~~~~~~~~~~
 
-add_flex_filter
-~~~~~~~~~~~~~~~
+Set hardware VLAN strip on or off for all ports::
 
-Add a Flex filter,
-which recognizes any arbitrary pattern within the first 128 bytes of the packet
-and routes packets into one of the receive queues.
+   testpmd> port config all hw-vlan-strip (on|off)
 
-add_flex_filter (port_id) len (len_value) bytes (bytes_string) mask (mask_value)
-priority (prio_value) queue (queue_id) index (idx)
+Hardware VLAN strip is on by default.
 
-The available information parameters are:
+The ``off`` option is equivalent to the ``--disable-hw-vlan-strip`` command-line option.
 
-*   port_id: the port which the Flex filter assigned on.
+port config - VLAN extend
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-*   len_value: filter length in byte, no greater than 128.
+Set hardware VLAN extend on or off for all ports::
 
-*   bytes_string: a sting in format of octal, means the value the flex filter need to match.
+   testpmd> port config all hw-vlan-extend (on|off)
 
-*   mask_value: a sting in format of octal, bit 1 means corresponding byte in DWORD participates in the match.
+Hardware VLAN extend is off by default.
 
-*   prio_value: the priority of this filter.
+The ``off`` option is equivalent to the ``--disable-hw-vlan-extend`` command-line option.
 
-*   queue_id: The receive queue associated with this Flex filter.
+port config - Drop Packets
+~~~~~~~~~~~~~~~~~~~~~~~~~~
 
-*   index: the index of this Flex filter
+Set packet drop for packets with no descriptors on or off for all ports::
 
-Example:
+   testpmd> port config all drop-en (on|off)
 
-.. code-block:: console
+Packet dropping for packets with no descriptors is off by default.
 
-   testpmd> add_flex_filter 0 len 16 bytes 0x00000000000000000000000008060000 mask 000C priority 3 queue 3 index 0
+The ``on`` option is equivalent to the ``--enable-drop-en`` command-line option.
 
-Assign a packet whose 13th and 14th bytes are 0x0806 to queue 3.
+port config - RSS
+~~~~~~~~~~~~~~~~~
 
-remove_flex_filter
-~~~~~~~~~~~~~~~~~~
+Set the RSS (Receive Side Scaling) mode on or off::
 
-Remove a Flex filter
+   testpmd> port config all rss (all|ip|tcp|udp|sctp|ether|none)
 
-remove_flex_filter (port_id) index (idx)
+RSS is on by default.
 
-get_flex_filter
-~~~~~~~~~~~~~~~
+The ``none`` option is equivalent to the ``--disable-rss`` command-line option.
 
-Get and display a Flex filter
+port config - RSS Reta
+~~~~~~~~~~~~~~~~~~~~~~
 
-get_flex_filter (port_id) index (idx)
+Set the RSS (Receive Side Scaling) redirection table::
 
-Example:
+   testpmd> port config all rss reta (hash,queue)[,(hash,queue)]
 
-.. code-block:: console
+port config - DCB
+~~~~~~~~~~~~~~~~~
 
-    testpmd> get_flex_filter 0 index 0
+Set the DCB mode for an individual port::
 
-    filter[0]:
+   testpmd> port config (port_id) dcb vt (on|off) (traffic_class) pfc (on|off)
 
-        length: 16
+The traffic class should be 4 or 8.
 
-        dword[]: 0x00000000 00000000 00000000 08060000 00000000 00000000 00000000
-    00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
-    00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
-    00000000 00000000 00000000 00000000 00000000 00000000 00000000
+port config - Burst
+~~~~~~~~~~~~~~~~~~~
 
-        mask[]:
-    0b0000000000001100000000000000000000000000000000000000000000000000000000
-    0000000000000000000000000000000000000000000000000000000000
+Set the number of packets per burst::
 
-        priority: 3   queue: 3
+   testpmd> port config all burst (value)
 
-set link up
-~~~~~~~~~~~
+This is equivalent to the ``--burst`` command-line option.
 
-Set link up for a port.
+port config - Threshold
+~~~~~~~~~~~~~~~~~~~~~~~
 
-set link-up port (port id)
+Set thresholds for TX/RX queues::
 
-set link down
-~~~~~~~~~~~~~
+   testpmd> port config all (threshold) (value)
 
-Set link down for a port.
+Where the threshold type can be:
 
-set link-down port (port id)
+* ``txpt:`` Set the prefetch threshold register of the TX rings, 0 <= value <= 255.
 
-Port Functions
---------------
+* ``txht:`` Set the host threshold register of the TX rings, 0 <= value <= 255.
 
-The following sections show functions for configuring ports.
+* ``txwt:`` Set the write-back threshold register of the TX rings, 0 <= value <= 255.
 
-.. note::
+* ``rxpt:`` Set the prefetch threshold register of the RX rings, 0 <= value <= 255.
 
-    Port configuration changes only become active when forwarding is started/restarted.
+* ``rxht:`` Set the host threshold register of the RX rings, 0 <= value <= 255.
 
-port start
-~~~~~~~~~~
+* ``rxwt:`` Set the write-back threshold register of the RX rings, 0 <= value <= 255.
 
-Start all ports or a specific port:
+* ``txfreet:`` Set the transmit free threshold of the TX rings, 0 <= value <= txd.
 
-port start (port_id|all)
+* ``rxfreet:`` Set the transmit free threshold of the RX rings, 0 <= value <= rxd.
 
-port stop
-~~~~~~~~~
+* ``txrst:`` Set the transmit RS bit threshold of TX rings, 0 <= value <= txd.
 
-Stop all ports or a specific port:
+These threshold options are also available from the command-line.
 
-port stop (port_id|all)
 
-port close
-~~~~~~~~~~
+Link Bonding Functions
+----------------------
 
-Close all ports or a specific port:
+The Link Bonding functions make it possible to dynamically create and
+manage link bonding devices from within testpmd interactive prompt.
 
-port close (port_id|all)
+create bonded device
+~~~~~~~~~~~~~~~~~~~~
 
-port config - speed
-~~~~~~~~~~~~~~~~~~~
+Create a new bonding device::
 
-Set the speed and duplex mode for all ports or a specific port:
+   testpmd> create bonded device (mode) (socket)
 
-port config (port_id|all) speed (10|100|1000|10000|auto) duplex (half|full|auto)
+For example, to create a bonded device in mode 1 on socket 0::
 
-port config - queues/descriptors
-~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+   testpmd> create bonded 1 0
+   created new bonded device (port X)
 
-Set number of queues/descriptors for rxq, txq, rxd and txd:
+add bonding slave
+~~~~~~~~~~~~~~~~~
 
-port config all (rxq|txq|rxd|txd) (value)
+Adds Ethernet device to a Link Bonding device::
 
-This is equivalent to the --rxq, --txq, --rxd and --txd command-line options.
+   testpmd> add bonding slave (slave id) (port id)
 
-port config - max-pkt-len
-~~~~~~~~~~~~~~~~~~~~~~~~~
+For example, to add Ethernet device (port 6) to a Link Bonding device (port 10)::
 
-Set the maximum packet length:
+   testpmd> add bonding slave 6 10
 
-port config all max-pkt-len (value)
 
-This is equivalent to the --max-pkt-len command-line option.
+remove bonding slave
+~~~~~~~~~~~~~~~~~~~~
 
-port config - CRC Strip
-~~~~~~~~~~~~~~~~~~~~~~~
+Removes an Ethernet slave device from a Link Bonding device::
 
-Set hardware CRC stripping on or off for all ports:
+   testpmd> remove bonding slave (slave id) (port id)
 
-port config all crc-strip (on|off)
+For example, to remove Ethernet slave device (port 6) to a Link Bonding device (port 10)::
 
-CRC stripping is off by default.
+   testpmd> remove bonding slave 6 10
 
-The on option is equivalent to the --crc-strip command-line option.
+set bonding mode
+~~~~~~~~~~~~~~~~
 
-port config - RX Checksum
-~~~~~~~~~~~~~~~~~~~~~~~~~
+Set the Link Bonding mode of a Link Bonding device::
 
-Set hardware RX checksum offload to on or off for all ports:
+   testpmd> set bonding mode (value) (port id)
 
-port config all rx-cksum (on|off)
+For example, to set the bonding mode of a Link Bonding device (port 10) to broadcast (mode 3)::
 
-Checksum offload is off by default.
+   testpmd> set bonding mode 3 10
 
-The on option is equivalent to the --enable-rx-cksum command-line option.
+set bonding primary
+~~~~~~~~~~~~~~~~~~~
 
-port config - VLAN
-~~~~~~~~~~~~~~~~~~
+Set an Ethernet slave device as the primary device on a Link Bonding device::
 
-Set hardware VLAN on or off for all ports:
+   testpmd> set bonding primary (slave id) (port id)
 
-port config all hw-vlan (on|off)
+For example, to set the Ethernet slave device (port 6) as the primary port of a Link Bonding device (port 10)::
 
-Hardware VLAN is on by default.
+   testpmd> set bonding primary 6 10
 
-The off option is equivalent to the --disable-hw-vlan command-line option.
+set bonding mac
+~~~~~~~~~~~~~~~
 
-port config - Drop Packets
-~~~~~~~~~~~~~~~~~~~~~~~~~~
+Set the MAC address of a Link Bonding device::
 
-Set packet drop for packets with no descriptors on or off for all ports:
+   testpmd> set bonding mac (port id) (mac)
 
-port config all drop-en (on|off)
+For example, to set the MAC address of a Link Bonding device (port 10) to 00:00:00:00:00:01::
 
-Packet dropping for packets with no descriptors is off by default.
+   testpmd> set bonding mac 10 00:00:00:00:00:01
 
-The on option is equivalent to the --enable-drop-en command-line option.
+set bonding xmit_balance_policy
+~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
 
-port config - RSS
-~~~~~~~~~~~~~~~~~
+Set the transmission policy for a Link Bonding device when it is in Balance XOR mode::
 
-Set the RSS (Receive Side Scaling) mode on or off:
+   testpmd> set bonding xmit_balance_policy (port_id) (l2|l23|l34)
 
-port config all rss (ip|udp|none)
+For example, set a Link Bonding device (port 10) to use a balance policy of layer 3+4 (IP addresses & UDP ports)::
 
-RSS is on by default.
+   testpmd> set bonding xmit_balance_policy 10 l34
 
-The off option is equivalent to the --disable-rss command-line option.
 
-port config - RSS Reta
+set bonding mon_period
 ~~~~~~~~~~~~~~~~~~~~~~
 
-Set the RSS (Receive Side Scaling) redirection table:
+Set the link status monitoring polling period in milliseconds for a bonding device.
 
-port config all rss reta (hash,queue)[,(hash,queue)]
+This adds support for PMD slave devices which do not support link status interrupts.
+When the mon_period is set to a value greater than 0 then all PMD's which do not support
+link status ISR will be queried every polling interval to check if their link status has changed::
 
-port config - DCB
-~~~~~~~~~~~~~~~~~
+   testpmd> set bonding mon_period (port_id) (value)
 
-Set the DCB mode for an individual port:
+For example, to set the link status monitoring polling period of bonded device (port 5) to 150ms::
 
-port config (port_id) dcb vt (on|off) (traffic_class) pfc (on|off)
+   testpmd> set bonding mon_period 5 150
 
-The traffic class should be 4 or 8.
 
-port config - Burst
+show bonding config
 ~~~~~~~~~~~~~~~~~~~
 
-Set the number of packets per burst:
-
-port config all burst (value)
+Show the current configuration of a Link Bonding device::
 
-This is equivalent to the --burst command-line option.
+   testpmd> show bonding config (port id)
 
-port config - Threshold
-~~~~~~~~~~~~~~~~~~~~~~~
+For example,
+to show the configuration a Link Bonding device (port 9) with 3 slave devices (1, 3, 4)
+in balance mode with a transmission policy of layer 2+3::
 
-Set thresholds for TX/RX queues:
+   testpmd> show bonding config 9
+        Bonding mode: 2
+        Balance Xmit Policy: BALANCE_XMIT_POLICY_LAYER23
+        Slaves (3): [1 3 4]
+        Active Slaves (3): [1 3 4]
+        Primary: [3]
 
-port config all (threshold) (value)
 
-Where the threshold type can be:
+Register Functions
+------------------
 
-*   txpt: Set the prefetch threshold register of the TX rings, 0 <= value <= 255.
+The Register Functions can be used to read from and write to registers on the network card referenced by a port number.
+This is mainly useful for debugging purposes.
+Reference should be made to the appropriate datasheet for the network card for details on the register addresses
+and fields that can be accessed.
 
-*   txht: Set the host threshold register of the TX rings, 0 <= value <= 255.
+read reg
+~~~~~~~~
 
-*   txwt: Set the write-back threshold register of the TX rings, 0 <= value <= 255.
+Display the value of a port register::
 
-*   rxpt: Set the prefetch threshold register of the RX rings, 0 <= value <= 255.
+   testpmd> read reg (port_id) (address)
 
-*   rxht: Set the host threshold register of the RX rings, 0 <= value <= 255.
+For example, to examine the Flow Director control register (FDIRCTL, 0x0000EE000) on an Intel 82599 10 GbE Controller::
 
-*   rxwt: Set the write-back threshold register of the RX rings, 0 <= value <= 255.
+   testpmd> read reg 0 0xEE00
+   port 0 PCI register at offset 0xEE00: 0x4A060029 (1241907241)
 
-*   txfreet: Set the transmit free threshold of the TX rings, 0 <= value <= txd.
+read regfield
+~~~~~~~~~~~~~
 
-*   rxfreet: Set the transmit free threshold of the RX rings, 0 <= value <= rxd.
+Display a port register bit field::
 
-*   txrst: Set the transmit RS bit threshold of TX rings, 0 <= value <= txd.
-    These threshold options are also available from the command-line.
+   testpmd> read regfield (port_id) (address) (bit_x) (bit_y)
 
-Flow Director Functions
------------------------
+For example, reading the lowest two bits from the register in the example above::
 
-The Flow Director works in receive mode to identify specific flows or sets of flows and route them to specific queues.
+   testpmd> read regfield 0 0xEE00 0 1
+   port 0 PCI register at offset 0xEE00: bits[0, 1]=0x1 (1)
 
-Two types of filtering are supported which are referred to as Perfect Match and Signature filters:
+read regbit
+~~~~~~~~~~~
 
-*   Perfect match filters.
-    The hardware checks a match between the masked fields of the received packets and the programmed filters.
+Display a single port register bit::
 
-*   Signature filters.
-    The hardware checks a match between a hash-based signature of the masked fields of the received packet.
+   testpmd> read regbit (port_id) (address) (bit_x)
 
-The Flow Director filters can match the following fields in a packet:
+For example, reading the lowest bit from the register in the example above::
 
-*   Source IP and destination IP addresses.
+   testpmd> read regbit 0 0xEE00 0
+   port 0 PCI register at offset 0xEE00: bit 0=1
 
-*   Source port and destination port numbers (for UDP and TCP packets).
+write reg
+~~~~~~~~~
 
-*   IPv4/IPv6 and UDP/ TCP/SCTP protocol match.
+Set the value of a port register::
 
-*   VLAN header.
+   testpmd> write reg (port_id) (address) (value)
 
-*   Flexible 2-byte tuple match anywhere in the first 64 bytes of the packet.
+For example, to clear a register::
 
-The Flow Director can also mask out parts of all of these fields so that filters are only applied to certain fields
-or parts of the fields.
-For example it is possible to mask out sub-nets of IP addresses or to ignore VLAN headers.
+   testpmd> write reg 0 0xEE00 0x0
+   port 0 PCI register at offset 0xEE00: 0x00000000 (0)
 
-In the following sections, several common parameters are used in the Flow Director filters.
-These are explained below:
+write regfield
+~~~~~~~~~~~~~~
 
-*   src: A pair of source address values. The source IP, in IPv4 or IPv6 format, and the source port:
+Set bit field of a port register::
 
-    src 192.168.0.1 1024
+   testpmd> write regfield (port_id) (address) (bit_x) (bit_y) (value)
 
-    src 2001:DB8:85A3:0:0:8A2E:370:7000 1024
+For example, writing to the register cleared in the example above::
 
-*   dst: A pair of destination address values. The destination IP, in IPv4 or IPv6 format, and the destination port.
+   testpmd> write regfield 0 0xEE00 0 1 2
+   port 0 PCI register at offset 0xEE00: 0x00000002 (2)
 
-*   flexbytes: A 2-byte tuple to be matched within the first 64 bytes of a packet.
+write regbit
+~~~~~~~~~~~~
 
-The offset where the match occurs is set by the --pkt-filter-flexbytes-offset command-line parameter
-and is counted from the first byte of the destination Ethernet MAC address.
-The default offset is 0xC bytes, which is the "Type" word in the MAC header.
-Typically, the flexbyte value is set to 0x0800 to match the IPv4 MAC type or 0x86DD to match IPv6.
-These values change when a VLAN tag is added.
+Set single bit value of a port register::
 
-*   vlan: The VLAN header to match in the packet.
+   testpmd> write regbit (port_id) (address) (bit_x) (value)
 
-*   queue: The index of the RX queue to route matched packets to.
+For example, to set the high bit in the register from the example above::
 
-*   soft: The 16-bit value in the MBUF flow director ID field for RX packets matching the filter.
+   testpmd> write regbit 0 0xEE00 31 1
+   port 0 PCI register at offset 0xEE00: 0x8000000A (2147483658)
 
-add_signature_filter
-~~~~~~~~~~~~~~~~~~~~
 
-Add a signature filter:
+Filter Functions
+----------------
 
-# Command is displayed on several lines for clarity.
+This section details the available filter functions that are available.
 
-add_signature_filter (port_id) (ip|udp|tcp|sctp)
+ethertype_filter
+~~~~~~~~~~~~~~~~~~~~
 
-    src (src_ip_address) (src_port)
+Add or delete a L2 Ethertype filter, which identify packets by their L2 Ethertype mainly assign them to a receive queue::
 
-    dst (dst_ip_address) (dst_port)
+   ethertype_filter (port_id) (add|del) (mac_addr|mac_ignr) (mac_address) \
+                    ethertype (ether_type) (drop|fwd) queue (queue_id)
 
-    flexbytes (flexbytes_values)
+The available information parameters are:
 
-    vlan (vlan_id) queue (queue_id)
+* ``port_id``: The port which the Ethertype filter assigned on.
 
-upd_signature_filter
-~~~~~~~~~~~~~~~~~~~~
+* ``mac_addr``: Compare destination mac address.
 
-Update a signature filter:
+* ``mac_ignr``: Ignore destination mac address match.
 
-# Command is displayed on several lines for clarity.
+* ``mac_address``: Destination mac address to match.
 
-upd_signature_filter (port_id) (ip|udp|tcp|sctp)
+* ``ether_type``: The EtherType value want to match,
+  for example 0x0806 for ARP packet. 0x0800 (IPv4) and 0x86DD (IPv6) are invalid.
 
-    src (src_ip_address) (src_port)
+* ``queue_id``: The receive queue associated with this EtherType filter.
+  It is meaningless when deleting or dropping.
 
-    dst (dst_ip_address) (dst_port)
+Example, to add/remove an ethertype filter rule::
 
-    flexbytes (flexbytes_values)
+   testpmd> ethertype_filter 0 add mac_ignr 00:11:22:33:44:55 \
+                             ethertype 0x0806 fwd queue 3
 
-    vlan (vlan_id) queue (queue_id)
+   testpmd> ethertype_filter 0 del mac_ignr 00:11:22:33:44:55 \
+                             ethertype 0x0806 fwd queue 3
 
-rm_signature_filter
-~~~~~~~~~~~~~~~~~~~
+2tuple_filter
+~~~~~~~~~~~~~~~~~
 
-Remove a signature filter:
+Add or delete a 2-tuple filter,
+which identifies packets by specific protocol and destination TCP/UDP port
+and forwards packets into one of the receive queues::
 
-# Command is displayed on several lines for clarity.
+   2tuple_filter (port_id) (add|del) dst_port (dst_port_value) \
+                 protocol (protocol_value) mask (mask_value) \
+                 tcp_flags (tcp_flags_value) priority (prio_value) \
+                 queue (queue_id)
 
-rm_signature_filter (port_id) (ip|udp|tcp|sctp)
+The available information parameters are:
 
-    src (src_ip_address) (src_port)
+* ``port_id``: The port which the 2-tuple filter assigned on.
 
-    dst (dst_ip_address) (dst_port)
+* ``dst_port_value``: Destination port in L4.
 
-    flexbytes (flexbytes_values)
+* ``protocol_value``: IP L4 protocol.
 
-    vlan (vlan_id)
+* ``mask_value``: Participates in the match or not by bit for field above, 1b means participate.
 
-add_perfect_filter
-~~~~~~~~~~~~~~~~~~
+* ``tcp_flags_value``: TCP control bits. The non-zero value is invalid, when the pro_value is not set to 0x06 (TCP).
 
-Add a perfect filter:
+* ``prio_value``: Priority of this filter.
 
-# Command is displayed on several lines for clarity.
+* ``queue_id``: The receive queue associated with this 2-tuple filter.
 
-add_perfect_filter (port_id) (ip|udp|tcp|sctp)
+Example, to add/remove an 2tuple filter rule::
 
-    src (src_ip_address) (src_port)
+   testpmd> 2tuple_filter 0 add dst_port 32 protocol 0x06 mask 0x03 \
+                          tcp_flags 0x02 priority 3 queue 3
 
-    dst (dst_ip_address) (dst_port)
+   testpmd> 2tuple_filter 0 del dst_port 32 protocol 0x06 mask 0x03 \
+                          tcp_flags 0x02 priority 3 queue 3
 
-    flexbytes (flexbytes_values)
+5tuple_filter
+~~~~~~~~~~~~~~~~~
 
-    vlan (vlan_id) queue (queue_id) soft (soft_id)
+Add or delete a 5-tuple filter,
+which consists of a 5-tuple (protocol, source and destination IP addresses, source and destination TCP/UDP/SCTP port)
+and routes packets into one of the receive queues::
 
-upd_perfect_filter
-~~~~~~~~~~~~~~~~~~
+   5tuple_filter (port_id) (add|del) dst_ip (dst_address) src_ip \
+                 (src_address) dst_port (dst_port_value) \
+                 src_port (src_port_value) protocol (protocol_value) \
+                 mask (mask_value) tcp_flags (tcp_flags_value) \
+                 priority (prio_value) queue (queue_id)
 
-Update a perfect filter:
+The available information parameters are:
 
-# Command is displayed on several lines for clarity.
+* ``port_id``: The port which the 5-tuple filter assigned on.
 
-upd_perfect_filter (port_id) (ip|udp|tcp|sctp)
+* ``dst_address``: Destination IP address.
 
-    src (src_ip_address) (src_port)
+* ``src_address``: Source IP address.
 
-    dst (dst_ip_address) (dst_port)
+* ``dst_port_value``: TCP/UDP destination port.
 
-    flexbytes (flexbytes_values)
+* ``src_port_value``: TCP/UDP source port.
 
-    vlan (vlan_id) queue (queue_id)
+* ``protocol_value``: L4 protocol.
 
-rm_perfect_filter
-~~~~~~~~~~~~~~~~~
+* ``mask_value``: Participates in the match or not by bit for field above, 1b means participate
 
-Remove a perfect filter:
+* ``tcp_flags_value``: TCP control bits. The non-zero value is invalid, when the protocol_value is not set to 0x06 (TCP).
 
-rm_perfect_filter (port_id) (ip|udp|tcp|sctp)
+* ``prio_value``: The priority of this filter.
 
-    src (src_ip_address) (src_port)
+* ``queue_id``: The receive queue associated with this 5-tuple filter.
 
-    dst (dst_ip_address) (dst_port)
+Example, to add/remove an 5tuple filter rule::
 
-    flexbytes (flexbytes_values)
+   testpmd> 5tuple_filter 0 add dst_ip 2.2.2.5 src_ip 2.2.2.4 \
+            dst_port 64 src_port 32 protocol 0x06 mask 0x1F \
+            flags 0x0 priority 3 queue 3
 
-    vlan (vlan_id) soft (soft_id)
+   testpmd> 5tuple_filter 0 del dst_ip 2.2.2.5 src_ip 2.2.2.4 \
+            dst_port 64 src_port 32 protocol 0x06 mask 0x1F \
+            flags 0x0 priority 3 queue 3
 
-set_masks_filter
-~~~~~~~~~~~~~~~~
+syn_filter
+~~~~~~~~~~
 
-Set IPv4 filter masks:
+Using the  SYN filter, TCP packets whose *SYN* flag is set can be forwarded to a separate queue::
 
-# Command is displayed on several lines for clarity.
+   syn_filter (port_id) (add|del) priority (high|low) queue (queue_id)
 
-set_masks_filter (port_id) only_ip_flow (0|1)
+The available information parameters are:
 
-    src_mask (ip_src_mask) (src_port_mask)
+* ``port_id``: The port which the SYN filter assigned on.
 
-    dst_mask (ip_dst_mask) (dst_port_mask)
+* ``high``: This SYN filter has higher priority than other filters.
 
-    flexbytes (0|1) vlan_id (0|1) vlan_prio (0|1)
+* ``low``: This SYN filter has lower priority than other filters.
 
-set_ipv6_masks_filter
-~~~~~~~~~~~~~~~~~~~~~
+* ``queue_id``: The receive queue associated with this SYN filter
 
-Set IPv6 filter masks:
+Example::
 
-# Command is displayed on several lines for clarity.
+   testpmd> syn_filter 0 add priority high queue 3
 
-set_ipv6_masks_filter (port_id) only_ip_flow (0|1)
+flex_filter
+~~~~~~~~~~~
 
-    src_mask (ip_src_mask) (src_port_mask)
+With flex filter, packets can be recognized by any arbitrary pattern within the first 128 bytes of the packet
+and routed into one of the receive queues::
 
-    dst_mask (ip_dst_mask) (dst_port_mask)
+   flex_filter (port_id) (add|del) len (len_value) bytes (bytes_value) \
+               mask (mask_value) priority (prio_value) queue (queue_id)
 
-    flexbytes (0|1) vlan_id (0|1) vlan_prio (0|1)
+The available information parameters are:
 
-    compare_dst (0|1)
+* ``port_id``: The port which the Flex filter is assigned on.
 
-Link Bonding Functions
-----------------------
+* ``len_value``: Filter length in bytes, no greater than 128.
 
-The Link Bonding functions make it possible to dynamically create and
-manage link bonding devices from within testpmd interactive prompt.
+* ``bytes_value``: A string in hexadecimal, means the value the flex filter needs to match.
 
-create bonded device
-~~~~~~~~~~~~~~~~~~~~
+* ``mask_value``: A string in hexadecimal, bit 1 means corresponding byte participates in the match.
 
-Create a new bonding device:
+* ``prio_value``: The priority of this filter.
 
-create bonded device (mode) (socket)
+* ``queue_id``: The receive queue associated with this Flex filter.
 
-For example, to create a bonded device in mode 1 on socket 0.
+Example::
 
-.. code-block:: console
+   testpmd> flex_filter 0 add len 16 bytes 0x00000000000000000000000008060000 \
+                          mask 000C priority 3 queue 3
 
-    testpmd> create bonded 1 0
-    created new bonded device (port X)
+   testpmd> flex_filter 0 del len 16 bytes 0x00000000000000000000000008060000 \
+                          mask 000C priority 3 queue 3
 
-add bonding slave
-~~~~~~~~~~~~~~~~~
 
-Adds Ethernet device to a Link Bonding device:
+.. _testpmd_flow_director:
 
-add bonding slave (slave id) (port id)
+flow_director_filter
+~~~~~~~~~~~~~~~~~~~~
 
-For example, to add Ethernet device (port 6) to a Link Bonding device (port 10).
+The Flow Director works in receive mode to identify specific flows or sets of flows and route them to specific queues.
 
-.. code-block:: console
+Four types of filtering are supported which are referred to as Perfect Match, Signature, Perfect-mac-vlan and
+Perfect-tunnel filters, the match mode is set by the ``--pkt-filter-mode`` command-line parameter:
 
-    testpmd> add bonding slave 6 10
+* Perfect match filters.
+  The hardware checks a match between the masked fields of the received packets and the programmed filters.
+  The masked fields are for IP flow.
 
+* Signature filters.
+  The hardware checks a match between a hash-based signature of the masked fields of the received packet.
 
-remove bonding slave
-~~~~~~~~~~~~~~~~~~~~
+* Perfect-mac-vlan match filters.
+  The hardware checks a match between the masked fields of the received packets and the programmed filters.
+  The masked fields are for MAC VLAN flow.
 
-Removes an Ethernet slave device from a Link Bonding device:
+* Perfect-tunnel match filters.
+  The hardware checks a match between the masked fields of the received packets and the programmed filters.
+  The masked fields are for tunnel flow.
 
-remove bonding slave (slave id) (port id)
+The Flow Director filters can match the different fields for different type of packet: flow type, specific input set
+per flow type and the flexible payload.
 
-For example, to remove Ethernet slave device (port 6) to a Link Bonding device (port 10).
+The Flow Director can also mask out parts of all of these fields so that filters
+are only applied to certain fields or parts of the fields.
 
-.. code-block:: console
+Different NICs may have different capabilities, command show port fdir (port_id) can be used to acquire the information.
 
-    testpmd> remove bonding slave 6 10
+# Commands to add flow director filters of different flow types::
 
-set bonding mode
-~~~~~~~~~~~~~~~~
+   flow_director_filter (port_id) mode IP (add|del|update) \
+                        flow (ipv4-other|ipv4-frag|ipv6-other|ipv6-frag)
+                        src (src_ip_address) dst (dst_ip_address) \
+                        vlan (vlan_value) flexbytes (flexbytes_value) \
+                        (drop|fwd) pf|vf(vf_id) queue (queue_id) \
+                        fd_id (fd_id_value)
 
-Set the Link Bonding mode of a Link Bonding device:
+   flow_director_filter (port_id) mode IP (add|del|update) \
+                        flow (ipv4-tcp|ipv4-udp|ipv6-tcp|ipv6-udp) \
+                        src (src_ip_address) (src_port) \
+                        dst (dst_ip_address) (dst_port) \
+                        vlan (vlan_value) flexbytes (flexbytes_value) \
+                        (drop|fwd) queue pf|vf(vf_id) (queue_id) \
+                        fd_id (fd_id_value)
 
-set bonding mode (value) (port id)
+   flow_director_filter (port_id) mode IP (add|del|update) \
+                        flow (ipv4-sctp|ipv6-sctp) \
+                        src (src_ip_address) (src_port) \
+                        dst (dst_ip_address) (dst_port)
+                        tag (verification_tag) vlan (vlan_value) \
+                        flexbytes (flexbytes_value) (drop|fwd) \
+                        pf|vf(vf_id) queue (queue_id) fd_id (fd_id_value)
 
-For example, to set the bonding mode of a Link Bonding device (port 10) to broadcast (mode 3).
+   flow_director_filter (port_id) mode IP (add|del|update) flow l2_payload \
+                        ether (ethertype) flexbytes (flexbytes_value) \
+                        (drop|fwd) pf|vf(vf_id) queue (queue_id)
+                        fd_id (fd_id_value)
 
-.. code-block:: console
+   flow_director_filter (port_id) mode MAC-VLAN (add|del|update) \
+                        mac (mac_address) vlan (vlan_value) \
+                        flexbytes (flexbytes_value) (drop|fwd) \
+                        queue (queue_id) fd_id (fd_id_value)
 
-    testpmd> set bonding mode 3 10
+   flow_director_filter (port_id) mode Tunnel (add|del|update) \
+                        mac (mac_address) vlan (vlan_value) \
+                        tunnel (NVGRE|VxLAN) tunnel-id (tunnel_id_value) \
+                        flexbytes (flexbytes_value) (drop|fwd) \
+                        queue (queue_id) fd_id (fd_id_value)
 
-set bonding primary
-~~~~~~~~~~~~~~~~~~~
+For example, to add an ipv4-udp flow type filter::
 
-Set an Ethernet slave device as the primary device on a Link Bonding device:
+   testpmd> flow_director_filter 0 add flow ipv4-udp src 2.2.2.3 32 \
+            dst 2.2.2.5 33 vlan 0x1 flexbytes (0x88,0x48) fwd pf queue 1 fd_id 1
 
-set bonding primary (slave id) (port id)
+For example, add an ipv4-other flow type filter::
 
-For example, to set the Ethernet slave device (port 6) as the primary port of a Link Bonding device (port 10).
+   testpmd> flow_director_filter 0 add flow ipv4-other src 2.2.2.3 \
+             dst 2.2.2.5 vlan 0x1 flexbytes (0x88,0x48) fwd pf queue 1 fd_id 1
 
-.. code-block:: console
+flush_flow_director
+~~~~~~~~~~~~~~~~~~~
 
-    testpmd> set bonding primary 6 10
+Flush all flow director filters on a device::
 
-set bonding mac
-~~~~~~~~~~~~~~~
+   testpmd> flush_flow_director (port_id)
 
-Set the MAC address of a Link Bonding device:
+Example, to flush all flow director filter on port 0::
 
-set bonding mac (port id) (mac)
+   testpmd> flush_flow_director 0
 
-For example, to set the MAC address of a Link Bonding device (port 10) to 00:00:00:00:00:01
+flow_director_mask
+~~~~~~~~~~~~~~~~~~
 
-.. code-block:: console
+Set flow director's input masks::
 
-    testpmd> set bonding mac 10 00:00:00:00:00:01
+   flow_director_mask (port_id) mode IP vlan (vlan_value) \
+                      src_mask (ipv4_src) (ipv6_src) (src_port) \
+                      dst_mask (ipv4_dst) (ipv6_dst) (dst_port)
 
-set bonding xmit_balance_policy
-~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
+   flow_director_mask (port_id) mode MAC-VLAN vlan (vlan_value) \
+                      mac (mac_value)
 
-Set the transmission policy for a Link Bonding device when it is in Balance XOR mode:
+   flow_director_mask (port_id) mode Tunnel vlan (vlan_value) \
+                      mac (mac_value) tunnel-type (tunnel_type_value) \
+                      tunnel-id (tunnel_id_value)
 
-set bonding xmit_balance_policy (port_id) (l2|l23|l34)
+Example, to set flow director mask on port 0::
 
-For example, set a Link Bonding device (port 10) to use a balance policy of layer 3+4 (IP addresses & UDP ports )
+   testpmd> flow_director_mask 0 vlan 0xefff \
+            src_mask 255.255.255.255 \
+                FFFF:FFFF:FFFF:FFFF:FFFF:FFFF:FFFF:FFFF 0xFFFF \
+            dst_mask 255.255.255.255 \
+                FFFF:FFFF:FFFF:FFFF:FFFF:FFFF:FFFF:FFFF 0xFFFF
 
-.. code-block:: console
+flow_director_flex_mask
+~~~~~~~~~~~~~~~~~~~~~~~
 
-    testpmd> set bonding xmit_balance_policy 10 l34
+set masks of flow director's flexible payload based on certain flow type::
 
-show bonding config
-~~~~~~~~~~~~~~~~~~~
+   testpmd> flow_director_flex_mask (port_id) \
+            flow (none|ipv4-other|ipv4-frag|ipv4-tcp|ipv4-udp|ipv4-sctp| \
+                  ipv6-other|ipv6-frag|ipv6-tcp|ipv6-udp|ipv6-sctp| \
+                  l2_payload|all) (mask)
 
-Show the current configuration of a Link Bonding device:
+Example, to set flow director's flex mask for all flow type on port 0::
 
-show bonding config (port id)
+   testpmd> flow_director_flex_mask 0 flow all \
+            (0xff,0xff,0,0,0,0,0,0,0,0,0,0,0,0,0,0)
 
-For example,
-to show the configuration a Link Bonding device (port 9) with 3 slave devices (1, 3, 4)
-in balance mode with a transmission policy of layer 2+3.
 
-.. code-block:: console
+flow_director_flex_payload
+~~~~~~~~~~~~~~~~~~~~~~~~~~
 
-    testpmd> show bonding config 9
-        Bonding mode: 2
-        Balance Xmit Policy: BALANCE_XMIT_POLICY_LAYER23
-        Slaves (3): [1 3 4]
-        Active Slaves (3): [1 3 4]
-        Primary: [3]
+Configure flexible payload selection::
 
-Register Functions
-------------------
+   flow_director_flex_payload (port_id) (raw|l2|l3|l4) (config)
 
-The Register functions can be used to read from and write to registers on the network card referenced by a port number.
-This is mainly useful for debugging purposes.
-Reference should be made to the appropriate datasheet for the network card for details on the register addresses
-and fields that can be accessed.
+For example, to select the first 16 bytes from the offset 4 (bytes) of packet's payload as flexible payload::
 
-read reg
-~~~~~~~~
+   testpmd> flow_director_flex_payload 0 l4 \
+            (4,5,6,7,8,9,10,11,12,13,14,15,16,17,18,19)
 
-Display the value of a port register:
+get_sym_hash_ena_per_port
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-read reg (port_id) (address)
+Get symmetric hash enable configuration per port::
 
-For example, to examine the Flow Director control register (FDIRCTL, 0x0000EE000) on an IntelĀ® 82599 10 GbE Controller:
+   get_sym_hash_ena_per_port (port_id)
 
-.. code-block:: console
+For example, to get symmetric hash enable configuration of port 1::
 
-    testpmd> read reg 0 0xEE00
-    port 0 PCI register at offset 0xEE00: 0x4A060029 (1241907241)
+   testpmd> get_sym_hash_ena_per_port 1
 
-read regfield
-~~~~~~~~~~~~~
+set_sym_hash_ena_per_port
+~~~~~~~~~~~~~~~~~~~~~~~~~
 
-Display a port register bit field:
+Set symmetric hash enable configuration per port to enable or disable::
 
-read regfield (port_id) (address) (bit_x) (bit_y)
+   set_sym_hash_ena_per_port (port_id) (enable|disable)
 
-For example, reading the lowest two bits from the register in the example above:
+For example, to set symmetric hash enable configuration of port 1 to enable::
 
-.. code-block:: console
+   testpmd> set_sym_hash_ena_per_port 1 enable
 
-    testpmd> read regfield 0 0xEE00 0 1
-    port 0 PCI register at offset 0xEE00: bits[0, 1]=0x1 (1)
+get_hash_global_config
+~~~~~~~~~~~~~~~~~~~~~~
 
-read regbit
-~~~~~~~~~~~
+Get the global configurations of hash filters::
 
-Display a single port register bit:
+   get_hash_global_config (port_id)
 
-read regbit (port_id) (address) (bit_x)
+For example, to get the global configurations of hash filters of port 1::
 
-For example, reading the lowest bit from the register in the example above:
+   testpmd> get_hash_global_config 1
 
-.. code-block:: console
+set_hash_global_config
+~~~~~~~~~~~~~~~~~~~~~~
 
-    testpmd> read regbit 0 0xEE00 0
-    port 0 PCI register at offset 0xEE00: bit 0=1
+Set the global configurations of hash filters::
 
-write reg
-~~~~~~~~~
+   set_hash_global_config (port_id) (toeplitz|simple_xor|default) \
+   (ipv4|ipv4-frag|ipv4-tcp|ipv4-udp|ipv4-sctp|ipv4-other|ipv6|ipv6-frag| \
+   ipv6-tcp|ipv6-udp|ipv6-sctp|ipv6-other|l2_payload) \
+   (enable|disable)
 
-Set the value of a port register:
+For example, to enable simple_xor for flow type of ipv6 on port 2::
 
-write reg (port_id) (address) (value)
+   testpmd> set_hash_global_config 2 simple_xor ipv6 enable
 
-For example, to clear a register:
+set_hash_input_set
+~~~~~~~~~~~~~~~~~~
 
-.. code-block:: console
+Set the input set for hash::
 
-    testpmd> write reg 0 0xEE00 0x0
-    port 0 PCI register at offset 0xEE00: 0x00000000 (0)
+   set_hash_input_set (port_id) (ipv4|ipv4-frag|ipv4-tcp|ipv4-udp|ipv4-sctp| \
+   ipv4-other|ipv6|ipv6-frag|ipv6-tcp|ipv6-udp|ipv6-sctp|ipv6-other| \
+   l2_payload) (ovlan|ivlan|src-ipv4|dst-ipv4|src-ipv6|dst-ipv6|ipv4-tos| \
+   ipv4-proto|ipv6-tc|ipv6-next-header|udp-src-port|udp-dst-port| \
+   tcp-src-port|tcp-dst-port|sctp-src-port|sctp-dst-port|sctp-veri-tag| \
+   udp-key|gre-key|fld-1st|fld-2nd|fld-3rd|fld-4th|fld-5th|fld-6th|fld-7th| \
+   fld-8th|none) (select|add)
 
-write regfield
-~~~~~~~~~~~~~~
+For example, to add source IP to hash input set for flow type of ipv4 on port 0::
 
-Set bit field of a port register:
+   testpmd> set_hash_input_set 0 ipv4 src-ipv4 add
 
-write regfield (port_id) (address) (bit_x) (bit_y) (value)
+set_fdir_input_set
+~~~~~~~~~~~~~~~~~~
 
-For example, writing to the register cleared in the example above:
+Set the input set for Fdir::
 
-.. code-block:: console
+   set_fdir_input_set (port_id) (ipv4|ipv4-frag|ipv4-tcp|ipv4-udp|ipv4-sctp| \
+   ipv4-other|ipv6|ipv6-frag|ipv6-tcp|ipv6-udp|ipv6-sctp|ipv6-other|l2_payload)
+   (src-ipv4|dst-ipv4|src-ipv6|dst-ipv6|udp-src-port|udp-dst-port| \
+   tcp-src-port|tcp-dst-port|sctp-src-port|sctp-dst-port|sctp-veri-tag| \
+   fld-1st|fld-2nd|fld-3rd|fld-4th|fld-5th|fld-6th|fld-7th|fld-8th|none) \
+   (select|add)
 
-    testpmd> write regfield 0 0xEE00 0 1 2
-    port 0 PCI register at offset 0xEE00: 0x00000002 (2)
+For example to add source IP to FD input set for flow type of ipv4 on port 0::
 
-write regbit
-~~~~~~~~~~~~
+   testpmd> set_fdir_input_set 0 ipv4 src-ipv4 add
 
-Set single bit value of a port register:
+global_config
+~~~~~~~~~~~~~
 
-write regbit (port_id) (address) (bit_x) (value)
+Set different GRE key length for input set::
 
-For example, to set the high bit in the register from the example above:
+   global_config (port_id) gre-key-len (number in bytes)
 
-.. code-block:: console
+For example to set GRE key length for input set to 4 bytes on port 0::
 
-    testpmd> write regbit 0 0xEE00 31 1
-    port 0 PCI register at offset 0xEE00: 0x8000000A (2147483658)
+   testpmd> global_config 0 gre-key-len 4