mbuf: add rte prefix to offload flags
[dpdk.git] / drivers / net / octeontx2 / otx2_rx.h
index 1a1ac40..530bf00 100644 (file)
@@ -5,6 +5,13 @@
 #ifndef __OTX2_RX_H__
 #define __OTX2_RX_H__
 
+#include <rte_ether.h>
+
+#include "otx2_common.h"
+#include "otx2_ethdev_sec.h"
+#include "otx2_ipsec_anti_replay.h"
+#include "otx2_ipsec_fp.h"
+
 /* Default mark value used when none is provided. */
 #define OTX2_FLOW_ACTION_FLAG_DEFAULT  0xffff
 
@@ -23,6 +30,7 @@
 #define NIX_RX_OFFLOAD_VLAN_STRIP_F    BIT(3)
 #define NIX_RX_OFFLOAD_MARK_UPDATE_F   BIT(4)
 #define NIX_RX_OFFLOAD_TSTAMP_F        BIT(5)
+#define NIX_RX_OFFLOAD_SECURITY_F      BIT(6)
 
 /* Flags to control cqe_to_mbuf conversion function.
  * Defining it from backwards to denote its been
 #define NIX_RX_MULTI_SEG_F            BIT(15)
 #define NIX_TIMESYNC_RX_OFFSET         8
 
+/* Inline IPsec offsets */
+
+/* nix_cqe_hdr_s + nix_rx_parse_s + nix_rx_sg_s + nix_iova_s */
+#define INLINE_CPT_RESULT_OFFSET       80
+
 struct otx2_timesync_info {
        uint64_t        rx_tstamp;
        rte_iova_t      tx_tstamp_iova;
        uint64_t        *tx_tstamp;
+       uint64_t        rx_tstamp_dynflag;
+       int             tstamp_dynfield_offset;
        uint8_t         tx_ready;
        uint8_t         rx_ready;
 } __rte_cache_aligned;
@@ -49,6 +64,14 @@ union mbuf_initializer {
        uint64_t value;
 };
 
+static inline rte_mbuf_timestamp_t *
+otx2_timestamp_dynfield(struct rte_mbuf *mbuf,
+               struct otx2_timesync_info *info)
+{
+       return RTE_MBUF_DYNFIELD(mbuf,
+               info->tstamp_dynfield_offset, rte_mbuf_timestamp_t *);
+}
+
 static __rte_always_inline void
 otx2_nix_mbuf_to_tstamp(struct rte_mbuf *mbuf,
                        struct otx2_timesync_info *tstamp, const uint16_t flag,
@@ -58,18 +81,23 @@ otx2_nix_mbuf_to_tstamp(struct rte_mbuf *mbuf,
            (mbuf->data_off == RTE_PKTMBUF_HEADROOM +
             NIX_TIMESYNC_RX_OFFSET)) {
 
+               mbuf->pkt_len -= NIX_TIMESYNC_RX_OFFSET;
+
                /* Reading the rx timestamp inserted by CGX, viz at
                 * starting of the packet data.
                 */
-               mbuf->timestamp = rte_be_to_cpu_64(*tstamp_ptr);
-               /* PKT_RX_IEEE1588_TMST flag needs to be set only in case
+               *otx2_timestamp_dynfield(mbuf, tstamp) =
+                               rte_be_to_cpu_64(*tstamp_ptr);
+               /* RTE_MBUF_F_RX_IEEE1588_TMST flag needs to be set only in case
                 * PTP packets are received.
                 */
                if (mbuf->packet_type == RTE_PTYPE_L2_ETHER_TIMESYNC) {
-                       tstamp->rx_tstamp = mbuf->timestamp;
+                       tstamp->rx_tstamp =
+                                       *otx2_timestamp_dynfield(mbuf, tstamp);
                        tstamp->rx_ready = 1;
-                       mbuf->ol_flags |= PKT_RX_IEEE1588_PTP |
-                               PKT_RX_IEEE1588_TMST | PKT_RX_TIMESTAMP;
+                       mbuf->ol_flags |= RTE_MBUF_F_RX_IEEE1588_PTP |
+                               RTE_MBUF_F_RX_IEEE1588_TMST |
+                               tstamp->rx_tstamp_dynflag;
                }
        }
 }
@@ -133,9 +161,9 @@ nix_update_match_id(const uint16_t match_id, uint64_t ol_flags,
         * 0 to OTX2_FLOW_ACTION_FLAG_DEFAULT - 2
         */
        if (likely(match_id)) {
-               ol_flags |= PKT_RX_FDIR;
+               ol_flags |= RTE_MBUF_F_RX_FDIR;
                if (match_id != OTX2_FLOW_ACTION_FLAG_DEFAULT) {
-                       ol_flags |= PKT_RX_FDIR_ID;
+                       ol_flags |= RTE_MBUF_F_RX_FDIR_ID;
                        mbuf->hash.fdir.hi = match_id - 1;
                }
        }
@@ -186,6 +214,87 @@ nix_cqe_xtract_mseg(const struct nix_rx_parse_s *rx,
                        iova_list = (const rte_iova_t *)(iova_list + 1);
                }
        }
+       mbuf->next = NULL;
+}
+
+static __rte_always_inline uint16_t
+nix_rx_sec_cptres_get(const void *cq)
+{
+       volatile const struct otx2_cpt_res *res;
+
+       res = (volatile const struct otx2_cpt_res *)((const char *)cq +
+                       INLINE_CPT_RESULT_OFFSET);
+
+       return res->u16[0];
+}
+
+static __rte_always_inline void *
+nix_rx_sec_sa_get(const void * const lookup_mem, int spi, uint16_t port)
+{
+       const uint64_t *const *sa_tbl = (const uint64_t * const *)
+                       ((const uint8_t *)lookup_mem + OTX2_NIX_SA_TBL_START);
+
+       return (void *)sa_tbl[port][spi];
+}
+
+static __rte_always_inline uint64_t
+nix_rx_sec_mbuf_update(const struct nix_rx_parse_s *rx,
+                      const struct nix_cqe_hdr_s *cq, struct rte_mbuf *m,
+                      const void * const lookup_mem)
+{
+       uint8_t *l2_ptr, *l3_ptr, *l2_ptr_actual, *l3_ptr_actual;
+       struct otx2_ipsec_fp_in_sa *sa;
+       uint16_t m_len, l2_len, ip_len;
+       struct rte_ipv6_hdr *ip6h;
+       struct rte_ipv4_hdr *iph;
+       uint16_t *ether_type;
+       uint32_t spi;
+       int i;
+
+       if (unlikely(nix_rx_sec_cptres_get(cq) != OTX2_SEC_COMP_GOOD))
+               return RTE_MBUF_F_RX_SEC_OFFLOAD | RTE_MBUF_F_RX_SEC_OFFLOAD_FAILED;
+
+       /* 20 bits of tag would have the SPI */
+       spi = cq->tag & 0xFFFFF;
+
+       sa = nix_rx_sec_sa_get(lookup_mem, spi, m->port);
+       *rte_security_dynfield(m) = sa->udata64;
+
+       l2_ptr = rte_pktmbuf_mtod(m, uint8_t *);
+       l2_len = rx->lcptr - rx->laptr;
+       l3_ptr = RTE_PTR_ADD(l2_ptr, l2_len);
+
+       if (sa->replay_win_sz) {
+               if (cpt_ipsec_ip_antireplay_check(sa, l3_ptr) < 0)
+                       return RTE_MBUF_F_RX_SEC_OFFLOAD | RTE_MBUF_F_RX_SEC_OFFLOAD_FAILED;
+       }
+
+       l2_ptr_actual = RTE_PTR_ADD(l2_ptr,
+                                   sizeof(struct otx2_ipsec_fp_res_hdr));
+       l3_ptr_actual = RTE_PTR_ADD(l3_ptr,
+                                   sizeof(struct otx2_ipsec_fp_res_hdr));
+
+       for (i = l2_len - RTE_ETHER_TYPE_LEN - 1; i >= 0; i--)
+               l2_ptr_actual[i] = l2_ptr[i];
+
+       m->data_off += sizeof(struct otx2_ipsec_fp_res_hdr);
+
+       ether_type = RTE_PTR_SUB(l3_ptr_actual, RTE_ETHER_TYPE_LEN);
+
+       iph = (struct rte_ipv4_hdr *)l3_ptr_actual;
+       if ((iph->version_ihl >> 4) == 4) {
+               ip_len = rte_be_to_cpu_16(iph->total_length);
+               *ether_type = rte_cpu_to_be_16(RTE_ETHER_TYPE_IPV4);
+       } else {
+               ip6h = (struct rte_ipv6_hdr *)iph;
+               ip_len = rte_be_to_cpu_16(ip6h->payload_len);
+               *ether_type = rte_cpu_to_be_16(RTE_ETHER_TYPE_IPV6);
+       }
+
+       m_len = ip_len + l2_len;
+       m->data_len = m_len;
+       m->pkt_len = m_len;
+       return RTE_MBUF_F_RX_SEC_OFFLOAD;
 }
 
 static __rte_always_inline void
@@ -209,7 +318,7 @@ otx2_nix_cqe_to_mbuf(const struct nix_cqe_hdr_s *cq, const uint32_t tag,
 
        if (flag & NIX_RX_OFFLOAD_RSS_F) {
                mbuf->hash.rss = tag;
-               ol_flags |= PKT_RX_RSS_HASH;
+               ol_flags |= RTE_MBUF_F_RX_RSS_HASH;
        }
 
        if (flag & NIX_RX_OFFLOAD_CHECKSUM_F)
@@ -217,11 +326,11 @@ otx2_nix_cqe_to_mbuf(const struct nix_cqe_hdr_s *cq, const uint32_t tag,
 
        if (flag & NIX_RX_OFFLOAD_VLAN_STRIP_F) {
                if (rx->vtag0_gone) {
-                       ol_flags |= PKT_RX_VLAN | PKT_RX_VLAN_STRIPPED;
+                       ol_flags |= RTE_MBUF_F_RX_VLAN | RTE_MBUF_F_RX_VLAN_STRIPPED;
                        mbuf->vlan_tci = rx->vtag0_tci;
                }
                if (rx->vtag1_gone) {
-                       ol_flags |= PKT_RX_QINQ | PKT_RX_QINQ_STRIPPED;
+                       ol_flags |= RTE_MBUF_F_RX_QINQ | RTE_MBUF_F_RX_QINQ_STRIPPED;
                        mbuf->vlan_tci_outer = rx->vtag1_tci;
                }
        }
@@ -229,14 +338,24 @@ otx2_nix_cqe_to_mbuf(const struct nix_cqe_hdr_s *cq, const uint32_t tag,
        if (flag & NIX_RX_OFFLOAD_MARK_UPDATE_F)
                ol_flags = nix_update_match_id(rx->match_id, ol_flags, mbuf);
 
+       if ((flag & NIX_RX_OFFLOAD_SECURITY_F) &&
+           cq->cqe_type == NIX_XQE_TYPE_RX_IPSECH) {
+               *(uint64_t *)(&mbuf->rearm_data) = val;
+               ol_flags |= nix_rx_sec_mbuf_update(rx, cq, mbuf, lookup_mem);
+               mbuf->ol_flags = ol_flags;
+               return;
+       }
+
        mbuf->ol_flags = ol_flags;
        *(uint64_t *)(&mbuf->rearm_data) = val;
        mbuf->pkt_len = len;
 
-       if (flag & NIX_RX_MULTI_SEG_F)
+       if (flag & NIX_RX_MULTI_SEG_F) {
                nix_cqe_xtract_mseg(rx, mbuf, val);
-       else
+       } else {
                mbuf->data_len = len;
+               mbuf->next = NULL;
+       }
 }
 
 #define CKSUM_F NIX_RX_OFFLOAD_CHECKSUM_F
@@ -245,94 +364,220 @@ otx2_nix_cqe_to_mbuf(const struct nix_cqe_hdr_s *cq, const uint32_t tag,
 #define RX_VLAN_F  NIX_RX_OFFLOAD_VLAN_STRIP_F
 #define MARK_F  NIX_RX_OFFLOAD_MARK_UPDATE_F
 #define TS_F   NIX_RX_OFFLOAD_TSTAMP_F
+#define RX_SEC_F   NIX_RX_OFFLOAD_SECURITY_F
 
-/* [TSMP] [MARK] [VLAN] [CKSUM] [PTYPE] [RSS] */
+/* [SEC] [TSMP] [MARK] [VLAN] [CKSUM] [PTYPE] [RSS] */
 #define NIX_RX_FASTPATH_MODES                                                 \
-R(no_offload,                  0, 0, 0, 0, 0, 0, NIX_RX_OFFLOAD_NONE)  \
-R(rss,                         0, 0, 0, 0, 0, 1, RSS_F)                \
-R(ptype,                       0, 0, 0, 0, 1, 0, PTYPE_F)              \
-R(ptype_rss,                   0, 0, 0, 0, 1, 1, PTYPE_F | RSS_F)      \
-R(cksum,                       0, 0, 0, 1, 0, 0, CKSUM_F)              \
-R(cksum_rss,                   0, 0, 0, 1, 0, 1, CKSUM_F | RSS_F)      \
-R(cksum_ptype,                 0, 0, 0, 1, 1, 0, CKSUM_F | PTYPE_F)    \
-R(cksum_ptype_rss,             0, 0, 0, 1, 1, 1, CKSUM_F | PTYPE_F | RSS_F)\
-R(vlan,                                0, 0, 1, 0, 0, 0, RX_VLAN_F)            \
-R(vlan_rss,                    0, 0, 1, 0, 0, 1, RX_VLAN_F | RSS_F)    \
-R(vlan_ptype,                  0, 0, 1, 0, 1, 0, RX_VLAN_F | PTYPE_F)  \
-R(vlan_ptype_rss,              0, 0, 1, 0, 1, 1, RX_VLAN_F | PTYPE_F | RSS_F)\
-R(vlan_cksum,                  0, 0, 1, 1, 0, 0, RX_VLAN_F | CKSUM_F)  \
-R(vlan_cksum_rss,              0, 0, 1, 1, 0, 1, RX_VLAN_F | CKSUM_F | RSS_F)\
-R(vlan_cksum_ptype,            0, 0, 1, 1, 1, 0,                       \
-                       RX_VLAN_F | CKSUM_F | PTYPE_F)                  \
-R(vlan_cksum_ptype_rss,                0, 0, 1, 1, 1, 1,                       \
-                       RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)          \
-R(mark,                                0, 1, 0, 0, 0, 0, MARK_F)               \
-R(mark_rss,                    0, 1, 0, 0, 0, 1, MARK_F | RSS_F)       \
-R(mark_ptype,                  0, 1, 0, 0, 1, 0, MARK_F | PTYPE_F)     \
-R(mark_ptype_rss,              0, 1, 0, 0, 1, 1, MARK_F | PTYPE_F | RSS_F)\
-R(mark_cksum,                  0, 1, 0, 1, 0, 0, MARK_F | CKSUM_F)     \
-R(mark_cksum_rss,              0, 1, 0, 1, 0, 1, MARK_F | CKSUM_F | RSS_F)\
-R(mark_cksum_ptype,            0, 1, 0, 1, 1, 0, MARK_F | CKSUM_F | PTYPE_F)\
-R(mark_cksum_ptype_rss,                0, 1, 0, 1, 1, 1,                       \
-                       MARK_F | CKSUM_F | PTYPE_F | RSS_F)             \
-R(mark_vlan,                   0, 1, 1, 0, 0, 0, MARK_F | RX_VLAN_F)   \
-R(mark_vlan_rss,               0, 1, 1, 0, 0, 1, MARK_F | RX_VLAN_F | RSS_F)\
-R(mark_vlan_ptype,             0, 1, 1, 0, 1, 0,                       \
-                       MARK_F | RX_VLAN_F | PTYPE_F)                   \
-R(mark_vlan_ptype_rss,         0, 1, 1, 0, 1, 1,                       \
-                       MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)           \
-R(mark_vlan_cksum,             0, 1, 1, 1, 0, 0,                       \
-                       MARK_F | RX_VLAN_F | CKSUM_F)                   \
-R(mark_vlan_cksum_rss,         0, 1, 1, 1, 0, 1,                       \
-                       MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)           \
-R(mark_vlan_cksum_ptype,       0, 1, 1, 1, 1, 0,                       \
-                       MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F)         \
-R(mark_vlan_cksum_ptype_rss,   0, 1, 1, 1, 1, 1,                       \
-                       MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F) \
-R(ts,                          1, 0, 0, 0, 0, 0, TS_F)                 \
-R(ts_rss,                      1, 0, 0, 0, 0, 1, TS_F | RSS_F)         \
-R(ts_ptype,                    1, 0, 0, 0, 1, 0, TS_F | PTYPE_F)       \
-R(ts_ptype_rss,                        1, 0, 0, 0, 1, 1, TS_F | PTYPE_F | RSS_F)\
-R(ts_cksum,                    1, 0, 0, 1, 0, 0, TS_F | CKSUM_F)       \
-R(ts_cksum_rss,                        1, 0, 0, 1, 0, 1, TS_F | CKSUM_F | RSS_F)\
-R(ts_cksum_ptype,              1, 0, 0, 1, 1, 0, TS_F | CKSUM_F | PTYPE_F)\
-R(ts_cksum_ptype_rss,          1, 0, 0, 1, 1, 1,                       \
-                       TS_F | CKSUM_F | PTYPE_F | RSS_F)               \
-R(ts_vlan,                     1, 0, 1, 0, 0, 0, TS_F | RX_VLAN_F)     \
-R(ts_vlan_rss,                 1, 0, 1, 0, 0, 1, TS_F | RX_VLAN_F | RSS_F)\
-R(ts_vlan_ptype,               1, 0, 1, 0, 1, 0, TS_F | RX_VLAN_F | PTYPE_F)\
-R(ts_vlan_ptype_rss,           1, 0, 1, 0, 1, 1,                       \
-                       TS_F | RX_VLAN_F | PTYPE_F | RSS_F)             \
-R(ts_vlan_cksum,               1, 0, 1, 1, 0, 0,                       \
-                       TS_F | RX_VLAN_F | CKSUM_F)                     \
-R(ts_vlan_cksum_rss,           1, 0, 1, 1, 0, 1,                       \
-                       MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)           \
-R(ts_vlan_cksum_ptype,         1, 0, 1, 1, 1, 0,                       \
-                       TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F)           \
-R(ts_vlan_cksum_ptype_rss,     1, 0, 1, 1, 1, 1,                       \
-                       TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)   \
-R(ts_mark,                     1, 1, 0, 0, 0, 0, TS_F | MARK_F)        \
-R(ts_mark_rss,                 1, 1, 0, 0, 0, 1, TS_F | MARK_F | RSS_F)\
-R(ts_mark_ptype,               1, 1, 0, 0, 1, 0, TS_F | MARK_F | PTYPE_F)\
-R(ts_mark_ptype_rss,           1, 1, 0, 0, 1, 1,                       \
-                       TS_F | MARK_F | PTYPE_F | RSS_F)                \
-R(ts_mark_cksum,               1, 1, 0, 1, 0, 0, TS_F | MARK_F | CKSUM_F)\
-R(ts_mark_cksum_rss,           1, 1, 0, 1, 0, 1,                       \
-                       TS_F | MARK_F | CKSUM_F | RSS_F)\
-R(ts_mark_cksum_ptype,         1, 1, 0, 1, 1, 0,                       \
-                       TS_F | MARK_F | CKSUM_F | PTYPE_F)              \
-R(ts_mark_cksum_ptype_rss,     1, 1, 0, 1, 1, 1,                       \
-                       TS_F | MARK_F | CKSUM_F | PTYPE_F | RSS_F)      \
-R(ts_mark_vlan,                        1, 1, 1, 0, 0, 0, TS_F | MARK_F | RX_VLAN_F)\
-R(ts_mark_vlan_rss,            1, 1, 1, 0, 0, 1,                       \
-                       TS_F | MARK_F | RX_VLAN_F | RSS_F)\
-R(ts_mark_vlan_ptype,          1, 1, 1, 0, 1, 0,                       \
-                       TS_F | MARK_F | RX_VLAN_F | PTYPE_F)            \
-R(ts_mark_vlan_ptype_rss,      1, 1, 1, 0, 1, 1,                       \
-                       TS_F | MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)    \
-R(ts_mark_vlan_cksum_ptype,    1, 1, 1, 1, 1, 0,                       \
-                       TS_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F)  \
-R(ts_mark_vlan_cksum_ptype_rss,        1, 1, 1, 1, 1, 1,                       \
-                       TS_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)
-
+R(no_offload,                  0, 0, 0, 0, 0, 0, 0, NIX_RX_OFFLOAD_NONE)      \
+R(rss,                         0, 0, 0, 0, 0, 0, 1, RSS_F)                    \
+R(ptype,                       0, 0, 0, 0, 0, 1, 0, PTYPE_F)                  \
+R(ptype_rss,                   0, 0, 0, 0, 0, 1, 1, PTYPE_F | RSS_F)          \
+R(cksum,                       0, 0, 0, 0, 1, 0, 0, CKSUM_F)                  \
+R(cksum_rss,                   0, 0, 0, 0, 1, 0, 1, CKSUM_F | RSS_F)          \
+R(cksum_ptype,                 0, 0, 0, 0, 1, 1, 0, CKSUM_F | PTYPE_F)        \
+R(cksum_ptype_rss,             0, 0, 0, 0, 1, 1, 1, CKSUM_F | PTYPE_F | RSS_F)\
+R(vlan,                                0, 0, 0, 1, 0, 0, 0, RX_VLAN_F)                \
+R(vlan_rss,                    0, 0, 0, 1, 0, 0, 1, RX_VLAN_F | RSS_F)        \
+R(vlan_ptype,                  0, 0, 0, 1, 0, 1, 0, RX_VLAN_F | PTYPE_F)      \
+R(vlan_ptype_rss,              0, 0, 0, 1, 0, 1, 1,                           \
+                       RX_VLAN_F | PTYPE_F | RSS_F)                           \
+R(vlan_cksum,                  0, 0, 0, 1, 1, 0, 0, RX_VLAN_F | CKSUM_F)      \
+R(vlan_cksum_rss,              0, 0, 0, 1, 1, 0, 1,                           \
+                       RX_VLAN_F | CKSUM_F | RSS_F)                           \
+R(vlan_cksum_ptype,            0, 0, 0, 1, 1, 1, 0,                           \
+                       RX_VLAN_F | CKSUM_F | PTYPE_F)                         \
+R(vlan_cksum_ptype_rss,                0, 0, 0, 1, 1, 1, 1,                           \
+                       RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)                 \
+R(mark,                                0, 0, 1, 0, 0, 0, 0, MARK_F)                   \
+R(mark_rss,                    0, 0, 1, 0, 0, 0, 1, MARK_F | RSS_F)           \
+R(mark_ptype,                  0, 0, 1, 0, 0, 1, 0, MARK_F | PTYPE_F)         \
+R(mark_ptype_rss,              0, 0, 1, 0, 0, 1, 1, MARK_F | PTYPE_F | RSS_F) \
+R(mark_cksum,                  0, 0, 1, 0, 1, 0, 0, MARK_F | CKSUM_F)         \
+R(mark_cksum_rss,              0, 0, 1, 0, 1, 0, 1, MARK_F | CKSUM_F | RSS_F) \
+R(mark_cksum_ptype,            0, 0, 1, 0, 1, 1, 0,                           \
+                       MARK_F | CKSUM_F | PTYPE_F)                            \
+R(mark_cksum_ptype_rss,                0, 0, 1, 0, 1, 1, 1,                           \
+                       MARK_F | CKSUM_F | PTYPE_F | RSS_F)                    \
+R(mark_vlan,                   0, 0, 1, 1, 0, 0, 0, MARK_F | RX_VLAN_F)       \
+R(mark_vlan_rss,               0, 0, 1, 1, 0, 0, 1,                           \
+                       MARK_F | RX_VLAN_F | RSS_F)                            \
+R(mark_vlan_ptype,             0, 0, 1, 1, 0, 1, 0,                           \
+                       MARK_F | RX_VLAN_F | PTYPE_F)                          \
+R(mark_vlan_ptype_rss,         0, 0, 1, 1, 0, 1, 1,                           \
+                       MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)                  \
+R(mark_vlan_cksum,             0, 0, 1, 1, 1, 0, 0,                           \
+                       MARK_F | RX_VLAN_F | CKSUM_F)                          \
+R(mark_vlan_cksum_rss,         0, 0, 1, 1, 1, 0, 1,                           \
+                       MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)                  \
+R(mark_vlan_cksum_ptype,       0, 0, 1, 1, 1, 1, 0,                           \
+                       MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F)                \
+R(mark_vlan_cksum_ptype_rss,   0, 0, 1, 1, 1, 1, 1,                           \
+                       MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)        \
+R(ts,                          0, 1, 0, 0, 0, 0, 0, TS_F)                     \
+R(ts_rss,                      0, 1, 0, 0, 0, 0, 1, TS_F | RSS_F)             \
+R(ts_ptype,                    0, 1, 0, 0, 0, 1, 0, TS_F | PTYPE_F)           \
+R(ts_ptype_rss,                        0, 1, 0, 0, 0, 1, 1, TS_F | PTYPE_F | RSS_F)   \
+R(ts_cksum,                    0, 1, 0, 0, 1, 0, 0, TS_F | CKSUM_F)           \
+R(ts_cksum_rss,                        0, 1, 0, 0, 1, 0, 1, TS_F | CKSUM_F | RSS_F)   \
+R(ts_cksum_ptype,              0, 1, 0, 0, 1, 1, 0, TS_F | CKSUM_F | PTYPE_F) \
+R(ts_cksum_ptype_rss,          0, 1, 0, 0, 1, 1, 1,                           \
+                       TS_F | CKSUM_F | PTYPE_F | RSS_F)                      \
+R(ts_vlan,                     0, 1, 0, 1, 0, 0, 0, TS_F | RX_VLAN_F)         \
+R(ts_vlan_rss,                 0, 1, 0, 1, 0, 0, 1, TS_F | RX_VLAN_F | RSS_F) \
+R(ts_vlan_ptype,               0, 1, 0, 1, 0, 1, 0,                           \
+                       TS_F | RX_VLAN_F | PTYPE_F)                            \
+R(ts_vlan_ptype_rss,           0, 1, 0, 1, 0, 1, 1,                           \
+                       TS_F | RX_VLAN_F | PTYPE_F | RSS_F)                    \
+R(ts_vlan_cksum,               0, 1, 0, 1, 1, 0, 0,                           \
+                       TS_F | RX_VLAN_F | CKSUM_F)                            \
+R(ts_vlan_cksum_rss,           0, 1, 0, 1, 1, 0, 1,                           \
+                       MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)                  \
+R(ts_vlan_cksum_ptype,         0, 1, 0, 1, 1, 1, 0,                           \
+                       TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F)                  \
+R(ts_vlan_cksum_ptype_rss,     0, 1, 0, 1, 1, 1, 1,                           \
+                       TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)          \
+R(ts_mark,                     0, 1, 1, 0, 0, 0, 0, TS_F | MARK_F)            \
+R(ts_mark_rss,                 0, 1, 1, 0, 0, 0, 1, TS_F | MARK_F | RSS_F)    \
+R(ts_mark_ptype,               0, 1, 1, 0, 0, 1, 0, TS_F | MARK_F | PTYPE_F)  \
+R(ts_mark_ptype_rss,           0, 1, 1, 0, 0, 1, 1,                           \
+                       TS_F | MARK_F | PTYPE_F | RSS_F)                       \
+R(ts_mark_cksum,               0, 1, 1, 0, 1, 0, 0, TS_F | MARK_F | CKSUM_F)  \
+R(ts_mark_cksum_rss,           0, 1, 1, 0, 1, 0, 1,                           \
+                       TS_F | MARK_F | CKSUM_F | RSS_F)                       \
+R(ts_mark_cksum_ptype,         0, 1, 1, 0, 1, 1, 0,                           \
+                       TS_F | MARK_F | CKSUM_F | PTYPE_F)                     \
+R(ts_mark_cksum_ptype_rss,     0, 1, 1, 0, 1, 1, 1,                           \
+                       TS_F | MARK_F | CKSUM_F | PTYPE_F | RSS_F)             \
+R(ts_mark_vlan,                        0, 1, 1, 1, 0, 0, 0, TS_F | MARK_F | RX_VLAN_F)\
+R(ts_mark_vlan_rss,            0, 1, 1, 1, 0, 0, 1,                           \
+                       TS_F | MARK_F | RX_VLAN_F | RSS_F)                     \
+R(ts_mark_vlan_ptype,          0, 1, 1, 1, 0, 1, 0,                           \
+                       TS_F | MARK_F | RX_VLAN_F | PTYPE_F)                   \
+R(ts_mark_vlan_ptype_rss,      0, 1, 1, 1, 0, 1, 1,                           \
+                       TS_F | MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)           \
+R(ts_mark_vlan_cksum_ptype,    0, 1, 1, 1, 1, 1, 0,                           \
+                       TS_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F)         \
+R(ts_mark_vlan_cksum_ptype_rss,        0, 1, 1, 1, 1, 1, 1,                           \
+                       TS_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F) \
+R(sec,                         1, 0, 0, 0, 0, 0, 0, RX_SEC_F)                 \
+R(sec_rss,                     1, 0, 0, 0, 0, 0, 1, RX_SEC_F | RSS_F)         \
+R(sec_ptype,                   1, 0, 0, 0, 0, 1, 0, RX_SEC_F | PTYPE_F)       \
+R(sec_ptype_rss,               1, 0, 0, 0, 0, 1, 1,                           \
+                       RX_SEC_F | PTYPE_F | RSS_F)                            \
+R(sec_cksum,                   1, 0, 0, 0, 1, 0, 0, RX_SEC_F | CKSUM_F)       \
+R(sec_cksum_rss,               1, 0, 0, 0, 1, 0, 1,                           \
+                       RX_SEC_F | CKSUM_F | RSS_F)                            \
+R(sec_cksum_ptype,             1, 0, 0, 0, 1, 1, 0,                           \
+                       RX_SEC_F | CKSUM_F | PTYPE_F)                          \
+R(sec_cksum_ptype_rss,         1, 0, 0, 0, 1, 1, 1,                           \
+                       RX_SEC_F | CKSUM_F | PTYPE_F | RSS_F)                  \
+R(sec_vlan,                    1, 0, 0, 1, 0, 0, 0, RX_SEC_F | RX_VLAN_F)     \
+R(sec_vlan_rss,                        1, 0, 0, 1, 0, 0, 1,                           \
+                       RX_SEC_F | RX_VLAN_F | RSS_F)                          \
+R(sec_vlan_ptype,              1, 0, 0, 1, 0, 1, 0,                           \
+                       RX_SEC_F | RX_VLAN_F | PTYPE_F)                        \
+R(sec_vlan_ptype_rss,          1, 0, 0, 1, 0, 1, 1,                           \
+                       RX_SEC_F | RX_VLAN_F | PTYPE_F | RSS_F)                \
+R(sec_vlan_cksum,              1, 0, 0, 1, 1, 0, 0,                           \
+                       RX_SEC_F | RX_VLAN_F | CKSUM_F)                        \
+R(sec_vlan_cksum_rss,          1, 0, 0, 1, 1, 0, 1,                           \
+                       RX_SEC_F | RX_VLAN_F | CKSUM_F | RSS_F)                \
+R(sec_vlan_cksum_ptype,                1, 0, 0, 1, 1, 1, 0,                           \
+                       RX_SEC_F | RX_VLAN_F | CKSUM_F | PTYPE_F)              \
+R(sec_vlan_cksum_ptype_rss,    1, 0, 0, 1, 1, 1, 1,                           \
+                       RX_SEC_F | RX_VLAN_F | CKSUM_F | PTYPE_F | RSS_F)      \
+R(sec_mark,                    1, 0, 1, 0, 0, 0, 0, RX_SEC_F | MARK_F)        \
+R(sec_mark_rss,                        1, 0, 1, 0, 0, 0, 1, RX_SEC_F | MARK_F | RSS_F)\
+R(sec_mark_ptype,              1, 0, 1, 0, 0, 1, 0,                           \
+                       RX_SEC_F | MARK_F | PTYPE_F)                           \
+R(sec_mark_ptype_rss,          1, 0, 1, 0, 0, 1, 1,                           \
+                       RX_SEC_F | MARK_F | PTYPE_F | RSS_F)                   \
+R(sec_mark_cksum,              1, 0, 1, 0, 1, 0, 0,                           \
+                       RX_SEC_F | MARK_F | CKSUM_F)                           \
+R(sec_mark_cksum_rss,          1, 0, 1, 0, 1, 0, 1,                           \
+                       RX_SEC_F | MARK_F | CKSUM_F | RSS_F)                   \
+R(sec_mark_cksum_ptype,                1, 0, 1, 0, 1, 1, 0,                           \
+                       RX_SEC_F | MARK_F | CKSUM_F | PTYPE_F)                 \
+R(sec_mark_cksum_ptype_rss,    1, 0, 1, 0, 1, 1, 1,                           \
+                       RX_SEC_F | MARK_F | CKSUM_F | PTYPE_F | RSS_F)         \
+R(sec_mark_vlan,               1, 0, 1, 1, 0, 0, 0, RX_SEC_F | RX_VLAN_F)     \
+R(sec_mark_vlan_rss,           1, 0, 1, 1, 0, 0, 1,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | RSS_F)                 \
+R(sec_mark_vlan_ptype,         1, 0, 1, 1, 0, 1, 0,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | PTYPE_F)               \
+R(sec_mark_vlan_ptype_rss,     1, 0, 1, 1, 0, 1, 1,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)       \
+R(sec_mark_vlan_cksum,         1, 0, 1, 1, 1, 0, 0,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | CKSUM_F)               \
+R(sec_mark_vlan_cksum_rss,     1, 0, 1, 1, 1, 0, 1,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)       \
+R(sec_mark_vlan_cksum_ptype,   1, 0, 1, 1, 1, 1, 0,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F)     \
+R(sec_mark_vlan_cksum_ptype_rss,                                              \
+                               1, 0, 1, 1, 1, 1, 1,                           \
+                       RX_SEC_F | MARK_F | RX_VLAN_F | CKSUM_F | PTYPE_F |    \
+                       RSS_F)                                                 \
+R(sec_ts,                      1, 1, 0, 0, 0, 0, 0, RX_SEC_F | TS_F)          \
+R(sec_ts_rss,                  1, 1, 0, 0, 0, 0, 1, RX_SEC_F | TS_F | RSS_F)  \
+R(sec_ts_ptype,                        1, 1, 0, 0, 0, 1, 0, RX_SEC_F | TS_F | PTYPE_F)\
+R(sec_ts_ptype_rss,            1, 1, 0, 0, 0, 1, 1,                           \
+                       RX_SEC_F | TS_F | PTYPE_F | RSS_F)                     \
+R(sec_ts_cksum,                        1, 1, 0, 0, 1, 0, 0, RX_SEC_F | TS_F | CKSUM_F)\
+R(sec_ts_cksum_rss,            1, 1, 0, 0, 1, 0, 1,                           \
+                       RX_SEC_F | TS_F | CKSUM_F | RSS_F)                     \
+R(sec_ts_cksum_ptype,          1, 1, 0, 0, 1, 1, 0,                           \
+                       RX_SEC_F | CKSUM_F | PTYPE_F)                          \
+R(sec_ts_cksum_ptype_rss,      1, 1, 0, 0, 1, 1, 1,                           \
+                       RX_SEC_F | TS_F | CKSUM_F | PTYPE_F | RSS_F)           \
+R(sec_ts_vlan,                 1, 1, 0, 1, 0, 0, 0,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F)                           \
+R(sec_ts_vlan_rss,             1, 1, 0, 1, 0, 0, 1,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | RSS_F)                   \
+R(sec_ts_vlan_ptype,           1, 1, 0, 1, 0, 1, 0,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | PTYPE_F)                 \
+R(sec_ts_vlan_ptype_rss,       1, 1, 0, 1, 0, 1, 1,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | PTYPE_F | RSS_F)         \
+R(sec_ts_vlan_cksum,           1, 1, 0, 1, 1, 0, 0,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | CKSUM_F)                 \
+R(sec_ts_vlan_cksum_rss,       1, 1, 0, 1, 1, 0, 1,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | CKSUM_F | RSS_F)         \
+R(sec_ts_vlan_cksum_ptype,     1, 1, 0, 1, 1, 1, 0,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F)       \
+R(sec_ts_vlan_cksum_ptype_rss, 1, 1, 0, 1, 1, 1, 1,                           \
+                       RX_SEC_F | TS_F | RX_VLAN_F | CKSUM_F | PTYPE_F |      \
+                       RSS_F)                                                 \
+R(sec_ts_mark,                 1, 1, 1, 0, 0, 0, 0, RX_SEC_F | TS_F | MARK_F) \
+R(sec_ts_mark_rss,             1, 1, 1, 0, 0, 0, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | RSS_F)                      \
+R(sec_ts_mark_ptype,           1, 1, 1, 0, 0, 1, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | PTYPE_F)                    \
+R(sec_ts_mark_ptype_rss,       1, 1, 1, 0, 0, 1, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | PTYPE_F | RSS_F)            \
+R(sec_ts_mark_cksum,           1, 1, 1, 0, 1, 0, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | CKSUM_F)                    \
+R(sec_ts_mark_cksum_rss,       1, 1, 1, 0, 1, 0, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | CKSUM_F | RSS_F)            \
+R(sec_ts_mark_cksum_ptype,     1, 1, 1, 0, 1, 1, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | CKSUM_F | PTYPE_F)          \
+R(sec_ts_mark_cksum_ptype_rss, 1, 1, 1, 0, 1, 1, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | CKSUM_F | PTYPE_F | RSS_F)  \
+R(sec_ts_mark_vlan,            1, 1, 1, 1, 0, 0, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F)                  \
+R(sec_ts_mark_vlan_rss,                1, 1, 1, 1, 0, 0, 1,                           \
+                       RX_SEC_F | RX_VLAN_F | RSS_F)                          \
+R(sec_ts_mark_vlan_ptype,      1, 1, 1, 1, 0, 1, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | PTYPE_F)        \
+R(sec_ts_mark_vlan_ptype_rss,  1, 1, 1, 1, 0, 1, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | PTYPE_F | RSS_F)\
+R(sec_ts_mark_vlan_cksum,      1, 1, 1, 1, 1, 0, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | CKSUM_F)        \
+R(sec_ts_mark_vlan_cksum_rss,  1, 1, 1, 1, 1, 0, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | CKSUM_F | RSS_F)\
+R(sec_ts_mark_vlan_cksum_ptype,        1, 1, 1, 1, 1, 1, 0,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | CKSUM_F |       \
+                       PTYPE_F)                                               \
+R(sec_ts_mark_vlan_cksum_ptype_rss,                                           \
+                               1, 1, 1, 1, 1, 1, 1,                           \
+                       RX_SEC_F | TS_F | MARK_F | RX_VLAN_F | CKSUM_F |       \
+                       PTYPE_F | RSS_F)
 #endif /* __OTX2_RX_H__ */