net/bnxt: fix resource leak
[dpdk.git] / drivers / net / mlx5 / mlx5_flow.h
index 66caefc..b4be476 100644 (file)
@@ -122,6 +122,10 @@ enum mlx5_feature_name {
 /* Pattern eCPRI Layer bit. */
 #define MLX5_FLOW_LAYER_ECPRI (UINT64_C(1) << 29)
 
+/* IPv6 Fragment Extension Header bit. */
+#define MLX5_FLOW_LAYER_OUTER_L3_IPV6_FRAG_EXT (1u << 30)
+#define MLX5_FLOW_LAYER_INNER_L3_IPV6_FRAG_EXT (1u << 31)
+
 /* Outer Masks. */
 #define MLX5_FLOW_LAYER_OUTER_L3 \
        (MLX5_FLOW_LAYER_OUTER_L3_IPV4 | MLX5_FLOW_LAYER_OUTER_L3_IPV6)
@@ -196,6 +200,7 @@ enum mlx5_feature_name {
 #define MLX5_FLOW_ACTION_SET_IPV6_DSCP (1ull << 33)
 #define MLX5_FLOW_ACTION_AGE (1ull << 34)
 #define MLX5_FLOW_ACTION_DEFAULT_MISS (1ull << 35)
+#define MLX5_FLOW_ACTION_SAMPLE (1ull << 36)
 
 #define MLX5_FLOW_FATE_ACTIONS \
        (MLX5_FLOW_ACTION_DROP | MLX5_FLOW_ACTION_QUEUE | \
@@ -330,6 +335,14 @@ enum mlx5_feature_name {
 #define MLX5_ENCAPSULATION_DECISION_SIZE (sizeof(struct rte_flow_item_eth) + \
                                          sizeof(struct rte_flow_item_ipv4))
 
+/* IPv4 fragment_offset field contains relevant data in bits 2 to 15. */
+#define MLX5_IPV4_FRAG_OFFSET_MASK \
+               (RTE_IPV4_HDR_OFFSET_MASK | RTE_IPV4_HDR_MF_FLAG)
+
+/* Specific item's fields can accept a range of values (using spec and last). */
+#define MLX5_ITEM_RANGE_NOT_ACCEPTED   false
+#define MLX5_ITEM_RANGE_ACCEPTED       true
+
 /* Software header modify action numbers of a flow. */
 #define MLX5_ACT_NUM_MDF_IPV4          1
 #define MLX5_ACT_NUM_MDF_IPV6          4
@@ -388,9 +401,21 @@ struct mlx5_flow_dv_matcher {
 
 #define MLX5_ENCAP_MAX_LEN 132
 
+/* Encap/decap resource key of the hash organization. */
+union mlx5_flow_encap_decap_key {
+       struct {
+               uint32_t ft_type:8;     /**< Flow table type, Rx or Tx. */
+               uint32_t refmt_type:8;  /**< Header reformat type. */
+               uint32_t buf_size:8;    /**< Encap buf size. */
+               uint32_t table_level:8; /**< Root table or not. */
+               uint32_t cksum;         /**< Encap buf check sum. */
+       };
+       uint64_t v64;                   /**< full 64bits value of key */
+};
+
 /* Encap/decap resource structure. */
 struct mlx5_flow_dv_encap_decap_resource {
-       ILIST_ENTRY(uint32_t)next;
+       struct mlx5_hlist_entry entry;
        /* Pointer to next element. */
        rte_atomic32_t refcnt; /**< Reference counter. */
        void *action;
@@ -400,6 +425,7 @@ struct mlx5_flow_dv_encap_decap_resource {
        uint8_t reformat_type;
        uint8_t ft_type;
        uint64_t flags; /**< Flags for RDMA API. */
+       uint32_t idx; /**< Index for the index memory pool. */
 };
 
 /* Tag resource structure. */
@@ -427,7 +453,7 @@ struct mlx5_flow_dv_tag_resource {
 
 /* Modify resource structure */
 struct mlx5_flow_dv_modify_hdr_resource {
-       LIST_ENTRY(mlx5_flow_dv_modify_hdr_resource) next;
+       struct mlx5_hlist_entry entry;
        /* Pointer to next element. */
        rte_atomic32_t refcnt; /**< Reference counter. */
        void *action;
@@ -439,6 +465,17 @@ struct mlx5_flow_dv_modify_hdr_resource {
        /**< Modification actions. */
 };
 
+/* Modify resource key of the hash organization. */
+union mlx5_flow_modify_hdr_key {
+       struct {
+               uint32_t ft_type:8;     /**< Flow table type, Rx or Tx. */
+               uint32_t actions_num:5; /**< Number of modification actions. */
+               uint32_t group:19;      /**< Flow group id. */
+               uint32_t cksum;         /**< Actions check sum. */
+       };
+       uint64_t v64;                   /**< full 64bits value of key */
+};
+
 /* Jump action resource structure. */
 struct mlx5_flow_dv_jump_tbl_resource {
        rte_atomic32_t refcnt; /**< Reference counter. */
@@ -495,6 +532,58 @@ struct mlx5_flow_tbl_data_entry {
        uint32_t idx; /**< index for the indexed mempool. */
 };
 
+/* Sub rdma-core actions list. */
+struct mlx5_flow_sub_actions_list {
+       uint32_t actions_num; /**< Number of sample actions. */
+       uint64_t action_flags;
+       void *dr_queue_action;
+       void *dr_tag_action;
+       void *dr_cnt_action;
+       void *dr_port_id_action;
+       void *dr_encap_action;
+};
+
+/* Sample sub-actions resource list. */
+struct mlx5_flow_sub_actions_idx {
+       uint32_t rix_hrxq; /**< Hash Rx queue object index. */
+       uint32_t rix_tag; /**< Index to the tag action. */
+       uint32_t cnt;
+       uint32_t rix_port_id_action; /**< Index to port ID action resource. */
+       uint32_t rix_encap_decap; /**< Index to encap/decap resource. */
+};
+
+/* Sample action resource structure. */
+struct mlx5_flow_dv_sample_resource {
+       ILIST_ENTRY(uint32_t)next; /**< Pointer to next element. */
+       uint32_t refcnt; /**< Reference counter. */
+       void *verbs_action; /**< Verbs sample action object. */
+       uint8_t ft_type; /** Flow Table Type */
+       uint32_t ft_id; /** Flow Table Level */
+       uint32_t ratio;   /** Sample Ratio */
+       uint64_t set_action; /** Restore reg_c0 value */
+       void *normal_path_tbl; /** Flow Table pointer */
+       void *default_miss; /** default_miss dr_action. */
+       struct mlx5_flow_sub_actions_idx sample_idx;
+       /**< Action index resources. */
+       struct mlx5_flow_sub_actions_list sample_act;
+       /**< Action resources. */
+};
+
+#define MLX5_MAX_DEST_NUM      2
+
+/* Destination array action resource structure. */
+struct mlx5_flow_dv_dest_array_resource {
+       ILIST_ENTRY(uint32_t)next; /**< Pointer to next element. */
+       uint32_t refcnt; /**< Reference counter. */
+       uint8_t ft_type; /** Flow Table Type */
+       uint8_t num_of_dest; /**< Number of destination actions. */
+       void *action; /**< Pointer to the rdma core action. */
+       struct mlx5_flow_sub_actions_idx sample_idx[MLX5_MAX_DEST_NUM];
+       /**< Action index resources. */
+       struct mlx5_flow_sub_actions_list sample_act[MLX5_MAX_DEST_NUM];
+       /**< Action resources. */
+};
+
 /* Verbs specification header. */
 struct ibv_spec_header {
        enum ibv_flow_spec_type type;
@@ -527,6 +616,10 @@ struct mlx5_flow_handle_dv {
        /**< Index to push VLAN action resource in cache. */
        uint32_t rix_tag;
        /**< Index to the tag action. */
+       uint32_t rix_sample;
+       /**< Index to sample action resource in cache. */
+       uint32_t rix_dest_array;
+       /**< Index to destination array resource in cache. */
 } __rte_packed;
 
 /** Device flow handle structure: used both for creating & destroying. */
@@ -592,6 +685,10 @@ struct mlx5_flow_dv_workspace {
        /**< Pointer to the jump action resource. */
        struct mlx5_flow_dv_match_params value;
        /**< Holds the value that the packet is compared to. */
+       struct mlx5_flow_dv_sample_resource *sample_res;
+       /**< Pointer to the sample action resource. */
+       struct mlx5_flow_dv_dest_array_resource *dest_array_res;
+       /**< Pointer to the destination array resource. */
 };
 
 /*
@@ -961,6 +1058,7 @@ int mlx5_flow_item_acceptable(const struct rte_flow_item *item,
                              const uint8_t *mask,
                              const uint8_t *nic_mask,
                              unsigned int size,
+                             bool range_accepted,
                              struct rte_flow_error *error);
 int mlx5_flow_validate_item_eth(const struct rte_flow_item *item,
                                uint64_t item_flags,
@@ -978,6 +1076,7 @@ int mlx5_flow_validate_item_ipv4(const struct rte_flow_item *item,
                                 uint64_t last_item,
                                 uint16_t ether_type,
                                 const struct rte_flow_item_ipv4 *acc_mask,
+                                bool range_accepted,
                                 struct rte_flow_error *error);
 int mlx5_flow_validate_item_ipv6(const struct rte_flow_item *item,
                                 uint64_t item_flags,
@@ -1045,4 +1144,5 @@ int mlx5_flow_destroy_policer_rules(struct rte_eth_dev *dev,
                                    const struct rte_flow_attr *attr);
 int mlx5_flow_meter_flush(struct rte_eth_dev *dev,
                          struct rte_mtr_error *error);
+int mlx5_flow_dv_discover_counter_offset_support(struct rte_eth_dev *dev);
 #endif /* RTE_PMD_MLX5_FLOW_H_ */