table: hash
[dpdk.git] / lib / librte_table / rte_table_hash.h
1 /*-
2  *   BSD LICENSE
3  *
4  *   Copyright(c) 2010-2014 Intel Corporation. All rights reserved.
5  *   All rights reserved.
6  *
7  *   Redistribution and use in source and binary forms, with or without
8  *   modification, are permitted provided that the following conditions
9  *   are met:
10  *
11  *     * Redistributions of source code must retain the above copyright
12  *       notice, this list of conditions and the following disclaimer.
13  *     * Redistributions in binary form must reproduce the above copyright
14  *       notice, this list of conditions and the following disclaimer in
15  *       the documentation and/or other materials provided with the
16  *       distribution.
17  *     * Neither the name of Intel Corporation nor the names of its
18  *       contributors may be used to endorse or promote products derived
19  *       from this software without specific prior written permission.
20  *
21  *   THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
22  *   "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
23  *   LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
24  *   A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
25  *   OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
26  *   SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
27  *   LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
28  *   DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
29  *   THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
30  *   (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
31  *   OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
32  */
33
34 #ifndef __INCLUDE_RTE_TABLE_HASH_H__
35 #define __INCLUDE_RTE_TABLE_HASH_H__
36
37 #ifdef __cplusplus
38 extern "C" {
39 #endif
40
41 /**
42  * @file
43  * RTE Table Hash
44  *
45  * These tables use the exact match criterion to uniquely associate data to
46  * lookup keys.
47  *
48  * Use-cases: Flow classification table, Address Resolution Protocol (ARP) table
49  *
50  * Hash table types:
51  * 1. Entry add strategy on bucket full:
52  *     a. Least Recently Used (LRU): One of the existing keys in the bucket is
53  *        deleted and the new key is added in its place. The number of keys in
54  *        each bucket never grows bigger than 4. The logic to pick the key to
55  *        be dropped from the bucket is LRU. The hash table lookup operation
56  *        maintains the order in which the keys in the same bucket are hit, so
57  *        every time a key is hit, it becomes the new Most Recently Used (MRU)
58  *        key, i.e. the most unlikely candidate for drop. When a key is added
59  *        to the bucket, it also becomes the new MRU key. When a key needs to
60  *        be picked and dropped, the most likely candidate for drop, i.e. the
61  *        current LRU key, is always picked. The LRU logic requires maintaining
62  *        specific data structures per each bucket.
63  *     b. Extendible bucket (ext): The bucket is extended with space for 4 more
64  *        keys. This is done by allocating additional memory at table init time,
65  *        which is used to create a pool of free keys (the size of this pool is
66  *        configurable and always a multiple of 4). On key add operation, the
67  *        allocation of a group of 4 keys only happens successfully within the
68  *        limit of free keys, otherwise the key add operation fails. On key
69  *        delete operation, a group of 4 keys is freed back to the pool of free
70  *        keys when the key to be deleted is the only key that was used within
71  *        its group of 4 keys at that time. On key lookup operation, if the
72  *        current bucket is in extended state and a match is not found in the
73  *        first group of 4 keys, the search continues beyond the first group of
74  *        4 keys, potentially until all keys in this bucket are examined. The
75  *        extendible bucket logic requires maintaining specific data structures
76  *        per table and per each bucket.
77  * 2. Key signature computation:
78  *     a. Pre-computed key signature: The key lookup operation is split between
79  *        two CPU cores. The first CPU core (typically the CPU core performing
80  *        packet RX) extracts the key from the input packet, computes the key
81  *        signature and saves both the key and the key signature in the packet
82  *        buffer as packet meta-data. The second CPU core reads both the key and
83  *        the key signature from the packet meta-data and performs the bucket
84  *        search step of the key lookup operation.
85  *     b. Key signature computed on lookup (do-sig): The same CPU core reads
86  *        the key from the packet meta-data, uses it to compute the key
87  *        signature and also performs the bucket search step of the key lookup
88  *        operation.
89  * 3. Key size:
90  *     a. Configurable key size
91  *     b. Single key size (8-byte, 16-byte or 32-byte key size)
92  *
93  ***/
94 #include <stdint.h>
95
96 #include "rte_table.h"
97
98 /** Hash function */
99 typedef uint64_t (*rte_table_hash_op_hash)(
100         void *key,
101         uint32_t key_size,
102         uint64_t seed);
103
104 /**
105  * Hash tables with configurable key size
106  *
107  */
108 /** Extendible bucket hash table parameters */
109 struct rte_table_hash_ext_params {
110         /** Key size (number of bytes) */
111         uint32_t key_size;
112
113         /** Maximum number of keys */
114         uint32_t n_keys;
115
116         /** Number of hash table buckets. Each bucket stores up to 4 keys. */
117         uint32_t n_buckets;
118
119         /** Number of hash table bucket extensions. Each bucket extension has
120         space for 4 keys and each bucket can have 0, 1 or more extensions. */
121         uint32_t n_buckets_ext;
122
123         /** Hash function */
124         rte_table_hash_op_hash f_hash;
125
126         /** Seed value for the hash function */
127         uint64_t seed;
128
129         /** Byte offset within packet meta-data where the 4-byte key signature
130         is located. Valid for pre-computed key signature tables, ignored for
131         do-sig tables. */
132         uint32_t signature_offset;
133
134         /** Byte offset within packet meta-data where the key is located */
135         uint32_t key_offset;
136 };
137
138 /** Extendible bucket hash table operations for pre-computed key signature */
139 extern struct rte_table_ops rte_table_hash_ext_ops;
140
141 /** Extendible bucket hash table operations for key signature computed on
142         lookup ("do-sig") */
143 extern struct rte_table_ops rte_table_hash_ext_dosig_ops;
144
145 /** LRU hash table parameters */
146 struct rte_table_hash_lru_params {
147         /** Key size (number of bytes) */
148         uint32_t key_size;
149
150         /** Maximum number of keys */
151         uint32_t n_keys;
152
153         /** Number of hash table buckets. Each bucket stores up to 4 keys. */
154         uint32_t n_buckets;
155
156         /** Hash function */
157         rte_table_hash_op_hash f_hash;
158
159         /** Seed value for the hash function */
160         uint64_t seed;
161
162         /** Byte offset within packet meta-data where the 4-byte key signature
163         is located. Valid for pre-computed key signature tables, ignored for
164         do-sig tables. */
165         uint32_t signature_offset;
166
167         /** Byte offset within packet meta-data where the key is located */
168         uint32_t key_offset;
169 };
170
171 /** LRU hash table operations for pre-computed key signature */
172 extern struct rte_table_ops rte_table_hash_lru_ops;
173
174 /** LRU hash table operations for key signature computed on lookup ("do-sig") */
175 extern struct rte_table_ops rte_table_hash_lru_dosig_ops;
176
177 /**
178  * 8-byte key hash tables
179  *
180  */
181 /** LRU hash table parameters */
182 struct rte_table_hash_key8_lru_params {
183         /** Maximum number of entries (and keys) in the table */
184         uint32_t n_entries;
185
186         /** Hash function */
187         rte_table_hash_op_hash f_hash;
188
189         /** Seed for the hash function */
190         uint64_t seed;
191
192         /** Byte offset within packet meta-data where the 4-byte key signature
193         is located. Valid for pre-computed key signature tables, ignored for
194         do-sig tables. */
195         uint32_t signature_offset;
196
197         /** Byte offset within packet meta-data where the key is located */
198         uint32_t key_offset;
199 };
200
201 /** LRU hash table operations for pre-computed key signature */
202 extern struct rte_table_ops rte_table_hash_key8_lru_ops;
203
204 /** LRU hash table operations for key signature computed on lookup ("do-sig") */
205 extern struct rte_table_ops rte_table_hash_key8_lru_dosig_ops;
206
207 /** Extendible bucket hash table parameters */
208 struct rte_table_hash_key8_ext_params {
209         /** Maximum number of entries (and keys) in the table */
210         uint32_t n_entries;
211
212         /** Number of entries (and keys) for hash table bucket extensions. Each
213                 bucket is extended in increments of 4 keys. */
214         uint32_t n_entries_ext;
215
216         /** Hash function */
217         rte_table_hash_op_hash f_hash;
218
219         /** Seed for the hash function */
220         uint64_t seed;
221
222         /** Byte offset within packet meta-data where the 4-byte key signature
223         is located. Valid for pre-computed key signature tables, ignored for
224         do-sig tables. */
225         uint32_t signature_offset;
226
227         /** Byte offset within packet meta-data where the key is located */
228         uint32_t key_offset;
229 };
230
231 /** Extendible bucket hash table operations for pre-computed key signature */
232 extern struct rte_table_ops rte_table_hash_key8_ext_ops;
233
234 /** Extendible bucket hash table operations for key signature computed on
235     lookup ("do-sig") */
236 extern struct rte_table_ops rte_table_hash_key8_ext_dosig_ops;
237
238 /**
239  * 16-byte key hash tables
240  *
241  */
242 /** LRU hash table parameters */
243 struct rte_table_hash_key16_lru_params {
244         /** Maximum number of entries (and keys) in the table */
245         uint32_t n_entries;
246
247         /** Hash function */
248         rte_table_hash_op_hash f_hash;
249
250         /** Seed for the hash function */
251         uint64_t seed;
252
253         /** Byte offset within packet meta-data where the 4-byte key signature
254         is located. Valid for pre-computed key signature tables, ignored for
255         do-sig tables. */
256         uint32_t signature_offset;
257
258         /** Byte offset within packet meta-data where the key is located */
259         uint32_t key_offset;
260 };
261
262 /** LRU hash table operations for pre-computed key signature */
263 extern struct rte_table_ops rte_table_hash_key16_lru_ops;
264
265 /** Extendible bucket hash table parameters */
266 struct rte_table_hash_key16_ext_params {
267         /** Maximum number of entries (and keys) in the table */
268         uint32_t n_entries;
269
270         /** Number of entries (and keys) for hash table bucket extensions. Each
271         bucket is extended in increments of 4 keys. */
272         uint32_t n_entries_ext;
273
274         /** Hash function */
275         rte_table_hash_op_hash f_hash;
276
277         /** Seed for the hash function */
278         uint64_t seed;
279
280         /** Byte offset within packet meta-data where the 4-byte key signature
281         is located. Valid for pre-computed key signature tables, ignored for
282         do-sig tables. */
283         uint32_t signature_offset;
284
285         /** Byte offset within packet meta-data where the key is located */
286         uint32_t key_offset;
287 };
288
289 /** Extendible bucket operations for pre-computed key signature */
290 extern struct rte_table_ops rte_table_hash_key16_ext_ops;
291
292 /**
293  * 32-byte key hash tables
294  *
295  */
296 /** LRU hash table parameters */
297 struct rte_table_hash_key32_lru_params {
298         /** Maximum number of entries (and keys) in the table */
299         uint32_t n_entries;
300
301         /** Hash function */
302         rte_table_hash_op_hash f_hash;
303
304         /** Seed for the hash function */
305         uint64_t seed;
306
307         /** Byte offset within packet meta-data where the 4-byte key signature
308         is located. Valid for pre-computed key signature tables, ignored for
309         do-sig tables. */
310         uint32_t signature_offset;
311
312         /** Byte offset within packet meta-data where the key is located */
313         uint32_t key_offset;
314 };
315
316 /** LRU hash table operations for pre-computed key signature */
317 extern struct rte_table_ops rte_table_hash_key32_lru_ops;
318
319 /** Extendible bucket hash table parameters */
320 struct rte_table_hash_key32_ext_params {
321         /** Maximum number of entries (and keys) in the table */
322         uint32_t n_entries;
323
324         /** Number of entries (and keys) for hash table bucket extensions. Each
325                 bucket is extended in increments of 4 keys. */
326         uint32_t n_entries_ext;
327
328         /** Hash function */
329         rte_table_hash_op_hash f_hash;
330
331         /** Seed for the hash function */
332         uint64_t seed;
333
334         /** Byte offset within packet meta-data where the 4-byte key signature
335         is located. Valid for pre-computed key signature tables, ignored for
336         do-sig tables. */
337         uint32_t signature_offset;
338
339         /** Byte offset within packet meta-data where the key is located */
340         uint32_t key_offset;
341 };
342
343 /** Extendible bucket hash table operations */
344 extern struct rte_table_ops rte_table_hash_key32_ext_ops;
345
346 #ifdef __cplusplus
347 }
348 #endif
349
350 #endif