Merge tag 'spi-fix-v5.16-rc1' of git://git.kernel.org/pub/scm/linux/kernel/git/brooni...
[sfrench/cifs-2.6.git] / drivers / net / ethernet / mellanox / mlx5 / core / en_rep.h
1 /*
2  * Copyright (c) 2017, Mellanox Technologies. All rights reserved.
3  *
4  * This software is available to you under a choice of one of two
5  * licenses.  You may choose to be licensed under the terms of the GNU
6  * General Public License (GPL) Version 2, available from the file
7  * COPYING in the main directory of this source tree, or the
8  * OpenIB.org BSD license below:
9  *
10  *     Redistribution and use in source and binary forms, with or
11  *     without modification, are permitted provided that the following
12  *     conditions are met:
13  *
14  *      - Redistributions of source code must retain the above
15  *        copyright notice, this list of conditions and the following
16  *        disclaimer.
17  *
18  *      - Redistributions in binary form must reproduce the above
19  *        copyright notice, this list of conditions and the following
20  *        disclaimer in the documentation and/or other materials
21  *        provided with the distribution.
22  *
23  * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND,
24  * EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF
25  * MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND
26  * NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS
27  * BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN
28  * ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN
29  * CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
30  * SOFTWARE.
31  */
32
33 #ifndef __MLX5E_REP_H__
34 #define __MLX5E_REP_H__
35
36 #include <net/ip_tunnels.h>
37 #include <linux/rhashtable.h>
38 #include <linux/mutex.h>
39 #include "eswitch.h"
40 #include "en.h"
41 #include "lib/port_tun.h"
42
43 #ifdef CONFIG_MLX5_ESWITCH
44 extern const struct mlx5e_rx_handlers mlx5e_rx_handlers_rep;
45
46 struct mlx5e_neigh_update_table {
47         struct rhashtable       neigh_ht;
48         /* Save the neigh hash entries in a list in addition to the hash table
49          * (neigh_ht). In order to iterate easily over the neigh entries.
50          * Used for stats query.
51          */
52         struct list_head        neigh_list;
53         /* protect lookup/remove operations */
54         struct mutex            encap_lock;
55         struct notifier_block   netevent_nb;
56         struct delayed_work     neigh_stats_work;
57         unsigned long           min_interval; /* jiffies */
58 };
59
60 struct mlx5_tc_ct_priv;
61 struct mlx5_tc_int_port_priv;
62 struct mlx5e_rep_bond;
63 struct mlx5e_tc_tun_encap;
64 struct mlx5e_post_act;
65
66 struct mlx5_rep_uplink_priv {
67         /* Filters DB - instantiated by the uplink representor and shared by
68          * the uplink's VFs
69          */
70         struct rhashtable  tc_ht;
71
72         /* indirect block callbacks are invoked on bind/unbind events
73          * on registered higher level devices (e.g. tunnel devices)
74          *
75          * tc_indr_block_cb_priv_list is used to lookup indirect callback
76          * private data
77          *
78          */
79         struct list_head            tc_indr_block_priv_list;
80
81         struct mlx5_tun_entropy tun_entropy;
82
83         /* protects unready_flows */
84         struct mutex                unready_flows_lock;
85         struct list_head            unready_flows;
86         struct work_struct          reoffload_flows_work;
87
88         /* maps tun_info to a unique id*/
89         struct mapping_ctx *tunnel_mapping;
90         /* maps tun_enc_opts to a unique id*/
91         struct mapping_ctx *tunnel_enc_opts_mapping;
92
93         struct mlx5e_post_act *post_act;
94         struct mlx5_tc_ct_priv *ct_priv;
95         struct mlx5e_tc_psample *tc_psample;
96
97         /* support eswitch vports bonding */
98         struct mlx5e_rep_bond *bond;
99
100         /* tc tunneling encapsulation private data */
101         struct mlx5e_tc_tun_encap *encap;
102
103         /* OVS internal port support */
104         struct mlx5e_tc_int_port_priv *int_port_priv;
105 };
106
107 struct mlx5e_rep_priv {
108         struct mlx5_eswitch_rep *rep;
109         struct mlx5e_neigh_update_table neigh_update;
110         struct net_device      *netdev;
111         struct mlx5_flow_table *root_ft;
112         struct mlx5_flow_handle *vport_rx_rule;
113         struct list_head       vport_sqs_list;
114         struct mlx5_rep_uplink_priv uplink_priv; /* valid for uplink rep */
115         struct rtnl_link_stats64 prev_vf_vport_stats;
116 };
117
118 static inline
119 struct mlx5e_rep_priv *mlx5e_rep_to_rep_priv(struct mlx5_eswitch_rep *rep)
120 {
121         return rep->rep_data[REP_ETH].priv;
122 }
123
124 struct mlx5e_neigh {
125         union {
126                 __be32  v4;
127                 struct in6_addr v6;
128         } dst_ip;
129         int family;
130 };
131
132 struct mlx5e_neigh_hash_entry {
133         struct rhash_head rhash_node;
134         struct mlx5e_neigh m_neigh;
135         struct mlx5e_priv *priv;
136         struct net_device *neigh_dev;
137
138         /* Save the neigh hash entry in a list on the representor in
139          * addition to the hash table. In order to iterate easily over the
140          * neighbour entries. Used for stats query.
141          */
142         struct list_head neigh_list;
143
144         /* protects encap list */
145         spinlock_t encap_list_lock;
146         /* encap list sharing the same neigh */
147         struct list_head encap_list;
148
149         /* neigh hash entry can be deleted only when the refcount is zero.
150          * refcount is needed to avoid neigh hash entry removal by TC, while
151          * it's used by the neigh notification call.
152          */
153         refcount_t refcnt;
154
155         /* Save the last reported time offloaded traffic pass over one of the
156          * neigh hash entry flows. Use it to periodically update the neigh
157          * 'used' value and avoid neigh deleting by the kernel.
158          */
159         unsigned long reported_lastuse;
160
161         struct rcu_head rcu;
162 };
163
164 enum {
165         /* set when the encap entry is successfully offloaded into HW */
166         MLX5_ENCAP_ENTRY_VALID     = BIT(0),
167         MLX5_REFORMAT_DECAP        = BIT(1),
168         MLX5_ENCAP_ENTRY_NO_ROUTE  = BIT(2),
169 };
170
171 struct mlx5e_decap_key {
172         struct ethhdr key;
173 };
174
175 struct mlx5e_decap_entry {
176         struct mlx5e_decap_key key;
177         struct list_head flows;
178         struct hlist_node hlist;
179         refcount_t refcnt;
180         struct completion res_ready;
181         int compl_result;
182         struct mlx5_pkt_reformat *pkt_reformat;
183         struct rcu_head rcu;
184 };
185
186 struct mlx5e_encap_entry {
187         /* attached neigh hash entry */
188         struct mlx5e_neigh_hash_entry *nhe;
189         /* neigh hash entry list of encaps sharing the same neigh */
190         struct list_head encap_list;
191         /* a node of the eswitch encap hash table which keeping all the encap
192          * entries
193          */
194         struct hlist_node encap_hlist;
195         struct list_head flows;
196         struct list_head route_list;
197         struct mlx5_pkt_reformat *pkt_reformat;
198         const struct ip_tunnel_info *tun_info;
199         unsigned char h_dest[ETH_ALEN]; /* destination eth addr */
200
201         struct net_device *out_dev;
202         int route_dev_ifindex;
203         struct mlx5e_tc_tunnel *tunnel;
204         int reformat_type;
205         u8 flags;
206         char *encap_header;
207         int encap_size;
208         refcount_t refcnt;
209         struct completion res_ready;
210         int compl_result;
211         struct rcu_head rcu;
212 };
213
214 struct mlx5e_rep_sq {
215         struct mlx5_flow_handle *send_to_vport_rule;
216         struct mlx5_flow_handle *send_to_vport_rule_peer;
217         u32 sqn;
218         struct list_head         list;
219 };
220
221 int mlx5e_rep_init(void);
222 void mlx5e_rep_cleanup(void);
223 int mlx5e_rep_bond_init(struct mlx5e_rep_priv *rpriv);
224 void mlx5e_rep_bond_cleanup(struct mlx5e_rep_priv *rpriv);
225 int mlx5e_rep_bond_enslave(struct mlx5_eswitch *esw, struct net_device *netdev,
226                            struct net_device *lag_dev);
227 void mlx5e_rep_bond_unslave(struct mlx5_eswitch *esw,
228                             const struct net_device *netdev,
229                             const struct net_device *lag_dev);
230 int mlx5e_rep_bond_update(struct mlx5e_priv *priv, bool cleanup);
231
232 bool mlx5e_rep_has_offload_stats(const struct net_device *dev, int attr_id);
233 int mlx5e_rep_get_offload_stats(int attr_id, const struct net_device *dev,
234                                 void *sp);
235
236 bool mlx5e_is_uplink_rep(struct mlx5e_priv *priv);
237 int mlx5e_add_sqs_fwd_rules(struct mlx5e_priv *priv);
238 void mlx5e_remove_sqs_fwd_rules(struct mlx5e_priv *priv);
239
240 void mlx5e_rep_queue_neigh_stats_work(struct mlx5e_priv *priv);
241
242 bool mlx5e_eswitch_vf_rep(const struct net_device *netdev);
243 bool mlx5e_eswitch_uplink_rep(const struct net_device *netdev);
244 static inline bool mlx5e_eswitch_rep(const struct net_device *netdev)
245 {
246         return mlx5e_eswitch_vf_rep(netdev) ||
247                mlx5e_eswitch_uplink_rep(netdev);
248 }
249
250 #else /* CONFIG_MLX5_ESWITCH */
251 static inline bool mlx5e_is_uplink_rep(struct mlx5e_priv *priv) { return false; }
252 static inline int mlx5e_add_sqs_fwd_rules(struct mlx5e_priv *priv) { return 0; }
253 static inline void mlx5e_remove_sqs_fwd_rules(struct mlx5e_priv *priv) {}
254 static inline int mlx5e_rep_init(void) { return 0; };
255 static inline void mlx5e_rep_cleanup(void) {};
256 static inline bool mlx5e_rep_has_offload_stats(const struct net_device *dev,
257                                                int attr_id) { return false; }
258 static inline int mlx5e_rep_get_offload_stats(int attr_id,
259                                               const struct net_device *dev,
260                                               void *sp) { return -EOPNOTSUPP; }
261 #endif
262
263 static inline bool mlx5e_is_vport_rep(struct mlx5e_priv *priv)
264 {
265         return (MLX5_ESWITCH_MANAGER(priv->mdev) && priv->ppriv);
266 }
267 #endif /* __MLX5E_REP_H__ */