Raw implementation done.
[vlendec/samba-autobuild/.git] / ctdb / ib / ibwrapper_internal.h
1 /*
2  * Unix SMB/CIFS implementation.
3  * Wrap Infiniband calls.
4  *
5  * Copyright (C) Sven Oehme <oehmes@de.ibm.com> 2006
6  *
7  * Major code contributions by Peter Somogyi <psomogyi@gamax.hu>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
22  */
23
24 typedef struct _ibw_opts {
25         int     max_send_wr;
26         int     max_recv_wr;
27 } ibw_opts;
28
29 typedef struct _ibw_wr {
30         char    *msg; /* initialized in ibw_init_memory once per connection */
31         int     wr_id; /* position in wr_index list; also used as wr id */
32         struct _ibw_wr *next, *prev; /* in wr_list_avail or wr_list_used */
33 } ibw_wr;
34
35 typedef enum {
36         IWINT_INIT = 0,
37         IWINT_ADDR_RESOLVED,
38         IWINT_ROUTE_RESOLVED,
39         IWINT_ERROR
40 } ibw_state_ctx;
41
42 typedef struct _ibw_ctx_priv {
43         struct event_context *ectx;
44
45         ibw_opts opts;
46
47         struct rdma_cm_id       *cm_id; /* server cm id */
48
49         struct rdma_event_channel *cm_channel;
50         struct fd_event *cm_channel_event;
51
52         struct ibv_pd          *pd;
53
54         ibw_connstate_fn_t connstate_func; /* see ibw_init */
55         ibw_receive_fn_t receive_func; /* see ibw_init */
56
57         long    pagesize; /* sysconf result for memalign */
58         int     qsize; /* opts.max_send_wr + opts.max_recv_wr */
59         int     max_msg_size; /* see ibw_init */
60 } ibw_ctx_priv;
61
62 typedef struct _ibw_conn_priv {
63         struct ibv_comp_channel *verbs_channel;
64         struct fd_event *verbs_channel_event;
65
66         struct rdma_cm_id *cm_id; /* client's cm id */
67         int     is_accepted;
68
69         struct ibv_cq   *cq; /* qp is in cm_id */
70         struct ibv_mr *mr;
71         char *buf; /* fixed size (qsize * opts.max_msg_size) buffer for send/recv */
72         ibw_wr *wr_list_avail;
73         ibw_wr *wr_list_used;
74         ibw_wr **wr_index; /* array[0..(qsize-1)] of (ibw_wr *) */
75 } ibw_conn_priv;
76