ctdb-daemon: Add extra logging of hot keys
[amitay/samba.git] / ctdb / include / ctdb_private.h
index 4c72a513301cdf2b97728ff884808e15c14ffb46..9ca87332d6102b7dc01fbbc4900f315fdaad6c60 100644 (file)
 #include "ctdb_client.h"
 #include <sys/socket.h>
 
+#include "common/db_hash.h"
+
 /*
   array of tcp connections
  */
 struct ctdb_tcp_array {
        uint32_t num;
-       struct ctdb_tcp_connection *connections;
+       struct ctdb_connection *connections;
 };
 
 /*
   an installed ctdb remote call
 */
+typedef int (*ctdb_fn_t)(struct ctdb_call_info *);
+
 struct ctdb_registered_call {
        struct ctdb_registered_call *next, *prev;
        uint32_t id;
@@ -45,12 +49,6 @@ struct ctdb_registered_call {
  */
 #define ctdb_validate_pnn(ctdb, pnn) (((uint32_t)(pnn)) < (ctdb)->num_nodes)
 
-
-/* called from the queue code when a packet comes in. Called with data==NULL
-   on error */
-typedef void (*ctdb_queue_cb_fn_t)(uint8_t *data, size_t length,
-                                  void *private_data);
-
 /* used for callbacks in ctdb_control requests */
 typedef void (*ctdb_control_callback_fn_t)(struct ctdb_context *,
                                           int32_t status, TDB_DATA data, 
@@ -71,41 +69,6 @@ struct ctdb_client {
        struct ctdb_client_notify_list *notify;
 };
 
-/* state associated with a public ip address */
-struct ctdb_vnn {
-       struct ctdb_vnn *prev, *next;
-
-       struct ctdb_iface *iface;
-       const char **ifaces;
-       ctdb_sock_addr public_address;
-       uint8_t public_netmask_bits;
-
-       /* the node number that is serving this public address, if any. 
-          If no node serves this ip it is set to -1 */
-       int32_t pnn;
-
-       /* List of clients to tickle for this public address */
-       struct ctdb_tcp_array *tcp_array;
-
-       /* whether we need to update the other nodes with changes to our list
-          of connected clients */
-       bool tcp_update_needed;
-
-       /* a context to hang sending gratious arp events off */
-       TALLOC_CTX *takeover_ctx;
-
-       struct ctdb_kill_tcp *killtcp;
-
-       /* Set to true any time an update to this VNN is in flight.
-          This helps to avoid races. */
-       bool update_in_flight;
-
-       /* If CTDB_CONTROL_DEL_PUBLIC_IP is received for this IP
-        * address then this flag is set.  It will be deleted in the
-        * release IP callback. */
-       bool delete_pending;
-};
-
 /*
   state associated with one node
 */
@@ -113,7 +76,7 @@ struct ctdb_node {
        struct ctdb_context *ctdb;
        ctdb_sock_addr address;
        const char *name; /* for debug messages */
-       void *private_data; /* private to transport */
+       void *transport_data; /* private to transport */
        uint32_t pnn;
        uint32_t flags;
 
@@ -126,13 +89,7 @@ struct ctdb_node {
           if the node becomes disconnected */
        struct daemon_control_state *pending_controls;
 
-       /* used by the recovery daemon when distributing ip addresses 
-          across the nodes.  it needs to know which public ip's can be handled
-          by each node.
-       */
-       struct ctdb_all_public_ips *known_public_ips;
-       struct ctdb_all_public_ips *available_public_ips;
-       /* used by the recovery dameon to track when a node should be banned */
+       /* used by the recovery daemon to track when a node should be banned */
        struct ctdb_banning_state *ban_state; 
 };
 
@@ -175,10 +132,10 @@ struct ctdb_daemon_data {
 #define CTDB_UPDATE_STAT(ctdb, counter, value) \
        {                                                                               \
                if (value > ctdb->statistics.counter) {                                 \
-                       ctdb->statistics.counter = c->hopcount;                         \
+                       ctdb->statistics.counter = value;                               \
                }                                                                       \
                if (value > ctdb->statistics_current.counter) {                         \
-                       ctdb->statistics_current.counter = c->hopcount;                 \
+                       ctdb->statistics_current.counter = value;                       \
                }                                                                       \
        }
 
@@ -288,9 +245,11 @@ struct ctdb_daemon_data {
        }
 
 
+struct ctdb_cluster_mutex_handle;
+struct eventd_context;
+
 enum ctdb_freeze_mode {CTDB_FREEZE_NONE, CTDB_FREEZE_PENDING, CTDB_FREEZE_FROZEN};
 
-#define NUM_DB_PRIORITIES 3
 /* main state of the ctdb daemon */
 struct ctdb_context {
        struct tevent_context *ev;
@@ -301,9 +260,9 @@ struct ctdb_context {
        TALLOC_CTX *tickle_update_context;
        TALLOC_CTX *keepalive_ctx;
        TALLOC_CTX *check_public_ifaces_ctx;
-       struct ctdb_tunable tunable;
-       enum ctdb_freeze_mode freeze_mode[NUM_DB_PRIORITIES+1];
-       struct ctdb_freeze_handle *freeze_handles[NUM_DB_PRIORITIES+1];
+       struct ctdb_tunable_list tunable;
+       enum ctdb_freeze_mode freeze_mode;
+       struct ctdb_freeze_handle *freeze_handle;
        bool freeze_transaction_started;
        uint32_t freeze_transaction_id;
        ctdb_sock_addr *address;
@@ -316,8 +275,7 @@ struct ctdb_context {
        uint64_t db_persistent_check_errors;
        uint64_t max_persistent_check_errors;
        const char *transport;
-       char *recovery_lock_file;
-       int recovery_lock_fd;
+       const char *recovery_lock;
        uint32_t pnn; /* our own pnn */
        uint32_t num_nodes;
        uint32_t num_connected;
@@ -326,14 +284,14 @@ struct ctdb_context {
        struct reqid_context *idr;
        struct ctdb_node **nodes; /* array of nodes in the cluster - indexed by vnn */
        struct ctdb_vnn *vnn; /* list of public ip addresses and interfaces */
-       struct ctdb_vnn *single_ip_vnn; /* a structure for the single ip */
-       struct ctdb_iface *ifaces; /* list of local interfaces */
+       struct ctdb_interface *ifaces; /* list of local interfaces */
        char *err_msg;
        const struct ctdb_methods *methods; /* transport methods */
        const struct ctdb_upcalls *upcalls; /* transport upcalls */
-       void *private_data; /* private to transport */
+       void *transport_data; /* private to transport */
        struct ctdb_db_context *db_list;
        struct srvid_context *srv;
+       struct srvid_context *tunnels;
        struct ctdb_daemon_data daemon;
        struct ctdb_statistics statistics;
        struct ctdb_statistics statistics_current;
@@ -344,11 +302,9 @@ struct ctdb_context {
        uint32_t recovery_master;
        struct ctdb_client_ip *client_ip_list;
        bool do_checkpublicip;
-       struct trbt_tree *server_ids; 
        bool do_setsched;
        const char *event_script_dir;
        const char *notification_script;
-       const char *default_public_interface;
        pid_t ctdbd_pid;
        pid_t recoverd_pid;
        enum ctdb_runstate runstate;
@@ -356,36 +312,25 @@ struct ctdb_context {
        int start_as_disabled;
        int start_as_stopped;
        bool valgrinding;
-       uint32_t event_script_timeouts; /* counting how many consecutive times an eventscript has timedout */
        uint32_t *recd_ping_count;
        TALLOC_CTX *recd_ctx; /* a context used to track recoverd monitoring events */
        TALLOC_CTX *release_ips_ctx; /* a context used to automatically drop all IPs if we fail to recover the node */
 
-       TALLOC_CTX *event_script_ctx;
-       int active_events;
-
-       struct ctdb_event_script_state *current_monitor;
-       struct ctdb_script_list_old *last_status[CTDB_EVENT_MAX];
+       struct eventd_context *ectx;
 
        TALLOC_CTX *banning_ctx;
 
-       struct ctdb_vacuum_child_context *vacuumers;
+       struct ctdb_vacuum_child_context *vacuumer;
 
        /* mapping from pid to ctdb_client * */
        struct ctdb_client_pid_list *client_pids;
 
-       /* used in the recovery daemon to remember the ip allocation */
-       struct trbt_tree *ip_tree;
-
        /* Used to defer db attach requests while in recovery mode */
        struct ctdb_deferred_attach_context *deferred_attach;
 
        /* if we are a child process, do we have a domain socket to send controls on */
        bool can_send_controls;
 
-       /* list of event script callback functions that are active */
-       struct event_script_callback *script_callbacks;
-
        struct ctdb_reloadips_handle *reload_ips;
 
        const char *nodes_file;
@@ -397,14 +342,17 @@ struct ctdb_context {
        struct lock_context *lock_pending;
 };
 
+struct ctdb_db_hot_key {
+       uint32_t count;
+       TDB_DATA key;
+       uint32_t last_logged_count;
+};
+
 struct ctdb_db_context {
        struct ctdb_db_context *next, *prev;
        struct ctdb_context *ctdb;
        uint32_t db_id;
-       uint32_t priority;
-       bool persistent;
-       bool readonly; /* Do we support read-only delegations ? */
-       bool sticky; /* Do we support sticky records ? */
+       uint8_t db_flags;
        const char *db_name;
        const char *db_path;
        struct tdb_wrap *ltdb;
@@ -419,6 +367,7 @@ struct ctdb_db_context {
        struct revokechild_handle *revokechild_active;
        struct ctdb_persistent_state *persistent_state;
        struct trbt_tree *delete_queue;
+       struct trbt_tree *fetch_queue;
        struct trbt_tree *sticky_records; 
        int (*ctdb_ltdb_store_fn)(struct ctdb_db_context *ctdb_db,
                                  TDB_DATA key,
@@ -431,11 +380,13 @@ struct ctdb_db_context {
        struct trbt_tree *deferred_fetch;
        struct trbt_tree *defer_dmaster;
 
-       struct ctdb_db_statistics statistics;
+       struct ctdb_db_statistics_old statistics;
+       struct ctdb_db_hot_key hot_keys[MAX_HOT_KEYS];
 
        struct lock_context *lock_current;
        struct lock_context *lock_pending;
-       int lock_num_current;
+       unsigned int lock_num_current;
+       struct db_hash_context *lock_log;
 
        struct ctdb_call_state *pending_calls;
 
@@ -444,6 +395,12 @@ struct ctdb_db_context {
        bool freeze_transaction_started;
        uint32_t freeze_transaction_id;
        uint32_t generation;
+
+       bool invalid_records;
+       bool push_started;
+       void *push_state;
+
+       struct hash_count_context *migratedb;
 };
 
 
@@ -534,7 +491,6 @@ int ctdb_ibw_init(struct ctdb_context *ctdb);
 
 /* from ctdb_banning.c */
 
-void ctdb_local_node_got_banned(struct ctdb_context *ctdb);
 int32_t ctdb_control_set_ban_state(struct ctdb_context *ctdb, TDB_DATA indata);
 int32_t ctdb_control_get_ban_state(struct ctdb_context *ctdb, TDB_DATA *outdata);
 void ctdb_ban_self(struct ctdb_context *ctdb);
@@ -566,8 +522,6 @@ struct ctdb_call_state *ctdb_daemon_call_send_remote(
 int ctdb_daemon_call_recv(struct ctdb_call_state *state,
                          struct ctdb_call *call);
 
-void ctdb_send_keepalive(struct ctdb_context *ctdb, uint32_t destnode);
-
 int ctdb_start_revoke_ro_record(struct ctdb_context *ctdb,
                                struct ctdb_db_context *ctdb_db,
                                TDB_DATA key, struct ctdb_ltdb_header *header,
@@ -578,6 +532,8 @@ int ctdb_add_revoke_deferred_call(struct ctdb_context *ctdb,
                                  TDB_DATA key, struct ctdb_req_header *hdr,
                                  deferred_requeue_fn fn, void *call_context);
 
+int ctdb_migration_init(struct ctdb_db_context *ctdb_db);
+
 /* from server/ctdb_control.c */
 
 int32_t ctdb_dump_memory(struct ctdb_context *ctdb, TDB_DATA *outdata);
@@ -605,10 +561,13 @@ int daemon_register_message_handler(struct ctdb_context *ctdb,
                                    uint32_t client_id, uint64_t srvid);
 int daemon_deregister_message_handler(struct ctdb_context *ctdb,
                                      uint32_t client_id, uint64_t srvid);
-int daemon_check_srvids(struct ctdb_context *ctdb, TDB_DATA indata,
-                       TDB_DATA *outdata);
 
-int ctdb_start_daemon(struct ctdb_context *ctdb, bool do_fork);
+void daemon_tunnel_handler(uint64_t tunnel_id, TDB_DATA data,
+                          void *private_data);
+
+int ctdb_start_daemon(struct ctdb_context *ctdb,
+                     bool interactive,
+                     bool test_mode_enabled);
 
 struct ctdb_req_header *_ctdb_transport_allocate(struct ctdb_context *ctdb,
                                                 TALLOC_CTX *mem_ctx,
@@ -638,12 +597,29 @@ struct ctdb_client *ctdb_find_client_by_pid(struct ctdb_context *ctdb,
                                            pid_t pid);
 
 int32_t ctdb_control_process_exists(struct ctdb_context *ctdb, pid_t pid);
+int32_t ctdb_control_check_pid_srvid(struct ctdb_context *ctdb,
+                                    TDB_DATA indata);
 
 int ctdb_control_getnodesfile(struct ctdb_context *ctdb, uint32_t opcode,
                              TDB_DATA indata, TDB_DATA *outdata);
 
 void ctdb_shutdown_sequence(struct ctdb_context *ctdb, int exit_code);
 
+int switch_from_server_to_client(struct ctdb_context *ctdb);
+
+/* From server/ctdb_fork.c */
+
+void ctdb_track_child(struct ctdb_context *ctdb, pid_t pid);
+
+pid_t ctdb_fork(struct ctdb_context *ctdb);
+pid_t ctdb_vfork_exec(TALLOC_CTX *mem_ctx, struct ctdb_context *ctdb,
+                     const char *helper, int helper_argc,
+                     const char **helper_argv);
+
+struct tevent_signal *ctdb_init_sigchld(struct ctdb_context *ctdb);
+
+int ctdb_kill(struct ctdb_context *ctdb, pid_t pid, int signum);
+
 /* from server/ctdb_freeze.c */
 
 int32_t ctdb_control_db_freeze(struct ctdb_context *ctdb,
@@ -653,8 +629,7 @@ int32_t ctdb_control_db_thaw(struct ctdb_context *ctdb, uint32_t db_id);
 
 int32_t ctdb_control_freeze(struct ctdb_context *ctdb,
                            struct ctdb_req_control_old *c, bool *async_reply);
-int32_t ctdb_control_thaw(struct ctdb_context *ctdb, uint32_t priority,
-                         bool check_recmode);
+int32_t ctdb_control_thaw(struct ctdb_context *ctdb, bool check_recmode);
 
 bool ctdb_blocking_freeze(struct ctdb_context *ctdb);
 
@@ -665,21 +640,20 @@ int32_t ctdb_control_db_transaction_cancel(struct ctdb_context *ctdb,
 int32_t ctdb_control_db_transaction_commit(struct ctdb_context *ctdb,
                                           TDB_DATA indata);
 
-int32_t ctdb_control_transaction_start(struct ctdb_context *ctdb, uint32_t id);
-int32_t ctdb_control_transaction_cancel(struct ctdb_context *ctdb);
-int32_t ctdb_control_transaction_commit(struct ctdb_context *ctdb, uint32_t id);
-
 int32_t ctdb_control_wipe_database(struct ctdb_context *ctdb, TDB_DATA indata);
 
 bool ctdb_db_frozen(struct ctdb_db_context *ctdb_db);
-bool ctdb_db_prio_frozen(struct ctdb_context *ctdb, uint32_t priority);
 bool ctdb_db_all_frozen(struct ctdb_context *ctdb);
+bool ctdb_db_allow_access(struct ctdb_db_context *ctdb_db);
 
 /* from server/ctdb_keepalive.c */
 
 void ctdb_start_keepalive(struct ctdb_context *ctdb);
 void ctdb_stop_keepalive(struct ctdb_context *ctdb);
 
+void ctdb_request_keepalive(struct ctdb_context *ctdb,
+                           struct ctdb_req_header *hdr);
+
 /* from server/ctdb_lock.c */
 
 struct lock_request;
@@ -687,16 +661,12 @@ struct lock_request;
 typedef int (*ctdb_db_handler_t)(struct ctdb_db_context *ctdb_db,
                                 void *private_data);
 
-int ctdb_db_prio_iterator(struct ctdb_context *ctdb, uint32_t priority,
-                         ctdb_db_handler_t handler, void *private_data);
 int ctdb_db_iterator(struct ctdb_context *ctdb, ctdb_db_handler_t handler,
                     void *private_data);
 
 int ctdb_lockdb_mark(struct ctdb_db_context *ctdb_db);
-int ctdb_lockall_mark_prio(struct ctdb_context *ctdb, uint32_t priority);
 
 int ctdb_lockdb_unmark(struct ctdb_db_context *ctdb_db);
-int ctdb_lockall_unmark_prio(struct ctdb_context *ctdb, uint32_t priority);
 
 struct lock_request *ctdb_lock_record(TALLOC_CTX *mem_ctx,
                                      struct ctdb_db_context *ctdb_db,
@@ -711,41 +681,12 @@ struct lock_request *ctdb_lock_db(TALLOC_CTX *mem_ctx,
                                  void (*callback)(void *, bool),
                                  void *private_data);
 
-struct lock_request *ctdb_lock_alldb_prio(TALLOC_CTX *mem_ctx,
-                                         struct ctdb_context *ctdb,
-                                         uint32_t priority,
-                                         bool auto_mark,
-                                         void (*callback)(void *, bool),
-                                         void *private_data);
-
-struct lock_request *ctdb_lock_alldb(TALLOC_CTX *mem_ctx,
-                                    struct ctdb_context *ctdb,
-                                    bool auto_mark,
-                                    void (*callback)(void *, bool),
-                                    void *private_data);
-
 /* from ctdb_logging.c */
 
-typedef int (*ctdb_log_setup_fn_t)(TALLOC_CTX *mem_ctx,
-                                  const char *logging,
-                                  const char *app_name);
-
-void ctdb_log_register_backend(const char *prefix, ctdb_log_setup_fn_t init);
-
-bool ctdb_logging_init(TALLOC_CTX *mem_ctx, const char *logging);
-
-struct ctdb_log_state *ctdb_vfork_with_logging(TALLOC_CTX *mem_ctx,
-                                              struct ctdb_context *ctdb,
-                                              const char *log_prefix,
-                                              const char *helper,
-                                              int helper_argc,
-                                              const char **helper_argv,
-                                              void (*logfn)(const char *,
-                                                            uint16_t, void *),
-                                              void *logfn_private, pid_t *pid);
+bool ctdb_logging_init(TALLOC_CTX *mem_ctx, const char *logging,
+                      const char *debug_level);
 
 int ctdb_set_child_logging(struct ctdb_context *ctdb);
-int ctdb_init_tevent_logging(struct ctdb_context *ctdb);
 
 /* from ctdb_logging_file.c */
 
@@ -773,7 +714,7 @@ int ctdb_load_persistent_health(struct ctdb_context *ctdb,
 int ctdb_update_persistent_health(struct ctdb_context *ctdb,
                                  struct ctdb_db_context *ctdb_db,
                                  const char *reason,/* NULL means healthy */
-                                 int num_healthy_nodes);
+                                 unsigned int num_healthy_nodes);
 int ctdb_recheck_persistent_health(struct ctdb_context *ctdb);
 
 int32_t ctdb_control_db_set_healthy(struct ctdb_context *ctdb,
@@ -786,9 +727,12 @@ int ctdb_set_db_readonly(struct ctdb_context *ctdb,
 
 int ctdb_process_deferred_attach(struct ctdb_context *ctdb);
 
-int32_t ctdb_control_db_attach(struct ctdb_context *ctdb, TDB_DATA indata,
-                              TDB_DATA *outdata, uint64_t tdb_flags,
-                              bool persistent, uint32_t client_id,
+int32_t ctdb_control_db_attach(struct ctdb_context *ctdb,
+                              TDB_DATA indata,
+                              TDB_DATA *outdata,
+                              uint8_t db_flags,
+                              uint32_t srcnode,
+                              uint32_t client_id,
                               struct ctdb_req_control_old *c,
                               bool *async_reply);
 int32_t ctdb_control_db_detach(struct ctdb_context *ctdb, TDB_DATA indata,
@@ -800,9 +744,6 @@ int32_t ctdb_ltdb_update_seqnum(struct ctdb_context *ctdb, uint32_t db_id,
                                uint32_t srcnode);
 int32_t ctdb_ltdb_enable_seqnum(struct ctdb_context *ctdb, uint32_t db_id);
 
-int32_t ctdb_control_set_db_priority(struct ctdb_context *ctdb, TDB_DATA indata,
-                                    uint32_t client_id);
-
 int ctdb_set_db_sticky(struct ctdb_context *ctdb,
                       struct ctdb_db_context *ctdb_db);
 
@@ -813,20 +754,14 @@ int32_t ctdb_control_get_db_statistics(struct ctdb_context *ctdb,
 
 /* from ctdb_monitor.c */
 
-int ctdb_set_notification_script(struct ctdb_context *ctdb, const char *script);
 void ctdb_run_notification_script(struct ctdb_context *ctdb, const char *event);
 
-void ctdb_disable_monitoring(struct ctdb_context *ctdb);
-void ctdb_enable_monitoring(struct ctdb_context *ctdb);
 void ctdb_stop_monitoring(struct ctdb_context *ctdb);
 
 void ctdb_wait_for_first_recovery(struct ctdb_context *ctdb);
 
 int32_t ctdb_control_modflags(struct ctdb_context *ctdb, TDB_DATA indata);
 
-int32_t ctdb_monitoring_mode(struct ctdb_context *ctdb);
-bool ctdb_stopped_monitoring(struct ctdb_context *ctdb);
-
 /* from ctdb_persistent.c */
 
 void ctdb_persistent_finish_trans3_commits(struct ctdb_context *ctdb);
@@ -863,6 +798,14 @@ int32_t ctdb_control_pull_db(struct ctdb_context *ctdb, TDB_DATA indata,
                             TDB_DATA *outdata);
 int32_t ctdb_control_push_db(struct ctdb_context *ctdb, TDB_DATA indata);
 
+int32_t ctdb_control_db_pull(struct ctdb_context *ctdb,
+                            struct ctdb_req_control_old *c,
+                            TDB_DATA indata, TDB_DATA *outdata);
+int32_t ctdb_control_db_push_start(struct ctdb_context *ctdb,
+                                  TDB_DATA indata);
+int32_t ctdb_control_db_push_confirm(struct ctdb_context *ctdb,
+                                    TDB_DATA indata, TDB_DATA *outdata);
+
 int ctdb_deferred_drop_all_ips(struct ctdb_context *ctdb);
 
 int32_t ctdb_control_set_recmode(struct ctdb_context *ctdb,
@@ -870,10 +813,6 @@ int32_t ctdb_control_set_recmode(struct ctdb_context *ctdb,
                                 TDB_DATA indata, bool *async_reply,
                                 const char **errormsg);
 
-bool ctdb_recovery_have_lock(struct ctdb_context *ctdb);
-bool ctdb_recovery_lock(struct ctdb_context *ctdb);
-void ctdb_recovery_unlock(struct ctdb_context *ctdb);
-
 int32_t ctdb_control_end_recovery(struct ctdb_context *ctdb,
                                 struct ctdb_req_control_old *c,
                                 bool *async_reply);
@@ -883,8 +822,6 @@ int32_t ctdb_control_start_recovery(struct ctdb_context *ctdb,
 
 int32_t ctdb_control_try_delete_records(struct ctdb_context *ctdb,
                                        TDB_DATA indata, TDB_DATA *outdata);
-int32_t ctdb_control_receive_records(struct ctdb_context *ctdb,
-                                    TDB_DATA indata, TDB_DATA *outdata);
 
 int32_t ctdb_control_get_capabilities(struct ctdb_context *ctdb,
                                      TDB_DATA *outdata);
@@ -893,6 +830,8 @@ int32_t ctdb_control_recd_ping(struct ctdb_context *ctdb);
 int32_t ctdb_control_set_recmaster(struct ctdb_context *ctdb,
                                   uint32_t opcode, TDB_DATA indata);
 
+void ctdb_node_become_inactive(struct ctdb_context *ctdb);
+
 int32_t ctdb_control_stop_node(struct ctdb_context *ctdb);
 int32_t ctdb_control_continue_node(struct ctdb_context *ctdb);
 
@@ -905,9 +844,10 @@ void ctdb_stop_recoverd(struct ctdb_context *ctdb);
 
 int ctdb_set_transport(struct ctdb_context *ctdb, const char *transport);
 
-int ctdb_ip_to_nodeid(struct ctdb_context *ctdb, const ctdb_sock_addr *nodeip);
-
-int ctdb_set_recovery_lock_file(struct ctdb_context *ctdb, const char *file);
+struct ctdb_node *ctdb_ip_to_node(struct ctdb_context *ctdb,
+                                 const ctdb_sock_addr *nodeip);
+uint32_t ctdb_ip_to_pnn(struct ctdb_context *ctdb,
+                       const ctdb_sock_addr *nodeip);
 
 void ctdb_load_nodes_file(struct ctdb_context *ctdb);
 
@@ -958,12 +898,6 @@ int32_t ctdb_control_ipreallocated(struct ctdb_context *ctdb,
                                 bool *async_reply);
 
 int ctdb_set_public_addresses(struct ctdb_context *ctdb, bool check_addresses);
-int ctdb_set_single_public_ip(struct ctdb_context *ctdb, const char *iface,
-                             const char *ip);
-
-int ctdb_takeover_run(struct ctdb_context *ctdb, struct ctdb_node_map *nodemap,
-                     uint32_t *force_rebalance_nodes,
-                     client_async_callback fail_callback, void *callback_data);
 
 int32_t ctdb_control_tcp_client(struct ctdb_context *ctdb, uint32_t client_id,
                                TDB_DATA indata);
@@ -990,7 +924,6 @@ int32_t ctdb_control_set_iface_link(struct ctdb_context *ctdb,
                                    struct ctdb_req_control_old *c,
                                    TDB_DATA indata);
 
-int32_t ctdb_control_kill_tcp(struct ctdb_context *ctdb, TDB_DATA indata);
 int32_t ctdb_control_set_tcp_tickle_list(struct ctdb_context *ctdb,
                                         TDB_DATA indata);
 int32_t ctdb_control_get_tcp_tickle_list(struct ctdb_context *ctdb,
@@ -1004,15 +937,7 @@ int32_t ctdb_control_send_gratious_arp(struct ctdb_context *ctdb,
 int32_t ctdb_control_add_public_address(struct ctdb_context *ctdb,
                                        TDB_DATA indata);
 int32_t ctdb_control_del_public_address(struct ctdb_context *ctdb,
-                                       struct ctdb_req_control_old *c,
-                                       TDB_DATA recdata, bool *async_reply);
-
-int verify_remote_ip_allocation(struct ctdb_context *ctdb,
-                               struct ctdb_all_public_ips *ips,
-                               uint32_t pnn);
-int update_ip_assignment_tree(struct ctdb_context *ctdb,
-                               struct ctdb_public_ip *ip);
-void clear_ip_assignment_tree(struct ctdb_context *ctdb);
+                                       TDB_DATA recdata);
 
 int32_t ctdb_control_reload_public_ips(struct ctdb_context *ctdb,
                                       struct ctdb_req_control_old *c,
@@ -1046,6 +971,20 @@ int32_t ctdb_control_set_tunable(struct ctdb_context *ctdb, TDB_DATA indata);
 int32_t ctdb_control_list_tunables(struct ctdb_context *ctdb,
                                   TDB_DATA *outdata);
 
+/* from ctdb_tunnel.c */
+
+int32_t ctdb_control_tunnel_register(struct ctdb_context *ctdb,
+                                    uint32_t client_id, uint64_t tunnel_id);
+int32_t ctdb_control_tunnel_deregister(struct ctdb_context *ctdb,
+                                      uint32_t client_id, uint64_t tunnel_id);
+
+int ctdb_daemon_send_tunnel(struct ctdb_context *ctdb, uint32_t destnode,
+                           uint64_t tunnel_id, uint32_t client_id,
+                           TDB_DATA data);
+
+void ctdb_request_tunnel(struct ctdb_context *ctdb,
+                        struct ctdb_req_header *hdr);
+
 /* from ctdb_update_record.c */
 
 int32_t ctdb_control_update_record(struct ctdb_context *ctdb,
@@ -1058,6 +997,11 @@ int32_t ctdb_control_uptime(struct ctdb_context *ctdb, TDB_DATA *outdata);
 
 /* from ctdb_vacuum.c */
 
+int32_t ctdb_control_db_vacuum(struct ctdb_context *ctdb,
+                              struct ctdb_req_control_old *c,
+                              TDB_DATA indata,
+                              bool *async_reply);
+
 void ctdb_stop_vacuuming(struct ctdb_context *ctdb);
 int ctdb_vacuum_init(struct ctdb_db_context *ctdb_db);
 
@@ -1071,11 +1015,12 @@ void ctdb_local_remove_from_delete_queue(struct ctdb_db_context *ctdb_db,
                                         const struct ctdb_ltdb_header *hdr,
                                         const TDB_DATA key);
 
+int32_t ctdb_control_vacuum_fetch(struct ctdb_context *ctdb, TDB_DATA indata);
+
 /* from eventscript.c */
 
-int32_t ctdb_control_get_event_script_status(struct ctdb_context *ctdb,
-                                            uint32_t call_type,
-                                            TDB_DATA *outdata);
+int ctdb_start_eventd(struct ctdb_context *ctdb);
+void ctdb_stop_eventd(struct ctdb_context *ctdb);
 
 int ctdb_event_script_callback(struct ctdb_context *ctdb,
                               TALLOC_CTX *mem_ctx,
@@ -1092,11 +1037,4 @@ int ctdb_event_script_args(struct ctdb_context *ctdb,
 int ctdb_event_script(struct ctdb_context *ctdb,
                      enum ctdb_event call);
 
-int32_t ctdb_run_eventscripts(struct ctdb_context *ctdb,
-                             struct ctdb_req_control_old *c,
-                             TDB_DATA data, bool *async_reply);
-
-int32_t ctdb_control_enable_script(struct ctdb_context *ctdb, TDB_DATA indata);
-int32_t ctdb_control_disable_script(struct ctdb_context *ctdb, TDB_DATA indata);
-
 #endif