drivers/staging/lustre/lustre/include/obd_class.h

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2011, 2015, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  */
  32 #ifndef __CLASS_OBD_H
  33 #define __CLASS_OBD_H
  34
  35 #include "obd_support.h"
  36 #include "lustre_import.h"
  37 #include "lustre_net.h"
  38 #include "obd.h"
  39 #include "lustre_lib.h"
  40 #include "lustre/lustre_idl.h"
  41 #include "lprocfs_status.h"
  42
  43 #define OBD_STATFS_NODELAY      0x0001  /* requests should be send without delay
  44                                          * and resends for avoid deadlocks
  45                                          */
  46 #define OBD_STATFS_FROM_CACHE   0x0002  /* the statfs callback should not update
  47                                          * obd_osfs_age
  48                                          */
  49 #define OBD_STATFS_PTLRPCD      0x0004  /* requests will be sent via ptlrpcd
  50                                          * instead of a specific set. This
  51                                          * means that we cannot rely on the set
  52                                          * interpret routine to be called.
  53                                          * lov_statfs_fini() must thus be called
  54                                          * by the request interpret routine
  55                                          */
  56 #define OBD_STATFS_FOR_MDT0     0x0008  /* The statfs is only for retrieving
  57                                          * information from MDT0.
  58                                          */
  59
  60 /* OBD Device Declarations */
  61 extern struct obd_device *obd_devs[MAX_OBD_DEVICES];
  62 extern rwlock_t obd_dev_lock;
  63
  64 /* OBD Operations Declarations */
  65 struct obd_device *class_exp2obd(struct obd_export *);
  66 int class_handle_ioctl(unsigned int cmd, unsigned long arg);
  67 int lustre_get_jobid(char *jobid);
  68
  69 struct lu_device_type;
  70
  71 /* genops.c */
  72 extern struct list_head obd_types;
  73 struct obd_export *class_conn2export(struct lustre_handle *);
  74 int class_register_type(struct obd_ops *, struct md_ops *,
  75                         const char *nm, struct lu_device_type *ldt);
  76 int class_unregister_type(const char *nm);
  77
  78 struct obd_device *class_newdev(const char *type_name, const char *name);
  79 void class_release_dev(struct obd_device *obd);
  80
  81 int class_name2dev(const char *name);
  82 struct obd_device *class_name2obd(const char *name);
  83 int class_uuid2dev(struct obd_uuid *uuid);
  84 struct obd_device *class_find_client_obd(struct obd_uuid *tgt_uuid,
  85                                          const char *typ_name,
  86                                          struct obd_uuid *grp_uuid);
  87 struct obd_device *class_devices_in_group(struct obd_uuid *grp_uuid,
  88                                           int *next);
  89 struct obd_device *class_num2obd(int num);
  90
  91 int class_notify_sptlrpc_conf(const char *fsname, int namelen);
  92
  93 int obd_connect_flags2str(char *page, int count, __u64 flags, char *sep);
  94
  95 int obd_zombie_impexp_init(void);
  96 void obd_zombie_impexp_stop(void);
  97 void obd_zombie_barrier(void);
  98
  99 int obd_get_request_slot(struct client_obd *cli);
 100 void obd_put_request_slot(struct client_obd *cli);
 101 __u32 obd_get_max_rpcs_in_flight(struct client_obd *cli);
 102 int obd_set_max_rpcs_in_flight(struct client_obd *cli, __u32 max);
 103
 104 struct llog_handle;
 105 struct llog_rec_hdr;
 106 typedef int (*llog_cb_t)(const struct lu_env *, struct llog_handle *,
 107                          struct llog_rec_hdr *, void *);
 108 /* obd_config.c */
 109 int class_process_config(struct lustre_cfg *lcfg);
 110 int class_process_proc_param(char *prefix, struct lprocfs_vars *lvars,
 111                              struct lustre_cfg *lcfg, void *data);
 112 struct obd_device *class_incref(struct obd_device *obd,
 113                                 const char *scope, const void *source);
 114 void class_decref(struct obd_device *obd,
 115                   const char *scope, const void *source);
 116 int class_config_llog_handler(const struct lu_env *env,
 117                               struct llog_handle *handle,
 118                               struct llog_rec_hdr *rec, void *data);
 119 int class_add_uuid(const char *uuid, __u64 nid);
 120
 121 /*obdecho*/
 122 void lprocfs_echo_init_vars(struct lprocfs_static_vars *lvars);
 123
 124 #define CFG_F_START     0x01   /* Set when we start updating from a log */
 125 #define CFG_F_MARKER    0x02   /* We are within a maker */
 126 #define CFG_F_SKIP      0x04   /* We should ignore this cfg command */
 127 #define CFG_F_COMPAT146 0x08   /* Allow old-style logs */
 128 #define CFG_F_EXCLUDE   0x10   /* OST exclusion list */
 129
 130 /* Passed as data param to class_config_parse_llog */
 131 struct config_llog_instance {
 132         char           *cfg_obdname;
 133         void           *cfg_instance;
 134         struct super_block *cfg_sb;
 135         struct obd_uuid     cfg_uuid;
 136         llog_cb_t           cfg_callback;
 137         int              cfg_last_idx; /* for partial llog processing */
 138         int              cfg_flags;
 139 };
 140
 141 int class_config_parse_llog(const struct lu_env *env, struct llog_ctxt *ctxt,
 142                             char *name, struct config_llog_instance *cfg);
 143 enum {
 144         CONFIG_T_CONFIG  = 0,
 145         CONFIG_T_SPTLRPC = 1,
 146         CONFIG_T_RECOVER = 2,
 147         CONFIG_T_PARAMS  = 3,
 148         CONFIG_T_MAX     = 4
 149 };
 150
 151 #define PARAMS_FILENAME "params"
 152 #define LCTL_UPCALL     "lctl"
 153
 154 /* list of active configuration logs  */
 155 struct config_llog_data {
 156         struct ldlm_res_id        cld_resid;
 157         struct config_llog_instance cld_cfg;
 158         struct list_head                  cld_list_chain;
 159         atomic_t                cld_refcount;
 160         struct config_llog_data    *cld_sptlrpc;/* depended sptlrpc log */
 161         struct config_llog_data    *cld_params; /* common parameters log */
 162         struct config_llog_data    *cld_recover;/* imperative recover log */
 163         struct obd_export         *cld_mgcexp;
 164         struct mutex                cld_lock;
 165         int                      cld_type;
 166         unsigned int            cld_stopping:1, /* we were told to stop
 167                                                  * watching
 168                                                  */
 169                                 cld_lostlock:1; /* lock not requeued */
 170         char                    cld_logname[0];
 171 };
 172
 173 struct lustre_profile {
 174         struct list_head       lp_list;
 175         char        *lp_profile;
 176         char        *lp_dt;
 177         char        *lp_md;
 178 };
 179
 180 struct lustre_profile *class_get_profile(const char *prof);
 181 void class_del_profile(const char *prof);
 182 void class_del_profiles(void);
 183
 184 #if LUSTRE_TRACKS_LOCK_EXP_REFS
 185
 186 void __class_export_add_lock_ref(struct obd_export *, struct ldlm_lock *);
 187 void __class_export_del_lock_ref(struct obd_export *, struct ldlm_lock *);
 188 extern void (*class_export_dump_hook)(struct obd_export *);
 189
 190 #else
 191
 192 #define __class_export_add_lock_ref(exp, lock)       do {} while (0)
 193 #define __class_export_del_lock_ref(exp, lock)       do {} while (0)
 194
 195 #endif
 196
 197 /* genops.c */
 198 struct obd_export *class_export_get(struct obd_export *exp);
 199 void class_export_put(struct obd_export *exp);
 200 struct obd_export *class_new_export(struct obd_device *obddev,
 201                                     struct obd_uuid *cluuid);
 202 void class_unlink_export(struct obd_export *exp);
 203
 204 struct obd_import *class_import_get(struct obd_import *);
 205 void class_import_put(struct obd_import *);
 206 struct obd_import *class_new_import(struct obd_device *obd);
 207 void class_destroy_import(struct obd_import *exp);
 208
 209 void class_put_type(struct obd_type *type);
 210 int class_connect(struct lustre_handle *conn, struct obd_device *obd,
 211                   struct obd_uuid *cluuid);
 212 int class_disconnect(struct obd_export *exp);
 213 void class_fail_export(struct obd_export *exp);
 214 int class_manual_cleanup(struct obd_device *obd);
 215
 216 static inline void class_export_rpc_inc(struct obd_export *exp)
 217 {
 218         atomic_inc(&(exp)->exp_rpc_count);
 219         CDEBUG(D_INFO, "RPC GETting export %p : new rpc_count %d\n",
 220                (exp), atomic_read(&(exp)->exp_rpc_count));
 221 }
 222
 223 static inline void class_export_rpc_dec(struct obd_export *exp)
 224 {
 225         LASSERT_ATOMIC_POS(&exp->exp_rpc_count);
 226         atomic_dec(&(exp)->exp_rpc_count);
 227         CDEBUG(D_INFO, "RPC PUTting export %p : new rpc_count %d\n",
 228                (exp), atomic_read(&(exp)->exp_rpc_count));
 229 }
 230
 231 static inline struct obd_export *class_export_lock_get(struct obd_export *exp,
 232                                                        struct ldlm_lock *lock)
 233 {
 234         atomic_inc(&(exp)->exp_locks_count);
 235         __class_export_add_lock_ref(exp, lock);
 236         CDEBUG(D_INFO, "lock GETting export %p : new locks_count %d\n",
 237                (exp), atomic_read(&(exp)->exp_locks_count));
 238         return class_export_get(exp);
 239 }
 240
 241 static inline void class_export_lock_put(struct obd_export *exp,
 242                                          struct ldlm_lock *lock)
 243 {
 244         LASSERT_ATOMIC_POS(&exp->exp_locks_count);
 245         atomic_dec(&(exp)->exp_locks_count);
 246         __class_export_del_lock_ref(exp, lock);
 247         CDEBUG(D_INFO, "lock PUTting export %p : new locks_count %d\n",
 248                (exp), atomic_read(&(exp)->exp_locks_count));
 249         class_export_put(exp);
 250 }
 251
 252 static inline enum obd_option exp_flags_from_obd(struct obd_device *obd)
 253 {
 254         return ((obd->obd_fail ? OBD_OPT_FAILOVER : 0) |
 255                 (obd->obd_force ? OBD_OPT_FORCE : 0) |
 256                 0);
 257 }
 258
 259 static inline int lprocfs_climp_check(struct obd_device *obd)
 260 {
 261         down_read(&(obd)->u.cli.cl_sem);
 262         if (!(obd)->u.cli.cl_import) {
 263                 up_read(&(obd)->u.cli.cl_sem);
 264                 return -ENODEV;
 265         }
 266         return 0;
 267 }
 268
 269 struct inode;
 270 struct lu_attr;
 271 struct obdo;
 272 void obdo_refresh_inode(struct inode *dst, const struct obdo *src, u32 valid);
 273
 274 void obdo_to_ioobj(const struct obdo *oa, struct obd_ioobj *ioobj);
 275 void md_from_obdo(struct md_op_data *op_data, const struct obdo *oa, u32 valid);
 276
 277 #define OBT(dev)        (dev)->obd_type
 278 #define OBP(dev, op)    (dev)->obd_type->typ_dt_ops->op
 279 #define MDP(dev, op)    (dev)->obd_type->typ_md_ops->op
 280 #define CTXTP(ctxt, op) (ctxt)->loc_logops->lop_##op
 281
 282 /* Ensure obd_setup: used for cleanup which must be called
 283  * while obd is stopping
 284  */
 285 static inline int obd_check_dev(struct obd_device *obd)
 286 {
 287         if (!obd) {
 288                 CERROR("NULL device\n");
 289                 return -ENODEV;
 290         }
 291         return 0;
 292 }
 293
 294 /* ensure obd_setup and !obd_stopping */
 295 static inline int obd_check_dev_active(struct obd_device *obd)
 296 {
 297         int rc;
 298
 299         rc = obd_check_dev(obd);
 300         if (rc)
 301                 return rc;
 302         if (!obd->obd_set_up || obd->obd_stopping) {
 303                 CERROR("Device %d not setup\n", obd->obd_minor);
 304                 return -ENODEV;
 305         }
 306         return rc;
 307 }
 308
 309 #define OBD_COUNTER_OFFSET(op)                            \
 310         ((offsetof(struct obd_ops, op) -                  \
 311           offsetof(struct obd_ops, iocontrol))          \
 312          / sizeof(((struct obd_ops *)(0))->iocontrol))
 313
 314 #define OBD_COUNTER_INCREMENT(obdx, op)                    \
 315         if ((obdx)->obd_stats) {                                  \
 316                 unsigned int coffset;                        \
 317                 coffset = (unsigned int)((obdx)->obd_cntr_base) + \
 318                         OBD_COUNTER_OFFSET(op);            \
 319                 LASSERT(coffset < (obdx)->obd_stats->ls_num);     \
 320                 lprocfs_counter_incr((obdx)->obd_stats, coffset); \
 321         }
 322
 323 #define EXP_COUNTER_INCREMENT(export, op)                                   \
 324         if ((export)->exp_obd->obd_stats) {                       \
 325                 unsigned int coffset;                                   \
 326                 coffset = (unsigned int)((export)->exp_obd->obd_cntr_base) + \
 327                         OBD_COUNTER_OFFSET(op);                       \
 328                 LASSERT(coffset < (export)->exp_obd->obd_stats->ls_num);     \
 329                 lprocfs_counter_incr((export)->exp_obd->obd_stats, coffset); \
 330         }
 331
 332 #define MD_COUNTER_OFFSET(op)                              \
 333         ((offsetof(struct md_ops, op) -            \
 334           offsetof(struct md_ops, getstatus))            \
 335          / sizeof(((struct md_ops *)(0))->getstatus))
 336
 337 #define MD_COUNTER_INCREMENT(obdx, op)                     \
 338         if ((obd)->md_stats) {                     \
 339                 unsigned int coffset;                       \
 340                 coffset = (unsigned int)((obdx)->md_cntr_base) + \
 341                         MD_COUNTER_OFFSET(op);             \
 342                 LASSERT(coffset < (obdx)->md_stats->ls_num);     \
 343                 lprocfs_counter_incr((obdx)->md_stats, coffset); \
 344         }
 345
 346 #define EXP_MD_COUNTER_INCREMENT(export, op)                             \
 347         if ((export)->exp_obd->obd_stats) {                               \
 348                 unsigned int coffset;                                   \
 349                 coffset = (unsigned int)((export)->exp_obd->md_cntr_base) +  \
 350                         MD_COUNTER_OFFSET(op);                         \
 351                 LASSERT(coffset < (export)->exp_obd->md_stats->ls_num);      \
 352                 lprocfs_counter_incr((export)->exp_obd->md_stats, coffset);  \
 353                 if ((export)->exp_md_stats)                               \
 354                         lprocfs_counter_incr(                           \
 355                                 (export)->exp_md_stats, coffset);           \
 356         }
 357
 358 #define EXP_CHECK_MD_OP(exp, op)                                \
 359 do {                                                        \
 360         if (!(exp)) {                               \
 361                 CERROR("obd_" #op ": NULL export\n");      \
 362                 return -ENODEV;                         \
 363         }                                                      \
 364         if (!(exp)->exp_obd || !OBT((exp)->exp_obd)) {   \
 365                 CERROR("obd_" #op ": cleaned up obd\n");        \
 366                 return -EOPNOTSUPP;                         \
 367         }                                                      \
 368         if (!OBT((exp)->exp_obd) || !MDP((exp)->exp_obd, op)) { \
 369                 CERROR("obd_" #op ": dev %s/%d no operation\n", \
 370                        (exp)->exp_obd->obd_name,                \
 371                        (exp)->exp_obd->obd_minor);            \
 372                 return -EOPNOTSUPP;                         \
 373         }                                                      \
 374 } while (0)
 375
 376 #define OBD_CHECK_DT_OP(obd, op, err)                      \
 377 do {                                                        \
 378         if (!OBT(obd) || !OBP((obd), op)) {                  \
 379                 if (err)                                        \
 380                         CERROR("obd_" #op ": dev %d no operation\n",    \
 381                                obd->obd_minor);          \
 382                 return err;                                 \
 383         }                                                      \
 384 } while (0)
 385
 386 #define EXP_CHECK_DT_OP(exp, op)                                \
 387 do {                                                        \
 388         if (!(exp)) {                               \
 389                 CERROR("obd_" #op ": NULL export\n");      \
 390                 return -ENODEV;                         \
 391         }                                                      \
 392         if (!(exp)->exp_obd || !OBT((exp)->exp_obd)) {   \
 393                 CERROR("obd_" #op ": cleaned up obd\n");        \
 394                 return -EOPNOTSUPP;                         \
 395         }                                                      \
 396         if (!OBT((exp)->exp_obd) || !OBP((exp)->exp_obd, op)) { \
 397                 CERROR("obd_" #op ": dev %d no operation\n",    \
 398                        (exp)->exp_obd->obd_minor);            \
 399                 return -EOPNOTSUPP;                         \
 400         }                                                      \
 401 } while (0)
 402
 403 #define CTXT_CHECK_OP(ctxt, op, err)                             \
 404 do {                                                             \
 405         if (!OBT(ctxt->loc_obd) || !CTXTP((ctxt), op)) {             \
 406                 if (err)                                             \
 407                         CERROR("lop_" #op ": dev %d no operation\n", \
 408                                ctxt->loc_obd->obd_minor);           \
 409                 return err;                                      \
 410         }                                                           \
 411 } while (0)
 412
 413 static inline int class_devno_max(void)
 414 {
 415         return MAX_OBD_DEVICES;
 416 }
 417
 418 static inline int obd_get_info(const struct lu_env *env,
 419                                struct obd_export *exp, __u32 keylen,
 420                                void *key, __u32 *vallen, void *val,
 421                                struct lov_stripe_md *lsm)
 422 {
 423         int rc;
 424
 425         EXP_CHECK_DT_OP(exp, get_info);
 426         EXP_COUNTER_INCREMENT(exp, get_info);
 427
 428         rc = OBP(exp->exp_obd, get_info)(env, exp, keylen, key, vallen, val,
 429                                          lsm);
 430         return rc;
 431 }
 432
 433 static inline int obd_set_info_async(const struct lu_env *env,
 434                                      struct obd_export *exp, u32 keylen,
 435                                      void *key, u32 vallen, void *val,
 436                                      struct ptlrpc_request_set *set)
 437 {
 438         int rc;
 439
 440         EXP_CHECK_DT_OP(exp, set_info_async);
 441         EXP_COUNTER_INCREMENT(exp, set_info_async);
 442
 443         rc = OBP(exp->exp_obd, set_info_async)(env, exp, keylen, key, vallen,
 444                                                val, set);
 445         return rc;
 446 }
 447
 448 /*
 449  * obd-lu integration.
 450  *
 451  * Functionality is being moved into new lu_device-based layering, but some
 452  * pieces of configuration process are still based on obd devices.
 453  *
 454  * Specifically, lu_device_type_operations::ldto_device_alloc() methods fully
 455  * subsume ->o_setup() methods of obd devices they replace. The same for
 456  * lu_device_operations::ldo_process_config() and ->o_process_config(). As a
 457  * result, obd_setup() and obd_process_config() branch and call one XOR
 458  * another.
 459  *
 460  * Yet neither lu_device_type_operations::ldto_device_fini() nor
 461  * lu_device_type_operations::ldto_device_free() fully implement the
 462  * functionality of ->o_precleanup() and ->o_cleanup() they override. Hence,
 463  * obd_precleanup() and obd_cleanup() call both lu_device and obd operations.
 464  */
 465
 466 #define DECLARE_LU_VARS(ldt, d)          \
 467         struct lu_device_type *ldt;       \
 468         struct lu_device *d
 469
 470 static inline int obd_setup(struct obd_device *obd, struct lustre_cfg *cfg)
 471 {
 472         int rc;
 473         DECLARE_LU_VARS(ldt, d);
 474
 475         ldt = obd->obd_type->typ_lu;
 476         if (ldt) {
 477                 struct lu_context  session_ctx;
 478                 struct lu_env env;
 479
 480                 lu_context_init(&session_ctx, LCT_SESSION | LCT_SERVER_SESSION);
 481                 session_ctx.lc_thread = NULL;
 482                 lu_context_enter(&session_ctx);
 483
 484                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 485                 if (rc == 0) {
 486                         env.le_ses = &session_ctx;
 487                         d = ldt->ldt_ops->ldto_device_alloc(&env, ldt, cfg);
 488                         lu_env_fini(&env);
 489                         if (!IS_ERR(d)) {
 490                                 obd->obd_lu_dev = d;
 491                                 d->ld_obd = obd;
 492                                 rc = 0;
 493                         } else {
 494                                 rc = PTR_ERR(d);
 495                         }
 496                 }
 497                 lu_context_exit(&session_ctx);
 498                 lu_context_fini(&session_ctx);
 499
 500         } else {
 501                 OBD_CHECK_DT_OP(obd, setup, -EOPNOTSUPP);
 502                 OBD_COUNTER_INCREMENT(obd, setup);
 503                 rc = OBP(obd, setup)(obd, cfg);
 504         }
 505         return rc;
 506 }
 507
 508 static inline int obd_precleanup(struct obd_device *obd,
 509                                  enum obd_cleanup_stage cleanup_stage)
 510 {
 511         int rc;
 512         DECLARE_LU_VARS(ldt, d);
 513
 514         rc = obd_check_dev(obd);
 515         if (rc)
 516                 return rc;
 517         ldt = obd->obd_type->typ_lu;
 518         d = obd->obd_lu_dev;
 519         if (ldt && d) {
 520                 if (cleanup_stage == OBD_CLEANUP_EXPORTS) {
 521                         struct lu_env env;
 522
 523                         rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 524                         if (rc == 0) {
 525                                 ldt->ldt_ops->ldto_device_fini(&env, d);
 526                                 lu_env_fini(&env);
 527                         }
 528                 }
 529         }
 530         OBD_CHECK_DT_OP(obd, precleanup, 0);
 531         OBD_COUNTER_INCREMENT(obd, precleanup);
 532
 533         rc = OBP(obd, precleanup)(obd, cleanup_stage);
 534         return rc;
 535 }
 536
 537 static inline int obd_cleanup(struct obd_device *obd)
 538 {
 539         int rc;
 540         DECLARE_LU_VARS(ldt, d);
 541
 542         rc = obd_check_dev(obd);
 543         if (rc)
 544                 return rc;
 545
 546         ldt = obd->obd_type->typ_lu;
 547         d = obd->obd_lu_dev;
 548         if (ldt && d) {
 549                 struct lu_env env;
 550
 551                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 552                 if (rc == 0) {
 553                         ldt->ldt_ops->ldto_device_free(&env, d);
 554                         lu_env_fini(&env);
 555                         obd->obd_lu_dev = NULL;
 556                 }
 557         }
 558         OBD_CHECK_DT_OP(obd, cleanup, 0);
 559         OBD_COUNTER_INCREMENT(obd, cleanup);
 560
 561         rc = OBP(obd, cleanup)(obd);
 562         return rc;
 563 }
 564
 565 static inline void obd_cleanup_client_import(struct obd_device *obd)
 566 {
 567         /* If we set up but never connected, the
 568          * client import will not have been cleaned.
 569          */
 570         down_write(&obd->u.cli.cl_sem);
 571         if (obd->u.cli.cl_import) {
 572                 struct obd_import *imp;
 573
 574                 imp = obd->u.cli.cl_import;
 575                 CDEBUG(D_CONFIG, "%s: client import never connected\n",
 576                        obd->obd_name);
 577                 ptlrpc_invalidate_import(imp);
 578                 client_destroy_import(imp);
 579                 obd->u.cli.cl_import = NULL;
 580         }
 581         up_write(&obd->u.cli.cl_sem);
 582 }
 583
 584 static inline int
 585 obd_process_config(struct obd_device *obd, int datalen, void *data)
 586 {
 587         int rc;
 588         DECLARE_LU_VARS(ldt, d);
 589
 590         rc = obd_check_dev(obd);
 591         if (rc)
 592                 return rc;
 593
 594         obd->obd_process_conf = 1;
 595         ldt = obd->obd_type->typ_lu;
 596         d = obd->obd_lu_dev;
 597         if (ldt && d) {
 598                 struct lu_env env;
 599
 600                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 601                 if (rc == 0) {
 602                         rc = d->ld_ops->ldo_process_config(&env, d, data);
 603                         lu_env_fini(&env);
 604                 }
 605         } else {
 606                 OBD_CHECK_DT_OP(obd, process_config, -EOPNOTSUPP);
 607                 rc = OBP(obd, process_config)(obd, datalen, data);
 608         }
 609         OBD_COUNTER_INCREMENT(obd, process_config);
 610         obd->obd_process_conf = 0;
 611
 612         return rc;
 613 }
 614
 615 /* Pack an in-memory MD struct for storage on disk.
 616  * Returns +ve size of packed MD (0 for free), or -ve error.
 617  *
 618  * If @disk_tgt == NULL, MD size is returned (max size if @mem_src == NULL).
 619  * If @*disk_tgt != NULL and @mem_src == NULL, @*disk_tgt will be freed.
 620  * If @*disk_tgt == NULL, it will be allocated
 621  */
 622 static inline int obd_packmd(struct obd_export *exp,
 623                              struct lov_mds_md **disk_tgt,
 624                              struct lov_stripe_md *mem_src)
 625 {
 626         int rc;
 627
 628         EXP_CHECK_DT_OP(exp, packmd);
 629         EXP_COUNTER_INCREMENT(exp, packmd);
 630
 631         rc = OBP(exp->exp_obd, packmd)(exp, disk_tgt, mem_src);
 632         return rc;
 633 }
 634
 635 static inline int obd_size_diskmd(struct obd_export *exp,
 636                                   struct lov_stripe_md *mem_src)
 637 {
 638         return obd_packmd(exp, NULL, mem_src);
 639 }
 640
 641 static inline int obd_free_diskmd(struct obd_export *exp,
 642                                   struct lov_mds_md **disk_tgt)
 643 {
 644         LASSERT(disk_tgt);
 645         LASSERT(*disk_tgt);
 646         /*
 647          * LU-2590, for caller's convenience, *disk_tgt could be host
 648          * endianness, it needs swab to LE if necessary, while just
 649          * lov_mds_md header needs it for figuring out how much memory
 650          * needs to be freed.
 651          */
 652         if ((cpu_to_le32(LOV_MAGIC) != LOV_MAGIC) &&
 653             (((*disk_tgt)->lmm_magic == LOV_MAGIC_V1) ||
 654              ((*disk_tgt)->lmm_magic == LOV_MAGIC_V3)))
 655                 lustre_swab_lov_mds_md(*disk_tgt);
 656         return obd_packmd(exp, disk_tgt, NULL);
 657 }
 658
 659 /* Unpack an MD struct from disk to in-memory format.
 660  * Returns +ve size of unpacked MD (0 for free), or -ve error.
 661  *
 662  * If @mem_tgt == NULL, MD size is returned (max size if @disk_src == NULL).
 663  * If @*mem_tgt != NULL and @disk_src == NULL, @*mem_tgt will be freed.
 664  * If @*mem_tgt == NULL, it will be allocated
 665  */
 666 static inline int obd_unpackmd(struct obd_export *exp,
 667                                struct lov_stripe_md **mem_tgt,
 668                                struct lov_mds_md *disk_src,
 669                                int disk_len)
 670 {
 671         int rc;
 672
 673         EXP_CHECK_DT_OP(exp, unpackmd);
 674         EXP_COUNTER_INCREMENT(exp, unpackmd);
 675
 676         rc = OBP(exp->exp_obd, unpackmd)(exp, mem_tgt, disk_src, disk_len);
 677         return rc;
 678 }
 679
 680 static inline int obd_free_memmd(struct obd_export *exp,
 681                                  struct lov_stripe_md **mem_tgt)
 682 {
 683         int rc;
 684
 685         LASSERT(mem_tgt);
 686         LASSERT(*mem_tgt);
 687         rc = obd_unpackmd(exp, mem_tgt, NULL, 0);
 688         *mem_tgt = NULL;
 689         return rc;
 690 }
 691
 692 static inline int obd_create(const struct lu_env *env, struct obd_export *exp,
 693                              struct obdo *obdo, struct obd_trans_info *oti)
 694 {
 695         int rc;
 696
 697         EXP_CHECK_DT_OP(exp, create);
 698         EXP_COUNTER_INCREMENT(exp, create);
 699
 700         rc = OBP(exp->exp_obd, create)(env, exp, obdo, oti);
 701         return rc;
 702 }
 703
 704 static inline int obd_destroy(const struct lu_env *env, struct obd_export *exp,
 705                               struct obdo *obdo, struct obd_trans_info *oti)
 706 {
 707         int rc;
 708
 709         EXP_CHECK_DT_OP(exp, destroy);
 710         EXP_COUNTER_INCREMENT(exp, destroy);
 711
 712         rc = OBP(exp->exp_obd, destroy)(env, exp, obdo, oti);
 713         return rc;
 714 }
 715
 716 static inline int obd_getattr(const struct lu_env *env, struct obd_export *exp,
 717                               struct obd_info *oinfo)
 718 {
 719         int rc;
 720
 721         EXP_CHECK_DT_OP(exp, getattr);
 722         EXP_COUNTER_INCREMENT(exp, getattr);
 723
 724         rc = OBP(exp->exp_obd, getattr)(env, exp, oinfo);
 725         return rc;
 726 }
 727
 728 static inline int obd_getattr_async(struct obd_export *exp,
 729                                     struct obd_info *oinfo,
 730                                     struct ptlrpc_request_set *set)
 731 {
 732         int rc;
 733
 734         EXP_CHECK_DT_OP(exp, getattr_async);
 735         EXP_COUNTER_INCREMENT(exp, getattr_async);
 736
 737         rc = OBP(exp->exp_obd, getattr_async)(exp, oinfo, set);
 738         return rc;
 739 }
 740
 741 static inline int obd_setattr(const struct lu_env *env, struct obd_export *exp,
 742                               struct obd_info *oinfo,
 743                               struct obd_trans_info *oti)
 744 {
 745         int rc;
 746
 747         EXP_CHECK_DT_OP(exp, setattr);
 748         EXP_COUNTER_INCREMENT(exp, setattr);
 749
 750         rc = OBP(exp->exp_obd, setattr)(env, exp, oinfo, oti);
 751         return rc;
 752 }
 753
 754 /* This performs all the requests set init/wait/destroy actions. */
 755 static inline int obd_setattr_rqset(struct obd_export *exp,
 756                                     struct obd_info *oinfo,
 757                                     struct obd_trans_info *oti)
 758 {
 759         struct ptlrpc_request_set *set = NULL;
 760         int rc;
 761
 762         EXP_CHECK_DT_OP(exp, setattr_async);
 763         EXP_COUNTER_INCREMENT(exp, setattr_async);
 764
 765         set =  ptlrpc_prep_set();
 766         if (!set)
 767                 return -ENOMEM;
 768
 769         rc = OBP(exp->exp_obd, setattr_async)(exp, oinfo, oti, set);
 770         if (rc == 0)
 771                 rc = ptlrpc_set_wait(set);
 772         ptlrpc_set_destroy(set);
 773         return rc;
 774 }
 775
 776 /* This adds all the requests into @set if @set != NULL, otherwise
 777  * all requests are sent asynchronously without waiting for response.
 778  */
 779 static inline int obd_setattr_async(struct obd_export *exp,
 780                                     struct obd_info *oinfo,
 781                                     struct obd_trans_info *oti,
 782                                     struct ptlrpc_request_set *set)
 783 {
 784         int rc;
 785
 786         EXP_CHECK_DT_OP(exp, setattr_async);
 787         EXP_COUNTER_INCREMENT(exp, setattr_async);
 788
 789         rc = OBP(exp->exp_obd, setattr_async)(exp, oinfo, oti, set);
 790         return rc;
 791 }
 792
 793 static inline int obd_add_conn(struct obd_import *imp, struct obd_uuid *uuid,
 794                                int priority)
 795 {
 796         struct obd_device *obd = imp->imp_obd;
 797         int rc;
 798
 799         rc = obd_check_dev_active(obd);
 800         if (rc)
 801                 return rc;
 802         OBD_CHECK_DT_OP(obd, add_conn, -EOPNOTSUPP);
 803         OBD_COUNTER_INCREMENT(obd, add_conn);
 804
 805         rc = OBP(obd, add_conn)(imp, uuid, priority);
 806         return rc;
 807 }
 808
 809 static inline int obd_del_conn(struct obd_import *imp, struct obd_uuid *uuid)
 810 {
 811         struct obd_device *obd = imp->imp_obd;
 812         int rc;
 813
 814         rc = obd_check_dev_active(obd);
 815         if (rc)
 816                 return rc;
 817         OBD_CHECK_DT_OP(obd, del_conn, -EOPNOTSUPP);
 818         OBD_COUNTER_INCREMENT(obd, del_conn);
 819
 820         rc = OBP(obd, del_conn)(imp, uuid);
 821         return rc;
 822 }
 823
 824 static inline struct obd_uuid *obd_get_uuid(struct obd_export *exp)
 825 {
 826         struct obd_uuid *uuid;
 827
 828         OBD_CHECK_DT_OP(exp->exp_obd, get_uuid, NULL);
 829         EXP_COUNTER_INCREMENT(exp, get_uuid);
 830
 831         uuid = OBP(exp->exp_obd, get_uuid)(exp);
 832         return uuid;
 833 }
 834
 835 /** Create a new /a exp on device /a obd for the uuid /a cluuid
 836  * @param exp New export handle
 837  * @param d Connect data, supported flags are set, flags also understood
 838  *    by obd are returned.
 839  */
 840 static inline int obd_connect(const struct lu_env *env,
 841                               struct obd_export **exp, struct obd_device *obd,
 842                               struct obd_uuid *cluuid,
 843                               struct obd_connect_data *data,
 844                               void *localdata)
 845 {
 846         int rc;
 847         __u64 ocf = data ? data->ocd_connect_flags : 0; /* for post-condition
 848                                                          * check
 849                                                          */
 850
 851         rc = obd_check_dev_active(obd);
 852         if (rc)
 853                 return rc;
 854         OBD_CHECK_DT_OP(obd, connect, -EOPNOTSUPP);
 855         OBD_COUNTER_INCREMENT(obd, connect);
 856
 857         rc = OBP(obd, connect)(env, exp, obd, cluuid, data, localdata);
 858         /* check that only subset is granted */
 859         LASSERT(ergo(data, (data->ocd_connect_flags & ocf) ==
 860                                     data->ocd_connect_flags));
 861         return rc;
 862 }
 863
 864 static inline int obd_reconnect(const struct lu_env *env,
 865                                 struct obd_export *exp,
 866                                 struct obd_device *obd,
 867                                 struct obd_uuid *cluuid,
 868                                 struct obd_connect_data *d,
 869                                 void *localdata)
 870 {
 871         int rc;
 872         __u64 ocf = d ? d->ocd_connect_flags : 0; /* for post-condition check */
 873
 874         rc = obd_check_dev_active(obd);
 875         if (rc)
 876                 return rc;
 877         OBD_CHECK_DT_OP(obd, reconnect, 0);
 878         OBD_COUNTER_INCREMENT(obd, reconnect);
 879
 880         rc = OBP(obd, reconnect)(env, exp, obd, cluuid, d, localdata);
 881         /* check that only subset is granted */
 882         LASSERT(ergo(d, (d->ocd_connect_flags & ocf) == d->ocd_connect_flags));
 883         return rc;
 884 }
 885
 886 static inline int obd_disconnect(struct obd_export *exp)
 887 {
 888         int rc;
 889
 890         EXP_CHECK_DT_OP(exp, disconnect);
 891         EXP_COUNTER_INCREMENT(exp, disconnect);
 892
 893         rc = OBP(exp->exp_obd, disconnect)(exp);
 894         return rc;
 895 }
 896
 897 static inline int obd_fid_init(struct obd_device *obd, struct obd_export *exp,
 898                                enum lu_cli_type type)
 899 {
 900         int rc;
 901
 902         OBD_CHECK_DT_OP(obd, fid_init, 0);
 903         OBD_COUNTER_INCREMENT(obd, fid_init);
 904
 905         rc = OBP(obd, fid_init)(obd, exp, type);
 906         return rc;
 907 }
 908
 909 static inline int obd_fid_fini(struct obd_device *obd)
 910 {
 911         int rc;
 912
 913         OBD_CHECK_DT_OP(obd, fid_fini, 0);
 914         OBD_COUNTER_INCREMENT(obd, fid_fini);
 915
 916         rc = OBP(obd, fid_fini)(obd);
 917         return rc;
 918 }
 919
 920 static inline int obd_fid_alloc(const struct lu_env *env,
 921                                 struct obd_export *exp,
 922                                 struct lu_fid *fid,
 923                                 struct md_op_data *op_data)
 924 {
 925         int rc;
 926
 927         EXP_CHECK_DT_OP(exp, fid_alloc);
 928         EXP_COUNTER_INCREMENT(exp, fid_alloc);
 929
 930         rc = OBP(exp->exp_obd, fid_alloc)(env, exp, fid, op_data);
 931         return rc;
 932 }
 933
 934 static inline int obd_pool_new(struct obd_device *obd, char *poolname)
 935 {
 936         int rc;
 937
 938         OBD_CHECK_DT_OP(obd, pool_new, -EOPNOTSUPP);
 939         OBD_COUNTER_INCREMENT(obd, pool_new);
 940
 941         rc = OBP(obd, pool_new)(obd, poolname);
 942         return rc;
 943 }
 944
 945 static inline int obd_pool_del(struct obd_device *obd, char *poolname)
 946 {
 947         int rc;
 948
 949         OBD_CHECK_DT_OP(obd, pool_del, -EOPNOTSUPP);
 950         OBD_COUNTER_INCREMENT(obd, pool_del);
 951
 952         rc = OBP(obd, pool_del)(obd, poolname);
 953         return rc;
 954 }
 955
 956 static inline int obd_pool_add(struct obd_device *obd, char *poolname, char *ostname)
 957 {
 958         int rc;
 959
 960         OBD_CHECK_DT_OP(obd, pool_add, -EOPNOTSUPP);
 961         OBD_COUNTER_INCREMENT(obd, pool_add);
 962
 963         rc = OBP(obd, pool_add)(obd, poolname, ostname);
 964         return rc;
 965 }
 966
 967 static inline int obd_pool_rem(struct obd_device *obd, char *poolname, char *ostname)
 968 {
 969         int rc;
 970
 971         OBD_CHECK_DT_OP(obd, pool_rem, -EOPNOTSUPP);
 972         OBD_COUNTER_INCREMENT(obd, pool_rem);
 973
 974         rc = OBP(obd, pool_rem)(obd, poolname, ostname);
 975         return rc;
 976 }
 977
 978 static inline void obd_getref(struct obd_device *obd)
 979 {
 980         if (OBT(obd) && OBP(obd, getref)) {
 981                 OBD_COUNTER_INCREMENT(obd, getref);
 982                 OBP(obd, getref)(obd);
 983         }
 984 }
 985
 986 static inline void obd_putref(struct obd_device *obd)
 987 {
 988         if (OBT(obd) && OBP(obd, putref)) {
 989                 OBD_COUNTER_INCREMENT(obd, putref);
 990                 OBP(obd, putref)(obd);
 991         }
 992 }
 993
 994 static inline int obd_init_export(struct obd_export *exp)
 995 {
 996         int rc = 0;
 997
 998         if ((exp)->exp_obd && OBT((exp)->exp_obd) &&
 999             OBP((exp)->exp_obd, init_export))
1000                 rc = OBP(exp->exp_obd, init_export)(exp);
1001         return rc;
1002 }
1003
1004 static inline int obd_destroy_export(struct obd_export *exp)
1005 {
1006         if ((exp)->exp_obd && OBT((exp)->exp_obd) &&
1007             OBP((exp)->exp_obd, destroy_export))
1008                 OBP(exp->exp_obd, destroy_export)(exp);
1009         return 0;
1010 }
1011
1012 /* @max_age is the oldest time in jiffies that we accept using a cached data.
1013  * If the cache is older than @max_age we will get a new value from the
1014  * target.  Use a value of "cfs_time_current() + HZ" to guarantee freshness.
1015  */
1016 static inline int obd_statfs_async(struct obd_export *exp,
1017                                    struct obd_info *oinfo,
1018                                    __u64 max_age,
1019                                    struct ptlrpc_request_set *rqset)
1020 {
1021         int rc = 0;
1022         struct obd_device *obd;
1023
1024         if (!exp || !exp->exp_obd)
1025                 return -EINVAL;
1026
1027         obd = exp->exp_obd;
1028         OBD_CHECK_DT_OP(obd, statfs, -EOPNOTSUPP);
1029         OBD_COUNTER_INCREMENT(obd, statfs);
1030
1031         CDEBUG(D_SUPER, "%s: osfs %p age %llu, max_age %llu\n",
1032                obd->obd_name, &obd->obd_osfs, obd->obd_osfs_age, max_age);
1033         if (cfs_time_before_64(obd->obd_osfs_age, max_age)) {
1034                 rc = OBP(obd, statfs_async)(exp, oinfo, max_age, rqset);
1035         } else {
1036                 CDEBUG(D_SUPER,
1037                        "%s: use %p cache blocks %llu/%llu objects %llu/%llu\n",
1038                        obd->obd_name, &obd->obd_osfs,
1039                        obd->obd_osfs.os_bavail, obd->obd_osfs.os_blocks,
1040                        obd->obd_osfs.os_ffree, obd->obd_osfs.os_files);
1041                 spin_lock(&obd->obd_osfs_lock);
1042                 memcpy(oinfo->oi_osfs, &obd->obd_osfs, sizeof(*oinfo->oi_osfs));
1043                 spin_unlock(&obd->obd_osfs_lock);
1044                 oinfo->oi_flags |= OBD_STATFS_FROM_CACHE;
1045                 if (oinfo->oi_cb_up)
1046                         oinfo->oi_cb_up(oinfo, 0);
1047         }
1048         return rc;
1049 }
1050
1051 static inline int obd_statfs_rqset(struct obd_export *exp,
1052                                    struct obd_statfs *osfs, __u64 max_age,
1053                                    __u32 flags)
1054 {
1055         struct ptlrpc_request_set *set = NULL;
1056         struct obd_info oinfo = { };
1057         int rc = 0;
1058
1059         set =  ptlrpc_prep_set();
1060         if (!set)
1061                 return -ENOMEM;
1062
1063         oinfo.oi_osfs = osfs;
1064         oinfo.oi_flags = flags;
1065         rc = obd_statfs_async(exp, &oinfo, max_age, set);
1066         if (rc == 0)
1067                 rc = ptlrpc_set_wait(set);
1068         ptlrpc_set_destroy(set);
1069         return rc;
1070 }
1071
1072 /* @max_age is the oldest time in jiffies that we accept using a cached data.
1073  * If the cache is older than @max_age we will get a new value from the
1074  * target.  Use a value of "cfs_time_current() + HZ" to guarantee freshness.
1075  */
1076 static inline int obd_statfs(const struct lu_env *env, struct obd_export *exp,
1077                              struct obd_statfs *osfs, __u64 max_age,
1078                              __u32 flags)
1079 {
1080         int rc = 0;
1081         struct obd_device *obd = exp->exp_obd;
1082
1083         if (!obd)
1084                 return -EINVAL;
1085
1086         OBD_CHECK_DT_OP(obd, statfs, -EOPNOTSUPP);
1087         OBD_COUNTER_INCREMENT(obd, statfs);
1088
1089         CDEBUG(D_SUPER, "osfs %llu, max_age %llu\n",
1090                obd->obd_osfs_age, max_age);
1091         if (cfs_time_before_64(obd->obd_osfs_age, max_age)) {
1092                 rc = OBP(obd, statfs)(env, exp, osfs, max_age, flags);
1093                 if (rc == 0) {
1094                         spin_lock(&obd->obd_osfs_lock);
1095                         memcpy(&obd->obd_osfs, osfs, sizeof(obd->obd_osfs));
1096                         obd->obd_osfs_age = cfs_time_current_64();
1097                         spin_unlock(&obd->obd_osfs_lock);
1098                 }
1099         } else {
1100                 CDEBUG(D_SUPER, "%s: use %p cache blocks %llu/%llu objects %llu/%llu\n",
1101                        obd->obd_name, &obd->obd_osfs,
1102                        obd->obd_osfs.os_bavail, obd->obd_osfs.os_blocks,
1103                        obd->obd_osfs.os_ffree, obd->obd_osfs.os_files);
1104                 spin_lock(&obd->obd_osfs_lock);
1105                 memcpy(osfs, &obd->obd_osfs, sizeof(*osfs));
1106                 spin_unlock(&obd->obd_osfs_lock);
1107         }
1108         return rc;
1109 }
1110
1111 static inline int obd_preprw(const struct lu_env *env, int cmd,
1112                              struct obd_export *exp, struct obdo *oa,
1113                              int objcount, struct obd_ioobj *obj,
1114                              struct niobuf_remote *remote, int *pages,
1115                              struct niobuf_local *local,
1116                              struct obd_trans_info *oti)
1117 {
1118         int rc;
1119
1120         EXP_CHECK_DT_OP(exp, preprw);
1121         EXP_COUNTER_INCREMENT(exp, preprw);
1122
1123         rc = OBP(exp->exp_obd, preprw)(env, cmd, exp, oa, objcount, obj, remote,
1124                                        pages, local, oti);
1125         return rc;
1126 }
1127
1128 static inline int obd_commitrw(const struct lu_env *env, int cmd,
1129                                struct obd_export *exp, struct obdo *oa,
1130                                int objcount, struct obd_ioobj *obj,
1131                                struct niobuf_remote *rnb, int pages,
1132                                struct niobuf_local *local,
1133                                struct obd_trans_info *oti, int rc)
1134 {
1135         EXP_CHECK_DT_OP(exp, commitrw);
1136         EXP_COUNTER_INCREMENT(exp, commitrw);
1137
1138         rc = OBP(exp->exp_obd, commitrw)(env, cmd, exp, oa, objcount, obj,
1139                                          rnb, pages, local, oti, rc);
1140         return rc;
1141 }
1142
1143 static inline int obd_iocontrol(unsigned int cmd, struct obd_export *exp,
1144                                 int len, void *karg, void __user *uarg)
1145 {
1146         int rc;
1147
1148         EXP_CHECK_DT_OP(exp, iocontrol);
1149         EXP_COUNTER_INCREMENT(exp, iocontrol);
1150
1151         rc = OBP(exp->exp_obd, iocontrol)(cmd, exp, len, karg, uarg);
1152         return rc;
1153 }
1154
1155 static inline void obd_import_event(struct obd_device *obd,
1156                                     struct obd_import *imp,
1157                                     enum obd_import_event event)
1158 {
1159         if (!obd) {
1160                 CERROR("NULL device\n");
1161                 return;
1162         }
1163         if (obd->obd_set_up && OBP(obd, import_event)) {
1164                 OBD_COUNTER_INCREMENT(obd, import_event);
1165                 OBP(obd, import_event)(obd, imp, event);
1166         }
1167 }
1168
1169 static inline int obd_notify(struct obd_device *obd,
1170                              struct obd_device *watched,
1171                              enum obd_notify_event ev,
1172                              void *data)
1173 {
1174         int rc;
1175
1176         rc = obd_check_dev(obd);
1177         if (rc)
1178                 return rc;
1179
1180         if (!obd->obd_set_up) {
1181                 CDEBUG(D_HA, "obd %s not set up\n", obd->obd_name);
1182                 return -EINVAL;
1183         }
1184
1185         if (!OBP(obd, notify)) {
1186                 CDEBUG(D_HA, "obd %s has no notify handler\n", obd->obd_name);
1187                 return -ENOSYS;
1188         }
1189
1190         OBD_COUNTER_INCREMENT(obd, notify);
1191         rc = OBP(obd, notify)(obd, watched, ev, data);
1192         return rc;
1193 }
1194
1195 static inline int obd_notify_observer(struct obd_device *observer,
1196                                       struct obd_device *observed,
1197                                       enum obd_notify_event ev,
1198                                       void *data)
1199 {
1200         int rc1;
1201         int rc2;
1202
1203         struct obd_notify_upcall *onu;
1204
1205         if (observer->obd_observer)
1206                 rc1 = obd_notify(observer->obd_observer, observed, ev, data);
1207         else
1208                 rc1 = 0;
1209         /*
1210          * Also, call non-obd listener, if any
1211          */
1212         onu = &observer->obd_upcall;
1213         if (onu->onu_upcall)
1214                 rc2 = onu->onu_upcall(observer, observed, ev,
1215                                       onu->onu_owner, NULL);
1216         else
1217                 rc2 = 0;
1218
1219         return rc1 ? rc1 : rc2;
1220 }
1221
1222 static inline int obd_quotacheck(struct obd_export *exp,
1223                                  struct obd_quotactl *oqctl)
1224 {
1225         int rc;
1226
1227         EXP_CHECK_DT_OP(exp, quotacheck);
1228         EXP_COUNTER_INCREMENT(exp, quotacheck);
1229
1230         rc = OBP(exp->exp_obd, quotacheck)(exp->exp_obd, exp, oqctl);
1231         return rc;
1232 }
1233
1234 static inline int obd_quotactl(struct obd_export *exp,
1235                                struct obd_quotactl *oqctl)
1236 {
1237         int rc;
1238
1239         EXP_CHECK_DT_OP(exp, quotactl);
1240         EXP_COUNTER_INCREMENT(exp, quotactl);
1241
1242         rc = OBP(exp->exp_obd, quotactl)(exp->exp_obd, exp, oqctl);
1243         return rc;
1244 }
1245
1246 static inline int obd_health_check(const struct lu_env *env,
1247                                    struct obd_device *obd)
1248 {
1249         /* returns: 0 on healthy
1250          *       >0 on unhealthy + reason code/flag
1251          *          however the only supported reason == 1 right now
1252          *          We'll need to define some better reasons
1253          *          or flags in the future.
1254          *       <0 on error
1255          */
1256         int rc;
1257
1258         /* don't use EXP_CHECK_DT_OP, because NULL method is normal here */
1259         if (!obd || !OBT(obd)) {
1260                 CERROR("cleaned up obd\n");
1261                 return -EOPNOTSUPP;
1262         }
1263         if (!obd->obd_set_up || obd->obd_stopping)
1264                 return 0;
1265         if (!OBP(obd, health_check))
1266                 return 0;
1267
1268         rc = OBP(obd, health_check)(env, obd);
1269         return rc;
1270 }
1271
1272 static inline int obd_register_observer(struct obd_device *obd,
1273                                         struct obd_device *observer)
1274 {
1275         int rc;
1276
1277         rc = obd_check_dev(obd);
1278         if (rc)
1279                 return rc;
1280         down_write(&obd->obd_observer_link_sem);
1281         if (obd->obd_observer && observer) {
1282                 up_write(&obd->obd_observer_link_sem);
1283                 return -EALREADY;
1284         }
1285         obd->obd_observer = observer;
1286         up_write(&obd->obd_observer_link_sem);
1287         return 0;
1288 }
1289
1290 /* metadata helpers */
1291 static inline int md_getstatus(struct obd_export *exp, struct lu_fid *fid)
1292 {
1293         int rc;
1294
1295         EXP_CHECK_MD_OP(exp, getstatus);
1296         EXP_MD_COUNTER_INCREMENT(exp, getstatus);
1297         rc = MDP(exp->exp_obd, getstatus)(exp, fid);
1298         return rc;
1299 }
1300
1301 static inline int md_getattr(struct obd_export *exp, struct md_op_data *op_data,
1302                              struct ptlrpc_request **request)
1303 {
1304         int rc;
1305
1306         EXP_CHECK_MD_OP(exp, getattr);
1307         EXP_MD_COUNTER_INCREMENT(exp, getattr);
1308         rc = MDP(exp->exp_obd, getattr)(exp, op_data, request);
1309         return rc;
1310 }
1311
1312 static inline int md_null_inode(struct obd_export *exp,
1313                                 const struct lu_fid *fid)
1314 {
1315         int rc;
1316
1317         EXP_CHECK_MD_OP(exp, null_inode);
1318         EXP_MD_COUNTER_INCREMENT(exp, null_inode);
1319         rc = MDP(exp->exp_obd, null_inode)(exp, fid);
1320         return rc;
1321 }
1322
1323 static inline int md_close(struct obd_export *exp, struct md_op_data *op_data,
1324                            struct md_open_data *mod,
1325                            struct ptlrpc_request **request)
1326 {
1327         int rc;
1328
1329         EXP_CHECK_MD_OP(exp, close);
1330         EXP_MD_COUNTER_INCREMENT(exp, close);
1331         rc = MDP(exp->exp_obd, close)(exp, op_data, mod, request);
1332         return rc;
1333 }
1334
1335 static inline int md_create(struct obd_export *exp, struct md_op_data *op_data,
1336                             const void *data, size_t datalen, umode_t mode,
1337                             uid_t uid, gid_t gid, cfs_cap_t cap_effective,
1338                             __u64 rdev, struct ptlrpc_request **request)
1339 {
1340         int rc;
1341
1342         EXP_CHECK_MD_OP(exp, create);
1343         EXP_MD_COUNTER_INCREMENT(exp, create);
1344         rc = MDP(exp->exp_obd, create)(exp, op_data, data, datalen, mode,
1345                                        uid, gid, cap_effective, rdev, request);
1346         return rc;
1347 }
1348
1349 static inline int md_done_writing(struct obd_export *exp,
1350                                   struct md_op_data *op_data,
1351                                   struct md_open_data *mod)
1352 {
1353         int rc;
1354
1355         EXP_CHECK_MD_OP(exp, done_writing);
1356         EXP_MD_COUNTER_INCREMENT(exp, done_writing);
1357         rc = MDP(exp->exp_obd, done_writing)(exp, op_data, mod);
1358         return rc;
1359 }
1360
1361 static inline int md_enqueue(struct obd_export *exp,
1362                              struct ldlm_enqueue_info *einfo,
1363                              const ldlm_policy_data_t *policy,
1364                              struct lookup_intent *it,
1365                              struct md_op_data *op_data,
1366                              struct lustre_handle *lockh,
1367                              __u64 extra_lock_flags)
1368 {
1369         int rc;
1370
1371         EXP_CHECK_MD_OP(exp, enqueue);
1372         EXP_MD_COUNTER_INCREMENT(exp, enqueue);
1373         rc = MDP(exp->exp_obd, enqueue)(exp, einfo, policy, it, op_data, lockh,
1374                                         extra_lock_flags);
1375         return rc;
1376 }
1377
1378 static inline int md_getattr_name(struct obd_export *exp,
1379                                   struct md_op_data *op_data,
1380                                   struct ptlrpc_request **request)
1381 {
1382         int rc;
1383
1384         EXP_CHECK_MD_OP(exp, getattr_name);
1385         EXP_MD_COUNTER_INCREMENT(exp, getattr_name);
1386         rc = MDP(exp->exp_obd, getattr_name)(exp, op_data, request);
1387         return rc;
1388 }
1389
1390 static inline int md_intent_lock(struct obd_export *exp,
1391                                  struct md_op_data *op_data,
1392                                  struct lookup_intent *it,
1393                                  struct ptlrpc_request **reqp,
1394                                  ldlm_blocking_callback cb_blocking,
1395                                  __u64 extra_lock_flags)
1396 {
1397         int rc;
1398
1399         EXP_CHECK_MD_OP(exp, intent_lock);
1400         EXP_MD_COUNTER_INCREMENT(exp, intent_lock);
1401         rc = MDP(exp->exp_obd, intent_lock)(exp, op_data, it, reqp,
1402                                             cb_blocking, extra_lock_flags);
1403         return rc;
1404 }
1405
1406 static inline int md_link(struct obd_export *exp, struct md_op_data *op_data,
1407                           struct ptlrpc_request **request)
1408 {
1409         int rc;
1410
1411         EXP_CHECK_MD_OP(exp, link);
1412         EXP_MD_COUNTER_INCREMENT(exp, link);
1413         rc = MDP(exp->exp_obd, link)(exp, op_data, request);
1414         return rc;
1415 }
1416
1417 static inline int md_rename(struct obd_export *exp, struct md_op_data *op_data,
1418                             const char *old, size_t oldlen, const char *new,
1419                             size_t newlen, struct ptlrpc_request **request)
1420 {
1421         int rc;
1422
1423         EXP_CHECK_MD_OP(exp, rename);
1424         EXP_MD_COUNTER_INCREMENT(exp, rename);
1425         rc = MDP(exp->exp_obd, rename)(exp, op_data, old, oldlen, new,
1426                                        newlen, request);
1427         return rc;
1428 }
1429
1430 static inline int md_setattr(struct obd_export *exp, struct md_op_data *op_data,
1431                              void *ea, size_t ealen, void *ea2, size_t ea2len,
1432                              struct ptlrpc_request **request,
1433                              struct md_open_data **mod)
1434 {
1435         int rc;
1436
1437         EXP_CHECK_MD_OP(exp, setattr);
1438         EXP_MD_COUNTER_INCREMENT(exp, setattr);
1439         rc = MDP(exp->exp_obd, setattr)(exp, op_data, ea, ealen,
1440                                         ea2, ea2len, request, mod);
1441         return rc;
1442 }
1443
1444 static inline int md_sync(struct obd_export *exp, const struct lu_fid *fid,
1445                           struct ptlrpc_request **request)
1446 {
1447         int rc;
1448
1449         EXP_CHECK_MD_OP(exp, sync);
1450         EXP_MD_COUNTER_INCREMENT(exp, sync);
1451         rc = MDP(exp->exp_obd, sync)(exp, fid, request);
1452         return rc;
1453 }
1454
1455 static inline int md_read_page(struct obd_export *exp,
1456                                struct md_op_data *op_data,
1457                                struct md_callback *cb_op,
1458                                __u64  hash_offset,
1459                                struct page **ppage)
1460 {
1461         int rc;
1462
1463         EXP_CHECK_MD_OP(exp, read_page);
1464         EXP_MD_COUNTER_INCREMENT(exp, read_page);
1465         rc = MDP(exp->exp_obd, read_page)(exp, op_data, cb_op, hash_offset,
1466                                           ppage);
1467         return rc;
1468 }
1469
1470 static inline int md_unlink(struct obd_export *exp, struct md_op_data *op_data,
1471                             struct ptlrpc_request **request)
1472 {
1473         int rc;
1474
1475         EXP_CHECK_MD_OP(exp, unlink);
1476         EXP_MD_COUNTER_INCREMENT(exp, unlink);
1477         rc = MDP(exp->exp_obd, unlink)(exp, op_data, request);
1478         return rc;
1479 }
1480
1481 static inline int md_get_lustre_md(struct obd_export *exp,
1482                                    struct ptlrpc_request *req,
1483                                    struct obd_export *dt_exp,
1484                                    struct obd_export *md_exp,
1485                                    struct lustre_md *md)
1486 {
1487         EXP_CHECK_MD_OP(exp, get_lustre_md);
1488         EXP_MD_COUNTER_INCREMENT(exp, get_lustre_md);
1489         return MDP(exp->exp_obd, get_lustre_md)(exp, req, dt_exp, md_exp, md);
1490 }
1491
1492 static inline int md_free_lustre_md(struct obd_export *exp,
1493                                     struct lustre_md *md)
1494 {
1495         EXP_CHECK_MD_OP(exp, free_lustre_md);
1496         EXP_MD_COUNTER_INCREMENT(exp, free_lustre_md);
1497         return MDP(exp->exp_obd, free_lustre_md)(exp, md);
1498 }
1499
1500 static inline int md_merge_attr(struct obd_export *exp,
1501                                 const struct lmv_stripe_md *lsm,
1502                                 struct cl_attr *attr,
1503                                 ldlm_blocking_callback cb)
1504 {
1505         EXP_CHECK_MD_OP(exp, merge_attr);
1506         EXP_MD_COUNTER_INCREMENT(exp, merge_attr);
1507         return MDP(exp->exp_obd, merge_attr)(exp, lsm, attr, cb);
1508 }
1509
1510 static inline int md_setxattr(struct obd_export *exp, const struct lu_fid *fid,
1511                               u64 valid, const char *name,
1512                               const char *input, int input_size,
1513                               int output_size, int flags, __u32 suppgid,
1514                               struct ptlrpc_request **request)
1515 {
1516         EXP_CHECK_MD_OP(exp, setxattr);
1517         EXP_MD_COUNTER_INCREMENT(exp, setxattr);
1518         return MDP(exp->exp_obd, setxattr)(exp, fid, valid, name, input,
1519                                            input_size, output_size, flags,
1520                                            suppgid, request);
1521 }
1522
1523 static inline int md_getxattr(struct obd_export *exp, const struct lu_fid *fid,
1524                               u64 valid, const char *name,
1525                               const char *input, int input_size,
1526                               int output_size, int flags,
1527                               struct ptlrpc_request **request)
1528 {
1529         EXP_CHECK_MD_OP(exp, getxattr);
1530         EXP_MD_COUNTER_INCREMENT(exp, getxattr);
1531         return MDP(exp->exp_obd, getxattr)(exp, fid, valid, name, input,
1532                                            input_size, output_size, flags,
1533                                            request);
1534 }
1535
1536 static inline int md_set_open_replay_data(struct obd_export *exp,
1537                                           struct obd_client_handle *och,
1538                                           struct lookup_intent *it)
1539 {
1540         EXP_CHECK_MD_OP(exp, set_open_replay_data);
1541         EXP_MD_COUNTER_INCREMENT(exp, set_open_replay_data);
1542         return MDP(exp->exp_obd, set_open_replay_data)(exp, och, it);
1543 }
1544
1545 static inline int md_clear_open_replay_data(struct obd_export *exp,
1546                                             struct obd_client_handle *och)
1547 {
1548         EXP_CHECK_MD_OP(exp, clear_open_replay_data);
1549         EXP_MD_COUNTER_INCREMENT(exp, clear_open_replay_data);
1550         return MDP(exp->exp_obd, clear_open_replay_data)(exp, och);
1551 }
1552
1553 static inline int md_set_lock_data(struct obd_export *exp,
1554                                    const struct lustre_handle *lockh,
1555                                    void *data, __u64 *bits)
1556 {
1557         EXP_CHECK_MD_OP(exp, set_lock_data);
1558         EXP_MD_COUNTER_INCREMENT(exp, set_lock_data);
1559         return MDP(exp->exp_obd, set_lock_data)(exp, lockh, data, bits);
1560 }
1561
1562 static inline int md_cancel_unused(struct obd_export *exp,
1563                                    const struct lu_fid *fid,
1564                                    ldlm_policy_data_t *policy,
1565                                    enum ldlm_mode mode,
1566                                    enum ldlm_cancel_flags flags,
1567                                    void *opaque)
1568 {
1569         int rc;
1570
1571         EXP_CHECK_MD_OP(exp, cancel_unused);
1572         EXP_MD_COUNTER_INCREMENT(exp, cancel_unused);
1573
1574         rc = MDP(exp->exp_obd, cancel_unused)(exp, fid, policy, mode,
1575                                               flags, opaque);
1576         return rc;
1577 }
1578
1579 static inline enum ldlm_mode md_lock_match(struct obd_export *exp, __u64 flags,
1580                                            const struct lu_fid *fid,
1581                                            enum ldlm_type type,
1582                                            ldlm_policy_data_t *policy,
1583                                            enum ldlm_mode mode,
1584                                            struct lustre_handle *lockh)
1585 {
1586         EXP_CHECK_MD_OP(exp, lock_match);
1587         EXP_MD_COUNTER_INCREMENT(exp, lock_match);
1588         return MDP(exp->exp_obd, lock_match)(exp, flags, fid, type,
1589                                              policy, mode, lockh);
1590 }
1591
1592 static inline int md_init_ea_size(struct obd_export *exp, int easize,
1593                                   int def_asize, int cookiesize,
1594                                   int def_cookiesize)
1595 {
1596         EXP_CHECK_MD_OP(exp, init_ea_size);
1597         EXP_MD_COUNTER_INCREMENT(exp, init_ea_size);
1598         return MDP(exp->exp_obd, init_ea_size)(exp, easize, def_asize,
1599                                                cookiesize, def_cookiesize);
1600 }
1601
1602 static inline int md_intent_getattr_async(struct obd_export *exp,
1603                                           struct md_enqueue_info *minfo,
1604                                           struct ldlm_enqueue_info *einfo)
1605 {
1606         int rc;
1607
1608         EXP_CHECK_MD_OP(exp, intent_getattr_async);
1609         EXP_MD_COUNTER_INCREMENT(exp, intent_getattr_async);
1610         rc = MDP(exp->exp_obd, intent_getattr_async)(exp, minfo, einfo);
1611         return rc;
1612 }
1613
1614 static inline int md_revalidate_lock(struct obd_export *exp,
1615                                      struct lookup_intent *it,
1616                                      struct lu_fid *fid, __u64 *bits)
1617 {
1618         int rc;
1619
1620         EXP_CHECK_MD_OP(exp, revalidate_lock);
1621         EXP_MD_COUNTER_INCREMENT(exp, revalidate_lock);
1622         rc = MDP(exp->exp_obd, revalidate_lock)(exp, it, fid, bits);
1623         return rc;
1624 }
1625
1626 static inline int md_get_fid_from_lsm(struct obd_export *exp,
1627                                       const struct lmv_stripe_md *lsm,
1628                                       const char *name, int namelen,
1629                                       struct lu_fid *fid)
1630 {
1631         int rc;
1632
1633         EXP_CHECK_MD_OP(exp, get_fid_from_lsm);
1634         EXP_MD_COUNTER_INCREMENT(exp, get_fid_from_lsm);
1635         rc = MDP(exp->exp_obd, get_fid_from_lsm)(exp, lsm, name, namelen, fid);
1636         return rc;
1637 }
1638
1639 /* OBD Metadata Support */
1640
1641 int obd_init_caches(void);
1642 void obd_cleanup_caches(void);
1643
1644 /* support routines */
1645 extern struct kmem_cache *obdo_cachep;
1646
1647 typedef int (*register_lwp_cb)(void *data);
1648
1649 struct lwp_register_item {
1650         struct obd_export **lri_exp;
1651         register_lwp_cb     lri_cb_func;
1652         void               *lri_cb_data;
1653         struct list_head            lri_list;
1654         char                lri_name[MTI_NAME_MAXLEN];
1655 };
1656
1657 /* I'm as embarrassed about this as you are.
1658  *
1659  * <shaver> // XXX do not look into _superhack with remaining eye
1660  * <shaver> // XXX if this were any uglier, I'd get my own show on MTV
1661  */
1662 extern int (*ptlrpc_put_connection_superhack)(struct ptlrpc_connection *c);
1663
1664 /* obd_mount.c */
1665 int lustre_unregister_fs(void);
1666 int lustre_register_fs(void);
1667 int lustre_check_exclusion(struct super_block *sb, char *svname);
1668
1669 /* sysctl.c */
1670 int obd_sysctl_init(void);
1671
1672 /* uuid.c  */
1673 typedef __u8 class_uuid_t[16];
1674 void class_uuid_unparse(class_uuid_t in, struct obd_uuid *out);
1675
1676 /* lustre_peer.c    */
1677 int lustre_uuid_to_peer(const char *uuid, lnet_nid_t *peer_nid, int index);
1678 int class_add_uuid(const char *uuid, __u64 nid);
1679 int class_del_uuid(const char *uuid);
1680 int class_check_uuid(struct obd_uuid *uuid, __u64 nid);
1681 void class_init_uuidlist(void);
1682 void class_exit_uuidlist(void);
1683
1684 /* class_obd.c */
1685 extern char obd_jobid_node[];
1686 extern struct miscdevice obd_psdev;
1687 extern spinlock_t obd_types_lock;
1688 int class_procfs_init(void);
1689 int class_procfs_clean(void);
1690
1691 /* prng.c */
1692 #define ll_generate_random_uuid(uuid_out) cfs_get_random_bytes(uuid_out, sizeof(class_uuid_t))
1693
1694 /* statfs_pack.c */
1695 struct kstatfs;
1696 void statfs_pack(struct obd_statfs *osfs, struct kstatfs *sfs);
1697 void statfs_unpack(struct kstatfs *sfs, struct obd_statfs *osfs);
1698
1699 /* root squash info */
1700 struct rw_semaphore;
1701 struct root_squash_info {
1702         uid_t                   rsi_uid;
1703         gid_t                   rsi_gid;
1704         struct list_head        rsi_nosquash_nids;
1705         struct rw_semaphore     rsi_sem;
1706 };
1707
1708 #endif /* __LINUX_OBD_CLASS_H */