include/scsi/libiscsi.h

   1 /*
   2  * iSCSI lib definitions
   3  *
   4  * Copyright (C) 2006 Red Hat, Inc.  All rights reserved.
   5  * Copyright (C) 2004 - 2006 Mike Christie
   6  * Copyright (C) 2004 - 2005 Dmitry Yusupov
   7  * Copyright (C) 2004 - 2005 Alex Aizman
   8  *
   9  * This program is free software; you can redistribute it and/or modify
  10  * it under the terms of the GNU General Public License as published by
  11  * the Free Software Foundation; either version 2 of the License, or
  12  * (at your option) any later version.
  13  *
  14  * This program is distributed in the hope that it will be useful,
  15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  17  * GNU General Public License for more details.
  18  *
  19  * You should have received a copy of the GNU General Public License
  20  * along with this program; if not, write to the Free Software
  21  * Foundation, Inc., 59 Temple Place - Suite 330, Boston, MA 02111-1307, USA.
  22  */
  23 #ifndef LIBISCSI_H
  24 #define LIBISCSI_H
  25
  26 #include <linux/types.h>
  27 #include <linux/wait.h>
  28 #include <linux/mutex.h>
  29 #include <linux/timer.h>
  30 #include <linux/workqueue.h>
  31 #include <linux/kfifo.h>
  32 #include <scsi/iscsi_proto.h>
  33 #include <scsi/iscsi_if.h>
  34 #include <scsi/scsi_transport_iscsi.h>
  35
  36 struct scsi_transport_template;
  37 struct scsi_host_template;
  38 struct scsi_device;
  39 struct Scsi_Host;
  40 struct scsi_target;
  41 struct scsi_cmnd;
  42 struct socket;
  43 struct iscsi_transport;
  44 struct iscsi_cls_session;
  45 struct iscsi_cls_conn;
  46 struct iscsi_session;
  47 struct iscsi_nopin;
  48 struct device;
  49
  50 #define ISCSI_DEF_XMIT_CMDS_MAX 128     /* must be power of 2 */
  51 #define ISCSI_MGMT_CMDS_MAX     15
  52
  53 #define ISCSI_DEF_CMD_PER_LUN   32
  54
  55 /* Task Mgmt states */
  56 enum {
  57         TMF_INITIAL,
  58         TMF_QUEUED,
  59         TMF_SUCCESS,
  60         TMF_FAILED,
  61         TMF_TIMEDOUT,
  62         TMF_NOT_FOUND,
  63 };
  64
  65 #define ISID_SIZE                       6
  66
  67 /* Connection suspend "bit" */
  68 #define ISCSI_SUSPEND_BIT               1
  69
  70 #define ISCSI_ITT_MASK                  0x1fff
  71 #define ISCSI_TOTAL_CMDS_MAX            4096
  72 /* this must be a power of two greater than ISCSI_MGMT_CMDS_MAX */
  73 #define ISCSI_TOTAL_CMDS_MIN            16
  74 #define ISCSI_AGE_SHIFT                 28
  75 #define ISCSI_AGE_MASK                  0xf
  76
  77 #define ISCSI_ADDRESS_BUF_LEN           64
  78
  79 enum {
  80         /* this is the maximum possible storage for AHSs */
  81         ISCSI_MAX_AHS_SIZE = sizeof(struct iscsi_ecdb_ahdr) +
  82                                 sizeof(struct iscsi_rlength_ahdr),
  83         ISCSI_DIGEST_SIZE = sizeof(__u32),
  84 };
  85
  86
  87 enum {
  88         ISCSI_TASK_FREE,
  89         ISCSI_TASK_COMPLETED,
  90         ISCSI_TASK_PENDING,
  91         ISCSI_TASK_RUNNING,
  92         ISCSI_TASK_ABRT_TMF,            /* aborted due to TMF */
  93         ISCSI_TASK_ABRT_SESS_RECOV,     /* aborted due to session recovery */
  94         ISCSI_TASK_REQUEUE_SCSIQ,       /* qcmd requeueing to scsi-ml */
  95 };
  96
  97 struct iscsi_r2t_info {
  98         __be32                  ttt;            /* copied from R2T */
  99         __be32                  exp_statsn;     /* copied from R2T */
 100         uint32_t                data_length;    /* copied from R2T */
 101         uint32_t                data_offset;    /* copied from R2T */
 102         int                     data_count;     /* DATA-Out payload progress */
 103         int                     datasn;
 104         /* LLDs should set/update these values */
 105         int                     sent;           /* R2T sequence progress */
 106 };
 107
 108 struct iscsi_task {
 109         /*
 110          * Because LLDs allocate their hdr differently, this is a pointer
 111          * and length to that storage. It must be setup at session
 112          * creation time.
 113          */
 114         struct iscsi_hdr        *hdr;
 115         unsigned short          hdr_max;
 116         unsigned short          hdr_len;        /* accumulated size of hdr used */
 117         /* copied values in case we need to send tmfs */
 118         itt_t                   hdr_itt;
 119         __be32                  cmdsn;
 120         struct scsi_lun         lun;
 121
 122         int                     itt;            /* this ITT */
 123
 124         unsigned                imm_count;      /* imm-data (bytes)   */
 125         /* offset in unsolicited stream (bytes); */
 126         struct iscsi_r2t_info   unsol_r2t;
 127         char                    *data;          /* mgmt payload */
 128         unsigned                data_count;
 129         struct scsi_cmnd        *sc;            /* associated SCSI cmd*/
 130         struct iscsi_conn       *conn;          /* used connection    */
 131
 132         /* data processing tracking */
 133         unsigned long           last_xfer;
 134         unsigned long           last_timeout;
 135         bool                    have_checked_conn;
 136
 137         /* T10 protection information */
 138         bool                    protected;
 139
 140         /* state set/tested under session->lock */
 141         int                     state;
 142         atomic_t                refcount;
 143         struct list_head        running;        /* running cmd list */
 144         void                    *dd_data;       /* driver/transport data */
 145 };
 146
 147 /* invalid scsi_task pointer */
 148 #define INVALID_SCSI_TASK       (struct iscsi_task *)-1l
 149
 150 static inline int iscsi_task_has_unsol_data(struct iscsi_task *task)
 151 {
 152         return task->unsol_r2t.data_length > task->unsol_r2t.sent;
 153 }
 154
 155 static inline void* iscsi_next_hdr(struct iscsi_task *task)
 156 {
 157         return (void*)task->hdr + task->hdr_len;
 158 }
 159
 160 /* Connection's states */
 161 enum {
 162         ISCSI_CONN_INITIAL_STAGE,
 163         ISCSI_CONN_STARTED,
 164         ISCSI_CONN_STOPPED,
 165         ISCSI_CONN_CLEANUP_WAIT,
 166 };
 167
 168 struct iscsi_conn {
 169         struct iscsi_cls_conn   *cls_conn;      /* ptr to class connection */
 170         void                    *dd_data;       /* iscsi_transport data */
 171         struct iscsi_session    *session;       /* parent session */
 172         /*
 173          * conn_stop() flag: stop to recover, stop to terminate
 174          */
 175         int                     stop_stage;
 176         struct timer_list       transport_timer;
 177         unsigned long           last_recv;
 178         unsigned long           last_ping;
 179         int                     ping_timeout;
 180         int                     recv_timeout;
 181         struct iscsi_task       *ping_task;
 182
 183         /* iSCSI connection-wide sequencing */
 184         uint32_t                exp_statsn;
 185         uint32_t                statsn;
 186
 187         /* control data */
 188         int                     id;             /* CID */
 189         int                     c_stage;        /* connection state */
 190         /*
 191          * Preallocated buffer for pdus that have data but do not
 192          * originate from scsi-ml. We never have two pdus using the
 193          * buffer at the same time. It is only allocated to
 194          * the default max recv size because the pdus we support
 195          * should always fit in this buffer
 196          */
 197         char                    *data;
 198         struct iscsi_task       *login_task;    /* mtask used for login/text */
 199         struct iscsi_task       *task;          /* xmit task in progress */
 200
 201         /* xmit */
 202         spinlock_t              taskqueuelock;  /* protects the next three lists */
 203         struct list_head        mgmtqueue;      /* mgmt (control) xmit queue */
 204         struct list_head        cmdqueue;       /* data-path cmd queue */
 205         struct list_head        requeue;        /* tasks needing another run */
 206         struct work_struct      xmitwork;       /* per-conn. xmit workqueue */
 207         unsigned long           suspend_tx;     /* suspend Tx */
 208         unsigned long           suspend_rx;     /* suspend Rx */
 209
 210         /* abort */
 211         wait_queue_head_t       ehwait;         /* used in eh_abort() */
 212         struct iscsi_tm         tmhdr;
 213         struct timer_list       tmf_timer;
 214         int                     tmf_state;      /* see TMF_INITIAL, etc.*/
 215
 216         /* negotiated params */
 217         unsigned                max_recv_dlength; /* initiator_max_recv_dsl*/
 218         unsigned                max_xmit_dlength; /* target_max_recv_dsl */
 219         int                     hdrdgst_en;
 220         int                     datadgst_en;
 221         int                     ifmarker_en;
 222         int                     ofmarker_en;
 223         /* values userspace uses to id a conn */
 224         int                     persistent_port;
 225         char                    *persistent_address;
 226
 227         unsigned                max_segment_size;
 228         unsigned                tcp_xmit_wsf;
 229         unsigned                tcp_recv_wsf;
 230         uint16_t                keepalive_tmo;
 231         uint16_t                local_port;
 232         uint8_t                 tcp_timestamp_stat;
 233         uint8_t                 tcp_nagle_disable;
 234         uint8_t                 tcp_wsf_disable;
 235         uint8_t                 tcp_timer_scale;
 236         uint8_t                 tcp_timestamp_en;
 237         uint8_t                 fragment_disable;
 238         uint8_t                 ipv4_tos;
 239         uint8_t                 ipv6_traffic_class;
 240         uint8_t                 ipv6_flow_label;
 241         uint8_t                 is_fw_assigned_ipv6;
 242         char                    *local_ipaddr;
 243
 244         /* MIB-statistics */
 245         uint64_t                txdata_octets;
 246         uint64_t                rxdata_octets;
 247         uint32_t                scsicmd_pdus_cnt;
 248         uint32_t                dataout_pdus_cnt;
 249         uint32_t                scsirsp_pdus_cnt;
 250         uint32_t                datain_pdus_cnt;
 251         uint32_t                r2t_pdus_cnt;
 252         uint32_t                tmfcmd_pdus_cnt;
 253         int32_t                 tmfrsp_pdus_cnt;
 254
 255         /* custom statistics */
 256         uint32_t                eh_abort_cnt;
 257         uint32_t                fmr_unalign_cnt;
 258 };
 259
 260 struct iscsi_pool {
 261         struct kfifo            queue;          /* FIFO Queue */
 262         void                    **pool;         /* Pool of elements */
 263         int                     max;            /* Max number of elements */
 264 };
 265
 266 /* Session's states */
 267 enum {
 268         ISCSI_STATE_FREE = 1,
 269         ISCSI_STATE_LOGGED_IN,
 270         ISCSI_STATE_FAILED,
 271         ISCSI_STATE_TERMINATE,
 272         ISCSI_STATE_IN_RECOVERY,
 273         ISCSI_STATE_RECOVERY_FAILED,
 274         ISCSI_STATE_LOGGING_OUT,
 275 };
 276
 277 struct iscsi_session {
 278         struct iscsi_cls_session *cls_session;
 279         /*
 280          * Syncs up the scsi eh thread with the iscsi eh thread when sending
 281          * task management functions. This must be taken before the session
 282          * and recv lock.
 283          */
 284         struct mutex            eh_mutex;
 285
 286         /* iSCSI session-wide sequencing */
 287         uint32_t                cmdsn;
 288         uint32_t                exp_cmdsn;
 289         uint32_t                max_cmdsn;
 290
 291         /* This tracks the reqs queued into the initiator */
 292         uint32_t                queued_cmdsn;
 293
 294         /* configuration */
 295         int                     abort_timeout;
 296         int                     lu_reset_timeout;
 297         int                     tgt_reset_timeout;
 298         int                     initial_r2t_en;
 299         unsigned short          max_r2t;
 300         int                     imm_data_en;
 301         unsigned                first_burst;
 302         unsigned                max_burst;
 303         int                     time2wait;
 304         int                     time2retain;
 305         int                     pdu_inorder_en;
 306         int                     dataseq_inorder_en;
 307         int                     erl;
 308         int                     fast_abort;
 309         int                     tpgt;
 310         char                    *username;
 311         char                    *username_in;
 312         char                    *password;
 313         char                    *password_in;
 314         char                    *targetname;
 315         char                    *targetalias;
 316         char                    *ifacename;
 317         char                    *initiatorname;
 318         char                    *boot_root;
 319         char                    *boot_nic;
 320         char                    *boot_target;
 321         char                    *portal_type;
 322         char                    *discovery_parent_type;
 323         uint16_t                discovery_parent_idx;
 324         uint16_t                def_taskmgmt_tmo;
 325         uint16_t                tsid;
 326         uint8_t                 auto_snd_tgt_disable;
 327         uint8_t                 discovery_sess;
 328         uint8_t                 chap_auth_en;
 329         uint8_t                 discovery_logout_en;
 330         uint8_t                 bidi_chap_en;
 331         uint8_t                 discovery_auth_optional;
 332         uint8_t                 isid[ISID_SIZE];
 333
 334         /* control data */
 335         struct iscsi_transport  *tt;
 336         struct Scsi_Host        *host;
 337         struct iscsi_conn       *leadconn;      /* leading connection */
 338         /* Between the forward and the backward locks exists a strict locking
 339          * hierarchy. The mutual exclusion zone protected by the forward lock
 340          * can enclose the mutual exclusion zone protected by the backward lock
 341          * but not vice versa.
 342          */
 343         spinlock_t              frwd_lock;      /* protects session state, *
 344                                                  * cmdsn, queued_cmdsn     *
 345                                                  * session resources:      *
 346                                                  * - cmdpool kfifo_out ,   *
 347                                                  * - mgmtpool,             */
 348         spinlock_t              back_lock;      /* protects cmdsn_exp      *
 349                                                  * cmdsn_max,              *
 350                                                  * cmdpool kfifo_in        */
 351         int                     state;          /* session state           */
 352         int                     age;            /* counts session re-opens */
 353
 354         int                     scsi_cmds_max;  /* max scsi commands */
 355         int                     cmds_max;       /* size of cmds array */
 356         struct iscsi_task       **cmds;         /* Original Cmds arr */
 357         struct iscsi_pool       cmdpool;        /* PDU's pool */
 358         void                    *dd_data;       /* LLD private data */
 359 };
 360
 361 enum {
 362         ISCSI_HOST_SETUP,
 363         ISCSI_HOST_REMOVED,
 364 };
 365
 366 struct iscsi_host {
 367         char                    *initiatorname;
 368         /* hw address or netdev iscsi connection is bound to */
 369         char                    *hwaddress;
 370         char                    *netdev;
 371
 372         wait_queue_head_t       session_removal_wq;
 373         /* protects sessions and state */
 374         spinlock_t              lock;
 375         int                     num_sessions;
 376         int                     state;
 377
 378         struct workqueue_struct *workq;
 379         char                    workq_name[20];
 380 };
 381
 382 /*
 383  * scsi host template
 384  */
 385 extern int iscsi_eh_abort(struct scsi_cmnd *sc);
 386 extern int iscsi_eh_recover_target(struct scsi_cmnd *sc);
 387 extern int iscsi_eh_session_reset(struct scsi_cmnd *sc);
 388 extern int iscsi_eh_device_reset(struct scsi_cmnd *sc);
 389 extern int iscsi_queuecommand(struct Scsi_Host *host, struct scsi_cmnd *sc);
 390
 391 /*
 392  * iSCSI host helpers.
 393  */
 394 #define iscsi_host_priv(_shost) \
 395         (shost_priv(_shost) + sizeof(struct iscsi_host))
 396
 397 extern int iscsi_host_set_param(struct Scsi_Host *shost,
 398                                 enum iscsi_host_param param, char *buf,
 399                                 int buflen);
 400 extern int iscsi_host_get_param(struct Scsi_Host *shost,
 401                                 enum iscsi_host_param param, char *buf);
 402 extern int iscsi_host_add(struct Scsi_Host *shost, struct device *pdev);
 403 extern struct Scsi_Host *iscsi_host_alloc(struct scsi_host_template *sht,
 404                                           int dd_data_size,
 405                                           bool xmit_can_sleep);
 406 extern void iscsi_host_remove(struct Scsi_Host *shost);
 407 extern void iscsi_host_free(struct Scsi_Host *shost);
 408 extern int iscsi_target_alloc(struct scsi_target *starget);
 409
 410 /*
 411  * session management
 412  */
 413 extern struct iscsi_cls_session *
 414 iscsi_session_setup(struct iscsi_transport *, struct Scsi_Host *shost,
 415                     uint16_t, int, int, uint32_t, unsigned int);
 416 extern void iscsi_session_teardown(struct iscsi_cls_session *);
 417 extern void iscsi_session_recovery_timedout(struct iscsi_cls_session *);
 418 extern int iscsi_set_param(struct iscsi_cls_conn *cls_conn,
 419                            enum iscsi_param param, char *buf, int buflen);
 420 extern int iscsi_session_get_param(struct iscsi_cls_session *cls_session,
 421                                    enum iscsi_param param, char *buf);
 422
 423 #define iscsi_session_printk(prefix, _sess, fmt, a...)  \
 424         iscsi_cls_session_printk(prefix, _sess->cls_session, fmt, ##a)
 425
 426 /*
 427  * connection management
 428  */
 429 extern struct iscsi_cls_conn *iscsi_conn_setup(struct iscsi_cls_session *,
 430                                                int, uint32_t);
 431 extern void iscsi_conn_teardown(struct iscsi_cls_conn *);
 432 extern int iscsi_conn_start(struct iscsi_cls_conn *);
 433 extern void iscsi_conn_stop(struct iscsi_cls_conn *, int);
 434 extern int iscsi_conn_bind(struct iscsi_cls_session *, struct iscsi_cls_conn *,
 435                            int);
 436 extern void iscsi_conn_failure(struct iscsi_conn *conn, enum iscsi_err err);
 437 extern void iscsi_session_failure(struct iscsi_session *session,
 438                                   enum iscsi_err err);
 439 extern int iscsi_conn_get_param(struct iscsi_cls_conn *cls_conn,
 440                                 enum iscsi_param param, char *buf);
 441 extern int iscsi_conn_get_addr_param(struct sockaddr_storage *addr,
 442                                      enum iscsi_param param, char *buf);
 443 extern void iscsi_suspend_tx(struct iscsi_conn *conn);
 444 extern void iscsi_suspend_queue(struct iscsi_conn *conn);
 445 extern void iscsi_conn_queue_work(struct iscsi_conn *conn);
 446
 447 #define iscsi_conn_printk(prefix, _c, fmt, a...) \
 448         iscsi_cls_conn_printk(prefix, ((struct iscsi_conn *)_c)->cls_conn, \
 449                               fmt, ##a)
 450
 451 /*
 452  * pdu and task processing
 453  */
 454 extern void iscsi_update_cmdsn(struct iscsi_session *, struct iscsi_nopin *);
 455 extern void iscsi_prep_data_out_pdu(struct iscsi_task *task,
 456                                     struct iscsi_r2t_info *r2t,
 457                                     struct iscsi_data *hdr);
 458 extern int iscsi_conn_send_pdu(struct iscsi_cls_conn *, struct iscsi_hdr *,
 459                                 char *, uint32_t);
 460 extern int iscsi_complete_pdu(struct iscsi_conn *, struct iscsi_hdr *,
 461                               char *, int);
 462 extern int __iscsi_complete_pdu(struct iscsi_conn *, struct iscsi_hdr *,
 463                                 char *, int);
 464 extern int iscsi_verify_itt(struct iscsi_conn *, itt_t);
 465 extern struct iscsi_task *iscsi_itt_to_ctask(struct iscsi_conn *, itt_t);
 466 extern struct iscsi_task *iscsi_itt_to_task(struct iscsi_conn *, itt_t);
 467 extern void iscsi_requeue_task(struct iscsi_task *task);
 468 extern void iscsi_put_task(struct iscsi_task *task);
 469 extern void __iscsi_put_task(struct iscsi_task *task);
 470 extern void __iscsi_get_task(struct iscsi_task *task);
 471 extern void iscsi_complete_scsi_task(struct iscsi_task *task,
 472                                      uint32_t exp_cmdsn, uint32_t max_cmdsn);
 473
 474 /*
 475  * generic helpers
 476  */
 477 extern void iscsi_pool_free(struct iscsi_pool *);
 478 extern int iscsi_pool_init(struct iscsi_pool *, int, void ***, int);
 479 extern int iscsi_switch_str_param(char **, char *);
 480
 481 /*
 482  * inline functions to deal with padding.
 483  */
 484 static inline unsigned int
 485 iscsi_padded(unsigned int len)
 486 {
 487         return (len + ISCSI_PAD_LEN - 1) & ~(ISCSI_PAD_LEN - 1);
 488 }
 489
 490 static inline unsigned int
 491 iscsi_padding(unsigned int len)
 492 {
 493         len &= (ISCSI_PAD_LEN - 1);
 494         if (len)
 495                 len = ISCSI_PAD_LEN - len;
 496         return len;
 497 }
 498
 499 #endif