drivers/scsi/libsas/sas_ata.c

   1 /*
   2  * Support for SATA devices on Serial Attached SCSI (SAS) controllers
   3  *
   4  * Copyright (C) 2006 IBM Corporation
   5  *
   6  * Written by: Darrick J. Wong <djwong@us.ibm.com>, IBM Corporation
   7  *
   8  * This program is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU General Public License as
  10  * published by the Free Software Foundation; either version 2 of the
  11  * License, or (at your option) any later version.
  12  *
  13  * This program is distributed in the hope that it will be useful, but
  14  * WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU General Public License
  19  * along with this program; if not, write to the Free Software
  20  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA 02111-1307
  21  * USA
  22  */
  23
  24 #include <linux/scatterlist.h>
  25 #include <linux/slab.h>
  26
  27 #include <scsi/sas_ata.h>
  28 #include "sas_internal.h"
  29 #include <scsi/scsi_host.h>
  30 #include <scsi/scsi_device.h>
  31 #include <scsi/scsi_tcq.h>
  32 #include <scsi/scsi.h>
  33 #include <scsi/scsi_transport.h>
  34 #include <scsi/scsi_transport_sas.h>
  35 #include "../scsi_sas_internal.h"
  36 #include "../scsi_transport_api.h"
  37 #include <scsi/scsi_eh.h>
  38
  39 static enum ata_completion_errors sas_to_ata_err(struct task_status_struct *ts)
  40 {
  41         /* Cheesy attempt to translate SAS errors into ATA.  Hah! */
  42
  43         /* transport error */
  44         if (ts->resp == SAS_TASK_UNDELIVERED)
  45                 return AC_ERR_ATA_BUS;
  46
  47         /* ts->resp == SAS_TASK_COMPLETE */
  48         /* task delivered, what happened afterwards? */
  49         switch (ts->stat) {
  50                 case SAS_DEV_NO_RESPONSE:
  51                         return AC_ERR_TIMEOUT;
  52
  53                 case SAS_INTERRUPTED:
  54                 case SAS_PHY_DOWN:
  55                 case SAS_NAK_R_ERR:
  56                         return AC_ERR_ATA_BUS;
  57
  58
  59                 case SAS_DATA_UNDERRUN:
  60                         /*
  61                          * Some programs that use the taskfile interface
  62                          * (smartctl in particular) can cause underrun
  63                          * problems.  Ignore these errors, perhaps at our
  64                          * peril.
  65                          */
  66                         return 0;
  67
  68                 case SAS_DATA_OVERRUN:
  69                 case SAS_QUEUE_FULL:
  70                 case SAS_DEVICE_UNKNOWN:
  71                 case SAS_SG_ERR:
  72                         return AC_ERR_INVALID;
  73
  74                 case SAS_OPEN_TO:
  75                 case SAS_OPEN_REJECT:
  76                         SAS_DPRINTK("%s: Saw error %d.  What to do?\n",
  77                                     __func__, ts->stat);
  78                         return AC_ERR_OTHER;
  79
  80                 case SAM_STAT_CHECK_CONDITION:
  81                 case SAS_ABORTED_TASK:
  82                         return AC_ERR_DEV;
  83
  84                 case SAS_PROTO_RESPONSE:
  85                         /* This means the ending_fis has the error
  86                          * value; return 0 here to collect it */
  87                         return 0;
  88                 default:
  89                         return 0;
  90         }
  91 }
  92
  93 static void sas_ata_task_done(struct sas_task *task)
  94 {
  95         struct ata_queued_cmd *qc = task->uldd_task;
  96         struct domain_device *dev;
  97         struct task_status_struct *stat = &task->task_status;
  98         struct ata_task_resp *resp = (struct ata_task_resp *)stat->buf;
  99         struct sas_ha_struct *sas_ha;
 100         enum ata_completion_errors ac;
 101         unsigned long flags;
 102         struct ata_link *link;
 103
 104         if (!qc)
 105                 goto qc_already_gone;
 106
 107         dev = qc->ap->private_data;
 108         sas_ha = dev->port->ha;
 109         link = &dev->sata_dev.ap->link;
 110
 111         spin_lock_irqsave(dev->sata_dev.ap->lock, flags);
 112         if (stat->stat == SAS_PROTO_RESPONSE || stat->stat == SAM_STAT_GOOD ||
 113             ((stat->stat == SAM_STAT_CHECK_CONDITION &&
 114               dev->sata_dev.command_set == ATAPI_COMMAND_SET))) {
 115                 ata_tf_from_fis(resp->ending_fis, &dev->sata_dev.tf);
 116
 117                 if (!link->sactive) {
 118                         qc->err_mask |= ac_err_mask(dev->sata_dev.tf.command);
 119                 } else {
 120                         link->eh_info.err_mask |= ac_err_mask(dev->sata_dev.tf.command);
 121                         if (unlikely(link->eh_info.err_mask))
 122                                 qc->flags |= ATA_QCFLAG_FAILED;
 123                 }
 124         } else {
 125                 ac = sas_to_ata_err(stat);
 126                 if (ac) {
 127                         SAS_DPRINTK("%s: SAS error %x\n", __func__,
 128                                     stat->stat);
 129                         /* We saw a SAS error. Send a vague error. */
 130                         if (!link->sactive) {
 131                                 qc->err_mask = ac;
 132                         } else {
 133                                 link->eh_info.err_mask |= AC_ERR_DEV;
 134                                 qc->flags |= ATA_QCFLAG_FAILED;
 135                         }
 136
 137                         dev->sata_dev.tf.feature = 0x04; /* status err */
 138                         dev->sata_dev.tf.command = ATA_ERR;
 139                 }
 140         }
 141
 142         qc->lldd_task = NULL;
 143         if (qc->scsicmd)
 144                 ASSIGN_SAS_TASK(qc->scsicmd, NULL);
 145         ata_qc_complete(qc);
 146         spin_unlock_irqrestore(dev->sata_dev.ap->lock, flags);
 147
 148         /*
 149          * If the sas_task has an ata qc, a scsi_cmnd and the aborted
 150          * flag is set, then we must have come in via the libsas EH
 151          * functions.  When we exit this function, we need to put the
 152          * scsi_cmnd on the list of finished errors.  The ata_qc_complete
 153          * call cleans up the libata side of things but we're protected
 154          * from the scsi_cmnd going away because the scsi_cmnd is owned
 155          * by the EH, making libata's call to scsi_done a NOP.
 156          */
 157         spin_lock_irqsave(&task->task_state_lock, flags);
 158         if (qc->scsicmd && task->task_state_flags & SAS_TASK_STATE_ABORTED)
 159                 scsi_eh_finish_cmd(qc->scsicmd, &sas_ha->eh_done_q);
 160         spin_unlock_irqrestore(&task->task_state_lock, flags);
 161
 162 qc_already_gone:
 163         list_del_init(&task->list);
 164         sas_free_task(task);
 165 }
 166
 167 static unsigned int sas_ata_qc_issue(struct ata_queued_cmd *qc)
 168 {
 169         unsigned long flags;
 170         struct sas_task *task;
 171         struct scatterlist *sg;
 172         int ret = AC_ERR_SYSTEM;
 173         unsigned int si, xfer = 0;
 174         struct ata_port *ap = qc->ap;
 175         struct domain_device *dev = ap->private_data;
 176         struct sas_ha_struct *sas_ha = dev->port->ha;
 177         struct Scsi_Host *host = sas_ha->core.shost;
 178         struct sas_internal *i = to_sas_internal(host->transportt);
 179
 180         /* TODO: audit callers to ensure they are ready for qc_issue to
 181          * unconditionally re-enable interrupts
 182          */
 183         local_irq_save(flags);
 184         spin_unlock(ap->lock);
 185
 186         /* If the device fell off, no sense in issuing commands */
 187         if (test_bit(SAS_DEV_GONE, &dev->state))
 188                 goto out;
 189
 190         task = sas_alloc_task(GFP_ATOMIC);
 191         if (!task)
 192                 goto out;
 193         task->dev = dev;
 194         task->task_proto = SAS_PROTOCOL_STP;
 195         task->task_done = sas_ata_task_done;
 196
 197         if (qc->tf.command == ATA_CMD_FPDMA_WRITE ||
 198             qc->tf.command == ATA_CMD_FPDMA_READ) {
 199                 /* Need to zero out the tag libata assigned us */
 200                 qc->tf.nsect = 0;
 201         }
 202
 203         ata_tf_to_fis(&qc->tf, 1, 0, (u8*)&task->ata_task.fis);
 204         task->uldd_task = qc;
 205         if (ata_is_atapi(qc->tf.protocol)) {
 206                 memcpy(task->ata_task.atapi_packet, qc->cdb, qc->dev->cdb_len);
 207                 task->total_xfer_len = qc->nbytes;
 208                 task->num_scatter = qc->n_elem;
 209         } else {
 210                 for_each_sg(qc->sg, sg, qc->n_elem, si)
 211                         xfer += sg->length;
 212
 213                 task->total_xfer_len = xfer;
 214                 task->num_scatter = si;
 215         }
 216
 217         task->data_dir = qc->dma_dir;
 218         task->scatter = qc->sg;
 219         task->ata_task.retry_count = 1;
 220         task->task_state_flags = SAS_TASK_STATE_PENDING;
 221         qc->lldd_task = task;
 222
 223         switch (qc->tf.protocol) {
 224         case ATA_PROT_NCQ:
 225                 task->ata_task.use_ncq = 1;
 226                 /* fall through */
 227         case ATAPI_PROT_DMA:
 228         case ATA_PROT_DMA:
 229                 task->ata_task.dma_xfer = 1;
 230                 break;
 231         }
 232
 233         if (qc->scsicmd)
 234                 ASSIGN_SAS_TASK(qc->scsicmd, task);
 235
 236         if (sas_ha->lldd_max_execute_num < 2)
 237                 ret = i->dft->lldd_execute_task(task, 1, GFP_ATOMIC);
 238         else
 239                 ret = sas_queue_up(task);
 240
 241         /* Examine */
 242         if (ret) {
 243                 SAS_DPRINTK("lldd_execute_task returned: %d\n", ret);
 244
 245                 if (qc->scsicmd)
 246                         ASSIGN_SAS_TASK(qc->scsicmd, NULL);
 247                 sas_free_task(task);
 248                 ret = AC_ERR_SYSTEM;
 249         }
 250
 251  out:
 252         spin_lock(ap->lock);
 253         local_irq_restore(flags);
 254         return ret;
 255 }
 256
 257 static bool sas_ata_qc_fill_rtf(struct ata_queued_cmd *qc)
 258 {
 259         struct domain_device *dev = qc->ap->private_data;
 260
 261         memcpy(&qc->result_tf, &dev->sata_dev.tf, sizeof(qc->result_tf));
 262         return true;
 263 }
 264
 265 static int sas_ata_hard_reset(struct ata_link *link, unsigned int *class,
 266                                unsigned long deadline)
 267 {
 268         struct ata_port *ap = link->ap;
 269         struct domain_device *dev = ap->private_data;
 270         struct sas_internal *i =
 271                 to_sas_internal(dev->port->ha->core.shost->transportt);
 272         int res = TMF_RESP_FUNC_FAILED;
 273         int ret = 0;
 274
 275         if (i->dft->lldd_I_T_nexus_reset)
 276                 res = i->dft->lldd_I_T_nexus_reset(dev);
 277
 278         if (res != TMF_RESP_FUNC_COMPLETE) {
 279                 SAS_DPRINTK("%s: Unable to reset I T nexus?\n", __func__);
 280                 ret = -EAGAIN;
 281         }
 282
 283         switch (dev->sata_dev.command_set) {
 284                 case ATA_COMMAND_SET:
 285                         SAS_DPRINTK("%s: Found ATA device.\n", __func__);
 286                         *class = ATA_DEV_ATA;
 287                         break;
 288                 case ATAPI_COMMAND_SET:
 289                         SAS_DPRINTK("%s: Found ATAPI device.\n", __func__);
 290                         *class = ATA_DEV_ATAPI;
 291                         break;
 292                 default:
 293                         SAS_DPRINTK("%s: Unknown SATA command set: %d.\n",
 294                                     __func__,
 295                                     dev->sata_dev.command_set);
 296                         *class = ATA_DEV_UNKNOWN;
 297                         break;
 298         }
 299
 300         ap->cbl = ATA_CBL_SATA;
 301         return ret;
 302 }
 303
 304 static int sas_ata_soft_reset(struct ata_link *link, unsigned int *class,
 305                                unsigned long deadline)
 306 {
 307         struct ata_port *ap = link->ap;
 308         struct domain_device *dev = ap->private_data;
 309         struct sas_internal *i =
 310                 to_sas_internal(dev->port->ha->core.shost->transportt);
 311         int res = TMF_RESP_FUNC_FAILED;
 312         int ret = 0;
 313
 314         if (i->dft->lldd_ata_soft_reset)
 315                 res = i->dft->lldd_ata_soft_reset(dev);
 316
 317         if (res != TMF_RESP_FUNC_COMPLETE) {
 318                 SAS_DPRINTK("%s: Unable to soft reset\n", __func__);
 319                 ret = -EAGAIN;
 320         }
 321
 322         switch (dev->sata_dev.command_set) {
 323         case ATA_COMMAND_SET:
 324                 SAS_DPRINTK("%s: Found ATA device.\n", __func__);
 325                 *class = ATA_DEV_ATA;
 326                 break;
 327         case ATAPI_COMMAND_SET:
 328                 SAS_DPRINTK("%s: Found ATAPI device.\n", __func__);
 329                 *class = ATA_DEV_ATAPI;
 330                 break;
 331         default:
 332                 SAS_DPRINTK("%s: Unknown SATA command set: %d.\n",
 333                             __func__, dev->sata_dev.command_set);
 334                 *class = ATA_DEV_UNKNOWN;
 335                 break;
 336         }
 337
 338         ap->cbl = ATA_CBL_SATA;
 339         return ret;
 340 }
 341
 342 static void sas_ata_post_internal(struct ata_queued_cmd *qc)
 343 {
 344         if (qc->flags & ATA_QCFLAG_FAILED)
 345                 qc->err_mask |= AC_ERR_OTHER;
 346
 347         if (qc->err_mask) {
 348                 /*
 349                  * Find the sas_task and kill it.  By this point,
 350                  * libata has decided to kill the qc, so we needn't
 351                  * bother with sas_ata_task_done.  But we still
 352                  * ought to abort the task.
 353                  */
 354                 struct sas_task *task = qc->lldd_task;
 355                 unsigned long flags;
 356
 357                 qc->lldd_task = NULL;
 358                 if (task) {
 359                         /* Should this be a AT(API) device reset? */
 360                         spin_lock_irqsave(&task->task_state_lock, flags);
 361                         task->task_state_flags |= SAS_TASK_NEED_DEV_RESET;
 362                         spin_unlock_irqrestore(&task->task_state_lock, flags);
 363
 364                         task->uldd_task = NULL;
 365                         __sas_task_abort(task);
 366                 }
 367         }
 368 }
 369
 370 static struct ata_port_operations sas_sata_ops = {
 371         .prereset               = ata_std_prereset,
 372         .softreset              = sas_ata_soft_reset,
 373         .hardreset              = sas_ata_hard_reset,
 374         .postreset              = ata_std_postreset,
 375         .error_handler          = ata_std_error_handler,
 376         .post_internal_cmd      = sas_ata_post_internal,
 377         .qc_defer               = ata_std_qc_defer,
 378         .qc_prep                = ata_noop_qc_prep,
 379         .qc_issue               = sas_ata_qc_issue,
 380         .qc_fill_rtf            = sas_ata_qc_fill_rtf,
 381         .port_start             = ata_sas_port_start,
 382         .port_stop              = ata_sas_port_stop,
 383 };
 384
 385 static struct ata_port_info sata_port_info = {
 386         .flags = ATA_FLAG_SATA | ATA_FLAG_PIO_DMA | ATA_FLAG_NCQ,
 387         .pio_mask = ATA_PIO4,
 388         .mwdma_mask = ATA_MWDMA2,
 389         .udma_mask = ATA_UDMA6,
 390         .port_ops = &sas_sata_ops
 391 };
 392
 393 int sas_ata_init_host_and_port(struct domain_device *found_dev,
 394                                struct scsi_target *starget)
 395 {
 396         struct Scsi_Host *shost = dev_to_shost(&starget->dev);
 397         struct sas_ha_struct *ha = SHOST_TO_SAS_HA(shost);
 398         struct ata_port *ap;
 399
 400         ata_host_init(&found_dev->sata_dev.ata_host,
 401                       ha->dev,
 402                       sata_port_info.flags,
 403                       &sas_sata_ops);
 404         ap = ata_sas_port_alloc(&found_dev->sata_dev.ata_host,
 405                                 &sata_port_info,
 406                                 shost);
 407         if (!ap) {
 408                 SAS_DPRINTK("ata_sas_port_alloc failed.\n");
 409                 return -ENODEV;
 410         }
 411
 412         ap->private_data = found_dev;
 413         ap->cbl = ATA_CBL_SATA;
 414         ap->scsi_host = shost;
 415         found_dev->sata_dev.ap = ap;
 416
 417         return 0;
 418 }
 419
 420 void sas_ata_task_abort(struct sas_task *task)
 421 {
 422         struct ata_queued_cmd *qc = task->uldd_task;
 423         struct completion *waiting;
 424
 425         /* Bounce SCSI-initiated commands to the SCSI EH */
 426         if (qc->scsicmd) {
 427                 struct request_queue *q = qc->scsicmd->device->request_queue;
 428                 unsigned long flags;
 429
 430                 spin_lock_irqsave(q->queue_lock, flags);
 431                 blk_abort_request(qc->scsicmd->request);
 432                 spin_unlock_irqrestore(q->queue_lock, flags);
 433                 scsi_schedule_eh(qc->scsicmd->device->host);
 434                 return;
 435         }
 436
 437         /* Internal command, fake a timeout and complete. */
 438         qc->flags &= ~ATA_QCFLAG_ACTIVE;
 439         qc->flags |= ATA_QCFLAG_FAILED;
 440         qc->err_mask |= AC_ERR_TIMEOUT;
 441         waiting = qc->private_data;
 442         complete(waiting);
 443 }
 444
 445 static void sas_task_timedout(unsigned long _task)
 446 {
 447         struct sas_task *task = (void *) _task;
 448         unsigned long flags;
 449
 450         spin_lock_irqsave(&task->task_state_lock, flags);
 451         if (!(task->task_state_flags & SAS_TASK_STATE_DONE))
 452                 task->task_state_flags |= SAS_TASK_STATE_ABORTED;
 453         spin_unlock_irqrestore(&task->task_state_lock, flags);
 454
 455         complete(&task->completion);
 456 }
 457
 458 static void sas_disc_task_done(struct sas_task *task)
 459 {
 460         if (!del_timer(&task->timer))
 461                 return;
 462         complete(&task->completion);
 463 }
 464
 465 #define SAS_DEV_TIMEOUT 10
 466
 467 /**
 468  * sas_execute_task -- Basic task processing for discovery
 469  * @task: the task to be executed
 470  * @buffer: pointer to buffer to do I/O
 471  * @size: size of @buffer
 472  * @dma_dir: DMA direction.  DMA_xxx
 473  */
 474 static int sas_execute_task(struct sas_task *task, void *buffer, int size,
 475                             enum dma_data_direction dma_dir)
 476 {
 477         int res = 0;
 478         struct scatterlist *scatter = NULL;
 479         struct task_status_struct *ts = &task->task_status;
 480         int num_scatter = 0;
 481         int retries = 0;
 482         struct sas_internal *i =
 483                 to_sas_internal(task->dev->port->ha->core.shost->transportt);
 484
 485         if (dma_dir != DMA_NONE) {
 486                 scatter = kzalloc(sizeof(*scatter), GFP_KERNEL);
 487                 if (!scatter)
 488                         goto out;
 489
 490                 sg_init_one(scatter, buffer, size);
 491                 num_scatter = 1;
 492         }
 493
 494         task->task_proto = task->dev->tproto;
 495         task->scatter = scatter;
 496         task->num_scatter = num_scatter;
 497         task->total_xfer_len = size;
 498         task->data_dir = dma_dir;
 499         task->task_done = sas_disc_task_done;
 500         if (dma_dir != DMA_NONE &&
 501             sas_protocol_ata(task->task_proto)) {
 502                 task->num_scatter = dma_map_sg(task->dev->port->ha->dev,
 503                                                task->scatter,
 504                                                task->num_scatter,
 505                                                task->data_dir);
 506         }
 507
 508         for (retries = 0; retries < 5; retries++) {
 509                 task->task_state_flags = SAS_TASK_STATE_PENDING;
 510                 init_completion(&task->completion);
 511
 512                 task->timer.data = (unsigned long) task;
 513                 task->timer.function = sas_task_timedout;
 514                 task->timer.expires = jiffies + SAS_DEV_TIMEOUT*HZ;
 515                 add_timer(&task->timer);
 516
 517                 res = i->dft->lldd_execute_task(task, 1, GFP_KERNEL);
 518                 if (res) {
 519                         del_timer(&task->timer);
 520                         SAS_DPRINTK("executing SAS discovery task failed:%d\n",
 521                                     res);
 522                         goto ex_err;
 523                 }
 524                 wait_for_completion(&task->completion);
 525                 res = -ECOMM;
 526                 if (task->task_state_flags & SAS_TASK_STATE_ABORTED) {
 527                         int res2;
 528                         SAS_DPRINTK("task aborted, flags:0x%x\n",
 529                                     task->task_state_flags);
 530                         res2 = i->dft->lldd_abort_task(task);
 531                         SAS_DPRINTK("came back from abort task\n");
 532                         if (!(task->task_state_flags & SAS_TASK_STATE_DONE)) {
 533                                 if (res2 == TMF_RESP_FUNC_COMPLETE)
 534                                         continue; /* Retry the task */
 535                                 else
 536                                         goto ex_err;
 537                         }
 538                 }
 539                 if (task->task_status.stat == SAM_STAT_BUSY ||
 540                            task->task_status.stat == SAM_STAT_TASK_SET_FULL ||
 541                            task->task_status.stat == SAS_QUEUE_FULL) {
 542                         SAS_DPRINTK("task: q busy, sleeping...\n");
 543                         schedule_timeout_interruptible(HZ);
 544                 } else if (task->task_status.stat == SAM_STAT_CHECK_CONDITION) {
 545                         struct scsi_sense_hdr shdr;
 546
 547                         if (!scsi_normalize_sense(ts->buf, ts->buf_valid_size,
 548                                                   &shdr)) {
 549                                 SAS_DPRINTK("couldn't normalize sense\n");
 550                                 continue;
 551                         }
 552                         if ((shdr.sense_key == 6 && shdr.asc == 0x29) ||
 553                             (shdr.sense_key == 2 && shdr.asc == 4 &&
 554                              shdr.ascq == 1)) {
 555                                 SAS_DPRINTK("device %016llx LUN: %016llx "
 556                                             "powering up or not ready yet, "
 557                                             "sleeping...\n",
 558                                             SAS_ADDR(task->dev->sas_addr),
 559                                             SAS_ADDR(task->ssp_task.LUN));
 560
 561                                 schedule_timeout_interruptible(5*HZ);
 562                         } else if (shdr.sense_key == 1) {
 563                                 res = 0;
 564                                 break;
 565                         } else if (shdr.sense_key == 5) {
 566                                 break;
 567                         } else {
 568                                 SAS_DPRINTK("dev %016llx LUN: %016llx "
 569                                             "sense key:0x%x ASC:0x%x ASCQ:0x%x"
 570                                             "\n",
 571                                             SAS_ADDR(task->dev->sas_addr),
 572                                             SAS_ADDR(task->ssp_task.LUN),
 573                                             shdr.sense_key,
 574                                             shdr.asc, shdr.ascq);
 575                         }
 576                 } else if (task->task_status.resp != SAS_TASK_COMPLETE ||
 577                            task->task_status.stat != SAM_STAT_GOOD) {
 578                         SAS_DPRINTK("task finished with resp:0x%x, "
 579                                     "stat:0x%x\n",
 580                                     task->task_status.resp,
 581                                     task->task_status.stat);
 582                         goto ex_err;
 583                 } else {
 584                         res = 0;
 585                         break;
 586                 }
 587         }
 588 ex_err:
 589         if (dma_dir != DMA_NONE) {
 590                 if (sas_protocol_ata(task->task_proto))
 591                         dma_unmap_sg(task->dev->port->ha->dev,
 592                                      task->scatter, task->num_scatter,
 593                                      task->data_dir);
 594                 kfree(scatter);
 595         }
 596 out:
 597         return res;
 598 }
 599
 600 /* ---------- SATA ---------- */
 601
 602 static void sas_get_ata_command_set(struct domain_device *dev)
 603 {
 604         struct dev_to_host_fis *fis =
 605                 (struct dev_to_host_fis *) dev->frame_rcvd;
 606
 607         if ((fis->sector_count == 1 && /* ATA */
 608              fis->lbal         == 1 &&
 609              fis->lbam         == 0 &&
 610              fis->lbah         == 0 &&
 611              fis->device       == 0)
 612             ||
 613             (fis->sector_count == 0 && /* CE-ATA (mATA) */
 614              fis->lbal         == 0 &&
 615              fis->lbam         == 0xCE &&
 616              fis->lbah         == 0xAA &&
 617              (fis->device & ~0x10) == 0))
 618
 619                 dev->sata_dev.command_set = ATA_COMMAND_SET;
 620
 621         else if ((fis->interrupt_reason == 1 && /* ATAPI */
 622                   fis->lbal             == 1 &&
 623                   fis->byte_count_low   == 0x14 &&
 624                   fis->byte_count_high  == 0xEB &&
 625                   (fis->device & ~0x10) == 0))
 626
 627                 dev->sata_dev.command_set = ATAPI_COMMAND_SET;
 628
 629         else if ((fis->sector_count == 1 && /* SEMB */
 630                   fis->lbal         == 1 &&
 631                   fis->lbam         == 0x3C &&
 632                   fis->lbah         == 0xC3 &&
 633                   fis->device       == 0)
 634                 ||
 635                  (fis->interrupt_reason == 1 && /* SATA PM */
 636                   fis->lbal             == 1 &&
 637                   fis->byte_count_low   == 0x69 &&
 638                   fis->byte_count_high  == 0x96 &&
 639                   (fis->device & ~0x10) == 0))
 640
 641                 /* Treat it as a superset? */
 642                 dev->sata_dev.command_set = ATAPI_COMMAND_SET;
 643 }
 644
 645 /**
 646  * sas_issue_ata_cmd -- Basic SATA command processing for discovery
 647  * @dev: the device to send the command to
 648  * @command: the command register
 649  * @features: the features register
 650  * @buffer: pointer to buffer to do I/O
 651  * @size: size of @buffer
 652  * @dma_dir: DMA direction.  DMA_xxx
 653  */
 654 static int sas_issue_ata_cmd(struct domain_device *dev, u8 command,
 655                              u8 features, void *buffer, int size,
 656                              enum dma_data_direction dma_dir)
 657 {
 658         int res = 0;
 659         struct sas_task *task;
 660         struct dev_to_host_fis *d2h_fis = (struct dev_to_host_fis *)
 661                 &dev->frame_rcvd[0];
 662
 663         res = -ENOMEM;
 664         task = sas_alloc_task(GFP_KERNEL);
 665         if (!task)
 666                 goto out;
 667
 668         task->dev = dev;
 669
 670         task->ata_task.fis.fis_type = 0x27;
 671         task->ata_task.fis.command = command;
 672         task->ata_task.fis.features = features;
 673         task->ata_task.fis.device = d2h_fis->device;
 674         task->ata_task.retry_count = 1;
 675
 676         res = sas_execute_task(task, buffer, size, dma_dir);
 677
 678         sas_free_task(task);
 679 out:
 680         return res;
 681 }
 682
 683 #define ATA_IDENTIFY_DEV         0xEC
 684 #define ATA_IDENTIFY_PACKET_DEV  0xA1
 685 #define ATA_SET_FEATURES         0xEF
 686 #define ATA_FEATURE_PUP_STBY_SPIN_UP 0x07
 687
 688 /**
 689  * sas_discover_sata_dev -- discover a STP/SATA device (SATA_DEV)
 690  * @dev: STP/SATA device of interest (ATA/ATAPI)
 691  *
 692  * The LLDD has already been notified of this device, so that we can
 693  * send FISes to it.  Here we try to get IDENTIFY DEVICE or IDENTIFY
 694  * PACKET DEVICE, if ATAPI device, so that the LLDD can fine-tune its
 695  * performance for this device.
 696  */
 697 static int sas_discover_sata_dev(struct domain_device *dev)
 698 {
 699         int     res;
 700         __le16  *identify_x;
 701         u8      command;
 702
 703         identify_x = kzalloc(512, GFP_KERNEL);
 704         if (!identify_x)
 705                 return -ENOMEM;
 706
 707         if (dev->sata_dev.command_set == ATA_COMMAND_SET) {
 708                 dev->sata_dev.identify_device = identify_x;
 709                 command = ATA_IDENTIFY_DEV;
 710         } else {
 711                 dev->sata_dev.identify_packet_device = identify_x;
 712                 command = ATA_IDENTIFY_PACKET_DEV;
 713         }
 714
 715         res = sas_issue_ata_cmd(dev, command, 0, identify_x, 512,
 716                                 DMA_FROM_DEVICE);
 717         if (res)
 718                 goto out_err;
 719
 720         /* lives on the media? */
 721         if (le16_to_cpu(identify_x[0]) & 4) {
 722                 /* incomplete response */
 723                 SAS_DPRINTK("sending SET FEATURE/PUP_STBY_SPIN_UP to "
 724                             "dev %llx\n", SAS_ADDR(dev->sas_addr));
 725                 if (!(identify_x[83] & cpu_to_le16(1<<6)))
 726                         goto cont1;
 727                 res = sas_issue_ata_cmd(dev, ATA_SET_FEATURES,
 728                                         ATA_FEATURE_PUP_STBY_SPIN_UP,
 729                                         NULL, 0, DMA_NONE);
 730                 if (res)
 731                         goto cont1;
 732
 733                 schedule_timeout_interruptible(5*HZ); /* More time? */
 734                 res = sas_issue_ata_cmd(dev, command, 0, identify_x, 512,
 735                                         DMA_FROM_DEVICE);
 736                 if (res)
 737                         goto out_err;
 738         }
 739 cont1:
 740         /* XXX Hint: register this SATA device with SATL.
 741            When this returns, dev->sata_dev->lu is alive and
 742            present.
 743         sas_satl_register_dev(dev);
 744         */
 745
 746         sas_fill_in_rphy(dev, dev->rphy);
 747
 748         return 0;
 749 out_err:
 750         dev->sata_dev.identify_packet_device = NULL;
 751         dev->sata_dev.identify_device = NULL;
 752         kfree(identify_x);
 753         return res;
 754 }
 755
 756 static int sas_discover_sata_pm(struct domain_device *dev)
 757 {
 758         return -ENODEV;
 759 }
 760
 761 /**
 762  * sas_discover_sata -- discover an STP/SATA domain device
 763  * @dev: pointer to struct domain_device of interest
 764  *
 765  * First we notify the LLDD of this device, so we can send frames to
 766  * it.  Then depending on the type of device we call the appropriate
 767  * discover functions.  Once device discover is done, we notify the
 768  * LLDD so that it can fine-tune its parameters for the device, by
 769  * removing it and then adding it.  That is, the second time around,
 770  * the driver would have certain fields, that it is looking at, set.
 771  * Finally we initialize the kobj so that the device can be added to
 772  * the system at registration time.  Devices directly attached to a HA
 773  * port, have no parents.  All other devices do, and should have their
 774  * "parent" pointer set appropriately before calling this function.
 775  */
 776 int sas_discover_sata(struct domain_device *dev)
 777 {
 778         int res;
 779
 780         sas_get_ata_command_set(dev);
 781
 782         res = sas_notify_lldd_dev_found(dev);
 783         if (res)
 784                 return res;
 785
 786         switch (dev->dev_type) {
 787         case SATA_DEV:
 788                 res = sas_discover_sata_dev(dev);
 789                 break;
 790         case SATA_PM:
 791                 res = sas_discover_sata_pm(dev);
 792                 break;
 793         default:
 794                 break;
 795         }
 796         sas_notify_lldd_dev_gone(dev);
 797         if (!res) {
 798                 sas_notify_lldd_dev_found(dev);
 799                 res = sas_rphy_add(dev->rphy);
 800         }
 801
 802         return res;
 803 }
 804
 805 void sas_ata_strategy_handler(struct Scsi_Host *shost)
 806 {
 807         struct scsi_device *sdev;
 808
 809         shost_for_each_device(sdev, shost) {
 810                 struct domain_device *ddev = sdev_to_domain_dev(sdev);
 811                 struct ata_port *ap = ddev->sata_dev.ap;
 812
 813                 if (!dev_is_sata(ddev))
 814                         continue;
 815
 816                 ata_port_printk(ap, KERN_DEBUG, "sas eh calling libata port error handler");
 817                 ata_scsi_port_error_handler(shost, ap);
 818         }
 819 }
 820
 821 int sas_ata_timed_out(struct scsi_cmnd *cmd, struct sas_task *task,
 822                       enum blk_eh_timer_return *rtn)
 823 {
 824         struct domain_device *ddev = cmd_to_domain_dev(cmd);
 825
 826         if (!dev_is_sata(ddev) || task)
 827                 return 0;
 828
 829         /* we're a sata device with no task, so this must be a libata
 830          * eh timeout.  Ideally should hook into libata timeout
 831          * handling, but there's no point, it just wants to activate
 832          * the eh thread */
 833         *rtn = BLK_EH_NOT_HANDLED;
 834         return 1;
 835 }
 836
 837 int sas_ata_eh(struct Scsi_Host *shost, struct list_head *work_q,
 838                struct list_head *done_q)
 839 {
 840         int rtn = 0;
 841         struct scsi_cmnd *cmd, *n;
 842         struct ata_port *ap;
 843
 844         do {
 845                 LIST_HEAD(sata_q);
 846
 847                 ap = NULL;
 848
 849                 list_for_each_entry_safe(cmd, n, work_q, eh_entry) {
 850                         struct domain_device *ddev = cmd_to_domain_dev(cmd);
 851
 852                         if (!dev_is_sata(ddev) || TO_SAS_TASK(cmd))
 853                                 continue;
 854                         if (ap && ap != ddev->sata_dev.ap)
 855                                 continue;
 856                         ap = ddev->sata_dev.ap;
 857                         rtn = 1;
 858                         list_move(&cmd->eh_entry, &sata_q);
 859                 }
 860
 861                 if (!list_empty(&sata_q)) {
 862                         ata_port_printk(ap, KERN_DEBUG, "sas eh calling libata cmd error handler\n");
 863                         ata_scsi_cmd_error_handler(shost, ap, &sata_q);
 864                         /*
 865                          * ata's error handler may leave the cmd on the list
 866                          * so make sure they don't remain on a stack list
 867                          * about to go out of scope.
 868                          *
 869                          * This looks strange, since the commands are
 870                          * now part of no list, but the next error
 871                          * action will be ata_port_error_handler()
 872                          * which takes no list and sweeps them up
 873                          * anyway from the ata tag array.
 874                          */
 875                         while (!list_empty(&sata_q))
 876                                 list_del_init(sata_q.next);
 877                 }
 878         } while (ap);
 879
 880         return rtn;
 881 }