drivers/usb/core/hcd.c

   1 /*
   2  * (C) Copyright Linus Torvalds 1999
   3  * (C) Copyright Johannes Erdfelt 1999-2001
   4  * (C) Copyright Andreas Gal 1999
   5  * (C) Copyright Gregory P. Smith 1999
   6  * (C) Copyright Deti Fliegl 1999
   7  * (C) Copyright Randy Dunlap 2000
   8  * (C) Copyright David Brownell 2000-2002
   9  *
  10  * This program is free software; you can redistribute it and/or modify it
  11  * under the terms of the GNU General Public License as published by the
  12  * Free Software Foundation; either version 2 of the License, or (at your
  13  * option) any later version.
  14  *
  15  * This program is distributed in the hope that it will be useful, but
  16  * WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
  17  * or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  18  * for more details.
  19  *
  20  * You should have received a copy of the GNU General Public License
  21  * along with this program; if not, write to the Free Software Foundation,
  22  * Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  23  */
  24
  25 #include <linux/module.h>
  26 #include <linux/version.h>
  27 #include <linux/kernel.h>
  28 #include <linux/slab.h>
  29 #include <linux/completion.h>
  30 #include <linux/utsname.h>
  31 #include <linux/mm.h>
  32 #include <asm/io.h>
  33 #include <asm/scatterlist.h>
  34 #include <linux/device.h>
  35 #include <linux/dma-mapping.h>
  36 #include <linux/mutex.h>
  37 #include <asm/irq.h>
  38 #include <asm/byteorder.h>
  39 #include <linux/platform_device.h>
  40 #include <linux/workqueue.h>
  41
  42 #include <linux/usb.h>
  43
  44 #include "usb.h"
  45 #include "hcd.h"
  46 #include "hub.h"
  47
  48
  49 /*-------------------------------------------------------------------------*/
  50
  51 /*
  52  * USB Host Controller Driver framework
  53  *
  54  * Plugs into usbcore (usb_bus) and lets HCDs share code, minimizing
  55  * HCD-specific behaviors/bugs.
  56  *
  57  * This does error checks, tracks devices and urbs, and delegates to a
  58  * "hc_driver" only for code (and data) that really needs to know about
  59  * hardware differences.  That includes root hub registers, i/o queues,
  60  * and so on ... but as little else as possible.
  61  *
  62  * Shared code includes most of the "root hub" code (these are emulated,
  63  * though each HC's hardware works differently) and PCI glue, plus request
  64  * tracking overhead.  The HCD code should only block on spinlocks or on
  65  * hardware handshaking; blocking on software events (such as other kernel
  66  * threads releasing resources, or completing actions) is all generic.
  67  *
  68  * Happens the USB 2.0 spec says this would be invisible inside the "USBD",
  69  * and includes mostly a "HCDI" (HCD Interface) along with some APIs used
  70  * only by the hub driver ... and that neither should be seen or used by
  71  * usb client device drivers.
  72  *
  73  * Contributors of ideas or unattributed patches include: David Brownell,
  74  * Roman Weissgaerber, Rory Bolt, Greg Kroah-Hartman, ...
  75  *
  76  * HISTORY:
  77  * 2002-02-21   Pull in most of the usb_bus support from usb.c; some
  78  *              associated cleanup.  "usb_hcd" still != "usb_bus".
  79  * 2001-12-12   Initial patch version for Linux 2.5.1 kernel.
  80  */
  81
  82 /*-------------------------------------------------------------------------*/
  83
  84 /* host controllers we manage */
  85 LIST_HEAD (usb_bus_list);
  86 EXPORT_SYMBOL_GPL (usb_bus_list);
  87
  88 /* used when allocating bus numbers */
  89 #define USB_MAXBUS              64
  90 struct usb_busmap {
  91         unsigned long busmap [USB_MAXBUS / (8*sizeof (unsigned long))];
  92 };
  93 static struct usb_busmap busmap;
  94
  95 /* used when updating list of hcds */
  96 DEFINE_MUTEX(usb_bus_list_lock);        /* exported only for usbfs */
  97 EXPORT_SYMBOL_GPL (usb_bus_list_lock);
  98
  99 /* used for controlling access to virtual root hubs */
 100 static DEFINE_SPINLOCK(hcd_root_hub_lock);
 101
 102 /* used when updating an endpoint's URB list */
 103 static DEFINE_SPINLOCK(hcd_urb_list_lock);
 104
 105 /* wait queue for synchronous unlinks */
 106 DECLARE_WAIT_QUEUE_HEAD(usb_kill_urb_queue);
 107
 108 static inline int is_root_hub(struct usb_device *udev)
 109 {
 110         return (udev->parent == NULL);
 111 }
 112
 113 /*-------------------------------------------------------------------------*/
 114
 115 /*
 116  * Sharable chunks of root hub code.
 117  */
 118
 119 /*-------------------------------------------------------------------------*/
 120
 121 #define KERNEL_REL      ((LINUX_VERSION_CODE >> 16) & 0x0ff)
 122 #define KERNEL_VER      ((LINUX_VERSION_CODE >> 8) & 0x0ff)
 123
 124 /* usb 2.0 root hub device descriptor */
 125 static const u8 usb2_rh_dev_descriptor [18] = {
 126         0x12,       /*  __u8  bLength; */
 127         0x01,       /*  __u8  bDescriptorType; Device */
 128         0x00, 0x02, /*  __le16 bcdUSB; v2.0 */
 129
 130         0x09,       /*  __u8  bDeviceClass; HUB_CLASSCODE */
 131         0x00,       /*  __u8  bDeviceSubClass; */
 132         0x01,       /*  __u8  bDeviceProtocol; [ usb 2.0 single TT ]*/
 133         0x40,       /*  __u8  bMaxPacketSize0; 64 Bytes */
 134
 135         0x00, 0x00, /*  __le16 idVendor; */
 136         0x00, 0x00, /*  __le16 idProduct; */
 137         KERNEL_VER, KERNEL_REL, /*  __le16 bcdDevice */
 138
 139         0x03,       /*  __u8  iManufacturer; */
 140         0x02,       /*  __u8  iProduct; */
 141         0x01,       /*  __u8  iSerialNumber; */
 142         0x01        /*  __u8  bNumConfigurations; */
 143 };
 144
 145 /* no usb 2.0 root hub "device qualifier" descriptor: one speed only */
 146
 147 /* usb 1.1 root hub device descriptor */
 148 static const u8 usb11_rh_dev_descriptor [18] = {
 149         0x12,       /*  __u8  bLength; */
 150         0x01,       /*  __u8  bDescriptorType; Device */
 151         0x10, 0x01, /*  __le16 bcdUSB; v1.1 */
 152
 153         0x09,       /*  __u8  bDeviceClass; HUB_CLASSCODE */
 154         0x00,       /*  __u8  bDeviceSubClass; */
 155         0x00,       /*  __u8  bDeviceProtocol; [ low/full speeds only ] */
 156         0x40,       /*  __u8  bMaxPacketSize0; 64 Bytes */
 157
 158         0x00, 0x00, /*  __le16 idVendor; */
 159         0x00, 0x00, /*  __le16 idProduct; */
 160         KERNEL_VER, KERNEL_REL, /*  __le16 bcdDevice */
 161
 162         0x03,       /*  __u8  iManufacturer; */
 163         0x02,       /*  __u8  iProduct; */
 164         0x01,       /*  __u8  iSerialNumber; */
 165         0x01        /*  __u8  bNumConfigurations; */
 166 };
 167
 168
 169 /*-------------------------------------------------------------------------*/
 170
 171 /* Configuration descriptors for our root hubs */
 172
 173 static const u8 fs_rh_config_descriptor [] = {
 174
 175         /* one configuration */
 176         0x09,       /*  __u8  bLength; */
 177         0x02,       /*  __u8  bDescriptorType; Configuration */
 178         0x19, 0x00, /*  __le16 wTotalLength; */
 179         0x01,       /*  __u8  bNumInterfaces; (1) */
 180         0x01,       /*  __u8  bConfigurationValue; */
 181         0x00,       /*  __u8  iConfiguration; */
 182         0xc0,       /*  __u8  bmAttributes;
 183                                  Bit 7: must be set,
 184                                      6: Self-powered,
 185                                      5: Remote wakeup,
 186                                      4..0: resvd */
 187         0x00,       /*  __u8  MaxPower; */
 188
 189         /* USB 1.1:
 190          * USB 2.0, single TT organization (mandatory):
 191          *      one interface, protocol 0
 192          *
 193          * USB 2.0, multiple TT organization (optional):
 194          *      two interfaces, protocols 1 (like single TT)
 195          *      and 2 (multiple TT mode) ... config is
 196          *      sometimes settable
 197          *      NOT IMPLEMENTED
 198          */
 199
 200         /* one interface */
 201         0x09,       /*  __u8  if_bLength; */
 202         0x04,       /*  __u8  if_bDescriptorType; Interface */
 203         0x00,       /*  __u8  if_bInterfaceNumber; */
 204         0x00,       /*  __u8  if_bAlternateSetting; */
 205         0x01,       /*  __u8  if_bNumEndpoints; */
 206         0x09,       /*  __u8  if_bInterfaceClass; HUB_CLASSCODE */
 207         0x00,       /*  __u8  if_bInterfaceSubClass; */
 208         0x00,       /*  __u8  if_bInterfaceProtocol; [usb1.1 or single tt] */
 209         0x00,       /*  __u8  if_iInterface; */
 210
 211         /* one endpoint (status change endpoint) */
 212         0x07,       /*  __u8  ep_bLength; */
 213         0x05,       /*  __u8  ep_bDescriptorType; Endpoint */
 214         0x81,       /*  __u8  ep_bEndpointAddress; IN Endpoint 1 */
 215         0x03,       /*  __u8  ep_bmAttributes; Interrupt */
 216         0x02, 0x00, /*  __le16 ep_wMaxPacketSize; 1 + (MAX_ROOT_PORTS / 8) */
 217         0xff        /*  __u8  ep_bInterval; (255ms -- usb 2.0 spec) */
 218 };
 219
 220 static const u8 hs_rh_config_descriptor [] = {
 221
 222         /* one configuration */
 223         0x09,       /*  __u8  bLength; */
 224         0x02,       /*  __u8  bDescriptorType; Configuration */
 225         0x19, 0x00, /*  __le16 wTotalLength; */
 226         0x01,       /*  __u8  bNumInterfaces; (1) */
 227         0x01,       /*  __u8  bConfigurationValue; */
 228         0x00,       /*  __u8  iConfiguration; */
 229         0xc0,       /*  __u8  bmAttributes;
 230                                  Bit 7: must be set,
 231                                      6: Self-powered,
 232                                      5: Remote wakeup,
 233                                      4..0: resvd */
 234         0x00,       /*  __u8  MaxPower; */
 235
 236         /* USB 1.1:
 237          * USB 2.0, single TT organization (mandatory):
 238          *      one interface, protocol 0
 239          *
 240          * USB 2.0, multiple TT organization (optional):
 241          *      two interfaces, protocols 1 (like single TT)
 242          *      and 2 (multiple TT mode) ... config is
 243          *      sometimes settable
 244          *      NOT IMPLEMENTED
 245          */
 246
 247         /* one interface */
 248         0x09,       /*  __u8  if_bLength; */
 249         0x04,       /*  __u8  if_bDescriptorType; Interface */
 250         0x00,       /*  __u8  if_bInterfaceNumber; */
 251         0x00,       /*  __u8  if_bAlternateSetting; */
 252         0x01,       /*  __u8  if_bNumEndpoints; */
 253         0x09,       /*  __u8  if_bInterfaceClass; HUB_CLASSCODE */
 254         0x00,       /*  __u8  if_bInterfaceSubClass; */
 255         0x00,       /*  __u8  if_bInterfaceProtocol; [usb1.1 or single tt] */
 256         0x00,       /*  __u8  if_iInterface; */
 257
 258         /* one endpoint (status change endpoint) */
 259         0x07,       /*  __u8  ep_bLength; */
 260         0x05,       /*  __u8  ep_bDescriptorType; Endpoint */
 261         0x81,       /*  __u8  ep_bEndpointAddress; IN Endpoint 1 */
 262         0x03,       /*  __u8  ep_bmAttributes; Interrupt */
 263                     /* __le16 ep_wMaxPacketSize; 1 + (MAX_ROOT_PORTS / 8)
 264                      * see hub.c:hub_configure() for details. */
 265         (USB_MAXCHILDREN + 1 + 7) / 8, 0x00,
 266         0x0c        /*  __u8  ep_bInterval; (256ms -- usb 2.0 spec) */
 267 };
 268
 269 /*-------------------------------------------------------------------------*/
 270
 271 /*
 272  * helper routine for returning string descriptors in UTF-16LE
 273  * input can actually be ISO-8859-1; ASCII is its 7-bit subset
 274  */
 275 static int ascii2utf (char *s, u8 *utf, int utfmax)
 276 {
 277         int retval;
 278
 279         for (retval = 0; *s && utfmax > 1; utfmax -= 2, retval += 2) {
 280                 *utf++ = *s++;
 281                 *utf++ = 0;
 282         }
 283         if (utfmax > 0) {
 284                 *utf = *s;
 285                 ++retval;
 286         }
 287         return retval;
 288 }
 289
 290 /*
 291  * rh_string - provides manufacturer, product and serial strings for root hub
 292  * @id: the string ID number (1: serial number, 2: product, 3: vendor)
 293  * @hcd: the host controller for this root hub
 294  * @type: string describing our driver
 295  * @data: return packet in UTF-16 LE
 296  * @len: length of the return packet
 297  *
 298  * Produces either a manufacturer, product or serial number string for the
 299  * virtual root hub device.
 300  */
 301 static int rh_string (
 302         int             id,
 303         struct usb_hcd  *hcd,
 304         u8              *data,
 305         int             len
 306 ) {
 307         char buf [100];
 308
 309         // language ids
 310         if (id == 0) {
 311                 buf[0] = 4;    buf[1] = 3;      /* 4 bytes string data */
 312                 buf[2] = 0x09; buf[3] = 0x04;   /* MSFT-speak for "en-us" */
 313                 len = min (len, 4);
 314                 memcpy (data, buf, len);
 315                 return len;
 316
 317         // serial number
 318         } else if (id == 1) {
 319                 strlcpy (buf, hcd->self.bus_name, sizeof buf);
 320
 321         // product description
 322         } else if (id == 2) {
 323                 strlcpy (buf, hcd->product_desc, sizeof buf);
 324
 325         // id 3 == vendor description
 326         } else if (id == 3) {
 327                 snprintf (buf, sizeof buf, "%s %s %s", init_utsname()->sysname,
 328                         init_utsname()->release, hcd->driver->description);
 329
 330         // unsupported IDs --> "protocol stall"
 331         } else
 332                 return -EPIPE;
 333
 334         switch (len) {          /* All cases fall through */
 335         default:
 336                 len = 2 + ascii2utf (buf, data + 2, len - 2);
 337         case 2:
 338                 data [1] = 3;   /* type == string */
 339         case 1:
 340                 data [0] = 2 * (strlen (buf) + 1);
 341         case 0:
 342                 ;               /* Compiler wants a statement here */
 343         }
 344         return len;
 345 }
 346
 347
 348 /* Root hub control transfers execute synchronously */
 349 static int rh_call_control (struct usb_hcd *hcd, struct urb *urb)
 350 {
 351         struct usb_ctrlrequest *cmd;
 352         u16             typeReq, wValue, wIndex, wLength;
 353         u8              *ubuf = urb->transfer_buffer;
 354         u8              tbuf [sizeof (struct usb_hub_descriptor)]
 355                 __attribute__((aligned(4)));
 356         const u8        *bufp = tbuf;
 357         int             len = 0;
 358         int             patch_wakeup = 0;
 359         int             status = 0;
 360         int             n;
 361
 362         might_sleep();
 363
 364         cmd = (struct usb_ctrlrequest *) urb->setup_packet;
 365         typeReq  = (cmd->bRequestType << 8) | cmd->bRequest;
 366         wValue   = le16_to_cpu (cmd->wValue);
 367         wIndex   = le16_to_cpu (cmd->wIndex);
 368         wLength  = le16_to_cpu (cmd->wLength);
 369
 370         if (wLength > urb->transfer_buffer_length)
 371                 goto error;
 372
 373         urb->actual_length = 0;
 374         switch (typeReq) {
 375
 376         /* DEVICE REQUESTS */
 377
 378         /* The root hub's remote wakeup enable bit is implemented using
 379          * driver model wakeup flags.  If this system supports wakeup
 380          * through USB, userspace may change the default "allow wakeup"
 381          * policy through sysfs or these calls.
 382          *
 383          * Most root hubs support wakeup from downstream devices, for
 384          * runtime power management (disabling USB clocks and reducing
 385          * VBUS power usage).  However, not all of them do so; silicon,
 386          * board, and BIOS bugs here are not uncommon, so these can't
 387          * be treated quite like external hubs.
 388          *
 389          * Likewise, not all root hubs will pass wakeup events upstream,
 390          * to wake up the whole system.  So don't assume root hub and
 391          * controller capabilities are identical.
 392          */
 393
 394         case DeviceRequest | USB_REQ_GET_STATUS:
 395                 tbuf [0] = (device_may_wakeup(&hcd->self.root_hub->dev)
 396                                         << USB_DEVICE_REMOTE_WAKEUP)
 397                                 | (1 << USB_DEVICE_SELF_POWERED);
 398                 tbuf [1] = 0;
 399                 len = 2;
 400                 break;
 401         case DeviceOutRequest | USB_REQ_CLEAR_FEATURE:
 402                 if (wValue == USB_DEVICE_REMOTE_WAKEUP)
 403                         device_set_wakeup_enable(&hcd->self.root_hub->dev, 0);
 404                 else
 405                         goto error;
 406                 break;
 407         case DeviceOutRequest | USB_REQ_SET_FEATURE:
 408                 if (device_can_wakeup(&hcd->self.root_hub->dev)
 409                                 && wValue == USB_DEVICE_REMOTE_WAKEUP)
 410                         device_set_wakeup_enable(&hcd->self.root_hub->dev, 1);
 411                 else
 412                         goto error;
 413                 break;
 414         case DeviceRequest | USB_REQ_GET_CONFIGURATION:
 415                 tbuf [0] = 1;
 416                 len = 1;
 417                         /* FALLTHROUGH */
 418         case DeviceOutRequest | USB_REQ_SET_CONFIGURATION:
 419                 break;
 420         case DeviceRequest | USB_REQ_GET_DESCRIPTOR:
 421                 switch (wValue & 0xff00) {
 422                 case USB_DT_DEVICE << 8:
 423                         if (hcd->driver->flags & HCD_USB2)
 424                                 bufp = usb2_rh_dev_descriptor;
 425                         else if (hcd->driver->flags & HCD_USB11)
 426                                 bufp = usb11_rh_dev_descriptor;
 427                         else
 428                                 goto error;
 429                         len = 18;
 430                         break;
 431                 case USB_DT_CONFIG << 8:
 432                         if (hcd->driver->flags & HCD_USB2) {
 433                                 bufp = hs_rh_config_descriptor;
 434                                 len = sizeof hs_rh_config_descriptor;
 435                         } else {
 436                                 bufp = fs_rh_config_descriptor;
 437                                 len = sizeof fs_rh_config_descriptor;
 438                         }
 439                         if (device_can_wakeup(&hcd->self.root_hub->dev))
 440                                 patch_wakeup = 1;
 441                         break;
 442                 case USB_DT_STRING << 8:
 443                         n = rh_string (wValue & 0xff, hcd, ubuf, wLength);
 444                         if (n < 0)
 445                                 goto error;
 446                         urb->actual_length = n;
 447                         break;
 448                 default:
 449                         goto error;
 450                 }
 451                 break;
 452         case DeviceRequest | USB_REQ_GET_INTERFACE:
 453                 tbuf [0] = 0;
 454                 len = 1;
 455                         /* FALLTHROUGH */
 456         case DeviceOutRequest | USB_REQ_SET_INTERFACE:
 457                 break;
 458         case DeviceOutRequest | USB_REQ_SET_ADDRESS:
 459                 // wValue == urb->dev->devaddr
 460                 dev_dbg (hcd->self.controller, "root hub device address %d\n",
 461                         wValue);
 462                 break;
 463
 464         /* INTERFACE REQUESTS (no defined feature/status flags) */
 465
 466         /* ENDPOINT REQUESTS */
 467
 468         case EndpointRequest | USB_REQ_GET_STATUS:
 469                 // ENDPOINT_HALT flag
 470                 tbuf [0] = 0;
 471                 tbuf [1] = 0;
 472                 len = 2;
 473                         /* FALLTHROUGH */
 474         case EndpointOutRequest | USB_REQ_CLEAR_FEATURE:
 475         case EndpointOutRequest | USB_REQ_SET_FEATURE:
 476                 dev_dbg (hcd->self.controller, "no endpoint features yet\n");
 477                 break;
 478
 479         /* CLASS REQUESTS (and errors) */
 480
 481         default:
 482                 /* non-generic request */
 483                 switch (typeReq) {
 484                 case GetHubStatus:
 485                 case GetPortStatus:
 486                         len = 4;
 487                         break;
 488                 case GetHubDescriptor:
 489                         len = sizeof (struct usb_hub_descriptor);
 490                         break;
 491                 }
 492                 status = hcd->driver->hub_control (hcd,
 493                         typeReq, wValue, wIndex,
 494                         tbuf, wLength);
 495                 break;
 496 error:
 497                 /* "protocol stall" on error */
 498                 status = -EPIPE;
 499         }
 500
 501         if (status) {
 502                 len = 0;
 503                 if (status != -EPIPE) {
 504                         dev_dbg (hcd->self.controller,
 505                                 "CTRL: TypeReq=0x%x val=0x%x "
 506                                 "idx=0x%x len=%d ==> %d\n",
 507                                 typeReq, wValue, wIndex,
 508                                 wLength, status);
 509                 }
 510         }
 511         if (len) {
 512                 if (urb->transfer_buffer_length < len)
 513                         len = urb->transfer_buffer_length;
 514                 urb->actual_length = len;
 515                 // always USB_DIR_IN, toward host
 516                 memcpy (ubuf, bufp, len);
 517
 518                 /* report whether RH hardware supports remote wakeup */
 519                 if (patch_wakeup &&
 520                                 len > offsetof (struct usb_config_descriptor,
 521                                                 bmAttributes))
 522                         ((struct usb_config_descriptor *)ubuf)->bmAttributes
 523                                 |= USB_CONFIG_ATT_WAKEUP;
 524         }
 525
 526         /* any errors get returned through the urb completion */
 527         spin_lock_irq(&hcd_root_hub_lock);
 528         spin_lock(&urb->lock);
 529         if (urb->status == -EINPROGRESS)
 530                 urb->status = status;
 531         spin_unlock(&urb->lock);
 532
 533         /* This peculiar use of spinlocks echoes what real HC drivers do.
 534          * Avoiding calls to local_irq_disable/enable makes the code
 535          * RT-friendly.
 536          */
 537         spin_unlock(&hcd_root_hub_lock);
 538         usb_hcd_giveback_urb(hcd, urb);
 539         spin_lock(&hcd_root_hub_lock);
 540
 541         spin_unlock_irq(&hcd_root_hub_lock);
 542         return 0;
 543 }
 544
 545 /*-------------------------------------------------------------------------*/
 546
 547 /*
 548  * Root Hub interrupt transfers are polled using a timer if the
 549  * driver requests it; otherwise the driver is responsible for
 550  * calling usb_hcd_poll_rh_status() when an event occurs.
 551  *
 552  * Completions are called in_interrupt(), but they may or may not
 553  * be in_irq().
 554  */
 555 void usb_hcd_poll_rh_status(struct usb_hcd *hcd)
 556 {
 557         struct urb      *urb;
 558         int             length;
 559         unsigned long   flags;
 560         char            buffer[4];      /* Any root hubs with > 31 ports? */
 561
 562         if (unlikely(!hcd->rh_registered))
 563                 return;
 564         if (!hcd->uses_new_polling && !hcd->status_urb)
 565                 return;
 566
 567         length = hcd->driver->hub_status_data(hcd, buffer);
 568         if (length > 0) {
 569
 570                 /* try to complete the status urb */
 571                 spin_lock_irqsave(&hcd_root_hub_lock, flags);
 572                 urb = hcd->status_urb;
 573                 if (urb) {
 574                         spin_lock(&urb->lock);
 575                         if (urb->status == -EINPROGRESS) {
 576                                 hcd->poll_pending = 0;
 577                                 hcd->status_urb = NULL;
 578                                 urb->status = 0;
 579                                 urb->hcpriv = NULL;
 580                                 urb->actual_length = length;
 581                                 memcpy(urb->transfer_buffer, buffer, length);
 582                         } else          /* urb has been unlinked */
 583                                 length = 0;
 584                         spin_unlock(&urb->lock);
 585
 586                         spin_unlock(&hcd_root_hub_lock);
 587                         usb_hcd_giveback_urb(hcd, urb);
 588                         spin_lock(&hcd_root_hub_lock);
 589                 } else
 590                         length = 0;
 591
 592                 if (length <= 0)
 593                         hcd->poll_pending = 1;
 594                 spin_unlock_irqrestore(&hcd_root_hub_lock, flags);
 595         }
 596
 597         /* The USB 2.0 spec says 256 ms.  This is close enough and won't
 598          * exceed that limit if HZ is 100. The math is more clunky than
 599          * maybe expected, this is to make sure that all timers for USB devices
 600          * fire at the same time to give the CPU a break inbetween */
 601         if (hcd->uses_new_polling ? hcd->poll_rh :
 602                         (length == 0 && hcd->status_urb != NULL))
 603                 mod_timer (&hcd->rh_timer, (jiffies/(HZ/4) + 1) * (HZ/4));
 604 }
 605 EXPORT_SYMBOL_GPL(usb_hcd_poll_rh_status);
 606
 607 /* timer callback */
 608 static void rh_timer_func (unsigned long _hcd)
 609 {
 610         usb_hcd_poll_rh_status((struct usb_hcd *) _hcd);
 611 }
 612
 613 /*-------------------------------------------------------------------------*/
 614
 615 static int rh_queue_status (struct usb_hcd *hcd, struct urb *urb)
 616 {
 617         int             retval;
 618         unsigned long   flags;
 619         int             len = 1 + (urb->dev->maxchild / 8);
 620
 621         spin_lock_irqsave (&hcd_root_hub_lock, flags);
 622         if (urb->status != -EINPROGRESS)        /* already unlinked */
 623                 retval = urb->status;
 624         else if (hcd->status_urb || urb->transfer_buffer_length < len) {
 625                 dev_dbg (hcd->self.controller, "not queuing rh status urb\n");
 626                 retval = -EINVAL;
 627         } else {
 628                 hcd->status_urb = urb;
 629                 urb->hcpriv = hcd;      /* indicate it's queued */
 630
 631                 if (!hcd->uses_new_polling)
 632                         mod_timer (&hcd->rh_timer,
 633                                 (jiffies/(HZ/4) + 1) * (HZ/4));
 634
 635                 /* If a status change has already occurred, report it ASAP */
 636                 else if (hcd->poll_pending)
 637                         mod_timer (&hcd->rh_timer, jiffies);
 638                 retval = 0;
 639         }
 640         spin_unlock_irqrestore (&hcd_root_hub_lock, flags);
 641         return retval;
 642 }
 643
 644 static int rh_urb_enqueue (struct usb_hcd *hcd, struct urb *urb)
 645 {
 646         if (usb_endpoint_xfer_int(&urb->ep->desc))
 647                 return rh_queue_status (hcd, urb);
 648         if (usb_endpoint_xfer_control(&urb->ep->desc))
 649                 return rh_call_control (hcd, urb);
 650         return -EINVAL;
 651 }
 652
 653 /*-------------------------------------------------------------------------*/
 654
 655 /* Unlinks of root-hub control URBs are legal, but they don't do anything
 656  * since these URBs always execute synchronously.
 657  */
 658 static int usb_rh_urb_dequeue (struct usb_hcd *hcd, struct urb *urb)
 659 {
 660         unsigned long   flags;
 661
 662         spin_lock_irqsave(&hcd_root_hub_lock, flags);
 663         if (usb_endpoint_num(&urb->ep->desc) == 0) {    /* Control URB */
 664                 ;       /* Do nothing */
 665
 666         } else {                                /* Status URB */
 667                 if (!hcd->uses_new_polling)
 668                         del_timer (&hcd->rh_timer);
 669                 if (urb == hcd->status_urb) {
 670                         hcd->status_urb = NULL;
 671                         urb->hcpriv = NULL;
 672
 673                         spin_unlock(&hcd_root_hub_lock);
 674                         usb_hcd_giveback_urb(hcd, urb);
 675                         spin_lock(&hcd_root_hub_lock);
 676                 }
 677         }
 678         spin_unlock_irqrestore(&hcd_root_hub_lock, flags);
 679         return 0;
 680 }
 681
 682 /*-------------------------------------------------------------------------*/
 683
 684 static struct class *usb_host_class;
 685
 686 int usb_host_init(void)
 687 {
 688         int retval = 0;
 689
 690         usb_host_class = class_create(THIS_MODULE, "usb_host");
 691         if (IS_ERR(usb_host_class))
 692                 retval = PTR_ERR(usb_host_class);
 693         return retval;
 694 }
 695
 696 void usb_host_cleanup(void)
 697 {
 698         class_destroy(usb_host_class);
 699 }
 700
 701 /**
 702  * usb_bus_init - shared initialization code
 703  * @bus: the bus structure being initialized
 704  *
 705  * This code is used to initialize a usb_bus structure, memory for which is
 706  * separately managed.
 707  */
 708 static void usb_bus_init (struct usb_bus *bus)
 709 {
 710         memset (&bus->devmap, 0, sizeof(struct usb_devmap));
 711
 712         bus->devnum_next = 1;
 713
 714         bus->root_hub = NULL;
 715         bus->busnum = -1;
 716         bus->bandwidth_allocated = 0;
 717         bus->bandwidth_int_reqs  = 0;
 718         bus->bandwidth_isoc_reqs = 0;
 719
 720         INIT_LIST_HEAD (&bus->bus_list);
 721 }
 722
 723 /*-------------------------------------------------------------------------*/
 724
 725 /**
 726  * usb_register_bus - registers the USB host controller with the usb core
 727  * @bus: pointer to the bus to register
 728  * Context: !in_interrupt()
 729  *
 730  * Assigns a bus number, and links the controller into usbcore data
 731  * structures so that it can be seen by scanning the bus list.
 732  */
 733 static int usb_register_bus(struct usb_bus *bus)
 734 {
 735         int busnum;
 736
 737         mutex_lock(&usb_bus_list_lock);
 738         busnum = find_next_zero_bit (busmap.busmap, USB_MAXBUS, 1);
 739         if (busnum < USB_MAXBUS) {
 740                 set_bit (busnum, busmap.busmap);
 741                 bus->busnum = busnum;
 742         } else {
 743                 printk (KERN_ERR "%s: too many buses\n", usbcore_name);
 744                 mutex_unlock(&usb_bus_list_lock);
 745                 return -E2BIG;
 746         }
 747
 748         bus->class_dev = class_device_create(usb_host_class, NULL, MKDEV(0,0),
 749                                              bus->controller, "usb_host%d", busnum);
 750         if (IS_ERR(bus->class_dev)) {
 751                 clear_bit(busnum, busmap.busmap);
 752                 mutex_unlock(&usb_bus_list_lock);
 753                 return PTR_ERR(bus->class_dev);
 754         }
 755
 756         class_set_devdata(bus->class_dev, bus);
 757
 758         /* Add it to the local list of buses */
 759         list_add (&bus->bus_list, &usb_bus_list);
 760         mutex_unlock(&usb_bus_list_lock);
 761
 762         usb_notify_add_bus(bus);
 763
 764         dev_info (bus->controller, "new USB bus registered, assigned bus number %d\n", bus->busnum);
 765         return 0;
 766 }
 767
 768 /**
 769  * usb_deregister_bus - deregisters the USB host controller
 770  * @bus: pointer to the bus to deregister
 771  * Context: !in_interrupt()
 772  *
 773  * Recycles the bus number, and unlinks the controller from usbcore data
 774  * structures so that it won't be seen by scanning the bus list.
 775  */
 776 static void usb_deregister_bus (struct usb_bus *bus)
 777 {
 778         dev_info (bus->controller, "USB bus %d deregistered\n", bus->busnum);
 779
 780         /*
 781          * NOTE: make sure that all the devices are removed by the
 782          * controller code, as well as having it call this when cleaning
 783          * itself up
 784          */
 785         mutex_lock(&usb_bus_list_lock);
 786         list_del (&bus->bus_list);
 787         mutex_unlock(&usb_bus_list_lock);
 788
 789         usb_notify_remove_bus(bus);
 790
 791         clear_bit (bus->busnum, busmap.busmap);
 792
 793         class_device_unregister(bus->class_dev);
 794 }
 795
 796 /**
 797  * register_root_hub - called by usb_add_hcd() to register a root hub
 798  * @hcd: host controller for this root hub
 799  *
 800  * This function registers the root hub with the USB subsystem.  It sets up
 801  * the device properly in the device tree and then calls usb_new_device()
 802  * to register the usb device.  It also assigns the root hub's USB address
 803  * (always 1).
 804  */
 805 static int register_root_hub(struct usb_hcd *hcd)
 806 {
 807         struct device *parent_dev = hcd->self.controller;
 808         struct usb_device *usb_dev = hcd->self.root_hub;
 809         const int devnum = 1;
 810         int retval;
 811
 812         usb_dev->devnum = devnum;
 813         usb_dev->bus->devnum_next = devnum + 1;
 814         memset (&usb_dev->bus->devmap.devicemap, 0,
 815                         sizeof usb_dev->bus->devmap.devicemap);
 816         set_bit (devnum, usb_dev->bus->devmap.devicemap);
 817         usb_set_device_state(usb_dev, USB_STATE_ADDRESS);
 818
 819         mutex_lock(&usb_bus_list_lock);
 820
 821         usb_dev->ep0.desc.wMaxPacketSize = __constant_cpu_to_le16(64);
 822         retval = usb_get_device_descriptor(usb_dev, USB_DT_DEVICE_SIZE);
 823         if (retval != sizeof usb_dev->descriptor) {
 824                 mutex_unlock(&usb_bus_list_lock);
 825                 dev_dbg (parent_dev, "can't read %s device descriptor %d\n",
 826                                 usb_dev->dev.bus_id, retval);
 827                 return (retval < 0) ? retval : -EMSGSIZE;
 828         }
 829
 830         retval = usb_new_device (usb_dev);
 831         if (retval) {
 832                 dev_err (parent_dev, "can't register root hub for %s, %d\n",
 833                                 usb_dev->dev.bus_id, retval);
 834         }
 835         mutex_unlock(&usb_bus_list_lock);
 836
 837         if (retval == 0) {
 838                 spin_lock_irq (&hcd_root_hub_lock);
 839                 hcd->rh_registered = 1;
 840                 spin_unlock_irq (&hcd_root_hub_lock);
 841
 842                 /* Did the HC die before the root hub was registered? */
 843                 if (hcd->state == HC_STATE_HALT)
 844                         usb_hc_died (hcd);      /* This time clean up */
 845         }
 846
 847         return retval;
 848 }
 849
 850 void usb_enable_root_hub_irq (struct usb_bus *bus)
 851 {
 852         struct usb_hcd *hcd;
 853
 854         hcd = container_of (bus, struct usb_hcd, self);
 855         if (hcd->driver->hub_irq_enable && hcd->state != HC_STATE_HALT)
 856                 hcd->driver->hub_irq_enable (hcd);
 857 }
 858
 859
 860 /*-------------------------------------------------------------------------*/
 861
 862 /**
 863  * usb_calc_bus_time - approximate periodic transaction time in nanoseconds
 864  * @speed: from dev->speed; USB_SPEED_{LOW,FULL,HIGH}
 865  * @is_input: true iff the transaction sends data to the host
 866  * @isoc: true for isochronous transactions, false for interrupt ones
 867  * @bytecount: how many bytes in the transaction.
 868  *
 869  * Returns approximate bus time in nanoseconds for a periodic transaction.
 870  * See USB 2.0 spec section 5.11.3; only periodic transfers need to be
 871  * scheduled in software, this function is only used for such scheduling.
 872  */
 873 long usb_calc_bus_time (int speed, int is_input, int isoc, int bytecount)
 874 {
 875         unsigned long   tmp;
 876
 877         switch (speed) {
 878         case USB_SPEED_LOW:     /* INTR only */
 879                 if (is_input) {
 880                         tmp = (67667L * (31L + 10L * BitTime (bytecount))) / 1000L;
 881                         return (64060L + (2 * BW_HUB_LS_SETUP) + BW_HOST_DELAY + tmp);
 882                 } else {
 883                         tmp = (66700L * (31L + 10L * BitTime (bytecount))) / 1000L;
 884                         return (64107L + (2 * BW_HUB_LS_SETUP) + BW_HOST_DELAY + tmp);
 885                 }
 886         case USB_SPEED_FULL:    /* ISOC or INTR */
 887                 if (isoc) {
 888                         tmp = (8354L * (31L + 10L * BitTime (bytecount))) / 1000L;
 889                         return (((is_input) ? 7268L : 6265L) + BW_HOST_DELAY + tmp);
 890                 } else {
 891                         tmp = (8354L * (31L + 10L * BitTime (bytecount))) / 1000L;
 892                         return (9107L + BW_HOST_DELAY + tmp);
 893                 }
 894         case USB_SPEED_HIGH:    /* ISOC or INTR */
 895                 // FIXME adjust for input vs output
 896                 if (isoc)
 897                         tmp = HS_NSECS_ISO (bytecount);
 898                 else
 899                         tmp = HS_NSECS (bytecount);
 900                 return tmp;
 901         default:
 902                 pr_debug ("%s: bogus device speed!\n", usbcore_name);
 903                 return -1;
 904         }
 905 }
 906 EXPORT_SYMBOL (usb_calc_bus_time);
 907
 908
 909 /*-------------------------------------------------------------------------*/
 910
 911 /*
 912  * Generic HC operations.
 913  */
 914
 915 /*-------------------------------------------------------------------------*/
 916
 917 static void urb_unlink(struct usb_hcd *hcd, struct urb *urb)
 918 {
 919         unsigned long           flags;
 920
 921         /* clear all state linking urb to this dev (and hcd) */
 922         spin_lock_irqsave(&hcd_urb_list_lock, flags);
 923         list_del_init (&urb->urb_list);
 924         spin_unlock_irqrestore(&hcd_urb_list_lock, flags);
 925
 926         if (hcd->self.uses_dma && !is_root_hub(urb->dev)) {
 927                 if (usb_endpoint_xfer_control(&urb->ep->desc)
 928                         && !(urb->transfer_flags & URB_NO_SETUP_DMA_MAP))
 929                         dma_unmap_single (hcd->self.controller, urb->setup_dma,
 930                                         sizeof (struct usb_ctrlrequest),
 931                                         DMA_TO_DEVICE);
 932                 if (urb->transfer_buffer_length != 0
 933                         && !(urb->transfer_flags & URB_NO_TRANSFER_DMA_MAP))
 934                         dma_unmap_single (hcd->self.controller,
 935                                         urb->transfer_dma,
 936                                         urb->transfer_buffer_length,
 937                                         usb_urb_dir_in(urb)
 938                                             ? DMA_FROM_DEVICE
 939                                             : DMA_TO_DEVICE);
 940         }
 941 }
 942
 943 /* may be called in any context with a valid urb->dev usecount
 944  * caller surrenders "ownership" of urb
 945  * expects usb_submit_urb() to have sanity checked and conditioned all
 946  * inputs in the urb
 947  */
 948 int usb_hcd_submit_urb (struct urb *urb, gfp_t mem_flags)
 949 {
 950         int                     status;
 951         struct usb_hcd          *hcd = bus_to_hcd(urb->dev->bus);
 952         unsigned long           flags;
 953
 954         if (!hcd)
 955                 return -ENODEV;
 956
 957         usbmon_urb_submit(&hcd->self, urb);
 958
 959         /*
 960          * Atomically queue the urb,  first to our records, then to the HCD.
 961          * Access to urb->status is controlled by urb->lock ... changes on
 962          * i/o completion (normal or fault) or unlinking.
 963          */
 964
 965         // FIXME:  verify that quiescing hc works right (RH cleans up)
 966
 967         spin_lock_irqsave(&hcd_urb_list_lock, flags);
 968         if (unlikely(!urb->ep->enabled))
 969                 status = -ENOENT;
 970         else if (unlikely (urb->reject))
 971                 status = -EPERM;
 972         else switch (hcd->state) {
 973         case HC_STATE_RUNNING:
 974         case HC_STATE_RESUMING:
 975                 list_add_tail (&urb->urb_list, &urb->ep->urb_list);
 976                 status = 0;
 977                 break;
 978         default:
 979                 status = -ESHUTDOWN;
 980                 break;
 981         }
 982         spin_unlock_irqrestore(&hcd_urb_list_lock, flags);
 983         if (status) {
 984                 INIT_LIST_HEAD (&urb->urb_list);
 985                 usbmon_urb_submit_error(&hcd->self, urb, status);
 986                 return status;
 987         }
 988
 989         /* increment urb's reference count as part of giving it to the HCD
 990          * (which now controls it).  HCD guarantees that it either returns
 991          * an error or calls giveback(), but not both.
 992          */
 993         urb = usb_get_urb (urb);
 994         atomic_inc (&urb->use_count);
 995
 996         if (is_root_hub(urb->dev)) {
 997                 /* NOTE:  requirement on hub callers (usbfs and the hub
 998                  * driver, for now) that URBs' urb->transfer_buffer be
 999                  * valid and usb_buffer_{sync,unmap}() not be needed, since
1000                  * they could clobber root hub response data.
1001                  */
1002                 status = rh_urb_enqueue (hcd, urb);
1003                 goto done;
1004         }
1005
1006         /* lower level hcd code should use *_dma exclusively,
1007          * unless it uses pio or talks to another transport.
1008          */
1009         if (hcd->self.uses_dma) {
1010                 if (usb_endpoint_xfer_control(&urb->ep->desc)
1011                         && !(urb->transfer_flags & URB_NO_SETUP_DMA_MAP))
1012                         urb->setup_dma = dma_map_single (
1013                                         hcd->self.controller,
1014                                         urb->setup_packet,
1015                                         sizeof (struct usb_ctrlrequest),
1016                                         DMA_TO_DEVICE);
1017                 if (urb->transfer_buffer_length != 0
1018                         && !(urb->transfer_flags & URB_NO_TRANSFER_DMA_MAP))
1019                         urb->transfer_dma = dma_map_single (
1020                                         hcd->self.controller,
1021                                         urb->transfer_buffer,
1022                                         urb->transfer_buffer_length,
1023                                         usb_urb_dir_in(urb)
1024                                             ? DMA_FROM_DEVICE
1025                                             : DMA_TO_DEVICE);
1026         }
1027
1028         status = hcd->driver->urb_enqueue (hcd, urb->ep, urb, mem_flags);
1029 done:
1030         if (unlikely (status)) {
1031                 urb_unlink(hcd, urb);
1032                 atomic_dec (&urb->use_count);
1033                 if (urb->reject)
1034                         wake_up (&usb_kill_urb_queue);
1035                 usbmon_urb_submit_error(&hcd->self, urb, status);
1036                 usb_put_urb (urb);
1037         }
1038         return status;
1039 }
1040
1041 /*-------------------------------------------------------------------------*/
1042
1043 /* this makes the hcd giveback() the urb more quickly, by kicking it
1044  * off hardware queues (which may take a while) and returning it as
1045  * soon as practical.  we've already set up the urb's return status,
1046  * but we can't know if the callback completed already.
1047  */
1048 static int
1049 unlink1 (struct usb_hcd *hcd, struct urb *urb)
1050 {
1051         int             value;
1052
1053         if (is_root_hub(urb->dev))
1054                 value = usb_rh_urb_dequeue (hcd, urb);
1055         else {
1056
1057                 /* The only reason an HCD might fail this call is if
1058                  * it has not yet fully queued the urb to begin with.
1059                  * Such failures should be harmless. */
1060                 value = hcd->driver->urb_dequeue (hcd, urb);
1061         }
1062
1063         if (value != 0)
1064                 dev_dbg (hcd->self.controller, "dequeue %p --> %d\n",
1065                                 urb, value);
1066         return value;
1067 }
1068
1069 /*
1070  * called in any context
1071  *
1072  * caller guarantees urb won't be recycled till both unlink()
1073  * and the urb's completion function return
1074  */
1075 int usb_hcd_unlink_urb (struct urb *urb, int status)
1076 {
1077         struct usb_hcd                  *hcd = NULL;
1078         struct device                   *sys = NULL;
1079         unsigned long                   flags;
1080         struct list_head                *tmp;
1081         int                             retval;
1082
1083         /*
1084          * we contend for urb->status with the hcd core,
1085          * which changes it while returning the urb.
1086          *
1087          * Caller guaranteed that the urb pointer hasn't been freed, and
1088          * that it was submitted.  But as a rule it can't know whether or
1089          * not it's already been unlinked ... so we respect the reversed
1090          * lock sequence needed for the usb_hcd_giveback_urb() code paths
1091          * (urb lock, then hcd_urb_list_lock) in case some other CPU is now
1092          * unlinking it.
1093          */
1094         spin_lock_irqsave (&urb->lock, flags);
1095         spin_lock(&hcd_urb_list_lock);
1096
1097         sys = &urb->dev->dev;
1098         hcd = bus_to_hcd(urb->dev->bus);
1099         if (hcd == NULL) {
1100                 retval = -ENODEV;
1101                 goto done;
1102         }
1103
1104         /* insist the urb is still queued */
1105         list_for_each(tmp, &urb->ep->urb_list) {
1106                 if (tmp == &urb->urb_list)
1107                         break;
1108         }
1109         if (tmp != &urb->urb_list) {
1110                 retval = -EIDRM;
1111                 goto done;
1112         }
1113
1114         /* Any status except -EINPROGRESS means something already started to
1115          * unlink this URB from the hardware.  So there's no more work to do.
1116          */
1117         if (urb->status != -EINPROGRESS) {
1118                 retval = -EBUSY;
1119                 goto done;
1120         }
1121
1122         /* IRQ setup can easily be broken so that USB controllers
1123          * never get completion IRQs ... maybe even the ones we need to
1124          * finish unlinking the initial failed usb_set_address()
1125          * or device descriptor fetch.
1126          */
1127         if (!test_bit(HCD_FLAG_SAW_IRQ, &hcd->flags) &&
1128                         !is_root_hub(urb->dev)) {
1129                 dev_warn (hcd->self.controller, "Unlink after no-IRQ?  "
1130                         "Controller is probably using the wrong IRQ.\n");
1131                 set_bit(HCD_FLAG_SAW_IRQ, &hcd->flags);
1132         }
1133
1134         urb->status = status;
1135
1136         spin_unlock(&hcd_urb_list_lock);
1137         spin_unlock_irqrestore (&urb->lock, flags);
1138
1139         retval = unlink1 (hcd, urb);
1140         if (retval == 0)
1141                 retval = -EINPROGRESS;
1142         return retval;
1143
1144 done:
1145         spin_unlock(&hcd_urb_list_lock);
1146         spin_unlock_irqrestore (&urb->lock, flags);
1147         if (retval != -EIDRM && sys && sys->driver)
1148                 dev_dbg (sys, "hcd_unlink_urb %p fail %d\n", urb, retval);
1149         return retval;
1150 }
1151
1152 /*-------------------------------------------------------------------------*/
1153
1154 /**
1155  * usb_hcd_giveback_urb - return URB from HCD to device driver
1156  * @hcd: host controller returning the URB
1157  * @urb: urb being returned to the USB device driver.
1158  * Context: in_interrupt()
1159  *
1160  * This hands the URB from HCD to its USB device driver, using its
1161  * completion function.  The HCD has freed all per-urb resources
1162  * (and is done using urb->hcpriv).  It also released all HCD locks;
1163  * the device driver won't cause problems if it frees, modifies,
1164  * or resubmits this URB.
1165  */
1166 void usb_hcd_giveback_urb (struct usb_hcd *hcd, struct urb *urb)
1167 {
1168         urb_unlink(hcd, urb);
1169         usbmon_urb_complete (&hcd->self, urb);
1170         usb_unanchor_urb(urb);
1171
1172         /* pass ownership to the completion handler */
1173         urb->complete (urb);
1174         atomic_dec (&urb->use_count);
1175         if (unlikely (urb->reject))
1176                 wake_up (&usb_kill_urb_queue);
1177         usb_put_urb (urb);
1178 }
1179 EXPORT_SYMBOL (usb_hcd_giveback_urb);
1180
1181 /*-------------------------------------------------------------------------*/
1182
1183 /* disables the endpoint: cancels any pending urbs, then synchronizes with
1184  * the hcd to make sure all endpoint state is gone from hardware, and then
1185  * waits until the endpoint's queue is completely drained. use for
1186  * set_configuration, set_interface, driver removal, physical disconnect.
1187  *
1188  * example:  a qh stored in ep->hcpriv, holding state related to endpoint
1189  * type, maxpacket size, toggle, halt status, and scheduling.
1190  */
1191 void usb_hcd_endpoint_disable (struct usb_device *udev,
1192                 struct usb_host_endpoint *ep)
1193 {
1194         struct usb_hcd          *hcd;
1195         struct urb              *urb;
1196
1197         hcd = bus_to_hcd(udev->bus);
1198         local_irq_disable ();
1199
1200         /* ep is already gone from udev->ep_{in,out}[]; no more submits */
1201 rescan:
1202         spin_lock(&hcd_urb_list_lock);
1203         list_for_each_entry (urb, &ep->urb_list, urb_list) {
1204                 int     tmp;
1205                 int     is_in;
1206
1207                 /* the urb may already have been unlinked */
1208                 if (urb->status != -EINPROGRESS)
1209                         continue;
1210                 usb_get_urb (urb);
1211                 is_in = usb_urb_dir_in(urb);
1212                 spin_unlock(&hcd_urb_list_lock);
1213
1214                 spin_lock (&urb->lock);
1215                 tmp = urb->status;
1216                 if (tmp == -EINPROGRESS)
1217                         urb->status = -ESHUTDOWN;
1218                 spin_unlock (&urb->lock);
1219
1220                 /* kick hcd unless it's already returning this */
1221                 if (tmp == -EINPROGRESS) {
1222                         unlink1 (hcd, urb);
1223                         dev_dbg (hcd->self.controller,
1224                                 "shutdown urb %p ep%d%s%s\n",
1225                                 urb, usb_endpoint_num(&ep->desc),
1226                                 is_in ? "in" : "out",
1227                                 ({      char *s;
1228
1229                                         switch (usb_endpoint_type(&ep->desc)) {
1230                                         case USB_ENDPOINT_XFER_CONTROL:
1231                                                 s = ""; break;
1232                                         case USB_ENDPOINT_XFER_BULK:
1233                                                 s = "-bulk"; break;
1234                                         case USB_ENDPOINT_XFER_INT:
1235                                                 s = "-intr"; break;
1236                                         default:
1237                                                 s = "-iso"; break;
1238                                         };
1239                                         s;
1240                                 }));
1241                 }
1242                 usb_put_urb (urb);
1243
1244                 /* list contents may have changed */
1245                 goto rescan;
1246         }
1247         spin_unlock(&hcd_urb_list_lock);
1248         local_irq_enable ();
1249
1250         /* synchronize with the hardware, so old configuration state
1251          * clears out immediately (and will be freed).
1252          */
1253         might_sleep ();
1254         if (hcd->driver->endpoint_disable)
1255                 hcd->driver->endpoint_disable (hcd, ep);
1256
1257         /* Wait until the endpoint queue is completely empty.  Most HCDs
1258          * will have done this already in their endpoint_disable method,
1259          * but some might not.  And there could be root-hub control URBs
1260          * still pending since they aren't affected by the HCDs'
1261          * endpoint_disable methods.
1262          */
1263         while (!list_empty (&ep->urb_list)) {
1264                 spin_lock_irq(&hcd_urb_list_lock);
1265
1266                 /* The list may have changed while we acquired the spinlock */
1267                 urb = NULL;
1268                 if (!list_empty (&ep->urb_list)) {
1269                         urb = list_entry (ep->urb_list.prev, struct urb,
1270                                         urb_list);
1271                         usb_get_urb (urb);
1272                 }
1273                 spin_unlock_irq(&hcd_urb_list_lock);
1274
1275                 if (urb) {
1276                         usb_kill_urb (urb);
1277                         usb_put_urb (urb);
1278                 }
1279         }
1280 }
1281
1282 /*-------------------------------------------------------------------------*/
1283
1284 /* called in any context */
1285 int usb_hcd_get_frame_number (struct usb_device *udev)
1286 {
1287         struct usb_hcd  *hcd = bus_to_hcd(udev->bus);
1288
1289         if (!HC_IS_RUNNING (hcd->state))
1290                 return -ESHUTDOWN;
1291         return hcd->driver->get_frame_number (hcd);
1292 }
1293
1294 /*-------------------------------------------------------------------------*/
1295
1296 #ifdef  CONFIG_PM
1297
1298 int hcd_bus_suspend(struct usb_device *rhdev)
1299 {
1300         struct usb_hcd  *hcd = container_of(rhdev->bus, struct usb_hcd, self);
1301         int             status;
1302         int             old_state = hcd->state;
1303
1304         dev_dbg(&rhdev->dev, "bus %s%s\n",
1305                         rhdev->auto_pm ? "auto-" : "", "suspend");
1306         if (!hcd->driver->bus_suspend) {
1307                 status = -ENOENT;
1308         } else {
1309                 hcd->state = HC_STATE_QUIESCING;
1310                 status = hcd->driver->bus_suspend(hcd);
1311         }
1312         if (status == 0) {
1313                 usb_set_device_state(rhdev, USB_STATE_SUSPENDED);
1314                 hcd->state = HC_STATE_SUSPENDED;
1315         } else {
1316                 hcd->state = old_state;
1317                 dev_dbg(&rhdev->dev, "bus %s fail, err %d\n",
1318                                 "suspend", status);
1319         }
1320         return status;
1321 }
1322
1323 int hcd_bus_resume(struct usb_device *rhdev)
1324 {
1325         struct usb_hcd  *hcd = container_of(rhdev->bus, struct usb_hcd, self);
1326         int             status;
1327         int             old_state = hcd->state;
1328
1329         dev_dbg(&rhdev->dev, "usb %s%s\n",
1330                         rhdev->auto_pm ? "auto-" : "", "resume");
1331         if (!hcd->driver->bus_resume)
1332                 return -ENOENT;
1333         if (hcd->state == HC_STATE_RUNNING)
1334                 return 0;
1335
1336         hcd->state = HC_STATE_RESUMING;
1337         status = hcd->driver->bus_resume(hcd);
1338         if (status == 0) {
1339                 /* TRSMRCY = 10 msec */
1340                 msleep(10);
1341                 usb_set_device_state(rhdev, rhdev->actconfig
1342                                 ? USB_STATE_CONFIGURED
1343                                 : USB_STATE_ADDRESS);
1344                 hcd->state = HC_STATE_RUNNING;
1345         } else {
1346                 hcd->state = old_state;
1347                 dev_dbg(&rhdev->dev, "bus %s fail, err %d\n",
1348                                 "resume", status);
1349                 if (status != -ESHUTDOWN)
1350                         usb_hc_died(hcd);
1351         }
1352         return status;
1353 }
1354
1355 /* Workqueue routine for root-hub remote wakeup */
1356 static void hcd_resume_work(struct work_struct *work)
1357 {
1358         struct usb_hcd *hcd = container_of(work, struct usb_hcd, wakeup_work);
1359         struct usb_device *udev = hcd->self.root_hub;
1360
1361         usb_lock_device(udev);
1362         usb_mark_last_busy(udev);
1363         usb_external_resume_device(udev);
1364         usb_unlock_device(udev);
1365 }
1366
1367 /**
1368  * usb_hcd_resume_root_hub - called by HCD to resume its root hub
1369  * @hcd: host controller for this root hub
1370  *
1371  * The USB host controller calls this function when its root hub is
1372  * suspended (with the remote wakeup feature enabled) and a remote
1373  * wakeup request is received.  The routine submits a workqueue request
1374  * to resume the root hub (that is, manage its downstream ports again).
1375  */
1376 void usb_hcd_resume_root_hub (struct usb_hcd *hcd)
1377 {
1378         unsigned long flags;
1379
1380         spin_lock_irqsave (&hcd_root_hub_lock, flags);
1381         if (hcd->rh_registered)
1382                 queue_work(ksuspend_usb_wq, &hcd->wakeup_work);
1383         spin_unlock_irqrestore (&hcd_root_hub_lock, flags);
1384 }
1385 EXPORT_SYMBOL_GPL(usb_hcd_resume_root_hub);
1386
1387 #endif
1388
1389 /*-------------------------------------------------------------------------*/
1390
1391 #ifdef  CONFIG_USB_OTG
1392
1393 /**
1394  * usb_bus_start_enum - start immediate enumeration (for OTG)
1395  * @bus: the bus (must use hcd framework)
1396  * @port_num: 1-based number of port; usually bus->otg_port
1397  * Context: in_interrupt()
1398  *
1399  * Starts enumeration, with an immediate reset followed later by
1400  * khubd identifying and possibly configuring the device.
1401  * This is needed by OTG controller drivers, where it helps meet
1402  * HNP protocol timing requirements for starting a port reset.
1403  */
1404 int usb_bus_start_enum(struct usb_bus *bus, unsigned port_num)
1405 {
1406         struct usb_hcd          *hcd;
1407         int                     status = -EOPNOTSUPP;
1408
1409         /* NOTE: since HNP can't start by grabbing the bus's address0_sem,
1410          * boards with root hubs hooked up to internal devices (instead of
1411          * just the OTG port) may need more attention to resetting...
1412          */
1413         hcd = container_of (bus, struct usb_hcd, self);
1414         if (port_num && hcd->driver->start_port_reset)
1415                 status = hcd->driver->start_port_reset(hcd, port_num);
1416
1417         /* run khubd shortly after (first) root port reset finishes;
1418          * it may issue others, until at least 50 msecs have passed.
1419          */
1420         if (status == 0)
1421                 mod_timer(&hcd->rh_timer, jiffies + msecs_to_jiffies(10));
1422         return status;
1423 }
1424 EXPORT_SYMBOL (usb_bus_start_enum);
1425
1426 #endif
1427
1428 /*-------------------------------------------------------------------------*/
1429
1430 /**
1431  * usb_hcd_irq - hook IRQs to HCD framework (bus glue)
1432  * @irq: the IRQ being raised
1433  * @__hcd: pointer to the HCD whose IRQ is being signaled
1434  * @r: saved hardware registers
1435  *
1436  * If the controller isn't HALTed, calls the driver's irq handler.
1437  * Checks whether the controller is now dead.
1438  */
1439 irqreturn_t usb_hcd_irq (int irq, void *__hcd)
1440 {
1441         struct usb_hcd          *hcd = __hcd;
1442         int                     start = hcd->state;
1443
1444         if (unlikely(start == HC_STATE_HALT ||
1445             !test_bit(HCD_FLAG_HW_ACCESSIBLE, &hcd->flags)))
1446                 return IRQ_NONE;
1447         if (hcd->driver->irq (hcd) == IRQ_NONE)
1448                 return IRQ_NONE;
1449
1450         set_bit(HCD_FLAG_SAW_IRQ, &hcd->flags);
1451
1452         if (unlikely(hcd->state == HC_STATE_HALT))
1453                 usb_hc_died (hcd);
1454         return IRQ_HANDLED;
1455 }
1456
1457 /*-------------------------------------------------------------------------*/
1458
1459 /**
1460  * usb_hc_died - report abnormal shutdown of a host controller (bus glue)
1461  * @hcd: pointer to the HCD representing the controller
1462  *
1463  * This is called by bus glue to report a USB host controller that died
1464  * while operations may still have been pending.  It's called automatically
1465  * by the PCI glue, so only glue for non-PCI busses should need to call it.
1466  */
1467 void usb_hc_died (struct usb_hcd *hcd)
1468 {
1469         unsigned long flags;
1470
1471         dev_err (hcd->self.controller, "HC died; cleaning up\n");
1472
1473         spin_lock_irqsave (&hcd_root_hub_lock, flags);
1474         if (hcd->rh_registered) {
1475                 hcd->poll_rh = 0;
1476
1477                 /* make khubd clean up old urbs and devices */
1478                 usb_set_device_state (hcd->self.root_hub,
1479                                 USB_STATE_NOTATTACHED);
1480                 usb_kick_khubd (hcd->self.root_hub);
1481         }
1482         spin_unlock_irqrestore (&hcd_root_hub_lock, flags);
1483 }
1484 EXPORT_SYMBOL_GPL (usb_hc_died);
1485
1486 /*-------------------------------------------------------------------------*/
1487
1488 /**
1489  * usb_create_hcd - create and initialize an HCD structure
1490  * @driver: HC driver that will use this hcd
1491  * @dev: device for this HC, stored in hcd->self.controller
1492  * @bus_name: value to store in hcd->self.bus_name
1493  * Context: !in_interrupt()
1494  *
1495  * Allocate a struct usb_hcd, with extra space at the end for the
1496  * HC driver's private data.  Initialize the generic members of the
1497  * hcd structure.
1498  *
1499  * If memory is unavailable, returns NULL.
1500  */
1501 struct usb_hcd *usb_create_hcd (const struct hc_driver *driver,
1502                 struct device *dev, char *bus_name)
1503 {
1504         struct usb_hcd *hcd;
1505
1506         hcd = kzalloc(sizeof(*hcd) + driver->hcd_priv_size, GFP_KERNEL);
1507         if (!hcd) {
1508                 dev_dbg (dev, "hcd alloc failed\n");
1509                 return NULL;
1510         }
1511         dev_set_drvdata(dev, hcd);
1512         kref_init(&hcd->kref);
1513
1514         usb_bus_init(&hcd->self);
1515         hcd->self.controller = dev;
1516         hcd->self.bus_name = bus_name;
1517         hcd->self.uses_dma = (dev->dma_mask != NULL);
1518
1519         init_timer(&hcd->rh_timer);
1520         hcd->rh_timer.function = rh_timer_func;
1521         hcd->rh_timer.data = (unsigned long) hcd;
1522 #ifdef CONFIG_PM
1523         INIT_WORK(&hcd->wakeup_work, hcd_resume_work);
1524 #endif
1525
1526         hcd->driver = driver;
1527         hcd->product_desc = (driver->product_desc) ? driver->product_desc :
1528                         "USB Host Controller";
1529
1530         return hcd;
1531 }
1532 EXPORT_SYMBOL (usb_create_hcd);
1533
1534 static void hcd_release (struct kref *kref)
1535 {
1536         struct usb_hcd *hcd = container_of (kref, struct usb_hcd, kref);
1537
1538         kfree(hcd);
1539 }
1540
1541 struct usb_hcd *usb_get_hcd (struct usb_hcd *hcd)
1542 {
1543         if (hcd)
1544                 kref_get (&hcd->kref);
1545         return hcd;
1546 }
1547 EXPORT_SYMBOL (usb_get_hcd);
1548
1549 void usb_put_hcd (struct usb_hcd *hcd)
1550 {
1551         if (hcd)
1552                 kref_put (&hcd->kref, hcd_release);
1553 }
1554 EXPORT_SYMBOL (usb_put_hcd);
1555
1556 /**
1557  * usb_add_hcd - finish generic HCD structure initialization and register
1558  * @hcd: the usb_hcd structure to initialize
1559  * @irqnum: Interrupt line to allocate
1560  * @irqflags: Interrupt type flags
1561  *
1562  * Finish the remaining parts of generic HCD initialization: allocate the
1563  * buffers of consistent memory, register the bus, request the IRQ line,
1564  * and call the driver's reset() and start() routines.
1565  */
1566 int usb_add_hcd(struct usb_hcd *hcd,
1567                 unsigned int irqnum, unsigned long irqflags)
1568 {
1569         int retval;
1570         struct usb_device *rhdev;
1571
1572         dev_info(hcd->self.controller, "%s\n", hcd->product_desc);
1573
1574         set_bit(HCD_FLAG_HW_ACCESSIBLE, &hcd->flags);
1575
1576         /* HC is in reset state, but accessible.  Now do the one-time init,
1577          * bottom up so that hcds can customize the root hubs before khubd
1578          * starts talking to them.  (Note, bus id is assigned early too.)
1579          */
1580         if ((retval = hcd_buffer_create(hcd)) != 0) {
1581                 dev_dbg(hcd->self.controller, "pool alloc failed\n");
1582                 return retval;
1583         }
1584
1585         if ((retval = usb_register_bus(&hcd->self)) < 0)
1586                 goto err_register_bus;
1587
1588         if ((rhdev = usb_alloc_dev(NULL, &hcd->self, 0)) == NULL) {
1589                 dev_err(hcd->self.controller, "unable to allocate root hub\n");
1590                 retval = -ENOMEM;
1591                 goto err_allocate_root_hub;
1592         }
1593         rhdev->speed = (hcd->driver->flags & HCD_USB2) ? USB_SPEED_HIGH :
1594                         USB_SPEED_FULL;
1595         hcd->self.root_hub = rhdev;
1596
1597         /* wakeup flag init defaults to "everything works" for root hubs,
1598          * but drivers can override it in reset() if needed, along with
1599          * recording the overall controller's system wakeup capability.
1600          */
1601         device_init_wakeup(&rhdev->dev, 1);
1602
1603         /* "reset" is misnamed; its role is now one-time init. the controller
1604          * should already have been reset (and boot firmware kicked off etc).
1605          */
1606         if (hcd->driver->reset && (retval = hcd->driver->reset(hcd)) < 0) {
1607                 dev_err(hcd->self.controller, "can't setup\n");
1608                 goto err_hcd_driver_setup;
1609         }
1610
1611         /* NOTE: root hub and controller capabilities may not be the same */
1612         if (device_can_wakeup(hcd->self.controller)
1613                         && device_can_wakeup(&hcd->self.root_hub->dev))
1614                 dev_dbg(hcd->self.controller, "supports USB remote wakeup\n");
1615
1616         /* enable irqs just before we start the controller */
1617         if (hcd->driver->irq) {
1618                 snprintf(hcd->irq_descr, sizeof(hcd->irq_descr), "%s:usb%d",
1619                                 hcd->driver->description, hcd->self.busnum);
1620                 if ((retval = request_irq(irqnum, &usb_hcd_irq, irqflags,
1621                                 hcd->irq_descr, hcd)) != 0) {
1622                         dev_err(hcd->self.controller,
1623                                         "request interrupt %d failed\n", irqnum);
1624                         goto err_request_irq;
1625                 }
1626                 hcd->irq = irqnum;
1627                 dev_info(hcd->self.controller, "irq %d, %s 0x%08llx\n", irqnum,
1628                                 (hcd->driver->flags & HCD_MEMORY) ?
1629                                         "io mem" : "io base",
1630                                         (unsigned long long)hcd->rsrc_start);
1631         } else {
1632                 hcd->irq = -1;
1633                 if (hcd->rsrc_start)
1634                         dev_info(hcd->self.controller, "%s 0x%08llx\n",
1635                                         (hcd->driver->flags & HCD_MEMORY) ?
1636                                         "io mem" : "io base",
1637                                         (unsigned long long)hcd->rsrc_start);
1638         }
1639
1640         if ((retval = hcd->driver->start(hcd)) < 0) {
1641                 dev_err(hcd->self.controller, "startup error %d\n", retval);
1642                 goto err_hcd_driver_start;
1643         }
1644
1645         /* starting here, usbcore will pay attention to this root hub */
1646         rhdev->bus_mA = min(500u, hcd->power_budget);
1647         if ((retval = register_root_hub(hcd)) != 0)
1648                 goto err_register_root_hub;
1649
1650         if (hcd->uses_new_polling && hcd->poll_rh)
1651                 usb_hcd_poll_rh_status(hcd);
1652         return retval;
1653
1654 err_register_root_hub:
1655         hcd->driver->stop(hcd);
1656 err_hcd_driver_start:
1657         if (hcd->irq >= 0)
1658                 free_irq(irqnum, hcd);
1659 err_request_irq:
1660 err_hcd_driver_setup:
1661         hcd->self.root_hub = NULL;
1662         usb_put_dev(rhdev);
1663 err_allocate_root_hub:
1664         usb_deregister_bus(&hcd->self);
1665 err_register_bus:
1666         hcd_buffer_destroy(hcd);
1667         return retval;
1668 }
1669 EXPORT_SYMBOL (usb_add_hcd);
1670
1671 /**
1672  * usb_remove_hcd - shutdown processing for generic HCDs
1673  * @hcd: the usb_hcd structure to remove
1674  * Context: !in_interrupt()
1675  *
1676  * Disconnects the root hub, then reverses the effects of usb_add_hcd(),
1677  * invoking the HCD's stop() method.
1678  */
1679 void usb_remove_hcd(struct usb_hcd *hcd)
1680 {
1681         dev_info(hcd->self.controller, "remove, state %x\n", hcd->state);
1682
1683         if (HC_IS_RUNNING (hcd->state))
1684                 hcd->state = HC_STATE_QUIESCING;
1685
1686         dev_dbg(hcd->self.controller, "roothub graceful disconnect\n");
1687         spin_lock_irq (&hcd_root_hub_lock);
1688         hcd->rh_registered = 0;
1689         spin_unlock_irq (&hcd_root_hub_lock);
1690
1691 #ifdef CONFIG_PM
1692         cancel_work_sync(&hcd->wakeup_work);
1693 #endif
1694
1695         mutex_lock(&usb_bus_list_lock);
1696         usb_disconnect(&hcd->self.root_hub);
1697         mutex_unlock(&usb_bus_list_lock);
1698
1699         hcd->driver->stop(hcd);
1700         hcd->state = HC_STATE_HALT;
1701
1702         hcd->poll_rh = 0;
1703         del_timer_sync(&hcd->rh_timer);
1704
1705         if (hcd->irq >= 0)
1706                 free_irq(hcd->irq, hcd);
1707         usb_deregister_bus(&hcd->self);
1708         hcd_buffer_destroy(hcd);
1709 }
1710 EXPORT_SYMBOL (usb_remove_hcd);
1711
1712 void
1713 usb_hcd_platform_shutdown(struct platform_device* dev)
1714 {
1715         struct usb_hcd *hcd = platform_get_drvdata(dev);
1716
1717         if (hcd->driver->shutdown)
1718                 hcd->driver->shutdown(hcd);
1719 }
1720 EXPORT_SYMBOL (usb_hcd_platform_shutdown);
1721
1722 /*-------------------------------------------------------------------------*/
1723
1724 #if defined(CONFIG_USB_MON)
1725
1726 struct usb_mon_operations *mon_ops;
1727
1728 /*
1729  * The registration is unlocked.
1730  * We do it this way because we do not want to lock in hot paths.
1731  *
1732  * Notice that the code is minimally error-proof. Because usbmon needs
1733  * symbols from usbcore, usbcore gets referenced and cannot be unloaded first.
1734  */
1735
1736 int usb_mon_register (struct usb_mon_operations *ops)
1737 {
1738
1739         if (mon_ops)
1740                 return -EBUSY;
1741
1742         mon_ops = ops;
1743         mb();
1744         return 0;
1745 }
1746 EXPORT_SYMBOL_GPL (usb_mon_register);
1747
1748 void usb_mon_deregister (void)
1749 {
1750
1751         if (mon_ops == NULL) {
1752                 printk(KERN_ERR "USB: monitor was not registered\n");
1753                 return;
1754         }
1755         mon_ops = NULL;
1756         mb();
1757 }
1758 EXPORT_SYMBOL_GPL (usb_mon_deregister);
1759
1760 #endif /* CONFIG_USB_MON */