GNU Linux-libre 4.14.251-gnu1
[releases.git] / drivers / tty / serial / 8250 / 8250_port.c
1 /*
2  *  Base port operations for 8250/16550-type serial ports
3  *
4  *  Based on drivers/char/serial.c, by Linus Torvalds, Theodore Ts'o.
5  *  Split from 8250_core.c, Copyright (C) 2001 Russell King.
6  *
7  * This program is free software; you can redistribute it and/or modify
8  * it under the terms of the GNU General Public License as published by
9  * the Free Software Foundation; either version 2 of the License, or
10  * (at your option) any later version.
11  *
12  * A note about mapbase / membase
13  *
14  *  mapbase is the physical address of the IO port.
15  *  membase is an 'ioremapped' cookie.
16  */
17
18 #if defined(CONFIG_SERIAL_8250_CONSOLE) && defined(CONFIG_MAGIC_SYSRQ)
19 #define SUPPORT_SYSRQ
20 #endif
21
22 #include <linux/module.h>
23 #include <linux/moduleparam.h>
24 #include <linux/ioport.h>
25 #include <linux/init.h>
26 #include <linux/console.h>
27 #include <linux/sysrq.h>
28 #include <linux/delay.h>
29 #include <linux/platform_device.h>
30 #include <linux/tty.h>
31 #include <linux/ratelimit.h>
32 #include <linux/tty_flip.h>
33 #include <linux/serial.h>
34 #include <linux/serial_8250.h>
35 #include <linux/nmi.h>
36 #include <linux/mutex.h>
37 #include <linux/slab.h>
38 #include <linux/uaccess.h>
39 #include <linux/pm_runtime.h>
40 #include <linux/ktime.h>
41
42 #include <asm/io.h>
43 #include <asm/irq.h>
44
45 #include "8250.h"
46
47 /*
48  * These are definitions for the Exar XR17V35X and XR17(C|D)15X
49  */
50 #define UART_EXAR_INT0          0x80
51 #define UART_EXAR_SLEEP         0x8b    /* Sleep mode */
52 #define UART_EXAR_DVID          0x8d    /* Device identification */
53
54 /* Nuvoton NPCM timeout register */
55 #define UART_NPCM_TOR          7
56 #define UART_NPCM_TOIE         BIT(7)  /* Timeout Interrupt Enable */
57
58 /*
59  * Debugging.
60  */
61 #if 0
62 #define DEBUG_AUTOCONF(fmt...)  printk(fmt)
63 #else
64 #define DEBUG_AUTOCONF(fmt...)  do { } while (0)
65 #endif
66
67 #define BOTH_EMPTY      (UART_LSR_TEMT | UART_LSR_THRE)
68
69 /*
70  * Here we define the default xmit fifo size used for each type of UART.
71  */
72 static const struct serial8250_config uart_config[] = {
73         [PORT_UNKNOWN] = {
74                 .name           = "unknown",
75                 .fifo_size      = 1,
76                 .tx_loadsz      = 1,
77         },
78         [PORT_8250] = {
79                 .name           = "8250",
80                 .fifo_size      = 1,
81                 .tx_loadsz      = 1,
82         },
83         [PORT_16450] = {
84                 .name           = "16450",
85                 .fifo_size      = 1,
86                 .tx_loadsz      = 1,
87         },
88         [PORT_16550] = {
89                 .name           = "16550",
90                 .fifo_size      = 1,
91                 .tx_loadsz      = 1,
92         },
93         [PORT_16550A] = {
94                 .name           = "16550A",
95                 .fifo_size      = 16,
96                 .tx_loadsz      = 16,
97                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
98                 .rxtrig_bytes   = {1, 4, 8, 14},
99                 .flags          = UART_CAP_FIFO,
100         },
101         [PORT_CIRRUS] = {
102                 .name           = "Cirrus",
103                 .fifo_size      = 1,
104                 .tx_loadsz      = 1,
105         },
106         [PORT_16650] = {
107                 .name           = "ST16650",
108                 .fifo_size      = 1,
109                 .tx_loadsz      = 1,
110                 .flags          = UART_CAP_FIFO | UART_CAP_EFR | UART_CAP_SLEEP,
111         },
112         [PORT_16650V2] = {
113                 .name           = "ST16650V2",
114                 .fifo_size      = 32,
115                 .tx_loadsz      = 16,
116                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_01 |
117                                   UART_FCR_T_TRIG_00,
118                 .rxtrig_bytes   = {8, 16, 24, 28},
119                 .flags          = UART_CAP_FIFO | UART_CAP_EFR | UART_CAP_SLEEP,
120         },
121         [PORT_16750] = {
122                 .name           = "TI16750",
123                 .fifo_size      = 64,
124                 .tx_loadsz      = 64,
125                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10 |
126                                   UART_FCR7_64BYTE,
127                 .rxtrig_bytes   = {1, 16, 32, 56},
128                 .flags          = UART_CAP_FIFO | UART_CAP_SLEEP | UART_CAP_AFE,
129         },
130         [PORT_STARTECH] = {
131                 .name           = "Startech",
132                 .fifo_size      = 1,
133                 .tx_loadsz      = 1,
134         },
135         [PORT_16C950] = {
136                 .name           = "16C950/954",
137                 .fifo_size      = 128,
138                 .tx_loadsz      = 128,
139                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_01,
140                 .rxtrig_bytes   = {16, 32, 112, 120},
141                 /* UART_CAP_EFR breaks billionon CF bluetooth card. */
142                 .flags          = UART_CAP_FIFO | UART_CAP_SLEEP,
143         },
144         [PORT_16654] = {
145                 .name           = "ST16654",
146                 .fifo_size      = 64,
147                 .tx_loadsz      = 32,
148                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_01 |
149                                   UART_FCR_T_TRIG_10,
150                 .rxtrig_bytes   = {8, 16, 56, 60},
151                 .flags          = UART_CAP_FIFO | UART_CAP_EFR | UART_CAP_SLEEP,
152         },
153         [PORT_16850] = {
154                 .name           = "XR16850",
155                 .fifo_size      = 128,
156                 .tx_loadsz      = 128,
157                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
158                 .flags          = UART_CAP_FIFO | UART_CAP_EFR | UART_CAP_SLEEP,
159         },
160         [PORT_RSA] = {
161                 .name           = "RSA",
162                 .fifo_size      = 2048,
163                 .tx_loadsz      = 2048,
164                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_11,
165                 .flags          = UART_CAP_FIFO,
166         },
167         [PORT_NS16550A] = {
168                 .name           = "NS16550A",
169                 .fifo_size      = 16,
170                 .tx_loadsz      = 16,
171                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
172                 .flags          = UART_CAP_FIFO | UART_NATSEMI,
173         },
174         [PORT_XSCALE] = {
175                 .name           = "XScale",
176                 .fifo_size      = 32,
177                 .tx_loadsz      = 32,
178                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
179                 .flags          = UART_CAP_FIFO | UART_CAP_UUE | UART_CAP_RTOIE,
180         },
181         [PORT_OCTEON] = {
182                 .name           = "OCTEON",
183                 .fifo_size      = 64,
184                 .tx_loadsz      = 64,
185                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
186                 .flags          = UART_CAP_FIFO,
187         },
188         [PORT_AR7] = {
189                 .name           = "AR7",
190                 .fifo_size      = 16,
191                 .tx_loadsz      = 16,
192                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_00,
193                 .flags          = UART_CAP_FIFO /* | UART_CAP_AFE */,
194         },
195         [PORT_U6_16550A] = {
196                 .name           = "U6_16550A",
197                 .fifo_size      = 64,
198                 .tx_loadsz      = 64,
199                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
200                 .flags          = UART_CAP_FIFO | UART_CAP_AFE,
201         },
202         [PORT_TEGRA] = {
203                 .name           = "Tegra",
204                 .fifo_size      = 32,
205                 .tx_loadsz      = 8,
206                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_01 |
207                                   UART_FCR_T_TRIG_01,
208                 .rxtrig_bytes   = {1, 4, 8, 14},
209                 .flags          = UART_CAP_FIFO | UART_CAP_RTOIE,
210         },
211         [PORT_XR17D15X] = {
212                 .name           = "XR17D15X",
213                 .fifo_size      = 64,
214                 .tx_loadsz      = 64,
215                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
216                 .flags          = UART_CAP_FIFO | UART_CAP_AFE | UART_CAP_EFR |
217                                   UART_CAP_SLEEP,
218         },
219         [PORT_XR17V35X] = {
220                 .name           = "XR17V35X",
221                 .fifo_size      = 256,
222                 .tx_loadsz      = 256,
223                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_11 |
224                                   UART_FCR_T_TRIG_11,
225                 .flags          = UART_CAP_FIFO | UART_CAP_AFE | UART_CAP_EFR |
226                                   UART_CAP_SLEEP,
227         },
228         [PORT_LPC3220] = {
229                 .name           = "LPC3220",
230                 .fifo_size      = 64,
231                 .tx_loadsz      = 32,
232                 .fcr            = UART_FCR_DMA_SELECT | UART_FCR_ENABLE_FIFO |
233                                   UART_FCR_R_TRIG_00 | UART_FCR_T_TRIG_00,
234                 .flags          = UART_CAP_FIFO,
235         },
236         [PORT_BRCM_TRUMANAGE] = {
237                 .name           = "TruManage",
238                 .fifo_size      = 1,
239                 .tx_loadsz      = 1024,
240                 .flags          = UART_CAP_HFIFO,
241         },
242         [PORT_8250_CIR] = {
243                 .name           = "CIR port"
244         },
245         [PORT_ALTR_16550_F32] = {
246                 .name           = "Altera 16550 FIFO32",
247                 .fifo_size      = 32,
248                 .tx_loadsz      = 32,
249                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
250                 .flags          = UART_CAP_FIFO | UART_CAP_AFE,
251         },
252         [PORT_ALTR_16550_F64] = {
253                 .name           = "Altera 16550 FIFO64",
254                 .fifo_size      = 64,
255                 .tx_loadsz      = 64,
256                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
257                 .flags          = UART_CAP_FIFO | UART_CAP_AFE,
258         },
259         [PORT_ALTR_16550_F128] = {
260                 .name           = "Altera 16550 FIFO128",
261                 .fifo_size      = 128,
262                 .tx_loadsz      = 128,
263                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
264                 .flags          = UART_CAP_FIFO | UART_CAP_AFE,
265         },
266         /*
267          * tx_loadsz is set to 63-bytes instead of 64-bytes to implement
268          * workaround of errata A-008006 which states that tx_loadsz should
269          * be configured less than Maximum supported fifo bytes.
270          */
271         [PORT_16550A_FSL64] = {
272                 .name           = "16550A_FSL64",
273                 .fifo_size      = 64,
274                 .tx_loadsz      = 63,
275                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10 |
276                                   UART_FCR7_64BYTE,
277                 .flags          = UART_CAP_FIFO,
278         },
279         [PORT_RT2880] = {
280                 .name           = "Palmchip BK-3103",
281                 .fifo_size      = 16,
282                 .tx_loadsz      = 16,
283                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10,
284                 .rxtrig_bytes   = {1, 4, 8, 14},
285                 .flags          = UART_CAP_FIFO,
286         },
287         [PORT_DA830] = {
288                 .name           = "TI DA8xx/66AK2x",
289                 .fifo_size      = 16,
290                 .tx_loadsz      = 16,
291                 .fcr            = UART_FCR_DMA_SELECT | UART_FCR_ENABLE_FIFO |
292                                   UART_FCR_R_TRIG_10,
293                 .rxtrig_bytes   = {1, 4, 8, 14},
294                 .flags          = UART_CAP_FIFO | UART_CAP_AFE,
295         },
296         [PORT_MTK_BTIF] = {
297                 .name           = "MediaTek BTIF",
298                 .fifo_size      = 16,
299                 .tx_loadsz      = 16,
300                 .fcr            = UART_FCR_ENABLE_FIFO |
301                                   UART_FCR_CLEAR_RCVR | UART_FCR_CLEAR_XMIT,
302                 .flags          = UART_CAP_FIFO,
303         },
304         [PORT_NPCM] = {
305                 .name           = "Nuvoton 16550",
306                 .fifo_size      = 16,
307                 .tx_loadsz      = 16,
308                 .fcr            = UART_FCR_ENABLE_FIFO | UART_FCR_R_TRIG_10 |
309                                   UART_FCR_CLEAR_RCVR | UART_FCR_CLEAR_XMIT,
310                 .rxtrig_bytes   = {1, 4, 8, 14},
311                 .flags          = UART_CAP_FIFO,
312         },
313 };
314
315 /* Uart divisor latch read */
316 static int default_serial_dl_read(struct uart_8250_port *up)
317 {
318         /* Assign these in pieces to truncate any bits above 7.  */
319         unsigned char dll = serial_in(up, UART_DLL);
320         unsigned char dlm = serial_in(up, UART_DLM);
321
322         return dll | dlm << 8;
323 }
324
325 /* Uart divisor latch write */
326 static void default_serial_dl_write(struct uart_8250_port *up, int value)
327 {
328         serial_out(up, UART_DLL, value & 0xff);
329         serial_out(up, UART_DLM, value >> 8 & 0xff);
330 }
331
332 #ifdef CONFIG_SERIAL_8250_RT288X
333
334 /* Au1x00/RT288x UART hardware has a weird register layout */
335 static const s8 au_io_in_map[8] = {
336          0,     /* UART_RX  */
337          2,     /* UART_IER */
338          3,     /* UART_IIR */
339          5,     /* UART_LCR */
340          6,     /* UART_MCR */
341          7,     /* UART_LSR */
342          8,     /* UART_MSR */
343         -1,     /* UART_SCR (unmapped) */
344 };
345
346 static const s8 au_io_out_map[8] = {
347          1,     /* UART_TX  */
348          2,     /* UART_IER */
349          4,     /* UART_FCR */
350          5,     /* UART_LCR */
351          6,     /* UART_MCR */
352         -1,     /* UART_LSR (unmapped) */
353         -1,     /* UART_MSR (unmapped) */
354         -1,     /* UART_SCR (unmapped) */
355 };
356
357 unsigned int au_serial_in(struct uart_port *p, int offset)
358 {
359         if (offset >= ARRAY_SIZE(au_io_in_map))
360                 return UINT_MAX;
361         offset = au_io_in_map[offset];
362         if (offset < 0)
363                 return UINT_MAX;
364         return __raw_readl(p->membase + (offset << p->regshift));
365 }
366
367 void au_serial_out(struct uart_port *p, int offset, int value)
368 {
369         if (offset >= ARRAY_SIZE(au_io_out_map))
370                 return;
371         offset = au_io_out_map[offset];
372         if (offset < 0)
373                 return;
374         __raw_writel(value, p->membase + (offset << p->regshift));
375 }
376
377 /* Au1x00 haven't got a standard divisor latch */
378 static int au_serial_dl_read(struct uart_8250_port *up)
379 {
380         return __raw_readl(up->port.membase + 0x28);
381 }
382
383 static void au_serial_dl_write(struct uart_8250_port *up, int value)
384 {
385         __raw_writel(value, up->port.membase + 0x28);
386 }
387
388 #endif
389
390 static unsigned int hub6_serial_in(struct uart_port *p, int offset)
391 {
392         offset = offset << p->regshift;
393         outb(p->hub6 - 1 + offset, p->iobase);
394         return inb(p->iobase + 1);
395 }
396
397 static void hub6_serial_out(struct uart_port *p, int offset, int value)
398 {
399         offset = offset << p->regshift;
400         outb(p->hub6 - 1 + offset, p->iobase);
401         outb(value, p->iobase + 1);
402 }
403
404 static unsigned int mem_serial_in(struct uart_port *p, int offset)
405 {
406         offset = offset << p->regshift;
407         return readb(p->membase + offset);
408 }
409
410 static void mem_serial_out(struct uart_port *p, int offset, int value)
411 {
412         offset = offset << p->regshift;
413         writeb(value, p->membase + offset);
414 }
415
416 static void mem16_serial_out(struct uart_port *p, int offset, int value)
417 {
418         offset = offset << p->regshift;
419         writew(value, p->membase + offset);
420 }
421
422 static unsigned int mem16_serial_in(struct uart_port *p, int offset)
423 {
424         offset = offset << p->regshift;
425         return readw(p->membase + offset);
426 }
427
428 static void mem32_serial_out(struct uart_port *p, int offset, int value)
429 {
430         offset = offset << p->regshift;
431         writel(value, p->membase + offset);
432 }
433
434 static unsigned int mem32_serial_in(struct uart_port *p, int offset)
435 {
436         offset = offset << p->regshift;
437         return readl(p->membase + offset);
438 }
439
440 static void mem32be_serial_out(struct uart_port *p, int offset, int value)
441 {
442         offset = offset << p->regshift;
443         iowrite32be(value, p->membase + offset);
444 }
445
446 static unsigned int mem32be_serial_in(struct uart_port *p, int offset)
447 {
448         offset = offset << p->regshift;
449         return ioread32be(p->membase + offset);
450 }
451
452 static unsigned int io_serial_in(struct uart_port *p, int offset)
453 {
454         offset = offset << p->regshift;
455         return inb(p->iobase + offset);
456 }
457
458 static void io_serial_out(struct uart_port *p, int offset, int value)
459 {
460         offset = offset << p->regshift;
461         outb(value, p->iobase + offset);
462 }
463
464 static int serial8250_default_handle_irq(struct uart_port *port);
465
466 static void set_io_from_upio(struct uart_port *p)
467 {
468         struct uart_8250_port *up = up_to_u8250p(p);
469
470         up->dl_read = default_serial_dl_read;
471         up->dl_write = default_serial_dl_write;
472
473         switch (p->iotype) {
474         case UPIO_HUB6:
475                 p->serial_in = hub6_serial_in;
476                 p->serial_out = hub6_serial_out;
477                 break;
478
479         case UPIO_MEM:
480                 p->serial_in = mem_serial_in;
481                 p->serial_out = mem_serial_out;
482                 break;
483
484         case UPIO_MEM16:
485                 p->serial_in = mem16_serial_in;
486                 p->serial_out = mem16_serial_out;
487                 break;
488
489         case UPIO_MEM32:
490                 p->serial_in = mem32_serial_in;
491                 p->serial_out = mem32_serial_out;
492                 break;
493
494         case UPIO_MEM32BE:
495                 p->serial_in = mem32be_serial_in;
496                 p->serial_out = mem32be_serial_out;
497                 break;
498
499 #ifdef CONFIG_SERIAL_8250_RT288X
500         case UPIO_AU:
501                 p->serial_in = au_serial_in;
502                 p->serial_out = au_serial_out;
503                 up->dl_read = au_serial_dl_read;
504                 up->dl_write = au_serial_dl_write;
505                 break;
506 #endif
507
508         default:
509                 p->serial_in = io_serial_in;
510                 p->serial_out = io_serial_out;
511                 break;
512         }
513         /* Remember loaded iotype */
514         up->cur_iotype = p->iotype;
515         p->handle_irq = serial8250_default_handle_irq;
516 }
517
518 static void
519 serial_port_out_sync(struct uart_port *p, int offset, int value)
520 {
521         switch (p->iotype) {
522         case UPIO_MEM:
523         case UPIO_MEM16:
524         case UPIO_MEM32:
525         case UPIO_MEM32BE:
526         case UPIO_AU:
527                 p->serial_out(p, offset, value);
528                 p->serial_in(p, UART_LCR);      /* safe, no side-effects */
529                 break;
530         default:
531                 p->serial_out(p, offset, value);
532         }
533 }
534
535 /*
536  * For the 16C950
537  */
538 static void serial_icr_write(struct uart_8250_port *up, int offset, int value)
539 {
540         serial_out(up, UART_SCR, offset);
541         serial_out(up, UART_ICR, value);
542 }
543
544 static unsigned int serial_icr_read(struct uart_8250_port *up, int offset)
545 {
546         unsigned int value;
547
548         serial_icr_write(up, UART_ACR, up->acr | UART_ACR_ICRRD);
549         serial_out(up, UART_SCR, offset);
550         value = serial_in(up, UART_ICR);
551         serial_icr_write(up, UART_ACR, up->acr);
552
553         return value;
554 }
555
556 /*
557  * FIFO support.
558  */
559 static void serial8250_clear_fifos(struct uart_8250_port *p)
560 {
561         if (p->capabilities & UART_CAP_FIFO) {
562                 serial_out(p, UART_FCR, UART_FCR_ENABLE_FIFO);
563                 serial_out(p, UART_FCR, UART_FCR_ENABLE_FIFO |
564                                UART_FCR_CLEAR_RCVR | UART_FCR_CLEAR_XMIT);
565                 serial_out(p, UART_FCR, 0);
566         }
567 }
568
569 static inline void serial8250_em485_rts_after_send(struct uart_8250_port *p)
570 {
571         unsigned char mcr = serial8250_in_MCR(p);
572
573         if (p->port.rs485.flags & SER_RS485_RTS_AFTER_SEND)
574                 mcr |= UART_MCR_RTS;
575         else
576                 mcr &= ~UART_MCR_RTS;
577         serial8250_out_MCR(p, mcr);
578 }
579
580 static enum hrtimer_restart serial8250_em485_handle_start_tx(struct hrtimer *t);
581 static enum hrtimer_restart serial8250_em485_handle_stop_tx(struct hrtimer *t);
582
583 void serial8250_clear_and_reinit_fifos(struct uart_8250_port *p)
584 {
585         serial8250_clear_fifos(p);
586         serial_out(p, UART_FCR, p->fcr);
587 }
588 EXPORT_SYMBOL_GPL(serial8250_clear_and_reinit_fifos);
589
590 void serial8250_rpm_get(struct uart_8250_port *p)
591 {
592         if (!(p->capabilities & UART_CAP_RPM))
593                 return;
594         pm_runtime_get_sync(p->port.dev);
595 }
596 EXPORT_SYMBOL_GPL(serial8250_rpm_get);
597
598 void serial8250_rpm_put(struct uart_8250_port *p)
599 {
600         if (!(p->capabilities & UART_CAP_RPM))
601                 return;
602         pm_runtime_mark_last_busy(p->port.dev);
603         pm_runtime_put_autosuspend(p->port.dev);
604 }
605 EXPORT_SYMBOL_GPL(serial8250_rpm_put);
606
607 /**
608  *      serial8250_em485_init() - put uart_8250_port into rs485 emulating
609  *      @p:     uart_8250_port port instance
610  *
611  *      The function is used to start rs485 software emulating on the
612  *      &struct uart_8250_port* @p. Namely, RTS is switched before/after
613  *      transmission. The function is idempotent, so it is safe to call it
614  *      multiple times.
615  *
616  *      The caller MUST enable interrupt on empty shift register before
617  *      calling serial8250_em485_init(). This interrupt is not a part of
618  *      8250 standard, but implementation defined.
619  *
620  *      The function is supposed to be called from .rs485_config callback
621  *      or from any other callback protected with p->port.lock spinlock.
622  *
623  *      See also serial8250_em485_destroy()
624  *
625  *      Return 0 - success, -errno - otherwise
626  */
627 int serial8250_em485_init(struct uart_8250_port *p)
628 {
629         if (p->em485)
630                 return 0;
631
632         p->em485 = kmalloc(sizeof(struct uart_8250_em485), GFP_ATOMIC);
633         if (!p->em485)
634                 return -ENOMEM;
635
636         hrtimer_init(&p->em485->stop_tx_timer, CLOCK_MONOTONIC,
637                      HRTIMER_MODE_REL);
638         hrtimer_init(&p->em485->start_tx_timer, CLOCK_MONOTONIC,
639                      HRTIMER_MODE_REL);
640         p->em485->stop_tx_timer.function = &serial8250_em485_handle_stop_tx;
641         p->em485->start_tx_timer.function = &serial8250_em485_handle_start_tx;
642         p->em485->port = p;
643         p->em485->active_timer = NULL;
644         serial8250_em485_rts_after_send(p);
645
646         return 0;
647 }
648 EXPORT_SYMBOL_GPL(serial8250_em485_init);
649
650 /**
651  *      serial8250_em485_destroy() - put uart_8250_port into normal state
652  *      @p:     uart_8250_port port instance
653  *
654  *      The function is used to stop rs485 software emulating on the
655  *      &struct uart_8250_port* @p. The function is idempotent, so it is safe to
656  *      call it multiple times.
657  *
658  *      The function is supposed to be called from .rs485_config callback
659  *      or from any other callback protected with p->port.lock spinlock.
660  *
661  *      See also serial8250_em485_init()
662  */
663 void serial8250_em485_destroy(struct uart_8250_port *p)
664 {
665         if (!p->em485)
666                 return;
667
668         hrtimer_cancel(&p->em485->start_tx_timer);
669         hrtimer_cancel(&p->em485->stop_tx_timer);
670
671         kfree(p->em485);
672         p->em485 = NULL;
673 }
674 EXPORT_SYMBOL_GPL(serial8250_em485_destroy);
675
676 /*
677  * These two wrappers ensure that enable_runtime_pm_tx() can be called more than
678  * once and disable_runtime_pm_tx() will still disable RPM because the fifo is
679  * empty and the HW can idle again.
680  */
681 void serial8250_rpm_get_tx(struct uart_8250_port *p)
682 {
683         unsigned char rpm_active;
684
685         if (!(p->capabilities & UART_CAP_RPM))
686                 return;
687
688         rpm_active = xchg(&p->rpm_tx_active, 1);
689         if (rpm_active)
690                 return;
691         pm_runtime_get_sync(p->port.dev);
692 }
693 EXPORT_SYMBOL_GPL(serial8250_rpm_get_tx);
694
695 void serial8250_rpm_put_tx(struct uart_8250_port *p)
696 {
697         unsigned char rpm_active;
698
699         if (!(p->capabilities & UART_CAP_RPM))
700                 return;
701
702         rpm_active = xchg(&p->rpm_tx_active, 0);
703         if (!rpm_active)
704                 return;
705         pm_runtime_mark_last_busy(p->port.dev);
706         pm_runtime_put_autosuspend(p->port.dev);
707 }
708 EXPORT_SYMBOL_GPL(serial8250_rpm_put_tx);
709
710 /*
711  * IER sleep support.  UARTs which have EFRs need the "extended
712  * capability" bit enabled.  Note that on XR16C850s, we need to
713  * reset LCR to write to IER.
714  */
715 static void serial8250_set_sleep(struct uart_8250_port *p, int sleep)
716 {
717         unsigned char lcr = 0, efr = 0;
718         /*
719          * Exar UARTs have a SLEEP register that enables or disables
720          * each UART to enter sleep mode separately.  On the XR17V35x the
721          * register is accessible to each UART at the UART_EXAR_SLEEP
722          * offset but the UART channel may only write to the corresponding
723          * bit.
724          */
725         serial8250_rpm_get(p);
726         if ((p->port.type == PORT_XR17V35X) ||
727            (p->port.type == PORT_XR17D15X)) {
728                 serial_out(p, UART_EXAR_SLEEP, sleep ? 0xff : 0);
729                 goto out;
730         }
731
732         if (p->capabilities & UART_CAP_SLEEP) {
733                 if (p->capabilities & UART_CAP_EFR) {
734                         lcr = serial_in(p, UART_LCR);
735                         efr = serial_in(p, UART_EFR);
736                         serial_out(p, UART_LCR, UART_LCR_CONF_MODE_B);
737                         serial_out(p, UART_EFR, UART_EFR_ECB);
738                         serial_out(p, UART_LCR, 0);
739                 }
740                 serial_out(p, UART_IER, sleep ? UART_IERX_SLEEP : 0);
741                 if (p->capabilities & UART_CAP_EFR) {
742                         serial_out(p, UART_LCR, UART_LCR_CONF_MODE_B);
743                         serial_out(p, UART_EFR, efr);
744                         serial_out(p, UART_LCR, lcr);
745                 }
746         }
747 out:
748         serial8250_rpm_put(p);
749 }
750
751 #ifdef CONFIG_SERIAL_8250_RSA
752 /*
753  * Attempts to turn on the RSA FIFO.  Returns zero on failure.
754  * We set the port uart clock rate if we succeed.
755  */
756 static int __enable_rsa(struct uart_8250_port *up)
757 {
758         unsigned char mode;
759         int result;
760
761         mode = serial_in(up, UART_RSA_MSR);
762         result = mode & UART_RSA_MSR_FIFO;
763
764         if (!result) {
765                 serial_out(up, UART_RSA_MSR, mode | UART_RSA_MSR_FIFO);
766                 mode = serial_in(up, UART_RSA_MSR);
767                 result = mode & UART_RSA_MSR_FIFO;
768         }
769
770         if (result)
771                 up->port.uartclk = SERIAL_RSA_BAUD_BASE * 16;
772
773         return result;
774 }
775
776 static void enable_rsa(struct uart_8250_port *up)
777 {
778         if (up->port.type == PORT_RSA) {
779                 if (up->port.uartclk != SERIAL_RSA_BAUD_BASE * 16) {
780                         spin_lock_irq(&up->port.lock);
781                         __enable_rsa(up);
782                         spin_unlock_irq(&up->port.lock);
783                 }
784                 if (up->port.uartclk == SERIAL_RSA_BAUD_BASE * 16)
785                         serial_out(up, UART_RSA_FRR, 0);
786         }
787 }
788
789 /*
790  * Attempts to turn off the RSA FIFO.  Returns zero on failure.
791  * It is unknown why interrupts were disabled in here.  However,
792  * the caller is expected to preserve this behaviour by grabbing
793  * the spinlock before calling this function.
794  */
795 static void disable_rsa(struct uart_8250_port *up)
796 {
797         unsigned char mode;
798         int result;
799
800         if (up->port.type == PORT_RSA &&
801             up->port.uartclk == SERIAL_RSA_BAUD_BASE * 16) {
802                 spin_lock_irq(&up->port.lock);
803
804                 mode = serial_in(up, UART_RSA_MSR);
805                 result = !(mode & UART_RSA_MSR_FIFO);
806
807                 if (!result) {
808                         serial_out(up, UART_RSA_MSR, mode & ~UART_RSA_MSR_FIFO);
809                         mode = serial_in(up, UART_RSA_MSR);
810                         result = !(mode & UART_RSA_MSR_FIFO);
811                 }
812
813                 if (result)
814                         up->port.uartclk = SERIAL_RSA_BAUD_BASE_LO * 16;
815                 spin_unlock_irq(&up->port.lock);
816         }
817 }
818 #endif /* CONFIG_SERIAL_8250_RSA */
819
820 /*
821  * This is a quickie test to see how big the FIFO is.
822  * It doesn't work at all the time, more's the pity.
823  */
824 static int size_fifo(struct uart_8250_port *up)
825 {
826         unsigned char old_fcr, old_mcr, old_lcr;
827         unsigned short old_dl;
828         int count;
829
830         old_lcr = serial_in(up, UART_LCR);
831         serial_out(up, UART_LCR, 0);
832         old_fcr = serial_in(up, UART_FCR);
833         old_mcr = serial8250_in_MCR(up);
834         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO |
835                     UART_FCR_CLEAR_RCVR | UART_FCR_CLEAR_XMIT);
836         serial8250_out_MCR(up, UART_MCR_LOOP);
837         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_A);
838         old_dl = serial_dl_read(up);
839         serial_dl_write(up, 0x0001);
840         serial_out(up, UART_LCR, 0x03);
841         for (count = 0; count < 256; count++)
842                 serial_out(up, UART_TX, count);
843         mdelay(20);/* FIXME - schedule_timeout */
844         for (count = 0; (serial_in(up, UART_LSR) & UART_LSR_DR) &&
845              (count < 256); count++)
846                 serial_in(up, UART_RX);
847         serial_out(up, UART_FCR, old_fcr);
848         serial8250_out_MCR(up, old_mcr);
849         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_A);
850         serial_dl_write(up, old_dl);
851         serial_out(up, UART_LCR, old_lcr);
852
853         return count;
854 }
855
856 /*
857  * Read UART ID using the divisor method - set DLL and DLM to zero
858  * and the revision will be in DLL and device type in DLM.  We
859  * preserve the device state across this.
860  */
861 static unsigned int autoconfig_read_divisor_id(struct uart_8250_port *p)
862 {
863         unsigned char old_lcr;
864         unsigned int id, old_dl;
865
866         old_lcr = serial_in(p, UART_LCR);
867         serial_out(p, UART_LCR, UART_LCR_CONF_MODE_A);
868         old_dl = serial_dl_read(p);
869         serial_dl_write(p, 0);
870         id = serial_dl_read(p);
871         serial_dl_write(p, old_dl);
872
873         serial_out(p, UART_LCR, old_lcr);
874
875         return id;
876 }
877
878 /*
879  * This is a helper routine to autodetect StarTech/Exar/Oxsemi UART's.
880  * When this function is called we know it is at least a StarTech
881  * 16650 V2, but it might be one of several StarTech UARTs, or one of
882  * its clones.  (We treat the broken original StarTech 16650 V1 as a
883  * 16550, and why not?  Startech doesn't seem to even acknowledge its
884  * existence.)
885  *
886  * What evil have men's minds wrought...
887  */
888 static void autoconfig_has_efr(struct uart_8250_port *up)
889 {
890         unsigned int id1, id2, id3, rev;
891
892         /*
893          * Everything with an EFR has SLEEP
894          */
895         up->capabilities |= UART_CAP_EFR | UART_CAP_SLEEP;
896
897         /*
898          * First we check to see if it's an Oxford Semiconductor UART.
899          *
900          * If we have to do this here because some non-National
901          * Semiconductor clone chips lock up if you try writing to the
902          * LSR register (which serial_icr_read does)
903          */
904
905         /*
906          * Check for Oxford Semiconductor 16C950.
907          *
908          * EFR [4] must be set else this test fails.
909          *
910          * This shouldn't be necessary, but Mike Hudson (Exoray@isys.ca)
911          * claims that it's needed for 952 dual UART's (which are not
912          * recommended for new designs).
913          */
914         up->acr = 0;
915         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_B);
916         serial_out(up, UART_EFR, UART_EFR_ECB);
917         serial_out(up, UART_LCR, 0x00);
918         id1 = serial_icr_read(up, UART_ID1);
919         id2 = serial_icr_read(up, UART_ID2);
920         id3 = serial_icr_read(up, UART_ID3);
921         rev = serial_icr_read(up, UART_REV);
922
923         DEBUG_AUTOCONF("950id=%02x:%02x:%02x:%02x ", id1, id2, id3, rev);
924
925         if (id1 == 0x16 && id2 == 0xC9 &&
926             (id3 == 0x50 || id3 == 0x52 || id3 == 0x54)) {
927                 up->port.type = PORT_16C950;
928
929                 /*
930                  * Enable work around for the Oxford Semiconductor 952 rev B
931                  * chip which causes it to seriously miscalculate baud rates
932                  * when DLL is 0.
933                  */
934                 if (id3 == 0x52 && rev == 0x01)
935                         up->bugs |= UART_BUG_QUOT;
936                 return;
937         }
938
939         /*
940          * We check for a XR16C850 by setting DLL and DLM to 0, and then
941          * reading back DLL and DLM.  The chip type depends on the DLM
942          * value read back:
943          *  0x10 - XR16C850 and the DLL contains the chip revision.
944          *  0x12 - XR16C2850.
945          *  0x14 - XR16C854.
946          */
947         id1 = autoconfig_read_divisor_id(up);
948         DEBUG_AUTOCONF("850id=%04x ", id1);
949
950         id2 = id1 >> 8;
951         if (id2 == 0x10 || id2 == 0x12 || id2 == 0x14) {
952                 up->port.type = PORT_16850;
953                 return;
954         }
955
956         /*
957          * It wasn't an XR16C850.
958          *
959          * We distinguish between the '654 and the '650 by counting
960          * how many bytes are in the FIFO.  I'm using this for now,
961          * since that's the technique that was sent to me in the
962          * serial driver update, but I'm not convinced this works.
963          * I've had problems doing this in the past.  -TYT
964          */
965         if (size_fifo(up) == 64)
966                 up->port.type = PORT_16654;
967         else
968                 up->port.type = PORT_16650V2;
969 }
970
971 /*
972  * We detected a chip without a FIFO.  Only two fall into
973  * this category - the original 8250 and the 16450.  The
974  * 16450 has a scratch register (accessible with LCR=0)
975  */
976 static void autoconfig_8250(struct uart_8250_port *up)
977 {
978         unsigned char scratch, status1, status2;
979
980         up->port.type = PORT_8250;
981
982         scratch = serial_in(up, UART_SCR);
983         serial_out(up, UART_SCR, 0xa5);
984         status1 = serial_in(up, UART_SCR);
985         serial_out(up, UART_SCR, 0x5a);
986         status2 = serial_in(up, UART_SCR);
987         serial_out(up, UART_SCR, scratch);
988
989         if (status1 == 0xa5 && status2 == 0x5a)
990                 up->port.type = PORT_16450;
991 }
992
993 static int broken_efr(struct uart_8250_port *up)
994 {
995         /*
996          * Exar ST16C2550 "A2" devices incorrectly detect as
997          * having an EFR, and report an ID of 0x0201.  See
998          * http://linux.derkeiler.com/Mailing-Lists/Kernel/2004-11/4812.html
999          */
1000         if (autoconfig_read_divisor_id(up) == 0x0201 && size_fifo(up) == 16)
1001                 return 1;
1002
1003         return 0;
1004 }
1005
1006 /*
1007  * We know that the chip has FIFOs.  Does it have an EFR?  The
1008  * EFR is located in the same register position as the IIR and
1009  * we know the top two bits of the IIR are currently set.  The
1010  * EFR should contain zero.  Try to read the EFR.
1011  */
1012 static void autoconfig_16550a(struct uart_8250_port *up)
1013 {
1014         unsigned char status1, status2;
1015         unsigned int iersave;
1016
1017         up->port.type = PORT_16550A;
1018         up->capabilities |= UART_CAP_FIFO;
1019
1020         /*
1021          * XR17V35x UARTs have an extra divisor register, DLD
1022          * that gets enabled with when DLAB is set which will
1023          * cause the device to incorrectly match and assign
1024          * port type to PORT_16650.  The EFR for this UART is
1025          * found at offset 0x09. Instead check the Deice ID (DVID)
1026          * register for a 2, 4 or 8 port UART.
1027          */
1028         if (up->port.flags & UPF_EXAR_EFR) {
1029                 status1 = serial_in(up, UART_EXAR_DVID);
1030                 if (status1 == 0x82 || status1 == 0x84 || status1 == 0x88) {
1031                         DEBUG_AUTOCONF("Exar XR17V35x ");
1032                         up->port.type = PORT_XR17V35X;
1033                         up->capabilities |= UART_CAP_AFE | UART_CAP_EFR |
1034                                                 UART_CAP_SLEEP;
1035
1036                         return;
1037                 }
1038
1039         }
1040
1041         /*
1042          * Check for presence of the EFR when DLAB is set.
1043          * Only ST16C650V1 UARTs pass this test.
1044          */
1045         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_A);
1046         if (serial_in(up, UART_EFR) == 0) {
1047                 serial_out(up, UART_EFR, 0xA8);
1048                 if (serial_in(up, UART_EFR) != 0) {
1049                         DEBUG_AUTOCONF("EFRv1 ");
1050                         up->port.type = PORT_16650;
1051                         up->capabilities |= UART_CAP_EFR | UART_CAP_SLEEP;
1052                 } else {
1053                         serial_out(up, UART_LCR, 0);
1054                         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO |
1055                                    UART_FCR7_64BYTE);
1056                         status1 = serial_in(up, UART_IIR) >> 5;
1057                         serial_out(up, UART_FCR, 0);
1058                         serial_out(up, UART_LCR, 0);
1059
1060                         if (status1 == 7)
1061                                 up->port.type = PORT_16550A_FSL64;
1062                         else
1063                                 DEBUG_AUTOCONF("Motorola 8xxx DUART ");
1064                 }
1065                 serial_out(up, UART_EFR, 0);
1066                 return;
1067         }
1068
1069         /*
1070          * Maybe it requires 0xbf to be written to the LCR.
1071          * (other ST16C650V2 UARTs, TI16C752A, etc)
1072          */
1073         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_B);
1074         if (serial_in(up, UART_EFR) == 0 && !broken_efr(up)) {
1075                 DEBUG_AUTOCONF("EFRv2 ");
1076                 autoconfig_has_efr(up);
1077                 return;
1078         }
1079
1080         /*
1081          * Check for a National Semiconductor SuperIO chip.
1082          * Attempt to switch to bank 2, read the value of the LOOP bit
1083          * from EXCR1. Switch back to bank 0, change it in MCR. Then
1084          * switch back to bank 2, read it from EXCR1 again and check
1085          * it's changed. If so, set baud_base in EXCR2 to 921600. -- dwmw2
1086          */
1087         serial_out(up, UART_LCR, 0);
1088         status1 = serial8250_in_MCR(up);
1089         serial_out(up, UART_LCR, 0xE0);
1090         status2 = serial_in(up, 0x02); /* EXCR1 */
1091
1092         if (!((status2 ^ status1) & UART_MCR_LOOP)) {
1093                 serial_out(up, UART_LCR, 0);
1094                 serial8250_out_MCR(up, status1 ^ UART_MCR_LOOP);
1095                 serial_out(up, UART_LCR, 0xE0);
1096                 status2 = serial_in(up, 0x02); /* EXCR1 */
1097                 serial_out(up, UART_LCR, 0);
1098                 serial8250_out_MCR(up, status1);
1099
1100                 if ((status2 ^ status1) & UART_MCR_LOOP) {
1101                         unsigned short quot;
1102
1103                         serial_out(up, UART_LCR, 0xE0);
1104
1105                         quot = serial_dl_read(up);
1106                         quot <<= 3;
1107
1108                         if (ns16550a_goto_highspeed(up))
1109                                 serial_dl_write(up, quot);
1110
1111                         serial_out(up, UART_LCR, 0);
1112
1113                         up->port.uartclk = 921600*16;
1114                         up->port.type = PORT_NS16550A;
1115                         up->capabilities |= UART_NATSEMI;
1116                         return;
1117                 }
1118         }
1119
1120         /*
1121          * No EFR.  Try to detect a TI16750, which only sets bit 5 of
1122          * the IIR when 64 byte FIFO mode is enabled when DLAB is set.
1123          * Try setting it with and without DLAB set.  Cheap clones
1124          * set bit 5 without DLAB set.
1125          */
1126         serial_out(up, UART_LCR, 0);
1127         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO | UART_FCR7_64BYTE);
1128         status1 = serial_in(up, UART_IIR) >> 5;
1129         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO);
1130         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_A);
1131         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO | UART_FCR7_64BYTE);
1132         status2 = serial_in(up, UART_IIR) >> 5;
1133         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO);
1134         serial_out(up, UART_LCR, 0);
1135
1136         DEBUG_AUTOCONF("iir1=%d iir2=%d ", status1, status2);
1137
1138         if (status1 == 6 && status2 == 7) {
1139                 up->port.type = PORT_16750;
1140                 up->capabilities |= UART_CAP_AFE | UART_CAP_SLEEP;
1141                 return;
1142         }
1143
1144         /*
1145          * Try writing and reading the UART_IER_UUE bit (b6).
1146          * If it works, this is probably one of the Xscale platform's
1147          * internal UARTs.
1148          * We're going to explicitly set the UUE bit to 0 before
1149          * trying to write and read a 1 just to make sure it's not
1150          * already a 1 and maybe locked there before we even start start.
1151          */
1152         iersave = serial_in(up, UART_IER);
1153         serial_out(up, UART_IER, iersave & ~UART_IER_UUE);
1154         if (!(serial_in(up, UART_IER) & UART_IER_UUE)) {
1155                 /*
1156                  * OK it's in a known zero state, try writing and reading
1157                  * without disturbing the current state of the other bits.
1158                  */
1159                 serial_out(up, UART_IER, iersave | UART_IER_UUE);
1160                 if (serial_in(up, UART_IER) & UART_IER_UUE) {
1161                         /*
1162                          * It's an Xscale.
1163                          * We'll leave the UART_IER_UUE bit set to 1 (enabled).
1164                          */
1165                         DEBUG_AUTOCONF("Xscale ");
1166                         up->port.type = PORT_XSCALE;
1167                         up->capabilities |= UART_CAP_UUE | UART_CAP_RTOIE;
1168                         return;
1169                 }
1170         } else {
1171                 /*
1172                  * If we got here we couldn't force the IER_UUE bit to 0.
1173                  * Log it and continue.
1174                  */
1175                 DEBUG_AUTOCONF("Couldn't force IER_UUE to 0 ");
1176         }
1177         serial_out(up, UART_IER, iersave);
1178
1179         /*
1180          * Exar uarts have EFR in a weird location
1181          */
1182         if (up->port.flags & UPF_EXAR_EFR) {
1183                 DEBUG_AUTOCONF("Exar XR17D15x ");
1184                 up->port.type = PORT_XR17D15X;
1185                 up->capabilities |= UART_CAP_AFE | UART_CAP_EFR |
1186                                     UART_CAP_SLEEP;
1187
1188                 return;
1189         }
1190
1191         /*
1192          * We distinguish between 16550A and U6 16550A by counting
1193          * how many bytes are in the FIFO.
1194          */
1195         if (up->port.type == PORT_16550A && size_fifo(up) == 64) {
1196                 up->port.type = PORT_U6_16550A;
1197                 up->capabilities |= UART_CAP_AFE;
1198         }
1199 }
1200
1201 /*
1202  * This routine is called by rs_init() to initialize a specific serial
1203  * port.  It determines what type of UART chip this serial port is
1204  * using: 8250, 16450, 16550, 16550A.  The important question is
1205  * whether or not this UART is a 16550A or not, since this will
1206  * determine whether or not we can use its FIFO features or not.
1207  */
1208 static void autoconfig(struct uart_8250_port *up)
1209 {
1210         unsigned char status1, scratch, scratch2, scratch3;
1211         unsigned char save_lcr, save_mcr;
1212         struct uart_port *port = &up->port;
1213         unsigned long flags;
1214         unsigned int old_capabilities;
1215
1216         if (!port->iobase && !port->mapbase && !port->membase)
1217                 return;
1218
1219         DEBUG_AUTOCONF("ttyS%d: autoconf (0x%04lx, 0x%p): ",
1220                        serial_index(port), port->iobase, port->membase);
1221
1222         /*
1223          * We really do need global IRQs disabled here - we're going to
1224          * be frobbing the chips IRQ enable register to see if it exists.
1225          */
1226         spin_lock_irqsave(&port->lock, flags);
1227
1228         up->capabilities = 0;
1229         up->bugs = 0;
1230
1231         if (!(port->flags & UPF_BUGGY_UART)) {
1232                 /*
1233                  * Do a simple existence test first; if we fail this,
1234                  * there's no point trying anything else.
1235                  *
1236                  * 0x80 is used as a nonsense port to prevent against
1237                  * false positives due to ISA bus float.  The
1238                  * assumption is that 0x80 is a non-existent port;
1239                  * which should be safe since include/asm/io.h also
1240                  * makes this assumption.
1241                  *
1242                  * Note: this is safe as long as MCR bit 4 is clear
1243                  * and the device is in "PC" mode.
1244                  */
1245                 scratch = serial_in(up, UART_IER);
1246                 serial_out(up, UART_IER, 0);
1247 #ifdef __i386__
1248                 outb(0xff, 0x080);
1249 #endif
1250                 /*
1251                  * Mask out IER[7:4] bits for test as some UARTs (e.g. TL
1252                  * 16C754B) allow only to modify them if an EFR bit is set.
1253                  */
1254                 scratch2 = serial_in(up, UART_IER) & 0x0f;
1255                 serial_out(up, UART_IER, 0x0F);
1256 #ifdef __i386__
1257                 outb(0, 0x080);
1258 #endif
1259                 scratch3 = serial_in(up, UART_IER) & 0x0f;
1260                 serial_out(up, UART_IER, scratch);
1261                 if (scratch2 != 0 || scratch3 != 0x0F) {
1262                         /*
1263                          * We failed; there's nothing here
1264                          */
1265                         spin_unlock_irqrestore(&port->lock, flags);
1266                         DEBUG_AUTOCONF("IER test failed (%02x, %02x) ",
1267                                        scratch2, scratch3);
1268                         goto out;
1269                 }
1270         }
1271
1272         save_mcr = serial8250_in_MCR(up);
1273         save_lcr = serial_in(up, UART_LCR);
1274
1275         /*
1276          * Check to see if a UART is really there.  Certain broken
1277          * internal modems based on the Rockwell chipset fail this
1278          * test, because they apparently don't implement the loopback
1279          * test mode.  So this test is skipped on the COM 1 through
1280          * COM 4 ports.  This *should* be safe, since no board
1281          * manufacturer would be stupid enough to design a board
1282          * that conflicts with COM 1-4 --- we hope!
1283          */
1284         if (!(port->flags & UPF_SKIP_TEST)) {
1285                 serial8250_out_MCR(up, UART_MCR_LOOP | 0x0A);
1286                 status1 = serial_in(up, UART_MSR) & 0xF0;
1287                 serial8250_out_MCR(up, save_mcr);
1288                 if (status1 != 0x90) {
1289                         spin_unlock_irqrestore(&port->lock, flags);
1290                         DEBUG_AUTOCONF("LOOP test failed (%02x) ",
1291                                        status1);
1292                         goto out;
1293                 }
1294         }
1295
1296         /*
1297          * We're pretty sure there's a port here.  Lets find out what
1298          * type of port it is.  The IIR top two bits allows us to find
1299          * out if it's 8250 or 16450, 16550, 16550A or later.  This
1300          * determines what we test for next.
1301          *
1302          * We also initialise the EFR (if any) to zero for later.  The
1303          * EFR occupies the same register location as the FCR and IIR.
1304          */
1305         serial_out(up, UART_LCR, UART_LCR_CONF_MODE_B);
1306         serial_out(up, UART_EFR, 0);
1307         serial_out(up, UART_LCR, 0);
1308
1309         serial_out(up, UART_FCR, UART_FCR_ENABLE_FIFO);
1310
1311         /* Assign this as it is to truncate any bits above 7.  */
1312         scratch = serial_in(up, UART_IIR);
1313
1314         switch (scratch >> 6) {
1315         case 0:
1316                 autoconfig_8250(up);
1317                 break;
1318         case 1:
1319                 port->type = PORT_UNKNOWN;
1320                 break;
1321         case 2:
1322                 port->type = PORT_16550;
1323                 break;
1324         case 3:
1325                 autoconfig_16550a(up);
1326                 break;
1327         }
1328
1329 #ifdef CONFIG_SERIAL_8250_RSA
1330         /*
1331          * Only probe for RSA ports if we got the region.
1332          */
1333         if (port->type == PORT_16550A && up->probe & UART_PROBE_RSA &&
1334             __enable_rsa(up))
1335                 port->type = PORT_RSA;
1336 #endif
1337
1338         serial_out(up, UART_LCR, save_lcr);
1339
1340         port->fifosize = uart_config[up->port.type].fifo_size;
1341         old_capabilities = up->capabilities;
1342         up->capabilities = uart_config[port->type].flags;
1343         up->tx_loadsz = uart_config[port->type].tx_loadsz;
1344
1345         if (port->type == PORT_UNKNOWN)
1346                 goto out_lock;
1347
1348         /*
1349          * Reset the UART.
1350          */
1351 #ifdef CONFIG_SERIAL_8250_RSA
1352         if (port->type == PORT_RSA)
1353                 serial_out(up, UART_RSA_FRR, 0);
1354 #endif
1355         serial8250_out_MCR(up, save_mcr);
1356         serial8250_clear_fifos(up);
1357         serial_in(up, UART_RX);
1358         if (up->capabilities & UART_CAP_UUE)
1359                 serial_out(up, UART_IER, UART_IER_UUE);
1360         else
1361                 serial_out(up, UART_IER, 0);
1362
1363 out_lock:
1364         spin_unlock_irqrestore(&port->lock, flags);
1365
1366         /*
1367          * Check if the device is a Fintek F81216A
1368          */
1369         if (port->type == PORT_16550A && port->iotype == UPIO_PORT)
1370                 fintek_8250_probe(up);
1371
1372         if (up->capabilities != old_capabilities) {
1373                 pr_warn("ttyS%d: detected caps %08x should be %08x\n",
1374                        serial_index(port), old_capabilities,
1375                        up->capabilities);
1376         }
1377 out:
1378         DEBUG_AUTOCONF("iir=%d ", scratch);
1379         DEBUG_AUTOCONF("type=%s\n", uart_config[port->type].name);
1380 }
1381
1382 static void autoconfig_irq(struct uart_8250_port *up)
1383 {
1384         struct uart_port *port = &up->port;
1385         unsigned char save_mcr, save_ier;
1386         unsigned char save_ICP = 0;
1387         unsigned int ICP = 0;
1388         unsigned long irqs;
1389         int irq;
1390
1391         if (port->flags & UPF_FOURPORT) {
1392                 ICP = (port->iobase & 0xfe0) | 0x1f;
1393                 save_ICP = inb_p(ICP);
1394                 outb_p(0x80, ICP);
1395                 inb_p(ICP);
1396         }
1397
1398         if (uart_console(port))
1399                 console_lock();
1400
1401         /* forget possible initially masked and pending IRQ */
1402         probe_irq_off(probe_irq_on());
1403         save_mcr = serial8250_in_MCR(up);
1404         save_ier = serial_in(up, UART_IER);
1405         serial8250_out_MCR(up, UART_MCR_OUT1 | UART_MCR_OUT2);
1406
1407         irqs = probe_irq_on();
1408         serial8250_out_MCR(up, 0);
1409         udelay(10);
1410         if (port->flags & UPF_FOURPORT) {
1411                 serial8250_out_MCR(up, UART_MCR_DTR | UART_MCR_RTS);
1412         } else {
1413                 serial8250_out_MCR(up,
1414                         UART_MCR_DTR | UART_MCR_RTS | UART_MCR_OUT2);
1415         }
1416         serial_out(up, UART_IER, 0x0f); /* enable all intrs */
1417         serial_in(up, UART_LSR);
1418         serial_in(up, UART_RX);
1419         serial_in(up, UART_IIR);
1420         serial_in(up, UART_MSR);
1421         serial_out(up, UART_TX, 0xFF);
1422         udelay(20);
1423         irq = probe_irq_off(irqs);
1424
1425         serial8250_out_MCR(up, save_mcr);
1426         serial_out(up, UART_IER, save_ier);
1427
1428         if (port->flags & UPF_FOURPORT)
1429                 outb_p(save_ICP, ICP);
1430
1431         if (uart_console(port))
1432                 console_unlock();
1433
1434         port->irq = (irq > 0) ? irq : 0;
1435 }
1436
1437 static void serial8250_stop_rx(struct uart_port *port)
1438 {
1439         struct uart_8250_port *up = up_to_u8250p(port);
1440
1441         serial8250_rpm_get(up);
1442
1443         up->ier &= ~(UART_IER_RLSI | UART_IER_RDI);
1444         up->port.read_status_mask &= ~UART_LSR_DR;
1445         serial_port_out(port, UART_IER, up->ier);
1446
1447         serial8250_rpm_put(up);
1448 }
1449
1450 static void __do_stop_tx_rs485(struct uart_8250_port *p)
1451 {
1452         serial8250_em485_rts_after_send(p);
1453
1454         /*
1455          * Empty the RX FIFO, we are not interested in anything
1456          * received during the half-duplex transmission.
1457          * Enable previously disabled RX interrupts.
1458          */
1459         if (!(p->port.rs485.flags & SER_RS485_RX_DURING_TX)) {
1460                 serial8250_clear_and_reinit_fifos(p);
1461
1462                 p->ier |= UART_IER_RLSI | UART_IER_RDI;
1463                 serial_port_out(&p->port, UART_IER, p->ier);
1464         }
1465 }
1466 static enum hrtimer_restart serial8250_em485_handle_stop_tx(struct hrtimer *t)
1467 {
1468         struct uart_8250_em485 *em485;
1469         struct uart_8250_port *p;
1470         unsigned long flags;
1471
1472         em485 = container_of(t, struct uart_8250_em485, stop_tx_timer);
1473         p = em485->port;
1474
1475         serial8250_rpm_get(p);
1476         spin_lock_irqsave(&p->port.lock, flags);
1477         if (em485->active_timer == &em485->stop_tx_timer) {
1478                 __do_stop_tx_rs485(p);
1479                 em485->active_timer = NULL;
1480         }
1481         spin_unlock_irqrestore(&p->port.lock, flags);
1482         serial8250_rpm_put(p);
1483         return HRTIMER_NORESTART;
1484 }
1485
1486 static void start_hrtimer_ms(struct hrtimer *hrt, unsigned long msec)
1487 {
1488         long sec = msec / 1000;
1489         long nsec = (msec % 1000) * 1000000;
1490         ktime_t t = ktime_set(sec, nsec);
1491
1492         hrtimer_start(hrt, t, HRTIMER_MODE_REL);
1493 }
1494
1495 static void __stop_tx_rs485(struct uart_8250_port *p)
1496 {
1497         struct uart_8250_em485 *em485 = p->em485;
1498
1499         /*
1500          * __do_stop_tx_rs485 is going to set RTS according to config
1501          * AND flush RX FIFO if required.
1502          */
1503         if (p->port.rs485.delay_rts_after_send > 0) {
1504                 em485->active_timer = &em485->stop_tx_timer;
1505                 start_hrtimer_ms(&em485->stop_tx_timer,
1506                                    p->port.rs485.delay_rts_after_send);
1507         } else {
1508                 __do_stop_tx_rs485(p);
1509         }
1510 }
1511
1512 static inline void __do_stop_tx(struct uart_8250_port *p)
1513 {
1514         if (p->ier & UART_IER_THRI) {
1515                 p->ier &= ~UART_IER_THRI;
1516                 serial_out(p, UART_IER, p->ier);
1517                 serial8250_rpm_put_tx(p);
1518         }
1519 }
1520
1521 static inline void __stop_tx(struct uart_8250_port *p)
1522 {
1523         struct uart_8250_em485 *em485 = p->em485;
1524
1525         if (em485) {
1526                 unsigned char lsr = serial_in(p, UART_LSR);
1527                 /*
1528                  * To provide required timeing and allow FIFO transfer,
1529                  * __stop_tx_rs485() must be called only when both FIFO and
1530                  * shift register are empty. It is for device driver to enable
1531                  * interrupt on TEMT.
1532                  */
1533                 if ((lsr & BOTH_EMPTY) != BOTH_EMPTY)
1534                         return;
1535
1536                 em485->active_timer = NULL;
1537
1538                 __stop_tx_rs485(p);
1539         }
1540         __do_stop_tx(p);
1541 }
1542
1543 static void serial8250_stop_tx(struct uart_port *port)
1544 {
1545         struct uart_8250_port *up = up_to_u8250p(port);
1546
1547         serial8250_rpm_get(up);
1548         __stop_tx(up);
1549
1550         /*
1551          * We really want to stop the transmitter from sending.
1552          */
1553         if (port->type == PORT_16C950) {
1554                 up->acr |= UART_ACR_TXDIS;
1555                 serial_icr_write(up, UART_ACR, up->acr);
1556         }
1557         serial8250_rpm_put(up);
1558 }
1559
1560 static inline void __start_tx(struct uart_port *port)
1561 {
1562         struct uart_8250_port *up = up_to_u8250p(port);
1563
1564         if (up->dma && !up->dma->tx_dma(up))
1565                 return;
1566
1567         if (!(up->ier & UART_IER_THRI)) {
1568                 up->ier |= UART_IER_THRI;
1569                 serial_port_out(port, UART_IER, up->ier);
1570
1571                 if (up->bugs & UART_BUG_TXEN) {
1572                         unsigned char lsr;
1573
1574                         lsr = serial_in(up, UART_LSR);
1575                         up->lsr_saved_flags |= lsr & LSR_SAVE_FLAGS;
1576                         if (lsr & UART_LSR_THRE)
1577                                 serial8250_tx_chars(up);
1578                 }
1579         }
1580
1581         /*
1582          * Re-enable the transmitter if we disabled it.
1583          */
1584         if (port->type == PORT_16C950 && up->acr & UART_ACR_TXDIS) {
1585                 up->acr &= ~UART_ACR_TXDIS;
1586                 serial_icr_write(up, UART_ACR, up->acr);
1587         }
1588 }
1589
1590 static inline void start_tx_rs485(struct uart_port *port)
1591 {
1592         struct uart_8250_port *up = up_to_u8250p(port);
1593         struct uart_8250_em485 *em485 = up->em485;
1594         unsigned char mcr;
1595
1596         if (!(up->port.rs485.flags & SER_RS485_RX_DURING_TX))
1597                 serial8250_stop_rx(&up->port);
1598
1599         em485->active_timer = NULL;
1600
1601         mcr = serial8250_in_MCR(up);
1602         if (!!(up->port.rs485.flags & SER_RS485_RTS_ON_SEND) !=
1603             !!(mcr & UART_MCR_RTS)) {
1604                 if (up->port.rs485.flags & SER_RS485_RTS_ON_SEND)
1605                         mcr |= UART_MCR_RTS;
1606                 else
1607                         mcr &= ~UART_MCR_RTS;
1608                 serial8250_out_MCR(up, mcr);
1609
1610                 if (up->port.rs485.delay_rts_before_send > 0) {
1611                         em485->active_timer = &em485->start_tx_timer;
1612                         start_hrtimer_ms(&em485->start_tx_timer,
1613                                          up->port.rs485.delay_rts_before_send);
1614                         return;
1615                 }
1616         }
1617
1618         __start_tx(port);
1619 }
1620
1621 static enum hrtimer_restart serial8250_em485_handle_start_tx(struct hrtimer *t)
1622 {
1623         struct uart_8250_em485 *em485;
1624         struct uart_8250_port *p;
1625         unsigned long flags;
1626
1627         em485 = container_of(t, struct uart_8250_em485, start_tx_timer);
1628         p = em485->port;
1629
1630         spin_lock_irqsave(&p->port.lock, flags);
1631         if (em485->active_timer == &em485->start_tx_timer) {
1632                 __start_tx(&p->port);
1633                 em485->active_timer = NULL;
1634         }
1635         spin_unlock_irqrestore(&p->port.lock, flags);
1636         return HRTIMER_NORESTART;
1637 }
1638
1639 static void serial8250_start_tx(struct uart_port *port)
1640 {
1641         struct uart_8250_port *up = up_to_u8250p(port);
1642         struct uart_8250_em485 *em485 = up->em485;
1643
1644         serial8250_rpm_get_tx(up);
1645
1646         if (em485 &&
1647             em485->active_timer == &em485->start_tx_timer)
1648                 return;
1649
1650         if (em485)
1651                 start_tx_rs485(port);
1652         else
1653                 __start_tx(port);
1654 }
1655
1656 static void serial8250_throttle(struct uart_port *port)
1657 {
1658         port->throttle(port);
1659 }
1660
1661 static void serial8250_unthrottle(struct uart_port *port)
1662 {
1663         port->unthrottle(port);
1664 }
1665
1666 static void serial8250_disable_ms(struct uart_port *port)
1667 {
1668         struct uart_8250_port *up = up_to_u8250p(port);
1669
1670         /* no MSR capabilities */
1671         if (up->bugs & UART_BUG_NOMSR)
1672                 return;
1673
1674         up->ier &= ~UART_IER_MSI;
1675         serial_port_out(port, UART_IER, up->ier);
1676 }
1677
1678 static void serial8250_enable_ms(struct uart_port *port)
1679 {
1680         struct uart_8250_port *up = up_to_u8250p(port);
1681
1682         /* no MSR capabilities */
1683         if (up->bugs & UART_BUG_NOMSR)
1684                 return;
1685
1686         up->ier |= UART_IER_MSI;
1687
1688         serial8250_rpm_get(up);
1689         serial_port_out(port, UART_IER, up->ier);
1690         serial8250_rpm_put(up);
1691 }
1692
1693 static void serial8250_read_char(struct uart_8250_port *up, unsigned char lsr)
1694 {
1695         struct uart_port *port = &up->port;
1696         unsigned char ch;
1697         char flag = TTY_NORMAL;
1698
1699         if (likely(lsr & UART_LSR_DR))
1700                 ch = serial_in(up, UART_RX);
1701         else
1702                 /*
1703                  * Intel 82571 has a Serial Over Lan device that will
1704                  * set UART_LSR_BI without setting UART_LSR_DR when
1705                  * it receives a break. To avoid reading from the
1706                  * receive buffer without UART_LSR_DR bit set, we
1707                  * just force the read character to be 0
1708                  */
1709                 ch = 0;
1710
1711         port->icount.rx++;
1712
1713         lsr |= up->lsr_saved_flags;
1714         up->lsr_saved_flags = 0;
1715
1716         if (unlikely(lsr & UART_LSR_BRK_ERROR_BITS)) {
1717                 if (lsr & UART_LSR_BI) {
1718                         lsr &= ~(UART_LSR_FE | UART_LSR_PE);
1719                         port->icount.brk++;
1720                         /*
1721                          * We do the SysRQ and SAK checking
1722                          * here because otherwise the break
1723                          * may get masked by ignore_status_mask
1724                          * or read_status_mask.
1725                          */
1726                         if (uart_handle_break(port))
1727                                 return;
1728                 } else if (lsr & UART_LSR_PE)
1729                         port->icount.parity++;
1730                 else if (lsr & UART_LSR_FE)
1731                         port->icount.frame++;
1732                 if (lsr & UART_LSR_OE)
1733                         port->icount.overrun++;
1734
1735                 /*
1736                  * Mask off conditions which should be ignored.
1737                  */
1738                 lsr &= port->read_status_mask;
1739
1740                 if (lsr & UART_LSR_BI) {
1741                         pr_debug("%s: handling break\n", __func__);
1742                         flag = TTY_BREAK;
1743                 } else if (lsr & UART_LSR_PE)
1744                         flag = TTY_PARITY;
1745                 else if (lsr & UART_LSR_FE)
1746                         flag = TTY_FRAME;
1747         }
1748         if (uart_handle_sysrq_char(port, ch))
1749                 return;
1750
1751         uart_insert_char(port, lsr, UART_LSR_OE, ch, flag);
1752 }
1753
1754 /*
1755  * serial8250_rx_chars: processes according to the passed in LSR
1756  * value, and returns the remaining LSR bits not handled
1757  * by this Rx routine.
1758  */
1759 unsigned char serial8250_rx_chars(struct uart_8250_port *up, unsigned char lsr)
1760 {
1761         struct uart_port *port = &up->port;
1762         int max_count = 256;
1763
1764         do {
1765                 serial8250_read_char(up, lsr);
1766                 if (--max_count == 0)
1767                         break;
1768                 lsr = serial_in(up, UART_LSR);
1769         } while (lsr & (UART_LSR_DR | UART_LSR_BI));
1770
1771         tty_flip_buffer_push(&port->state->port);
1772         return lsr;
1773 }
1774 EXPORT_SYMBOL_GPL(serial8250_rx_chars);
1775
1776 void serial8250_tx_chars(struct uart_8250_port *up)
1777 {
1778         struct uart_port *port = &up->port;
1779         struct circ_buf *xmit = &port->state->xmit;
1780         int count;
1781
1782         if (port->x_char) {
1783                 serial_out(up, UART_TX, port->x_char);
1784                 port->icount.tx++;
1785                 port->x_char = 0;
1786                 return;
1787         }
1788         if (uart_tx_stopped(port)) {
1789                 serial8250_stop_tx(port);
1790                 return;
1791         }
1792         if (uart_circ_empty(xmit)) {
1793                 __stop_tx(up);
1794                 return;
1795         }
1796
1797         count = up->tx_loadsz;
1798         do {
1799                 serial_out(up, UART_TX, xmit->buf[xmit->tail]);
1800                 xmit->tail = (xmit->tail + 1) & (UART_XMIT_SIZE - 1);
1801                 port->icount.tx++;
1802                 if (uart_circ_empty(xmit))
1803                         break;
1804                 if ((up->capabilities & UART_CAP_HFIFO) &&
1805                     (serial_in(up, UART_LSR) & BOTH_EMPTY) != BOTH_EMPTY)
1806                         break;
1807                 /* The BCM2835 MINI UART THRE bit is really a not-full bit. */
1808                 if ((up->capabilities & UART_CAP_MINI) &&
1809                     !(serial_in(up, UART_LSR) & UART_LSR_THRE))
1810                         break;
1811         } while (--count > 0);
1812
1813         if (uart_circ_chars_pending(xmit) < WAKEUP_CHARS)
1814                 uart_write_wakeup(port);
1815
1816         /*
1817          * With RPM enabled, we have to wait until the FIFO is empty before the
1818          * HW can go idle. So we get here once again with empty FIFO and disable
1819          * the interrupt and RPM in __stop_tx()
1820          */
1821         if (uart_circ_empty(xmit) && !(up->capabilities & UART_CAP_RPM))
1822                 __stop_tx(up);
1823 }
1824 EXPORT_SYMBOL_GPL(serial8250_tx_chars);
1825
1826 /* Caller holds uart port lock */
1827 unsigned int serial8250_modem_status(struct uart_8250_port *up)
1828 {
1829         struct uart_port *port = &up->port;
1830         unsigned int status = serial_in(up, UART_MSR);
1831
1832         status |= up->msr_saved_flags;
1833         up->msr_saved_flags = 0;
1834         if (status & UART_MSR_ANY_DELTA && up->ier & UART_IER_MSI &&
1835             port->state != NULL) {
1836                 if (status & UART_MSR_TERI)
1837                         port->icount.rng++;
1838                 if (status & UART_MSR_DDSR)
1839                         port->icount.dsr++;
1840                 if (status & UART_MSR_DDCD)
1841                         uart_handle_dcd_change(port, status & UART_MSR_DCD);
1842                 if (status & UART_MSR_DCTS)
1843                         uart_handle_cts_change(port, status & UART_MSR_CTS);
1844
1845                 wake_up_interruptible(&port->state->port.delta_msr_wait);
1846         }
1847
1848         return status;
1849 }
1850 EXPORT_SYMBOL_GPL(serial8250_modem_status);
1851
1852 static bool handle_rx_dma(struct uart_8250_port *up, unsigned int iir)
1853 {
1854         switch (iir & 0x3f) {
1855         case UART_IIR_RX_TIMEOUT:
1856                 serial8250_rx_dma_flush(up);
1857                 /* fall-through */
1858         case UART_IIR_RLSI:
1859                 return true;
1860         }
1861         return up->dma->rx_dma(up);
1862 }
1863
1864 /*
1865  * This handles the interrupt from one port.
1866  */
1867 int serial8250_handle_irq(struct uart_port *port, unsigned int iir)
1868 {
1869         unsigned char status;
1870         unsigned long flags;
1871         struct uart_8250_port *up = up_to_u8250p(port);
1872         bool skip_rx = false;
1873
1874         if (iir & UART_IIR_NO_INT)
1875                 return 0;
1876
1877         spin_lock_irqsave(&port->lock, flags);
1878
1879         status = serial_port_in(port, UART_LSR);
1880
1881         /*
1882          * If port is stopped and there are no error conditions in the
1883          * FIFO, then don't drain the FIFO, as this may lead to TTY buffer
1884          * overflow. Not servicing, RX FIFO would trigger auto HW flow
1885          * control when FIFO occupancy reaches preset threshold, thus
1886          * halting RX. This only works when auto HW flow control is
1887          * available.
1888          */
1889         if (!(status & (UART_LSR_FIFOE | UART_LSR_BRK_ERROR_BITS)) &&
1890             (port->status & (UPSTAT_AUTOCTS | UPSTAT_AUTORTS)) &&
1891             !(port->read_status_mask & UART_LSR_DR))
1892                 skip_rx = true;
1893
1894         if (status & (UART_LSR_DR | UART_LSR_BI) && !skip_rx) {
1895                 if (!up->dma || handle_rx_dma(up, iir))
1896                         status = serial8250_rx_chars(up, status);
1897         }
1898         serial8250_modem_status(up);
1899         if ((!up->dma || up->dma->tx_err) && (status & UART_LSR_THRE) &&
1900                 (up->ier & UART_IER_THRI))
1901                 serial8250_tx_chars(up);
1902
1903         spin_unlock_irqrestore(&port->lock, flags);
1904         return 1;
1905 }
1906 EXPORT_SYMBOL_GPL(serial8250_handle_irq);
1907
1908 static int serial8250_default_handle_irq(struct uart_port *port)
1909 {
1910         struct uart_8250_port *up = up_to_u8250p(port);
1911         unsigned int iir;
1912         int ret;
1913
1914         serial8250_rpm_get(up);
1915
1916         iir = serial_port_in(port, UART_IIR);
1917         ret = serial8250_handle_irq(port, iir);
1918
1919         serial8250_rpm_put(up);
1920         return ret;
1921 }
1922
1923 /*
1924  * Newer 16550 compatible parts such as the SC16C650 & Altera 16550 Soft IP
1925  * have a programmable TX threshold that triggers the THRE interrupt in
1926  * the IIR register. In this case, the THRE interrupt indicates the FIFO
1927  * has space available. Load it up with tx_loadsz bytes.
1928  */
1929 static int serial8250_tx_threshold_handle_irq(struct uart_port *port)
1930 {
1931         unsigned long flags;
1932         unsigned int iir = serial_port_in(port, UART_IIR);
1933
1934         /* TX Threshold IRQ triggered so load up FIFO */
1935         if ((iir & UART_IIR_ID) == UART_IIR_THRI) {
1936                 struct uart_8250_port *up = up_to_u8250p(port);
1937
1938                 spin_lock_irqsave(&port->lock, flags);
1939                 serial8250_tx_chars(up);
1940                 spin_unlock_irqrestore(&port->lock, flags);
1941         }
1942
1943         iir = serial_port_in(port, UART_IIR);
1944         return serial8250_handle_irq(port, iir);
1945 }
1946
1947 static unsigned int serial8250_tx_empty(struct uart_port *port)
1948 {
1949         struct uart_8250_port *up = up_to_u8250p(port);
1950         unsigned long flags;
1951         unsigned int lsr;
1952
1953         serial8250_rpm_get(up);
1954
1955         spin_lock_irqsave(&port->lock, flags);
1956         lsr = serial_port_in(port, UART_LSR);
1957         up->lsr_saved_flags |= lsr & LSR_SAVE_FLAGS;
1958         spin_unlock_irqrestore(&port->lock, flags);
1959
1960         serial8250_rpm_put(up);
1961
1962         return (lsr & BOTH_EMPTY) == BOTH_EMPTY ? TIOCSER_TEMT : 0;
1963 }
1964
1965 unsigned int serial8250_do_get_mctrl(struct uart_port *port)
1966 {
1967         struct uart_8250_port *up = up_to_u8250p(port);
1968         unsigned int status;
1969         unsigned int ret;
1970
1971         serial8250_rpm_get(up);
1972         status = serial8250_modem_status(up);
1973         serial8250_rpm_put(up);
1974
1975         ret = 0;
1976         if (status & UART_MSR_DCD)
1977                 ret |= TIOCM_CAR;
1978         if (status & UART_MSR_RI)
1979                 ret |= TIOCM_RNG;
1980         if (status & UART_MSR_DSR)
1981                 ret |= TIOCM_DSR;
1982         if (status & UART_MSR_CTS)
1983                 ret |= TIOCM_CTS;
1984         return ret;
1985 }
1986 EXPORT_SYMBOL_GPL(serial8250_do_get_mctrl);
1987
1988 static unsigned int serial8250_get_mctrl(struct uart_port *port)
1989 {
1990         if (port->get_mctrl)
1991                 return port->get_mctrl(port);
1992         return serial8250_do_get_mctrl(port);
1993 }
1994
1995 void serial8250_do_set_mctrl(struct uart_port *port, unsigned int mctrl)
1996 {
1997         struct uart_8250_port *up = up_to_u8250p(port);
1998         unsigned char mcr = 0;
1999
2000         if (mctrl & TIOCM_RTS)
2001                 mcr |= UART_MCR_RTS;
2002         if (mctrl & TIOCM_DTR)
2003                 mcr |= UART_MCR_DTR;
2004         if (mctrl & TIOCM_OUT1)
2005                 mcr |= UART_MCR_OUT1;
2006         if (mctrl & TIOCM_OUT2)
2007                 mcr |= UART_MCR_OUT2;
2008         if (mctrl & TIOCM_LOOP)
2009                 mcr |= UART_MCR_LOOP;
2010
2011         mcr = (mcr & up->mcr_mask) | up->mcr_force | up->mcr;
2012
2013         serial8250_out_MCR(up, mcr);
2014 }
2015 EXPORT_SYMBOL_GPL(serial8250_do_set_mctrl);
2016
2017 static void serial8250_set_mctrl(struct uart_port *port, unsigned int mctrl)
2018 {
2019         if (port->set_mctrl)
2020                 port->set_mctrl(port, mctrl);
2021         else
2022                 serial8250_do_set_mctrl(port, mctrl);
2023 }
2024
2025 static void serial8250_break_ctl(struct uart_port *port, int break_state)
2026 {
2027         struct uart_8250_port *up = up_to_u8250p(port);
2028         unsigned long flags;
2029
2030         serial8250_rpm_get(up);
2031         spin_lock_irqsave(&port->lock, flags);
2032         if (break_state == -1)
2033                 up->lcr |= UART_LCR_SBC;
2034         else
2035                 up->lcr &= ~UART_LCR_SBC;
2036         serial_port_out(port, UART_LCR, up->lcr);
2037         spin_unlock_irqrestore(&port->lock, flags);
2038         serial8250_rpm_put(up);
2039 }
2040
2041 /*
2042  *      Wait for transmitter & holding register to empty
2043  */
2044 static void wait_for_xmitr(struct uart_8250_port *up, int bits)
2045 {
2046         unsigned int status, tmout = 10000;
2047
2048         /* Wait up to 10ms for the character(s) to be sent. */
2049         for (;;) {
2050                 status = serial_in(up, UART_LSR);
2051
2052                 up->lsr_saved_flags |= status & LSR_SAVE_FLAGS;
2053
2054                 if ((status & bits) == bits)
2055                         break;
2056                 if (--tmout == 0)
2057                         break;
2058                 udelay(1);
2059                 touch_nmi_watchdog();
2060         }
2061
2062         /* Wait up to 1s for flow control if necessary */
2063         if (up->port.flags & UPF_CONS_FLOW) {
2064                 for (tmout = 1000000; tmout; tmout--) {
2065                         unsigned int msr = serial_in(up, UART_MSR);
2066                         up->msr_saved_flags |= msr & MSR_SAVE_FLAGS;
2067                         if (msr & UART_MSR_CTS)
2068                                 break;
2069                         udelay(1);
2070                         touch_nmi_watchdog();
2071                 }
2072         }
2073 }
2074
2075 #ifdef CONFIG_CONSOLE_POLL
2076 /*
2077  * Console polling routines for writing and reading from the uart while
2078  * in an interrupt or debug context.
2079  */
2080
2081 static int serial8250_get_poll_char(struct uart_port *port)
2082 {
2083         struct uart_8250_port *up = up_to_u8250p(port);
2084         unsigned char lsr;
2085         int status;
2086
2087         serial8250_rpm_get(up);
2088
2089         lsr = serial_port_in(port, UART_LSR);
2090
2091         if (!(lsr & UART_LSR_DR)) {
2092                 status = NO_POLL_CHAR;
2093                 goto out;
2094         }
2095
2096         status = serial_port_in(port, UART_RX);
2097 out:
2098         serial8250_rpm_put(up);
2099         return status;
2100 }
2101
2102
2103 static void serial8250_put_poll_char(struct uart_port *port,
2104                          unsigned char c)
2105 {
2106         unsigned int ier;
2107         struct uart_8250_port *up = up_to_u8250p(port);
2108
2109         serial8250_rpm_get(up);
2110         /*
2111          *      First save the IER then disable the interrupts
2112          */
2113         ier = serial_port_in(port, UART_IER);
2114         if (up->capabilities & UART_CAP_UUE)
2115                 serial_port_out(port, UART_IER, UART_IER_UUE);
2116         else
2117                 serial_port_out(port, UART_IER, 0);
2118
2119         wait_for_xmitr(up, BOTH_EMPTY);
2120         /*
2121          *      Send the character out.
2122          */
2123         serial_port_out(port, UART_TX, c);
2124
2125         /*
2126          *      Finally, wait for transmitter to become empty
2127          *      and restore the IER
2128          */
2129         wait_for_xmitr(up, BOTH_EMPTY);
2130         serial_port_out(port, UART_IER, ier);
2131         serial8250_rpm_put(up);
2132 }
2133
2134 #endif /* CONFIG_CONSOLE_POLL */
2135
2136 int serial8250_do_startup(struct uart_port *port)
2137 {
2138         struct uart_8250_port *up = up_to_u8250p(port);
2139         unsigned long flags;
2140         unsigned char lsr, iir;
2141         int retval;
2142
2143         if (!port->fifosize)
2144                 port->fifosize = uart_config[port->type].fifo_size;
2145         if (!up->tx_loadsz)
2146                 up->tx_loadsz = uart_config[port->type].tx_loadsz;
2147         if (!up->capabilities)
2148                 up->capabilities = uart_config[port->type].flags;
2149         up->mcr = 0;
2150
2151         if (port->iotype != up->cur_iotype)
2152                 set_io_from_upio(port);
2153
2154         serial8250_rpm_get(up);
2155         if (port->type == PORT_16C950) {
2156                 /* Wake up and initialize UART */
2157                 up->acr = 0;
2158                 serial_port_out(port, UART_LCR, UART_LCR_CONF_MODE_B);
2159                 serial_port_out(port, UART_EFR, UART_EFR_ECB);
2160                 serial_port_out(port, UART_IER, 0);
2161                 serial_port_out(port, UART_LCR, 0);
2162                 serial_icr_write(up, UART_CSR, 0); /* Reset the UART */
2163                 serial_port_out(port, UART_LCR, UART_LCR_CONF_MODE_B);
2164                 serial_port_out(port, UART_EFR, UART_EFR_ECB);
2165                 serial_port_out(port, UART_LCR, 0);
2166         }
2167
2168         if (port->type == PORT_DA830) {
2169                 /* Reset the port */
2170                 serial_port_out(port, UART_IER, 0);
2171                 serial_port_out(port, UART_DA830_PWREMU_MGMT, 0);
2172                 mdelay(10);
2173
2174                 /* Enable Tx, Rx and free run mode */
2175                 serial_port_out(port, UART_DA830_PWREMU_MGMT,
2176                                 UART_DA830_PWREMU_MGMT_UTRST |
2177                                 UART_DA830_PWREMU_MGMT_URRST |
2178                                 UART_DA830_PWREMU_MGMT_FREE);
2179         }
2180
2181         if (port->type == PORT_NPCM) {
2182                 /*
2183                  * Nuvoton calls the scratch register 'UART_TOR' (timeout
2184                  * register). Enable it, and set TIOC (timeout interrupt
2185                  * comparator) to be 0x20 for correct operation.
2186                  */
2187                 serial_port_out(port, UART_NPCM_TOR, UART_NPCM_TOIE | 0x20);
2188         }
2189
2190 #ifdef CONFIG_SERIAL_8250_RSA
2191         /*
2192          * If this is an RSA port, see if we can kick it up to the
2193          * higher speed clock.
2194          */
2195         enable_rsa(up);
2196 #endif
2197
2198         if (port->type == PORT_XR17V35X) {
2199                 /*
2200                  * First enable access to IER [7:5], ISR [5:4], FCR [5:4],
2201                  * MCR [7:5] and MSR [7:0]
2202                  */
2203                 serial_port_out(port, UART_XR_EFR, UART_EFR_ECB);
2204
2205                 /*
2206                  * Make sure all interrups are masked until initialization is
2207                  * complete and the FIFOs are cleared
2208                  */
2209                 serial_port_out(port, UART_IER, 0);
2210         }
2211
2212         /*
2213          * Clear the FIFO buffers and disable them.
2214          * (they will be reenabled in set_termios())
2215          */
2216         serial8250_clear_fifos(up);
2217
2218         /*
2219          * Clear the interrupt registers.
2220          */
2221         serial_port_in(port, UART_LSR);
2222         serial_port_in(port, UART_RX);
2223         serial_port_in(port, UART_IIR);
2224         serial_port_in(port, UART_MSR);
2225         if ((port->type == PORT_XR17V35X) || (port->type == PORT_XR17D15X))
2226                 serial_port_in(port, UART_EXAR_INT0);
2227
2228         /*
2229          * At this point, there's no way the LSR could still be 0xff;
2230          * if it is, then bail out, because there's likely no UART
2231          * here.
2232          */
2233         if (!(port->flags & UPF_BUGGY_UART) &&
2234             (serial_port_in(port, UART_LSR) == 0xff)) {
2235                 printk_ratelimited(KERN_INFO "ttyS%d: LSR safety check engaged!\n",
2236                                    serial_index(port));
2237                 retval = -ENODEV;
2238                 goto out;
2239         }
2240
2241         /*
2242          * For a XR16C850, we need to set the trigger levels
2243          */
2244         if (port->type == PORT_16850) {
2245                 unsigned char fctr;
2246
2247                 serial_out(up, UART_LCR, UART_LCR_CONF_MODE_B);
2248
2249                 fctr = serial_in(up, UART_FCTR) & ~(UART_FCTR_RX|UART_FCTR_TX);
2250                 serial_port_out(port, UART_FCTR,
2251                                 fctr | UART_FCTR_TRGD | UART_FCTR_RX);
2252                 serial_port_out(port, UART_TRG, UART_TRG_96);
2253                 serial_port_out(port, UART_FCTR,
2254                                 fctr | UART_FCTR_TRGD | UART_FCTR_TX);
2255                 serial_port_out(port, UART_TRG, UART_TRG_96);
2256
2257                 serial_port_out(port, UART_LCR, 0);
2258         }
2259
2260         /*
2261          * For the Altera 16550 variants, set TX threshold trigger level.
2262          */
2263         if (((port->type == PORT_ALTR_16550_F32) ||
2264              (port->type == PORT_ALTR_16550_F64) ||
2265              (port->type == PORT_ALTR_16550_F128)) && (port->fifosize > 1)) {
2266                 /* Bounds checking of TX threshold (valid 0 to fifosize-2) */
2267                 if ((up->tx_loadsz < 2) || (up->tx_loadsz > port->fifosize)) {
2268                         pr_err("ttyS%d TX FIFO Threshold errors, skipping\n",
2269                                serial_index(port));
2270                 } else {
2271                         serial_port_out(port, UART_ALTR_AFR,
2272                                         UART_ALTR_EN_TXFIFO_LW);
2273                         serial_port_out(port, UART_ALTR_TX_LOW,
2274                                         port->fifosize - up->tx_loadsz);
2275                         port->handle_irq = serial8250_tx_threshold_handle_irq;
2276                 }
2277         }
2278
2279         /* Check if we need to have shared IRQs */
2280         if (port->irq && (up->port.flags & UPF_SHARE_IRQ))
2281                 up->port.irqflags |= IRQF_SHARED;
2282
2283         if (port->irq && !(up->port.flags & UPF_NO_THRE_TEST)) {
2284                 unsigned char iir1;
2285
2286                 if (port->irqflags & IRQF_SHARED)
2287                         disable_irq_nosync(port->irq);
2288
2289                 /*
2290                  * Test for UARTs that do not reassert THRE when the
2291                  * transmitter is idle and the interrupt has already
2292                  * been cleared.  Real 16550s should always reassert
2293                  * this interrupt whenever the transmitter is idle and
2294                  * the interrupt is enabled.  Delays are necessary to
2295                  * allow register changes to become visible.
2296                  */
2297                 spin_lock_irqsave(&port->lock, flags);
2298
2299                 wait_for_xmitr(up, UART_LSR_THRE);
2300                 serial_port_out_sync(port, UART_IER, UART_IER_THRI);
2301                 udelay(1); /* allow THRE to set */
2302                 iir1 = serial_port_in(port, UART_IIR);
2303                 serial_port_out(port, UART_IER, 0);
2304                 serial_port_out_sync(port, UART_IER, UART_IER_THRI);
2305                 udelay(1); /* allow a working UART time to re-assert THRE */
2306                 iir = serial_port_in(port, UART_IIR);
2307                 serial_port_out(port, UART_IER, 0);
2308
2309                 spin_unlock_irqrestore(&port->lock, flags);
2310
2311                 if (port->irqflags & IRQF_SHARED)
2312                         enable_irq(port->irq);
2313
2314                 /*
2315                  * If the interrupt is not reasserted, or we otherwise
2316                  * don't trust the iir, setup a timer to kick the UART
2317                  * on a regular basis.
2318                  */
2319                 if ((!(iir1 & UART_IIR_NO_INT) && (iir & UART_IIR_NO_INT)) ||
2320                     up->port.flags & UPF_BUG_THRE) {
2321                         up->bugs |= UART_BUG_THRE;
2322                 }
2323         }
2324
2325         retval = up->ops->setup_irq(up);
2326         if (retval)
2327                 goto out;
2328
2329         /*
2330          * Now, initialize the UART
2331          */
2332         serial_port_out(port, UART_LCR, UART_LCR_WLEN8);
2333
2334         spin_lock_irqsave(&port->lock, flags);
2335         if (up->port.flags & UPF_FOURPORT) {
2336                 if (!up->port.irq)
2337                         up->port.mctrl |= TIOCM_OUT1;
2338         } else
2339                 /*
2340                  * Most PC uarts need OUT2 raised to enable interrupts.
2341                  */
2342                 if (port->irq)
2343                         up->port.mctrl |= TIOCM_OUT2;
2344
2345         serial8250_set_mctrl(port, port->mctrl);
2346
2347         /*
2348          * Serial over Lan (SoL) hack:
2349          * Intel 8257x Gigabit ethernet chips have a 16550 emulation, to be
2350          * used for Serial Over Lan.  Those chips take a longer time than a
2351          * normal serial device to signalize that a transmission data was
2352          * queued. Due to that, the above test generally fails. One solution
2353          * would be to delay the reading of iir. However, this is not
2354          * reliable, since the timeout is variable. So, let's just don't
2355          * test if we receive TX irq.  This way, we'll never enable
2356          * UART_BUG_TXEN.
2357          */
2358         if (up->port.quirks & UPQ_NO_TXEN_TEST)
2359                 goto dont_test_tx_en;
2360
2361         /*
2362          * Do a quick test to see if we receive an interrupt when we enable
2363          * the TX irq.
2364          */
2365         serial_port_out(port, UART_IER, UART_IER_THRI);
2366         lsr = serial_port_in(port, UART_LSR);
2367         iir = serial_port_in(port, UART_IIR);
2368         serial_port_out(port, UART_IER, 0);
2369
2370         if (lsr & UART_LSR_TEMT && iir & UART_IIR_NO_INT) {
2371                 if (!(up->bugs & UART_BUG_TXEN)) {
2372                         up->bugs |= UART_BUG_TXEN;
2373                         pr_debug("ttyS%d - enabling bad tx status workarounds\n",
2374                                  serial_index(port));
2375                 }
2376         } else {
2377                 up->bugs &= ~UART_BUG_TXEN;
2378         }
2379
2380 dont_test_tx_en:
2381         spin_unlock_irqrestore(&port->lock, flags);
2382
2383         /*
2384          * Clear the interrupt registers again for luck, and clear the
2385          * saved flags to avoid getting false values from polling
2386          * routines or the previous session.
2387          */
2388         serial_port_in(port, UART_LSR);
2389         serial_port_in(port, UART_RX);
2390         serial_port_in(port, UART_IIR);
2391         serial_port_in(port, UART_MSR);
2392         if ((port->type == PORT_XR17V35X) || (port->type == PORT_XR17D15X))
2393                 serial_port_in(port, UART_EXAR_INT0);
2394         up->lsr_saved_flags = 0;
2395         up->msr_saved_flags = 0;
2396
2397         /*
2398          * Request DMA channels for both RX and TX.
2399          */
2400         if (up->dma) {
2401                 retval = serial8250_request_dma(up);
2402                 if (retval) {
2403                         pr_warn_ratelimited("ttyS%d - failed to request DMA\n",
2404                                             serial_index(port));
2405                         up->dma = NULL;
2406                 }
2407         }
2408
2409         /*
2410          * Set the IER shadow for rx interrupts but defer actual interrupt
2411          * enable until after the FIFOs are enabled; otherwise, an already-
2412          * active sender can swamp the interrupt handler with "too much work".
2413          */
2414         up->ier = UART_IER_RLSI | UART_IER_RDI;
2415
2416         if (port->flags & UPF_FOURPORT) {
2417                 unsigned int icp;
2418                 /*
2419                  * Enable interrupts on the AST Fourport board
2420                  */
2421                 icp = (port->iobase & 0xfe0) | 0x01f;
2422                 outb_p(0x80, icp);
2423                 inb_p(icp);
2424         }
2425         retval = 0;
2426 out:
2427         serial8250_rpm_put(up);
2428         return retval;
2429 }
2430 EXPORT_SYMBOL_GPL(serial8250_do_startup);
2431
2432 static int serial8250_startup(struct uart_port *port)
2433 {
2434         if (port->startup)
2435                 return port->startup(port);
2436         return serial8250_do_startup(port);
2437 }
2438
2439 void serial8250_do_shutdown(struct uart_port *port)
2440 {
2441         struct uart_8250_port *up = up_to_u8250p(port);
2442         unsigned long flags;
2443
2444         serial8250_rpm_get(up);
2445         /*
2446          * Disable interrupts from this port
2447          */
2448         spin_lock_irqsave(&port->lock, flags);
2449         up->ier = 0;
2450         serial_port_out(port, UART_IER, 0);
2451         spin_unlock_irqrestore(&port->lock, flags);
2452
2453         synchronize_irq(port->irq);
2454
2455         if (up->dma)
2456                 serial8250_release_dma(up);
2457
2458         spin_lock_irqsave(&port->lock, flags);
2459         if (port->flags & UPF_FOURPORT) {
2460                 /* reset interrupts on the AST Fourport board */
2461                 inb((port->iobase & 0xfe0) | 0x1f);
2462                 port->mctrl |= TIOCM_OUT1;
2463         } else
2464                 port->mctrl &= ~TIOCM_OUT2;
2465
2466         serial8250_set_mctrl(port, port->mctrl);
2467         spin_unlock_irqrestore(&port->lock, flags);
2468
2469         /*
2470          * Disable break condition and FIFOs
2471          */
2472         serial_port_out(port, UART_LCR,
2473                         serial_port_in(port, UART_LCR) & ~UART_LCR_SBC);
2474         serial8250_clear_fifos(up);
2475
2476 #ifdef CONFIG_SERIAL_8250_RSA
2477         /*
2478          * Reset the RSA board back to 115kbps compat mode.
2479          */
2480         disable_rsa(up);
2481 #endif
2482
2483         /*
2484          * Read data port to reset things, and then unlink from
2485          * the IRQ chain.
2486          */
2487         serial_port_in(port, UART_RX);
2488         serial8250_rpm_put(up);
2489
2490         up->ops->release_irq(up);
2491 }
2492 EXPORT_SYMBOL_GPL(serial8250_do_shutdown);
2493
2494 static void serial8250_shutdown(struct uart_port *port)
2495 {
2496         if (port->shutdown)
2497                 port->shutdown(port);
2498         else
2499                 serial8250_do_shutdown(port);
2500 }
2501
2502 /*
2503  * XR17V35x UARTs have an extra fractional divisor register (DLD)
2504  * Calculate divisor with extra 4-bit fractional portion
2505  */
2506 static unsigned int xr17v35x_get_divisor(struct uart_8250_port *up,
2507                                          unsigned int baud,
2508                                          unsigned int *frac)
2509 {
2510         struct uart_port *port = &up->port;
2511         unsigned int quot_16;
2512
2513         quot_16 = DIV_ROUND_CLOSEST(port->uartclk, baud);
2514         *frac = quot_16 & 0x0f;
2515
2516         return quot_16 >> 4;
2517 }
2518
2519 /* Nuvoton NPCM UARTs have a custom divisor calculation */
2520 static unsigned int npcm_get_divisor(struct uart_8250_port *up,
2521                 unsigned int baud)
2522 {
2523         struct uart_port *port = &up->port;
2524
2525         return DIV_ROUND_CLOSEST(port->uartclk, 16 * baud + 2) - 2;
2526 }
2527
2528 static unsigned int serial8250_get_divisor(struct uart_8250_port *up,
2529                                            unsigned int baud,
2530                                            unsigned int *frac)
2531 {
2532         struct uart_port *port = &up->port;
2533         unsigned int quot;
2534
2535         /*
2536          * Handle magic divisors for baud rates above baud_base on
2537          * SMSC SuperIO chips.
2538          *
2539          */
2540         if ((port->flags & UPF_MAGIC_MULTIPLIER) &&
2541             baud == (port->uartclk/4))
2542                 quot = 0x8001;
2543         else if ((port->flags & UPF_MAGIC_MULTIPLIER) &&
2544                  baud == (port->uartclk/8))
2545                 quot = 0x8002;
2546         else if (up->port.type == PORT_XR17V35X)
2547                 quot = xr17v35x_get_divisor(up, baud, frac);
2548         else if (up->port.type == PORT_NPCM)
2549                 quot = npcm_get_divisor(up, baud);
2550         else
2551                 quot = uart_get_divisor(port, baud);
2552
2553         /*
2554          * Oxford Semi 952 rev B workaround
2555          */
2556         if (up->bugs & UART_BUG_QUOT && (quot & 0xff) == 0)
2557                 quot++;
2558
2559         return quot;
2560 }
2561
2562 static unsigned char serial8250_compute_lcr(struct uart_8250_port *up,
2563                                             tcflag_t c_cflag)
2564 {
2565         unsigned char cval;
2566
2567         switch (c_cflag & CSIZE) {
2568         case CS5:
2569                 cval = UART_LCR_WLEN5;
2570                 break;
2571         case CS6:
2572                 cval = UART_LCR_WLEN6;
2573                 break;
2574         case CS7:
2575                 cval = UART_LCR_WLEN7;
2576                 break;
2577         default:
2578         case CS8:
2579                 cval = UART_LCR_WLEN8;
2580                 break;
2581         }
2582
2583         if (c_cflag & CSTOPB)
2584                 cval |= UART_LCR_STOP;
2585         if (c_cflag & PARENB) {
2586                 cval |= UART_LCR_PARITY;
2587                 if (up->bugs & UART_BUG_PARITY)
2588                         up->fifo_bug = true;
2589         }
2590         if (!(c_cflag & PARODD))
2591                 cval |= UART_LCR_EPAR;
2592 #ifdef CMSPAR
2593         if (c_cflag & CMSPAR)
2594                 cval |= UART_LCR_SPAR;
2595 #endif
2596
2597         return cval;
2598 }
2599
2600 static void serial8250_set_divisor(struct uart_port *port, unsigned int baud,
2601                             unsigned int quot, unsigned int quot_frac)
2602 {
2603         struct uart_8250_port *up = up_to_u8250p(port);
2604
2605         /* Workaround to enable 115200 baud on OMAP1510 internal ports */
2606         if (is_omap1510_8250(up)) {
2607                 if (baud == 115200) {
2608                         quot = 1;
2609                         serial_port_out(port, UART_OMAP_OSC_12M_SEL, 1);
2610                 } else
2611                         serial_port_out(port, UART_OMAP_OSC_12M_SEL, 0);
2612         }
2613
2614         /*
2615          * For NatSemi, switch to bank 2 not bank 1, to avoid resetting EXCR2,
2616          * otherwise just set DLAB
2617          */
2618         if (up->capabilities & UART_NATSEMI)
2619                 serial_port_out(port, UART_LCR, 0xe0);
2620         else
2621                 serial_port_out(port, UART_LCR, up->lcr | UART_LCR_DLAB);
2622
2623         serial_dl_write(up, quot);
2624
2625         /* XR17V35x UARTs have an extra fractional divisor register (DLD) */
2626         if (up->port.type == PORT_XR17V35X) {
2627                 /* Preserve bits not related to baudrate; DLD[7:4]. */
2628                 quot_frac |= serial_port_in(port, 0x2) & 0xf0;
2629                 serial_port_out(port, 0x2, quot_frac);
2630         }
2631 }
2632
2633 static unsigned int serial8250_get_baud_rate(struct uart_port *port,
2634                                              struct ktermios *termios,
2635                                              struct ktermios *old)
2636 {
2637         /*
2638          * Ask the core to calculate the divisor for us.
2639          * Allow 1% tolerance at the upper limit so uart clks marginally
2640          * slower than nominal still match standard baud rates without
2641          * causing transmission errors.
2642          */
2643         return uart_get_baud_rate(port, termios, old,
2644                                   port->uartclk / 16 / 0xffff,
2645                                   port->uartclk);
2646 }
2647
2648 void
2649 serial8250_do_set_termios(struct uart_port *port, struct ktermios *termios,
2650                           struct ktermios *old)
2651 {
2652         struct uart_8250_port *up = up_to_u8250p(port);
2653         unsigned char cval;
2654         unsigned long flags;
2655         unsigned int baud, quot, frac = 0;
2656
2657         if (up->capabilities & UART_CAP_MINI) {
2658                 termios->c_cflag &= ~(CSTOPB | PARENB | PARODD | CMSPAR);
2659                 if ((termios->c_cflag & CSIZE) == CS5 ||
2660                     (termios->c_cflag & CSIZE) == CS6)
2661                         termios->c_cflag = (termios->c_cflag & ~CSIZE) | CS7;
2662         }
2663         cval = serial8250_compute_lcr(up, termios->c_cflag);
2664
2665         baud = serial8250_get_baud_rate(port, termios, old);
2666         quot = serial8250_get_divisor(up, baud, &frac);
2667
2668         /*
2669          * Ok, we're now changing the port state.  Do it with
2670          * interrupts disabled.
2671          */
2672         serial8250_rpm_get(up);
2673         spin_lock_irqsave(&port->lock, flags);
2674
2675         up->lcr = cval;                                 /* Save computed LCR */
2676
2677         if (up->capabilities & UART_CAP_FIFO && port->fifosize > 1) {
2678                 /* NOTE: If fifo_bug is not set, a user can set RX_trigger. */
2679                 if ((baud < 2400 && !up->dma) || up->fifo_bug) {
2680                         up->fcr &= ~UART_FCR_TRIGGER_MASK;
2681                         up->fcr |= UART_FCR_TRIGGER_1;
2682                 }
2683         }
2684
2685         /*
2686          * MCR-based auto flow control.  When AFE is enabled, RTS will be
2687          * deasserted when the receive FIFO contains more characters than
2688          * the trigger, or the MCR RTS bit is cleared.
2689          */
2690         if (up->capabilities & UART_CAP_AFE) {
2691                 up->mcr &= ~UART_MCR_AFE;
2692                 if (termios->c_cflag & CRTSCTS)
2693                         up->mcr |= UART_MCR_AFE;
2694         }
2695
2696         /*
2697          * Update the per-port timeout.
2698          */
2699         uart_update_timeout(port, termios->c_cflag, baud);
2700
2701         port->read_status_mask = UART_LSR_OE | UART_LSR_THRE | UART_LSR_DR;
2702         if (termios->c_iflag & INPCK)
2703                 port->read_status_mask |= UART_LSR_FE | UART_LSR_PE;
2704         if (termios->c_iflag & (IGNBRK | BRKINT | PARMRK))
2705                 port->read_status_mask |= UART_LSR_BI;
2706
2707         /*
2708          * Characteres to ignore
2709          */
2710         port->ignore_status_mask = 0;
2711         if (termios->c_iflag & IGNPAR)
2712                 port->ignore_status_mask |= UART_LSR_PE | UART_LSR_FE;
2713         if (termios->c_iflag & IGNBRK) {
2714                 port->ignore_status_mask |= UART_LSR_BI;
2715                 /*
2716                  * If we're ignoring parity and break indicators,
2717                  * ignore overruns too (for real raw support).
2718                  */
2719                 if (termios->c_iflag & IGNPAR)
2720                         port->ignore_status_mask |= UART_LSR_OE;
2721         }
2722
2723         /*
2724          * ignore all characters if CREAD is not set
2725          */
2726         if ((termios->c_cflag & CREAD) == 0)
2727                 port->ignore_status_mask |= UART_LSR_DR;
2728
2729         /*
2730          * CTS flow control flag and modem status interrupts
2731          */
2732         up->ier &= ~UART_IER_MSI;
2733         if (!(up->bugs & UART_BUG_NOMSR) &&
2734                         UART_ENABLE_MS(&up->port, termios->c_cflag))
2735                 up->ier |= UART_IER_MSI;
2736         if (up->capabilities & UART_CAP_UUE)
2737                 up->ier |= UART_IER_UUE;
2738         if (up->capabilities & UART_CAP_RTOIE)
2739                 up->ier |= UART_IER_RTOIE;
2740
2741         serial_port_out(port, UART_IER, up->ier);
2742
2743         if (up->capabilities & UART_CAP_EFR) {
2744                 unsigned char efr = 0;
2745                 /*
2746                  * TI16C752/Startech hardware flow control.  FIXME:
2747                  * - TI16C752 requires control thresholds to be set.
2748                  * - UART_MCR_RTS is ineffective if auto-RTS mode is enabled.
2749                  */
2750                 if (termios->c_cflag & CRTSCTS)
2751                         efr |= UART_EFR_CTS;
2752
2753                 serial_port_out(port, UART_LCR, UART_LCR_CONF_MODE_B);
2754                 if (port->flags & UPF_EXAR_EFR)
2755                         serial_port_out(port, UART_XR_EFR, efr);
2756                 else
2757                         serial_port_out(port, UART_EFR, efr);
2758         }
2759
2760         serial8250_set_divisor(port, baud, quot, frac);
2761
2762         /*
2763          * LCR DLAB must be set to enable 64-byte FIFO mode. If the FCR
2764          * is written without DLAB set, this mode will be disabled.
2765          */
2766         if (port->type == PORT_16750)
2767                 serial_port_out(port, UART_FCR, up->fcr);
2768
2769         serial_port_out(port, UART_LCR, up->lcr);       /* reset DLAB */
2770         if (port->type != PORT_16750) {
2771                 /* emulated UARTs (Lucent Venus 167x) need two steps */
2772                 if (up->fcr & UART_FCR_ENABLE_FIFO)
2773                         serial_port_out(port, UART_FCR, UART_FCR_ENABLE_FIFO);
2774                 serial_port_out(port, UART_FCR, up->fcr);       /* set fcr */
2775         }
2776         serial8250_set_mctrl(port, port->mctrl);
2777         spin_unlock_irqrestore(&port->lock, flags);
2778         serial8250_rpm_put(up);
2779
2780         /* Don't rewrite B0 */
2781         if (tty_termios_baud_rate(termios))
2782                 tty_termios_encode_baud_rate(termios, baud, baud);
2783 }
2784 EXPORT_SYMBOL(serial8250_do_set_termios);
2785
2786 static void
2787 serial8250_set_termios(struct uart_port *port, struct ktermios *termios,
2788                        struct ktermios *old)
2789 {
2790         if (port->set_termios)
2791                 port->set_termios(port, termios, old);
2792         else
2793                 serial8250_do_set_termios(port, termios, old);
2794 }
2795
2796 void serial8250_do_set_ldisc(struct uart_port *port, struct ktermios *termios)
2797 {
2798         if (termios->c_line == N_PPS) {
2799                 port->flags |= UPF_HARDPPS_CD;
2800                 spin_lock_irq(&port->lock);
2801                 serial8250_enable_ms(port);
2802                 spin_unlock_irq(&port->lock);
2803         } else {
2804                 port->flags &= ~UPF_HARDPPS_CD;
2805                 if (!UART_ENABLE_MS(port, termios->c_cflag)) {
2806                         spin_lock_irq(&port->lock);
2807                         serial8250_disable_ms(port);
2808                         spin_unlock_irq(&port->lock);
2809                 }
2810         }
2811 }
2812 EXPORT_SYMBOL_GPL(serial8250_do_set_ldisc);
2813
2814 static void
2815 serial8250_set_ldisc(struct uart_port *port, struct ktermios *termios)
2816 {
2817         if (port->set_ldisc)
2818                 port->set_ldisc(port, termios);
2819         else
2820                 serial8250_do_set_ldisc(port, termios);
2821 }
2822
2823 void serial8250_do_pm(struct uart_port *port, unsigned int state,
2824                       unsigned int oldstate)
2825 {
2826         struct uart_8250_port *p = up_to_u8250p(port);
2827
2828         serial8250_set_sleep(p, state != 0);
2829 }
2830 EXPORT_SYMBOL(serial8250_do_pm);
2831
2832 static void
2833 serial8250_pm(struct uart_port *port, unsigned int state,
2834               unsigned int oldstate)
2835 {
2836         if (port->pm)
2837                 port->pm(port, state, oldstate);
2838         else
2839                 serial8250_do_pm(port, state, oldstate);
2840 }
2841
2842 static unsigned int serial8250_port_size(struct uart_8250_port *pt)
2843 {
2844         if (pt->port.mapsize)
2845                 return pt->port.mapsize;
2846         if (pt->port.iotype == UPIO_AU) {
2847                 if (pt->port.type == PORT_RT2880)
2848                         return 0x100;
2849                 return 0x1000;
2850         }
2851         if (is_omap1_8250(pt))
2852                 return 0x16 << pt->port.regshift;
2853
2854         return 8 << pt->port.regshift;
2855 }
2856
2857 /*
2858  * Resource handling.
2859  */
2860 static int serial8250_request_std_resource(struct uart_8250_port *up)
2861 {
2862         unsigned int size = serial8250_port_size(up);
2863         struct uart_port *port = &up->port;
2864         int ret = 0;
2865
2866         switch (port->iotype) {
2867         case UPIO_AU:
2868         case UPIO_TSI:
2869         case UPIO_MEM32:
2870         case UPIO_MEM32BE:
2871         case UPIO_MEM16:
2872         case UPIO_MEM:
2873                 if (!port->mapbase)
2874                         break;
2875
2876                 if (!request_mem_region(port->mapbase, size, "serial")) {
2877                         ret = -EBUSY;
2878                         break;
2879                 }
2880
2881                 if (port->flags & UPF_IOREMAP) {
2882                         port->membase = ioremap_nocache(port->mapbase, size);
2883                         if (!port->membase) {
2884                                 release_mem_region(port->mapbase, size);
2885                                 ret = -ENOMEM;
2886                         }
2887                 }
2888                 break;
2889
2890         case UPIO_HUB6:
2891         case UPIO_PORT:
2892                 if (!request_region(port->iobase, size, "serial"))
2893                         ret = -EBUSY;
2894                 break;
2895         }
2896         return ret;
2897 }
2898
2899 static void serial8250_release_std_resource(struct uart_8250_port *up)
2900 {
2901         unsigned int size = serial8250_port_size(up);
2902         struct uart_port *port = &up->port;
2903
2904         switch (port->iotype) {
2905         case UPIO_AU:
2906         case UPIO_TSI:
2907         case UPIO_MEM32:
2908         case UPIO_MEM32BE:
2909         case UPIO_MEM16:
2910         case UPIO_MEM:
2911                 if (!port->mapbase)
2912                         break;
2913
2914                 if (port->flags & UPF_IOREMAP) {
2915                         iounmap(port->membase);
2916                         port->membase = NULL;
2917                 }
2918
2919                 release_mem_region(port->mapbase, size);
2920                 break;
2921
2922         case UPIO_HUB6:
2923         case UPIO_PORT:
2924                 release_region(port->iobase, size);
2925                 break;
2926         }
2927 }
2928
2929 static void serial8250_release_port(struct uart_port *port)
2930 {
2931         struct uart_8250_port *up = up_to_u8250p(port);
2932
2933         serial8250_release_std_resource(up);
2934 }
2935
2936 static int serial8250_request_port(struct uart_port *port)
2937 {
2938         struct uart_8250_port *up = up_to_u8250p(port);
2939
2940         return serial8250_request_std_resource(up);
2941 }
2942
2943 static int fcr_get_rxtrig_bytes(struct uart_8250_port *up)
2944 {
2945         const struct serial8250_config *conf_type = &uart_config[up->port.type];
2946         unsigned char bytes;
2947
2948         bytes = conf_type->rxtrig_bytes[UART_FCR_R_TRIG_BITS(up->fcr)];
2949
2950         return bytes ? bytes : -EOPNOTSUPP;
2951 }
2952
2953 static int bytes_to_fcr_rxtrig(struct uart_8250_port *up, unsigned char bytes)
2954 {
2955         const struct serial8250_config *conf_type = &uart_config[up->port.type];
2956         int i;
2957
2958         if (!conf_type->rxtrig_bytes[UART_FCR_R_TRIG_BITS(UART_FCR_R_TRIG_00)])
2959                 return -EOPNOTSUPP;
2960
2961         for (i = 1; i < UART_FCR_R_TRIG_MAX_STATE; i++) {
2962                 if (bytes < conf_type->rxtrig_bytes[i])
2963                         /* Use the nearest lower value */
2964                         return (--i) << UART_FCR_R_TRIG_SHIFT;
2965         }
2966
2967         return UART_FCR_R_TRIG_11;
2968 }
2969
2970 static int do_get_rxtrig(struct tty_port *port)
2971 {
2972         struct uart_state *state = container_of(port, struct uart_state, port);
2973         struct uart_port *uport = state->uart_port;
2974         struct uart_8250_port *up = up_to_u8250p(uport);
2975
2976         if (!(up->capabilities & UART_CAP_FIFO) || uport->fifosize <= 1)
2977                 return -EINVAL;
2978
2979         return fcr_get_rxtrig_bytes(up);
2980 }
2981
2982 static int do_serial8250_get_rxtrig(struct tty_port *port)
2983 {
2984         int rxtrig_bytes;
2985
2986         mutex_lock(&port->mutex);
2987         rxtrig_bytes = do_get_rxtrig(port);
2988         mutex_unlock(&port->mutex);
2989
2990         return rxtrig_bytes;
2991 }
2992
2993 static ssize_t serial8250_get_attr_rx_trig_bytes(struct device *dev,
2994         struct device_attribute *attr, char *buf)
2995 {
2996         struct tty_port *port = dev_get_drvdata(dev);
2997         int rxtrig_bytes;
2998
2999         rxtrig_bytes = do_serial8250_get_rxtrig(port);
3000         if (rxtrig_bytes < 0)
3001                 return rxtrig_bytes;
3002
3003         return snprintf(buf, PAGE_SIZE, "%d\n", rxtrig_bytes);
3004 }
3005
3006 static int do_set_rxtrig(struct tty_port *port, unsigned char bytes)
3007 {
3008         struct uart_state *state = container_of(port, struct uart_state, port);
3009         struct uart_port *uport = state->uart_port;
3010         struct uart_8250_port *up = up_to_u8250p(uport);
3011         int rxtrig;
3012
3013         if (!(up->capabilities & UART_CAP_FIFO) || uport->fifosize <= 1 ||
3014             up->fifo_bug)
3015                 return -EINVAL;
3016
3017         rxtrig = bytes_to_fcr_rxtrig(up, bytes);
3018         if (rxtrig < 0)
3019                 return rxtrig;
3020
3021         serial8250_clear_fifos(up);
3022         up->fcr &= ~UART_FCR_TRIGGER_MASK;
3023         up->fcr |= (unsigned char)rxtrig;
3024         serial_out(up, UART_FCR, up->fcr);
3025         return 0;
3026 }
3027
3028 static int do_serial8250_set_rxtrig(struct tty_port *port, unsigned char bytes)
3029 {
3030         int ret;
3031
3032         mutex_lock(&port->mutex);
3033         ret = do_set_rxtrig(port, bytes);
3034         mutex_unlock(&port->mutex);
3035
3036         return ret;
3037 }
3038
3039 static ssize_t serial8250_set_attr_rx_trig_bytes(struct device *dev,
3040         struct device_attribute *attr, const char *buf, size_t count)
3041 {
3042         struct tty_port *port = dev_get_drvdata(dev);
3043         unsigned char bytes;
3044         int ret;
3045
3046         if (!count)
3047                 return -EINVAL;
3048
3049         ret = kstrtou8(buf, 10, &bytes);
3050         if (ret < 0)
3051                 return ret;
3052
3053         ret = do_serial8250_set_rxtrig(port, bytes);
3054         if (ret < 0)
3055                 return ret;
3056
3057         return count;
3058 }
3059
3060 static DEVICE_ATTR(rx_trig_bytes, S_IRUSR | S_IWUSR | S_IRGRP,
3061                    serial8250_get_attr_rx_trig_bytes,
3062                    serial8250_set_attr_rx_trig_bytes);
3063
3064 static struct attribute *serial8250_dev_attrs[] = {
3065         &dev_attr_rx_trig_bytes.attr,
3066         NULL,
3067         };
3068
3069 static struct attribute_group serial8250_dev_attr_group = {
3070         .attrs = serial8250_dev_attrs,
3071         };
3072
3073 static void register_dev_spec_attr_grp(struct uart_8250_port *up)
3074 {
3075         const struct serial8250_config *conf_type = &uart_config[up->port.type];
3076
3077         if (conf_type->rxtrig_bytes[0])
3078                 up->port.attr_group = &serial8250_dev_attr_group;
3079 }
3080
3081 static void serial8250_config_port(struct uart_port *port, int flags)
3082 {
3083         struct uart_8250_port *up = up_to_u8250p(port);
3084         int ret;
3085
3086         /*
3087          * Find the region that we can probe for.  This in turn
3088          * tells us whether we can probe for the type of port.
3089          */
3090         ret = serial8250_request_std_resource(up);
3091         if (ret < 0)
3092                 return;
3093
3094         if (port->iotype != up->cur_iotype)
3095                 set_io_from_upio(port);
3096
3097         if (flags & UART_CONFIG_TYPE)
3098                 autoconfig(up);
3099
3100         /* if access method is AU, it is a 16550 with a quirk */
3101         if (port->type == PORT_16550A && port->iotype == UPIO_AU)
3102                 up->bugs |= UART_BUG_NOMSR;
3103
3104         /* HW bugs may trigger IRQ while IIR == NO_INT */
3105         if (port->type == PORT_TEGRA)
3106                 up->bugs |= UART_BUG_NOMSR;
3107
3108         if (port->type != PORT_UNKNOWN && flags & UART_CONFIG_IRQ)
3109                 autoconfig_irq(up);
3110
3111         if (port->type == PORT_UNKNOWN)
3112                 serial8250_release_std_resource(up);
3113
3114         register_dev_spec_attr_grp(up);
3115         up->fcr = uart_config[up->port.type].fcr;
3116 }
3117
3118 static int
3119 serial8250_verify_port(struct uart_port *port, struct serial_struct *ser)
3120 {
3121         if (ser->irq >= nr_irqs || ser->irq < 0 ||
3122             ser->baud_base < 9600 || ser->type < PORT_UNKNOWN ||
3123             ser->type >= ARRAY_SIZE(uart_config) || ser->type == PORT_CIRRUS ||
3124             ser->type == PORT_STARTECH)
3125                 return -EINVAL;
3126         return 0;
3127 }
3128
3129 static const char *serial8250_type(struct uart_port *port)
3130 {
3131         int type = port->type;
3132
3133         if (type >= ARRAY_SIZE(uart_config))
3134                 type = 0;
3135         return uart_config[type].name;
3136 }
3137
3138 static const struct uart_ops serial8250_pops = {
3139         .tx_empty       = serial8250_tx_empty,
3140         .set_mctrl      = serial8250_set_mctrl,
3141         .get_mctrl      = serial8250_get_mctrl,
3142         .stop_tx        = serial8250_stop_tx,
3143         .start_tx       = serial8250_start_tx,
3144         .throttle       = serial8250_throttle,
3145         .unthrottle     = serial8250_unthrottle,
3146         .stop_rx        = serial8250_stop_rx,
3147         .enable_ms      = serial8250_enable_ms,
3148         .break_ctl      = serial8250_break_ctl,
3149         .startup        = serial8250_startup,
3150         .shutdown       = serial8250_shutdown,
3151         .set_termios    = serial8250_set_termios,
3152         .set_ldisc      = serial8250_set_ldisc,
3153         .pm             = serial8250_pm,
3154         .type           = serial8250_type,
3155         .release_port   = serial8250_release_port,
3156         .request_port   = serial8250_request_port,
3157         .config_port    = serial8250_config_port,
3158         .verify_port    = serial8250_verify_port,
3159 #ifdef CONFIG_CONSOLE_POLL
3160         .poll_get_char = serial8250_get_poll_char,
3161         .poll_put_char = serial8250_put_poll_char,
3162 #endif
3163 };
3164
3165 void serial8250_init_port(struct uart_8250_port *up)
3166 {
3167         struct uart_port *port = &up->port;
3168
3169         spin_lock_init(&port->lock);
3170         port->ops = &serial8250_pops;
3171
3172         up->cur_iotype = 0xFF;
3173 }
3174 EXPORT_SYMBOL_GPL(serial8250_init_port);
3175
3176 void serial8250_set_defaults(struct uart_8250_port *up)
3177 {
3178         struct uart_port *port = &up->port;
3179
3180         if (up->port.flags & UPF_FIXED_TYPE) {
3181                 unsigned int type = up->port.type;
3182
3183                 if (!up->port.fifosize)
3184                         up->port.fifosize = uart_config[type].fifo_size;
3185                 if (!up->tx_loadsz)
3186                         up->tx_loadsz = uart_config[type].tx_loadsz;
3187                 if (!up->capabilities)
3188                         up->capabilities = uart_config[type].flags;
3189         }
3190
3191         set_io_from_upio(port);
3192
3193         /* default dma handlers */
3194         if (up->dma) {
3195                 if (!up->dma->tx_dma)
3196                         up->dma->tx_dma = serial8250_tx_dma;
3197                 if (!up->dma->rx_dma)
3198                         up->dma->rx_dma = serial8250_rx_dma;
3199         }
3200 }
3201 EXPORT_SYMBOL_GPL(serial8250_set_defaults);
3202
3203 #ifdef CONFIG_SERIAL_8250_CONSOLE
3204
3205 static void serial8250_console_putchar(struct uart_port *port, int ch)
3206 {
3207         struct uart_8250_port *up = up_to_u8250p(port);
3208
3209         wait_for_xmitr(up, UART_LSR_THRE);
3210         serial_port_out(port, UART_TX, ch);
3211 }
3212
3213 /*
3214  *      Restore serial console when h/w power-off detected
3215  */
3216 static void serial8250_console_restore(struct uart_8250_port *up)
3217 {
3218         struct uart_port *port = &up->port;
3219         struct ktermios termios;
3220         unsigned int baud, quot, frac = 0;
3221
3222         termios.c_cflag = port->cons->cflag;
3223         if (port->state->port.tty && termios.c_cflag == 0)
3224                 termios.c_cflag = port->state->port.tty->termios.c_cflag;
3225
3226         baud = serial8250_get_baud_rate(port, &termios, NULL);
3227         quot = serial8250_get_divisor(up, baud, &frac);
3228
3229         serial8250_set_divisor(port, baud, quot, frac);
3230         serial_port_out(port, UART_LCR, up->lcr);
3231         serial8250_out_MCR(up, UART_MCR_DTR | UART_MCR_RTS);
3232 }
3233
3234 /*
3235  *      Print a string to the serial port trying not to disturb
3236  *      any possible real use of the port...
3237  *
3238  *      The console_lock must be held when we get here.
3239  */
3240 void serial8250_console_write(struct uart_8250_port *up, const char *s,
3241                               unsigned int count)
3242 {
3243         struct uart_port *port = &up->port;
3244         unsigned long flags;
3245         unsigned int ier;
3246         int locked = 1;
3247
3248         touch_nmi_watchdog();
3249
3250         serial8250_rpm_get(up);
3251
3252         if (port->sysrq)
3253                 locked = 0;
3254         else if (oops_in_progress)
3255                 locked = spin_trylock_irqsave(&port->lock, flags);
3256         else
3257                 spin_lock_irqsave(&port->lock, flags);
3258
3259         /*
3260          *      First save the IER then disable the interrupts
3261          */
3262         ier = serial_port_in(port, UART_IER);
3263
3264         if (up->capabilities & UART_CAP_UUE)
3265                 serial_port_out(port, UART_IER, UART_IER_UUE);
3266         else
3267                 serial_port_out(port, UART_IER, 0);
3268
3269         /* check scratch reg to see if port powered off during system sleep */
3270         if (up->canary && (up->canary != serial_port_in(port, UART_SCR))) {
3271                 serial8250_console_restore(up);
3272                 up->canary = 0;
3273         }
3274
3275         uart_console_write(port, s, count, serial8250_console_putchar);
3276
3277         /*
3278          *      Finally, wait for transmitter to become empty
3279          *      and restore the IER
3280          */
3281         wait_for_xmitr(up, BOTH_EMPTY);
3282         serial_port_out(port, UART_IER, ier);
3283
3284         /*
3285          *      The receive handling will happen properly because the
3286          *      receive ready bit will still be set; it is not cleared
3287          *      on read.  However, modem control will not, we must
3288          *      call it if we have saved something in the saved flags
3289          *      while processing with interrupts off.
3290          */
3291         if (up->msr_saved_flags)
3292                 serial8250_modem_status(up);
3293
3294         if (locked)
3295                 spin_unlock_irqrestore(&port->lock, flags);
3296         serial8250_rpm_put(up);
3297 }
3298
3299 static unsigned int probe_baud(struct uart_port *port)
3300 {
3301         unsigned char lcr, dll, dlm;
3302         unsigned int quot;
3303
3304         lcr = serial_port_in(port, UART_LCR);
3305         serial_port_out(port, UART_LCR, lcr | UART_LCR_DLAB);
3306         dll = serial_port_in(port, UART_DLL);
3307         dlm = serial_port_in(port, UART_DLM);
3308         serial_port_out(port, UART_LCR, lcr);
3309
3310         quot = (dlm << 8) | dll;
3311         return (port->uartclk / 16) / quot;
3312 }
3313
3314 int serial8250_console_setup(struct uart_port *port, char *options, bool probe)
3315 {
3316         int baud = 9600;
3317         int bits = 8;
3318         int parity = 'n';
3319         int flow = 'n';
3320
3321         if (!port->iobase && !port->membase)
3322                 return -ENODEV;
3323
3324         if (options)
3325                 uart_parse_options(options, &baud, &parity, &bits, &flow);
3326         else if (probe)
3327                 baud = probe_baud(port);
3328
3329         return uart_set_options(port, port->cons, baud, parity, bits, flow);
3330 }
3331
3332 #endif /* CONFIG_SERIAL_8250_CONSOLE */
3333
3334 MODULE_LICENSE("GPL");