GNU Linux-libre 5.15.54-gnu
[releases.git] / drivers / net / phy / marvell.c
1 // SPDX-License-Identifier: GPL-2.0+
2 /*
3  * drivers/net/phy/marvell.c
4  *
5  * Driver for Marvell PHYs
6  *
7  * Author: Andy Fleming
8  *
9  * Copyright (c) 2004 Freescale Semiconductor, Inc.
10  *
11  * Copyright (c) 2013 Michael Stapelberg <michael@stapelberg.de>
12  */
13 #include <linux/kernel.h>
14 #include <linux/string.h>
15 #include <linux/ctype.h>
16 #include <linux/errno.h>
17 #include <linux/unistd.h>
18 #include <linux/hwmon.h>
19 #include <linux/interrupt.h>
20 #include <linux/init.h>
21 #include <linux/delay.h>
22 #include <linux/netdevice.h>
23 #include <linux/etherdevice.h>
24 #include <linux/skbuff.h>
25 #include <linux/spinlock.h>
26 #include <linux/mm.h>
27 #include <linux/module.h>
28 #include <linux/mii.h>
29 #include <linux/ethtool.h>
30 #include <linux/ethtool_netlink.h>
31 #include <linux/phy.h>
32 #include <linux/marvell_phy.h>
33 #include <linux/bitfield.h>
34 #include <linux/of.h>
35 #include <linux/sfp.h>
36
37 #include <linux/io.h>
38 #include <asm/irq.h>
39 #include <linux/uaccess.h>
40
41 #define MII_MARVELL_PHY_PAGE            22
42 #define MII_MARVELL_COPPER_PAGE         0x00
43 #define MII_MARVELL_FIBER_PAGE          0x01
44 #define MII_MARVELL_MSCR_PAGE           0x02
45 #define MII_MARVELL_LED_PAGE            0x03
46 #define MII_MARVELL_VCT5_PAGE           0x05
47 #define MII_MARVELL_MISC_TEST_PAGE      0x06
48 #define MII_MARVELL_VCT7_PAGE           0x07
49 #define MII_MARVELL_WOL_PAGE            0x11
50 #define MII_MARVELL_MODE_PAGE           0x12
51
52 #define MII_M1011_IEVENT                0x13
53 #define MII_M1011_IEVENT_CLEAR          0x0000
54
55 #define MII_M1011_IMASK                 0x12
56 #define MII_M1011_IMASK_INIT            0x6400
57 #define MII_M1011_IMASK_CLEAR           0x0000
58
59 #define MII_M1011_PHY_SCR                       0x10
60 #define MII_M1011_PHY_SCR_DOWNSHIFT_EN          BIT(11)
61 #define MII_M1011_PHY_SCR_DOWNSHIFT_MASK        GENMASK(14, 12)
62 #define MII_M1011_PHY_SCR_DOWNSHIFT_MAX         8
63 #define MII_M1011_PHY_SCR_MDI                   (0x0 << 5)
64 #define MII_M1011_PHY_SCR_MDI_X                 (0x1 << 5)
65 #define MII_M1011_PHY_SCR_AUTO_CROSS            (0x3 << 5)
66
67 #define MII_M1011_PHY_SSR                       0x11
68 #define MII_M1011_PHY_SSR_DOWNSHIFT             BIT(5)
69
70 #define MII_M1111_PHY_LED_CONTROL       0x18
71 #define MII_M1111_PHY_LED_DIRECT        0x4100
72 #define MII_M1111_PHY_LED_COMBINE       0x411c
73 #define MII_M1111_PHY_EXT_CR            0x14
74 #define MII_M1111_PHY_EXT_CR_DOWNSHIFT_MASK     GENMASK(11, 9)
75 #define MII_M1111_PHY_EXT_CR_DOWNSHIFT_MAX      8
76 #define MII_M1111_PHY_EXT_CR_DOWNSHIFT_EN       BIT(8)
77 #define MII_M1111_RGMII_RX_DELAY        BIT(7)
78 #define MII_M1111_RGMII_TX_DELAY        BIT(1)
79 #define MII_M1111_PHY_EXT_SR            0x1b
80
81 #define MII_M1111_HWCFG_MODE_MASK               0xf
82 #define MII_M1111_HWCFG_MODE_FIBER_RGMII        0x3
83 #define MII_M1111_HWCFG_MODE_SGMII_NO_CLK       0x4
84 #define MII_M1111_HWCFG_MODE_RTBI               0x7
85 #define MII_M1111_HWCFG_MODE_COPPER_1000X_AN    0x8
86 #define MII_M1111_HWCFG_MODE_COPPER_RTBI        0x9
87 #define MII_M1111_HWCFG_MODE_COPPER_RGMII       0xb
88 #define MII_M1111_HWCFG_MODE_COPPER_1000X_NOAN  0xc
89 #define MII_M1111_HWCFG_SERIAL_AN_BYPASS        BIT(12)
90 #define MII_M1111_HWCFG_FIBER_COPPER_RES        BIT(13)
91 #define MII_M1111_HWCFG_FIBER_COPPER_AUTO       BIT(15)
92
93 #define MII_88E1121_PHY_MSCR_REG        21
94 #define MII_88E1121_PHY_MSCR_RX_DELAY   BIT(5)
95 #define MII_88E1121_PHY_MSCR_TX_DELAY   BIT(4)
96 #define MII_88E1121_PHY_MSCR_DELAY_MASK (BIT(5) | BIT(4))
97
98 #define MII_88E1121_MISC_TEST                           0x1a
99 #define MII_88E1510_MISC_TEST_TEMP_THRESHOLD_MASK       0x1f00
100 #define MII_88E1510_MISC_TEST_TEMP_THRESHOLD_SHIFT      8
101 #define MII_88E1510_MISC_TEST_TEMP_IRQ_EN               BIT(7)
102 #define MII_88E1510_MISC_TEST_TEMP_IRQ                  BIT(6)
103 #define MII_88E1121_MISC_TEST_TEMP_SENSOR_EN            BIT(5)
104 #define MII_88E1121_MISC_TEST_TEMP_MASK                 0x1f
105
106 #define MII_88E1510_TEMP_SENSOR         0x1b
107 #define MII_88E1510_TEMP_SENSOR_MASK    0xff
108
109 #define MII_88E1540_COPPER_CTRL3        0x1a
110 #define MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_MASK   GENMASK(11, 10)
111 #define MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_00MS   0
112 #define MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_10MS   1
113 #define MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_20MS   2
114 #define MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_40MS   3
115 #define MII_88E1540_COPPER_CTRL3_FAST_LINK_DOWN         BIT(9)
116
117 #define MII_88E6390_MISC_TEST           0x1b
118 #define MII_88E6390_MISC_TEST_TEMP_SENSOR_ENABLE_SAMPLE_1S      (0x0 << 14)
119 #define MII_88E6390_MISC_TEST_TEMP_SENSOR_ENABLE                (0x1 << 14)
120 #define MII_88E6390_MISC_TEST_TEMP_SENSOR_ENABLE_ONESHOT        (0x2 << 14)
121 #define MII_88E6390_MISC_TEST_TEMP_SENSOR_DISABLE               (0x3 << 14)
122 #define MII_88E6390_MISC_TEST_TEMP_SENSOR_MASK                  (0x3 << 14)
123 #define MII_88E6393_MISC_TEST_SAMPLES_2048      (0x0 << 11)
124 #define MII_88E6393_MISC_TEST_SAMPLES_4096      (0x1 << 11)
125 #define MII_88E6393_MISC_TEST_SAMPLES_8192      (0x2 << 11)
126 #define MII_88E6393_MISC_TEST_SAMPLES_16384     (0x3 << 11)
127 #define MII_88E6393_MISC_TEST_SAMPLES_MASK      (0x3 << 11)
128 #define MII_88E6393_MISC_TEST_RATE_2_3MS        (0x5 << 8)
129 #define MII_88E6393_MISC_TEST_RATE_6_4MS        (0x6 << 8)
130 #define MII_88E6393_MISC_TEST_RATE_11_9MS       (0x7 << 8)
131 #define MII_88E6393_MISC_TEST_RATE_MASK         (0x7 << 8)
132
133 #define MII_88E6390_TEMP_SENSOR         0x1c
134 #define MII_88E6393_TEMP_SENSOR_THRESHOLD_MASK  0xff00
135 #define MII_88E6393_TEMP_SENSOR_THRESHOLD_SHIFT 8
136 #define MII_88E6390_TEMP_SENSOR_MASK            0xff
137 #define MII_88E6390_TEMP_SENSOR_SAMPLES         10
138
139 #define MII_88E1318S_PHY_MSCR1_REG      16
140 #define MII_88E1318S_PHY_MSCR1_PAD_ODD  BIT(6)
141
142 /* Copper Specific Interrupt Enable Register */
143 #define MII_88E1318S_PHY_CSIER                          0x12
144 /* WOL Event Interrupt Enable */
145 #define MII_88E1318S_PHY_CSIER_WOL_EIE                  BIT(7)
146
147 /* LED Timer Control Register */
148 #define MII_88E1318S_PHY_LED_TCR                        0x12
149 #define MII_88E1318S_PHY_LED_TCR_FORCE_INT              BIT(15)
150 #define MII_88E1318S_PHY_LED_TCR_INTn_ENABLE            BIT(7)
151 #define MII_88E1318S_PHY_LED_TCR_INT_ACTIVE_LOW         BIT(11)
152
153 /* Magic Packet MAC address registers */
154 #define MII_88E1318S_PHY_MAGIC_PACKET_WORD2             0x17
155 #define MII_88E1318S_PHY_MAGIC_PACKET_WORD1             0x18
156 #define MII_88E1318S_PHY_MAGIC_PACKET_WORD0             0x19
157
158 #define MII_88E1318S_PHY_WOL_CTRL                               0x10
159 #define MII_88E1318S_PHY_WOL_CTRL_CLEAR_WOL_STATUS              BIT(12)
160 #define MII_88E1318S_PHY_WOL_CTRL_LINK_UP_ENABLE                BIT(13)
161 #define MII_88E1318S_PHY_WOL_CTRL_MAGIC_PACKET_MATCH_ENABLE     BIT(14)
162
163 #define MII_PHY_LED_CTRL                16
164 #define MII_88E1121_PHY_LED_DEF         0x0030
165 #define MII_88E1510_PHY_LED_DEF         0x1177
166 #define MII_88E1510_PHY_LED0_LINK_LED1_ACTIVE   0x1040
167
168 #define MII_M1011_PHY_STATUS            0x11
169 #define MII_M1011_PHY_STATUS_1000       0x8000
170 #define MII_M1011_PHY_STATUS_100        0x4000
171 #define MII_M1011_PHY_STATUS_SPD_MASK   0xc000
172 #define MII_M1011_PHY_STATUS_FULLDUPLEX 0x2000
173 #define MII_M1011_PHY_STATUS_RESOLVED   0x0800
174 #define MII_M1011_PHY_STATUS_LINK       0x0400
175
176 #define MII_88E3016_PHY_SPEC_CTRL       0x10
177 #define MII_88E3016_DISABLE_SCRAMBLER   0x0200
178 #define MII_88E3016_AUTO_MDIX_CROSSOVER 0x0030
179
180 #define MII_88E1510_GEN_CTRL_REG_1              0x14
181 #define MII_88E1510_GEN_CTRL_REG_1_MODE_MASK    0x7
182 #define MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII   0x0     /* RGMII to copper */
183 #define MII_88E1510_GEN_CTRL_REG_1_MODE_SGMII   0x1     /* SGMII to copper */
184 /* RGMII to 1000BASE-X */
185 #define MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_1000X     0x2
186 /* RGMII to 100BASE-FX */
187 #define MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_100FX     0x3
188 /* RGMII to SGMII */
189 #define MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_SGMII     0x4
190 #define MII_88E1510_GEN_CTRL_REG_1_RESET        0x8000  /* Soft reset */
191
192 #define MII_88E1510_MSCR_2              0x15
193
194 #define MII_VCT5_TX_RX_MDI0_COUPLING    0x10
195 #define MII_VCT5_TX_RX_MDI1_COUPLING    0x11
196 #define MII_VCT5_TX_RX_MDI2_COUPLING    0x12
197 #define MII_VCT5_TX_RX_MDI3_COUPLING    0x13
198 #define MII_VCT5_TX_RX_AMPLITUDE_MASK   0x7f00
199 #define MII_VCT5_TX_RX_AMPLITUDE_SHIFT  8
200 #define MII_VCT5_TX_RX_COUPLING_POSITIVE_REFLECTION     BIT(15)
201
202 #define MII_VCT5_CTRL                           0x17
203 #define MII_VCT5_CTRL_ENABLE                            BIT(15)
204 #define MII_VCT5_CTRL_COMPLETE                          BIT(14)
205 #define MII_VCT5_CTRL_TX_SAME_CHANNEL                   (0x0 << 11)
206 #define MII_VCT5_CTRL_TX0_CHANNEL                       (0x4 << 11)
207 #define MII_VCT5_CTRL_TX1_CHANNEL                       (0x5 << 11)
208 #define MII_VCT5_CTRL_TX2_CHANNEL                       (0x6 << 11)
209 #define MII_VCT5_CTRL_TX3_CHANNEL                       (0x7 << 11)
210 #define MII_VCT5_CTRL_SAMPLES_2                         (0x0 << 8)
211 #define MII_VCT5_CTRL_SAMPLES_4                         (0x1 << 8)
212 #define MII_VCT5_CTRL_SAMPLES_8                         (0x2 << 8)
213 #define MII_VCT5_CTRL_SAMPLES_16                        (0x3 << 8)
214 #define MII_VCT5_CTRL_SAMPLES_32                        (0x4 << 8)
215 #define MII_VCT5_CTRL_SAMPLES_64                        (0x5 << 8)
216 #define MII_VCT5_CTRL_SAMPLES_128                       (0x6 << 8)
217 #define MII_VCT5_CTRL_SAMPLES_DEFAULT                   (0x6 << 8)
218 #define MII_VCT5_CTRL_SAMPLES_256                       (0x7 << 8)
219 #define MII_VCT5_CTRL_SAMPLES_SHIFT                     8
220 #define MII_VCT5_CTRL_MODE_MAXIMUM_PEEK                 (0x0 << 6)
221 #define MII_VCT5_CTRL_MODE_FIRST_LAST_PEEK              (0x1 << 6)
222 #define MII_VCT5_CTRL_MODE_OFFSET                       (0x2 << 6)
223 #define MII_VCT5_CTRL_SAMPLE_POINT                      (0x3 << 6)
224 #define MII_VCT5_CTRL_PEEK_HYST_DEFAULT                 3
225
226 #define MII_VCT5_SAMPLE_POINT_DISTANCE          0x18
227 #define MII_VCT5_SAMPLE_POINT_DISTANCE_MAX      511
228 #define MII_VCT5_TX_PULSE_CTRL                  0x1c
229 #define MII_VCT5_TX_PULSE_CTRL_DONT_WAIT_LINK_DOWN      BIT(12)
230 #define MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_128nS        (0x0 << 10)
231 #define MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_96nS         (0x1 << 10)
232 #define MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_64nS         (0x2 << 10)
233 #define MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_32nS         (0x3 << 10)
234 #define MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_SHIFT        10
235 #define MII_VCT5_TX_PULSE_CTRL_PULSE_AMPLITUDE_1000mV   (0x0 << 8)
236 #define MII_VCT5_TX_PULSE_CTRL_PULSE_AMPLITUDE_750mV    (0x1 << 8)
237 #define MII_VCT5_TX_PULSE_CTRL_PULSE_AMPLITUDE_500mV    (0x2 << 8)
238 #define MII_VCT5_TX_PULSE_CTRL_PULSE_AMPLITUDE_250mV    (0x3 << 8)
239 #define MII_VCT5_TX_PULSE_CTRL_PULSE_AMPLITUDE_SHIFT    8
240 #define MII_VCT5_TX_PULSE_CTRL_MAX_AMP                  BIT(7)
241 #define MII_VCT5_TX_PULSE_CTRL_GT_140m_46_86mV          (0x6 << 0)
242
243 /* For TDR measurements less than 11 meters, a short pulse should be
244  * used.
245  */
246 #define TDR_SHORT_CABLE_LENGTH  11
247
248 #define MII_VCT7_PAIR_0_DISTANCE        0x10
249 #define MII_VCT7_PAIR_1_DISTANCE        0x11
250 #define MII_VCT7_PAIR_2_DISTANCE        0x12
251 #define MII_VCT7_PAIR_3_DISTANCE        0x13
252
253 #define MII_VCT7_RESULTS        0x14
254 #define MII_VCT7_RESULTS_PAIR3_MASK     0xf000
255 #define MII_VCT7_RESULTS_PAIR2_MASK     0x0f00
256 #define MII_VCT7_RESULTS_PAIR1_MASK     0x00f0
257 #define MII_VCT7_RESULTS_PAIR0_MASK     0x000f
258 #define MII_VCT7_RESULTS_PAIR3_SHIFT    12
259 #define MII_VCT7_RESULTS_PAIR2_SHIFT    8
260 #define MII_VCT7_RESULTS_PAIR1_SHIFT    4
261 #define MII_VCT7_RESULTS_PAIR0_SHIFT    0
262 #define MII_VCT7_RESULTS_INVALID        0
263 #define MII_VCT7_RESULTS_OK             1
264 #define MII_VCT7_RESULTS_OPEN           2
265 #define MII_VCT7_RESULTS_SAME_SHORT     3
266 #define MII_VCT7_RESULTS_CROSS_SHORT    4
267 #define MII_VCT7_RESULTS_BUSY           9
268
269 #define MII_VCT7_CTRL           0x15
270 #define MII_VCT7_CTRL_RUN_NOW                   BIT(15)
271 #define MII_VCT7_CTRL_RUN_ANEG                  BIT(14)
272 #define MII_VCT7_CTRL_DISABLE_CROSS             BIT(13)
273 #define MII_VCT7_CTRL_RUN_AFTER_BREAK_LINK      BIT(12)
274 #define MII_VCT7_CTRL_IN_PROGRESS               BIT(11)
275 #define MII_VCT7_CTRL_METERS                    BIT(10)
276 #define MII_VCT7_CTRL_CENTIMETERS               0
277
278 #define LPA_PAUSE_FIBER         0x180
279 #define LPA_PAUSE_ASYM_FIBER    0x100
280
281 #define NB_FIBER_STATS  1
282
283 MODULE_DESCRIPTION("Marvell PHY driver");
284 MODULE_AUTHOR("Andy Fleming");
285 MODULE_LICENSE("GPL");
286
287 struct marvell_hw_stat {
288         const char *string;
289         u8 page;
290         u8 reg;
291         u8 bits;
292 };
293
294 static struct marvell_hw_stat marvell_hw_stats[] = {
295         { "phy_receive_errors_copper", 0, 21, 16},
296         { "phy_idle_errors", 0, 10, 8 },
297         { "phy_receive_errors_fiber", 1, 21, 16},
298 };
299
300 struct marvell_priv {
301         u64 stats[ARRAY_SIZE(marvell_hw_stats)];
302         char *hwmon_name;
303         struct device *hwmon_dev;
304         bool cable_test_tdr;
305         u32 first;
306         u32 last;
307         u32 step;
308         s8 pair;
309 };
310
311 static int marvell_read_page(struct phy_device *phydev)
312 {
313         return __phy_read(phydev, MII_MARVELL_PHY_PAGE);
314 }
315
316 static int marvell_write_page(struct phy_device *phydev, int page)
317 {
318         return __phy_write(phydev, MII_MARVELL_PHY_PAGE, page);
319 }
320
321 static int marvell_set_page(struct phy_device *phydev, int page)
322 {
323         return phy_write(phydev, MII_MARVELL_PHY_PAGE, page);
324 }
325
326 static int marvell_ack_interrupt(struct phy_device *phydev)
327 {
328         int err;
329
330         /* Clear the interrupts by reading the reg */
331         err = phy_read(phydev, MII_M1011_IEVENT);
332
333         if (err < 0)
334                 return err;
335
336         return 0;
337 }
338
339 static int marvell_config_intr(struct phy_device *phydev)
340 {
341         int err;
342
343         if (phydev->interrupts == PHY_INTERRUPT_ENABLED) {
344                 err = marvell_ack_interrupt(phydev);
345                 if (err)
346                         return err;
347
348                 err = phy_write(phydev, MII_M1011_IMASK,
349                                 MII_M1011_IMASK_INIT);
350         } else {
351                 err = phy_write(phydev, MII_M1011_IMASK,
352                                 MII_M1011_IMASK_CLEAR);
353                 if (err)
354                         return err;
355
356                 err = marvell_ack_interrupt(phydev);
357         }
358
359         return err;
360 }
361
362 static irqreturn_t marvell_handle_interrupt(struct phy_device *phydev)
363 {
364         int irq_status;
365
366         irq_status = phy_read(phydev, MII_M1011_IEVENT);
367         if (irq_status < 0) {
368                 phy_error(phydev);
369                 return IRQ_NONE;
370         }
371
372         if (!(irq_status & MII_M1011_IMASK_INIT))
373                 return IRQ_NONE;
374
375         phy_trigger_machine(phydev);
376
377         return IRQ_HANDLED;
378 }
379
380 static int marvell_set_polarity(struct phy_device *phydev, int polarity)
381 {
382         u16 val;
383
384         switch (polarity) {
385         case ETH_TP_MDI:
386                 val = MII_M1011_PHY_SCR_MDI;
387                 break;
388         case ETH_TP_MDI_X:
389                 val = MII_M1011_PHY_SCR_MDI_X;
390                 break;
391         case ETH_TP_MDI_AUTO:
392         case ETH_TP_MDI_INVALID:
393         default:
394                 val = MII_M1011_PHY_SCR_AUTO_CROSS;
395                 break;
396         }
397
398         return phy_modify_changed(phydev, MII_M1011_PHY_SCR,
399                                   MII_M1011_PHY_SCR_AUTO_CROSS, val);
400 }
401
402 static int marvell_config_aneg(struct phy_device *phydev)
403 {
404         int changed = 0;
405         int err;
406
407         err = marvell_set_polarity(phydev, phydev->mdix_ctrl);
408         if (err < 0)
409                 return err;
410
411         changed = err;
412
413         err = phy_write(phydev, MII_M1111_PHY_LED_CONTROL,
414                         MII_M1111_PHY_LED_DIRECT);
415         if (err < 0)
416                 return err;
417
418         err = genphy_config_aneg(phydev);
419         if (err < 0)
420                 return err;
421
422         if (phydev->autoneg != AUTONEG_ENABLE || changed) {
423                 /* A write to speed/duplex bits (that is performed by
424                  * genphy_config_aneg() call above) must be followed by
425                  * a software reset. Otherwise, the write has no effect.
426                  */
427                 err = genphy_soft_reset(phydev);
428                 if (err < 0)
429                         return err;
430         }
431
432         return 0;
433 }
434
435 static int m88e1101_config_aneg(struct phy_device *phydev)
436 {
437         int err;
438
439         /* This Marvell PHY has an errata which requires
440          * that certain registers get written in order
441          * to restart autonegotiation
442          */
443         err = genphy_soft_reset(phydev);
444         if (err < 0)
445                 return err;
446
447         err = phy_write(phydev, 0x1d, 0x1f);
448         if (err < 0)
449                 return err;
450
451         err = phy_write(phydev, 0x1e, 0x200c);
452         if (err < 0)
453                 return err;
454
455         err = phy_write(phydev, 0x1d, 0x5);
456         if (err < 0)
457                 return err;
458
459         err = phy_write(phydev, 0x1e, 0);
460         if (err < 0)
461                 return err;
462
463         err = phy_write(phydev, 0x1e, 0x100);
464         if (err < 0)
465                 return err;
466
467         return marvell_config_aneg(phydev);
468 }
469
470 #if IS_ENABLED(CONFIG_OF_MDIO)
471 /* Set and/or override some configuration registers based on the
472  * marvell,reg-init property stored in the of_node for the phydev.
473  *
474  * marvell,reg-init = <reg-page reg mask value>,...;
475  *
476  * There may be one or more sets of <reg-page reg mask value>:
477  *
478  * reg-page: which register bank to use.
479  * reg: the register.
480  * mask: if non-zero, ANDed with existing register value.
481  * value: ORed with the masked value and written to the regiser.
482  *
483  */
484 static int marvell_of_reg_init(struct phy_device *phydev)
485 {
486         const __be32 *paddr;
487         int len, i, saved_page, current_page, ret = 0;
488
489         if (!phydev->mdio.dev.of_node)
490                 return 0;
491
492         paddr = of_get_property(phydev->mdio.dev.of_node,
493                                 "marvell,reg-init", &len);
494         if (!paddr || len < (4 * sizeof(*paddr)))
495                 return 0;
496
497         saved_page = phy_save_page(phydev);
498         if (saved_page < 0)
499                 goto err;
500         current_page = saved_page;
501
502         len /= sizeof(*paddr);
503         for (i = 0; i < len - 3; i += 4) {
504                 u16 page = be32_to_cpup(paddr + i);
505                 u16 reg = be32_to_cpup(paddr + i + 1);
506                 u16 mask = be32_to_cpup(paddr + i + 2);
507                 u16 val_bits = be32_to_cpup(paddr + i + 3);
508                 int val;
509
510                 if (page != current_page) {
511                         current_page = page;
512                         ret = marvell_write_page(phydev, page);
513                         if (ret < 0)
514                                 goto err;
515                 }
516
517                 val = 0;
518                 if (mask) {
519                         val = __phy_read(phydev, reg);
520                         if (val < 0) {
521                                 ret = val;
522                                 goto err;
523                         }
524                         val &= mask;
525                 }
526                 val |= val_bits;
527
528                 ret = __phy_write(phydev, reg, val);
529                 if (ret < 0)
530                         goto err;
531         }
532 err:
533         return phy_restore_page(phydev, saved_page, ret);
534 }
535 #else
536 static int marvell_of_reg_init(struct phy_device *phydev)
537 {
538         return 0;
539 }
540 #endif /* CONFIG_OF_MDIO */
541
542 static int m88e1121_config_aneg_rgmii_delays(struct phy_device *phydev)
543 {
544         int mscr;
545
546         if (phydev->interface == PHY_INTERFACE_MODE_RGMII_ID)
547                 mscr = MII_88E1121_PHY_MSCR_RX_DELAY |
548                        MII_88E1121_PHY_MSCR_TX_DELAY;
549         else if (phydev->interface == PHY_INTERFACE_MODE_RGMII_RXID)
550                 mscr = MII_88E1121_PHY_MSCR_RX_DELAY;
551         else if (phydev->interface == PHY_INTERFACE_MODE_RGMII_TXID)
552                 mscr = MII_88E1121_PHY_MSCR_TX_DELAY;
553         else
554                 mscr = 0;
555
556         return phy_modify_paged_changed(phydev, MII_MARVELL_MSCR_PAGE,
557                                         MII_88E1121_PHY_MSCR_REG,
558                                         MII_88E1121_PHY_MSCR_DELAY_MASK, mscr);
559 }
560
561 static int m88e1121_config_aneg(struct phy_device *phydev)
562 {
563         int changed = 0;
564         int err = 0;
565
566         if (phy_interface_is_rgmii(phydev)) {
567                 err = m88e1121_config_aneg_rgmii_delays(phydev);
568                 if (err < 0)
569                         return err;
570         }
571
572         changed = err;
573
574         err = marvell_set_polarity(phydev, phydev->mdix_ctrl);
575         if (err < 0)
576                 return err;
577
578         changed |= err;
579
580         err = genphy_config_aneg(phydev);
581         if (err < 0)
582                 return err;
583
584         if (phydev->autoneg != AUTONEG_ENABLE || changed) {
585                 /* A software reset is used to ensure a "commit" of the
586                  * changes is done.
587                  */
588                 err = genphy_soft_reset(phydev);
589                 if (err < 0)
590                         return err;
591         }
592
593         return 0;
594 }
595
596 static int m88e1318_config_aneg(struct phy_device *phydev)
597 {
598         int err;
599
600         err = phy_modify_paged(phydev, MII_MARVELL_MSCR_PAGE,
601                                MII_88E1318S_PHY_MSCR1_REG,
602                                0, MII_88E1318S_PHY_MSCR1_PAD_ODD);
603         if (err < 0)
604                 return err;
605
606         return m88e1121_config_aneg(phydev);
607 }
608
609 /**
610  * linkmode_adv_to_fiber_adv_t
611  * @advertise: the linkmode advertisement settings
612  *
613  * A small helper function that translates linkmode advertisement
614  * settings to phy autonegotiation advertisements for the MII_ADV
615  * register for fiber link.
616  */
617 static inline u32 linkmode_adv_to_fiber_adv_t(unsigned long *advertise)
618 {
619         u32 result = 0;
620
621         if (linkmode_test_bit(ETHTOOL_LINK_MODE_1000baseT_Half_BIT, advertise))
622                 result |= ADVERTISE_1000XHALF;
623         if (linkmode_test_bit(ETHTOOL_LINK_MODE_1000baseT_Full_BIT, advertise))
624                 result |= ADVERTISE_1000XFULL;
625
626         if (linkmode_test_bit(ETHTOOL_LINK_MODE_Asym_Pause_BIT, advertise) &&
627             linkmode_test_bit(ETHTOOL_LINK_MODE_Pause_BIT, advertise))
628                 result |= ADVERTISE_1000XPSE_ASYM;
629         else if (linkmode_test_bit(ETHTOOL_LINK_MODE_Pause_BIT, advertise))
630                 result |= ADVERTISE_1000XPAUSE;
631
632         return result;
633 }
634
635 /**
636  * marvell_config_aneg_fiber - restart auto-negotiation or write BMCR
637  * @phydev: target phy_device struct
638  *
639  * Description: If auto-negotiation is enabled, we configure the
640  *   advertising, and then restart auto-negotiation.  If it is not
641  *   enabled, then we write the BMCR. Adapted for fiber link in
642  *   some Marvell's devices.
643  */
644 static int marvell_config_aneg_fiber(struct phy_device *phydev)
645 {
646         int changed = 0;
647         int err;
648         u16 adv;
649
650         if (phydev->autoneg != AUTONEG_ENABLE)
651                 return genphy_setup_forced(phydev);
652
653         /* Only allow advertising what this PHY supports */
654         linkmode_and(phydev->advertising, phydev->advertising,
655                      phydev->supported);
656
657         adv = linkmode_adv_to_fiber_adv_t(phydev->advertising);
658
659         /* Setup fiber advertisement */
660         err = phy_modify_changed(phydev, MII_ADVERTISE,
661                                  ADVERTISE_1000XHALF | ADVERTISE_1000XFULL |
662                                  ADVERTISE_1000XPAUSE | ADVERTISE_1000XPSE_ASYM,
663                                  adv);
664         if (err < 0)
665                 return err;
666         if (err > 0)
667                 changed = 1;
668
669         return genphy_check_and_restart_aneg(phydev, changed);
670 }
671
672 static int m88e1111_config_aneg(struct phy_device *phydev)
673 {
674         int extsr = phy_read(phydev, MII_M1111_PHY_EXT_SR);
675         int err;
676
677         if (extsr < 0)
678                 return extsr;
679
680         /* If not using SGMII or copper 1000BaseX modes, use normal process.
681          * Steps below are only required for these modes.
682          */
683         if (phydev->interface != PHY_INTERFACE_MODE_SGMII &&
684             (extsr & MII_M1111_HWCFG_MODE_MASK) !=
685             MII_M1111_HWCFG_MODE_COPPER_1000X_AN)
686                 return marvell_config_aneg(phydev);
687
688         err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
689         if (err < 0)
690                 goto error;
691
692         /* Configure the copper link first */
693         err = marvell_config_aneg(phydev);
694         if (err < 0)
695                 goto error;
696
697         /* Then the fiber link */
698         err = marvell_set_page(phydev, MII_MARVELL_FIBER_PAGE);
699         if (err < 0)
700                 goto error;
701
702         if (phydev->interface == PHY_INTERFACE_MODE_SGMII)
703                 /* Do not touch the fiber advertisement if we're in copper->sgmii mode.
704                  * Just ensure that SGMII-side autonegotiation is enabled.
705                  * If we switched from some other mode to SGMII it may not be.
706                  */
707                 err = genphy_check_and_restart_aneg(phydev, false);
708         else
709                 err = marvell_config_aneg_fiber(phydev);
710         if (err < 0)
711                 goto error;
712
713         return marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
714
715 error:
716         marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
717         return err;
718 }
719
720 static int m88e1510_config_aneg(struct phy_device *phydev)
721 {
722         int err;
723
724         err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
725         if (err < 0)
726                 goto error;
727
728         /* Configure the copper link first */
729         err = m88e1318_config_aneg(phydev);
730         if (err < 0)
731                 goto error;
732
733         /* Do not touch the fiber page if we're in copper->sgmii mode */
734         if (phydev->interface == PHY_INTERFACE_MODE_SGMII)
735                 return 0;
736
737         /* Then the fiber link */
738         err = marvell_set_page(phydev, MII_MARVELL_FIBER_PAGE);
739         if (err < 0)
740                 goto error;
741
742         err = marvell_config_aneg_fiber(phydev);
743         if (err < 0)
744                 goto error;
745
746         return marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
747
748 error:
749         marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
750         return err;
751 }
752
753 static void marvell_config_led(struct phy_device *phydev)
754 {
755         u16 def_config;
756         int err;
757
758         switch (MARVELL_PHY_FAMILY_ID(phydev->phy_id)) {
759         /* Default PHY LED config: LED[0] .. Link, LED[1] .. Activity */
760         case MARVELL_PHY_FAMILY_ID(MARVELL_PHY_ID_88E1121R):
761         case MARVELL_PHY_FAMILY_ID(MARVELL_PHY_ID_88E1318S):
762                 def_config = MII_88E1121_PHY_LED_DEF;
763                 break;
764         /* Default PHY LED config:
765          * LED[0] .. 1000Mbps Link
766          * LED[1] .. 100Mbps Link
767          * LED[2] .. Blink, Activity
768          */
769         case MARVELL_PHY_FAMILY_ID(MARVELL_PHY_ID_88E1510):
770                 if (phydev->dev_flags & MARVELL_PHY_LED0_LINK_LED1_ACTIVE)
771                         def_config = MII_88E1510_PHY_LED0_LINK_LED1_ACTIVE;
772                 else
773                         def_config = MII_88E1510_PHY_LED_DEF;
774                 break;
775         default:
776                 return;
777         }
778
779         err = phy_write_paged(phydev, MII_MARVELL_LED_PAGE, MII_PHY_LED_CTRL,
780                               def_config);
781         if (err < 0)
782                 phydev_warn(phydev, "Fail to config marvell phy LED.\n");
783 }
784
785 static int marvell_config_init(struct phy_device *phydev)
786 {
787         /* Set default LED */
788         marvell_config_led(phydev);
789
790         /* Set registers from marvell,reg-init DT property */
791         return marvell_of_reg_init(phydev);
792 }
793
794 static int m88e3016_config_init(struct phy_device *phydev)
795 {
796         int ret;
797
798         /* Enable Scrambler and Auto-Crossover */
799         ret = phy_modify(phydev, MII_88E3016_PHY_SPEC_CTRL,
800                          MII_88E3016_DISABLE_SCRAMBLER,
801                          MII_88E3016_AUTO_MDIX_CROSSOVER);
802         if (ret < 0)
803                 return ret;
804
805         return marvell_config_init(phydev);
806 }
807
808 static int m88e1111_config_init_hwcfg_mode(struct phy_device *phydev,
809                                            u16 mode,
810                                            int fibre_copper_auto)
811 {
812         if (fibre_copper_auto)
813                 mode |= MII_M1111_HWCFG_FIBER_COPPER_AUTO;
814
815         return phy_modify(phydev, MII_M1111_PHY_EXT_SR,
816                           MII_M1111_HWCFG_MODE_MASK |
817                           MII_M1111_HWCFG_FIBER_COPPER_AUTO |
818                           MII_M1111_HWCFG_FIBER_COPPER_RES,
819                           mode);
820 }
821
822 static int m88e1111_config_init_rgmii_delays(struct phy_device *phydev)
823 {
824         int delay;
825
826         switch (phydev->interface) {
827         case PHY_INTERFACE_MODE_RGMII_ID:
828                 delay = MII_M1111_RGMII_RX_DELAY | MII_M1111_RGMII_TX_DELAY;
829                 break;
830         case PHY_INTERFACE_MODE_RGMII_RXID:
831                 delay = MII_M1111_RGMII_RX_DELAY;
832                 break;
833         case PHY_INTERFACE_MODE_RGMII_TXID:
834                 delay = MII_M1111_RGMII_TX_DELAY;
835                 break;
836         default:
837                 delay = 0;
838                 break;
839         }
840
841         return phy_modify(phydev, MII_M1111_PHY_EXT_CR,
842                           MII_M1111_RGMII_RX_DELAY | MII_M1111_RGMII_TX_DELAY,
843                           delay);
844 }
845
846 static int m88e1111_config_init_rgmii(struct phy_device *phydev)
847 {
848         int temp;
849         int err;
850
851         err = m88e1111_config_init_rgmii_delays(phydev);
852         if (err < 0)
853                 return err;
854
855         temp = phy_read(phydev, MII_M1111_PHY_EXT_SR);
856         if (temp < 0)
857                 return temp;
858
859         temp &= ~(MII_M1111_HWCFG_MODE_MASK);
860
861         if (temp & MII_M1111_HWCFG_FIBER_COPPER_RES)
862                 temp |= MII_M1111_HWCFG_MODE_FIBER_RGMII;
863         else
864                 temp |= MII_M1111_HWCFG_MODE_COPPER_RGMII;
865
866         return phy_write(phydev, MII_M1111_PHY_EXT_SR, temp);
867 }
868
869 static int m88e1111_config_init_sgmii(struct phy_device *phydev)
870 {
871         int err;
872
873         err = m88e1111_config_init_hwcfg_mode(
874                 phydev,
875                 MII_M1111_HWCFG_MODE_SGMII_NO_CLK,
876                 MII_M1111_HWCFG_FIBER_COPPER_AUTO);
877         if (err < 0)
878                 return err;
879
880         /* make sure copper is selected */
881         return marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
882 }
883
884 static int m88e1111_config_init_rtbi(struct phy_device *phydev)
885 {
886         int err;
887
888         err = m88e1111_config_init_rgmii_delays(phydev);
889         if (err < 0)
890                 return err;
891
892         err = m88e1111_config_init_hwcfg_mode(
893                 phydev,
894                 MII_M1111_HWCFG_MODE_RTBI,
895                 MII_M1111_HWCFG_FIBER_COPPER_AUTO);
896         if (err < 0)
897                 return err;
898
899         /* soft reset */
900         err = genphy_soft_reset(phydev);
901         if (err < 0)
902                 return err;
903
904         return m88e1111_config_init_hwcfg_mode(
905                 phydev,
906                 MII_M1111_HWCFG_MODE_RTBI,
907                 MII_M1111_HWCFG_FIBER_COPPER_AUTO);
908 }
909
910 static int m88e1111_config_init_1000basex(struct phy_device *phydev)
911 {
912         int extsr = phy_read(phydev, MII_M1111_PHY_EXT_SR);
913         int err, mode;
914
915         if (extsr < 0)
916                 return extsr;
917
918         /* If using copper mode, ensure 1000BaseX auto-negotiation is enabled */
919         mode = extsr & MII_M1111_HWCFG_MODE_MASK;
920         if (mode == MII_M1111_HWCFG_MODE_COPPER_1000X_NOAN) {
921                 err = phy_modify(phydev, MII_M1111_PHY_EXT_SR,
922                                  MII_M1111_HWCFG_MODE_MASK |
923                                  MII_M1111_HWCFG_SERIAL_AN_BYPASS,
924                                  MII_M1111_HWCFG_MODE_COPPER_1000X_AN |
925                                  MII_M1111_HWCFG_SERIAL_AN_BYPASS);
926                 if (err < 0)
927                         return err;
928         }
929         return 0;
930 }
931
932 static int m88e1111_config_init(struct phy_device *phydev)
933 {
934         int err;
935
936         if (phy_interface_is_rgmii(phydev)) {
937                 err = m88e1111_config_init_rgmii(phydev);
938                 if (err < 0)
939                         return err;
940         }
941
942         if (phydev->interface == PHY_INTERFACE_MODE_SGMII) {
943                 err = m88e1111_config_init_sgmii(phydev);
944                 if (err < 0)
945                         return err;
946         }
947
948         if (phydev->interface == PHY_INTERFACE_MODE_RTBI) {
949                 err = m88e1111_config_init_rtbi(phydev);
950                 if (err < 0)
951                         return err;
952         }
953
954         if (phydev->interface == PHY_INTERFACE_MODE_1000BASEX) {
955                 err = m88e1111_config_init_1000basex(phydev);
956                 if (err < 0)
957                         return err;
958         }
959
960         err = marvell_of_reg_init(phydev);
961         if (err < 0)
962                 return err;
963
964         return genphy_soft_reset(phydev);
965 }
966
967 static int m88e1111_get_downshift(struct phy_device *phydev, u8 *data)
968 {
969         int val, cnt, enable;
970
971         val = phy_read(phydev, MII_M1111_PHY_EXT_CR);
972         if (val < 0)
973                 return val;
974
975         enable = FIELD_GET(MII_M1111_PHY_EXT_CR_DOWNSHIFT_EN, val);
976         cnt = FIELD_GET(MII_M1111_PHY_EXT_CR_DOWNSHIFT_MASK, val) + 1;
977
978         *data = enable ? cnt : DOWNSHIFT_DEV_DISABLE;
979
980         return 0;
981 }
982
983 static int m88e1111_set_downshift(struct phy_device *phydev, u8 cnt)
984 {
985         int val, err;
986
987         if (cnt > MII_M1111_PHY_EXT_CR_DOWNSHIFT_MAX)
988                 return -E2BIG;
989
990         if (!cnt) {
991                 err = phy_clear_bits(phydev, MII_M1111_PHY_EXT_CR,
992                                      MII_M1111_PHY_EXT_CR_DOWNSHIFT_EN);
993         } else {
994                 val = MII_M1111_PHY_EXT_CR_DOWNSHIFT_EN;
995                 val |= FIELD_PREP(MII_M1111_PHY_EXT_CR_DOWNSHIFT_MASK, cnt - 1);
996
997                 err = phy_modify(phydev, MII_M1111_PHY_EXT_CR,
998                                  MII_M1111_PHY_EXT_CR_DOWNSHIFT_EN |
999                                  MII_M1111_PHY_EXT_CR_DOWNSHIFT_MASK,
1000                                  val);
1001         }
1002
1003         if (err < 0)
1004                 return err;
1005
1006         return genphy_soft_reset(phydev);
1007 }
1008
1009 static int m88e1111_get_tunable(struct phy_device *phydev,
1010                                 struct ethtool_tunable *tuna, void *data)
1011 {
1012         switch (tuna->id) {
1013         case ETHTOOL_PHY_DOWNSHIFT:
1014                 return m88e1111_get_downshift(phydev, data);
1015         default:
1016                 return -EOPNOTSUPP;
1017         }
1018 }
1019
1020 static int m88e1111_set_tunable(struct phy_device *phydev,
1021                                 struct ethtool_tunable *tuna, const void *data)
1022 {
1023         switch (tuna->id) {
1024         case ETHTOOL_PHY_DOWNSHIFT:
1025                 return m88e1111_set_downshift(phydev, *(const u8 *)data);
1026         default:
1027                 return -EOPNOTSUPP;
1028         }
1029 }
1030
1031 static int m88e1011_get_downshift(struct phy_device *phydev, u8 *data)
1032 {
1033         int val, cnt, enable;
1034
1035         val = phy_read(phydev, MII_M1011_PHY_SCR);
1036         if (val < 0)
1037                 return val;
1038
1039         enable = FIELD_GET(MII_M1011_PHY_SCR_DOWNSHIFT_EN, val);
1040         cnt = FIELD_GET(MII_M1011_PHY_SCR_DOWNSHIFT_MASK, val) + 1;
1041
1042         *data = enable ? cnt : DOWNSHIFT_DEV_DISABLE;
1043
1044         return 0;
1045 }
1046
1047 static int m88e1011_set_downshift(struct phy_device *phydev, u8 cnt)
1048 {
1049         int val, err;
1050
1051         if (cnt > MII_M1011_PHY_SCR_DOWNSHIFT_MAX)
1052                 return -E2BIG;
1053
1054         if (!cnt) {
1055                 err = phy_clear_bits(phydev, MII_M1011_PHY_SCR,
1056                                      MII_M1011_PHY_SCR_DOWNSHIFT_EN);
1057         } else {
1058                 val = MII_M1011_PHY_SCR_DOWNSHIFT_EN;
1059                 val |= FIELD_PREP(MII_M1011_PHY_SCR_DOWNSHIFT_MASK, cnt - 1);
1060
1061                 err = phy_modify(phydev, MII_M1011_PHY_SCR,
1062                                  MII_M1011_PHY_SCR_DOWNSHIFT_EN |
1063                                  MII_M1011_PHY_SCR_DOWNSHIFT_MASK,
1064                                  val);
1065         }
1066
1067         if (err < 0)
1068                 return err;
1069
1070         return genphy_soft_reset(phydev);
1071 }
1072
1073 static int m88e1011_get_tunable(struct phy_device *phydev,
1074                                 struct ethtool_tunable *tuna, void *data)
1075 {
1076         switch (tuna->id) {
1077         case ETHTOOL_PHY_DOWNSHIFT:
1078                 return m88e1011_get_downshift(phydev, data);
1079         default:
1080                 return -EOPNOTSUPP;
1081         }
1082 }
1083
1084 static int m88e1011_set_tunable(struct phy_device *phydev,
1085                                 struct ethtool_tunable *tuna, const void *data)
1086 {
1087         switch (tuna->id) {
1088         case ETHTOOL_PHY_DOWNSHIFT:
1089                 return m88e1011_set_downshift(phydev, *(const u8 *)data);
1090         default:
1091                 return -EOPNOTSUPP;
1092         }
1093 }
1094
1095 static int m88e1112_config_init(struct phy_device *phydev)
1096 {
1097         int err;
1098
1099         err = m88e1011_set_downshift(phydev, 3);
1100         if (err < 0)
1101                 return err;
1102
1103         return m88e1111_config_init(phydev);
1104 }
1105
1106 static int m88e1111gbe_config_init(struct phy_device *phydev)
1107 {
1108         int err;
1109
1110         err = m88e1111_set_downshift(phydev, 3);
1111         if (err < 0)
1112                 return err;
1113
1114         return m88e1111_config_init(phydev);
1115 }
1116
1117 static int marvell_1011gbe_config_init(struct phy_device *phydev)
1118 {
1119         int err;
1120
1121         err = m88e1011_set_downshift(phydev, 3);
1122         if (err < 0)
1123                 return err;
1124
1125         return marvell_config_init(phydev);
1126 }
1127 static int m88e1116r_config_init(struct phy_device *phydev)
1128 {
1129         int err;
1130
1131         err = genphy_soft_reset(phydev);
1132         if (err < 0)
1133                 return err;
1134
1135         msleep(500);
1136
1137         err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1138         if (err < 0)
1139                 return err;
1140
1141         err = marvell_set_polarity(phydev, phydev->mdix_ctrl);
1142         if (err < 0)
1143                 return err;
1144
1145         err = m88e1011_set_downshift(phydev, 8);
1146         if (err < 0)
1147                 return err;
1148
1149         if (phy_interface_is_rgmii(phydev)) {
1150                 err = m88e1121_config_aneg_rgmii_delays(phydev);
1151                 if (err < 0)
1152                         return err;
1153         }
1154
1155         err = genphy_soft_reset(phydev);
1156         if (err < 0)
1157                 return err;
1158
1159         return marvell_config_init(phydev);
1160 }
1161
1162 static int m88e1318_config_init(struct phy_device *phydev)
1163 {
1164         if (phy_interrupt_is_valid(phydev)) {
1165                 int err = phy_modify_paged(
1166                         phydev, MII_MARVELL_LED_PAGE,
1167                         MII_88E1318S_PHY_LED_TCR,
1168                         MII_88E1318S_PHY_LED_TCR_FORCE_INT,
1169                         MII_88E1318S_PHY_LED_TCR_INTn_ENABLE |
1170                         MII_88E1318S_PHY_LED_TCR_INT_ACTIVE_LOW);
1171                 if (err < 0)
1172                         return err;
1173         }
1174
1175         return marvell_config_init(phydev);
1176 }
1177
1178 static int m88e1510_config_init(struct phy_device *phydev)
1179 {
1180         int err;
1181
1182         /* SGMII-to-Copper mode initialization */
1183         if (phydev->interface == PHY_INTERFACE_MODE_SGMII) {
1184                 /* Select page 18 */
1185                 err = marvell_set_page(phydev, 18);
1186                 if (err < 0)
1187                         return err;
1188
1189                 /* In reg 20, write MODE[2:0] = 0x1 (SGMII to Copper) */
1190                 err = phy_modify(phydev, MII_88E1510_GEN_CTRL_REG_1,
1191                                  MII_88E1510_GEN_CTRL_REG_1_MODE_MASK,
1192                                  MII_88E1510_GEN_CTRL_REG_1_MODE_SGMII);
1193                 if (err < 0)
1194                         return err;
1195
1196                 /* PHY reset is necessary after changing MODE[2:0] */
1197                 err = phy_set_bits(phydev, MII_88E1510_GEN_CTRL_REG_1,
1198                                    MII_88E1510_GEN_CTRL_REG_1_RESET);
1199                 if (err < 0)
1200                         return err;
1201
1202                 /* Reset page selection */
1203                 err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1204                 if (err < 0)
1205                         return err;
1206         }
1207         err = m88e1011_set_downshift(phydev, 3);
1208         if (err < 0)
1209                 return err;
1210
1211         return m88e1318_config_init(phydev);
1212 }
1213
1214 static int m88e1118_config_aneg(struct phy_device *phydev)
1215 {
1216         int err;
1217
1218         err = marvell_set_polarity(phydev, phydev->mdix_ctrl);
1219         if (err < 0)
1220                 return err;
1221
1222         err = genphy_config_aneg(phydev);
1223         if (err < 0)
1224                 return err;
1225
1226         return genphy_soft_reset(phydev);
1227 }
1228
1229 static int m88e1118_config_init(struct phy_device *phydev)
1230 {
1231         int err;
1232
1233         /* Change address */
1234         err = marvell_set_page(phydev, MII_MARVELL_MSCR_PAGE);
1235         if (err < 0)
1236                 return err;
1237
1238         /* Enable 1000 Mbit */
1239         err = phy_write(phydev, 0x15, 0x1070);
1240         if (err < 0)
1241                 return err;
1242
1243         /* Change address */
1244         err = marvell_set_page(phydev, MII_MARVELL_LED_PAGE);
1245         if (err < 0)
1246                 return err;
1247
1248         if (phy_interface_is_rgmii(phydev)) {
1249                 err = m88e1121_config_aneg_rgmii_delays(phydev);
1250                 if (err < 0)
1251                         return err;
1252         }
1253
1254         /* Adjust LED Control */
1255         if (phydev->dev_flags & MARVELL_PHY_M1118_DNS323_LEDS)
1256                 err = phy_write(phydev, 0x10, 0x1100);
1257         else
1258                 err = phy_write(phydev, 0x10, 0x021e);
1259         if (err < 0)
1260                 return err;
1261
1262         err = marvell_of_reg_init(phydev);
1263         if (err < 0)
1264                 return err;
1265
1266         /* Reset address */
1267         err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1268         if (err < 0)
1269                 return err;
1270
1271         return genphy_soft_reset(phydev);
1272 }
1273
1274 static int m88e1149_config_init(struct phy_device *phydev)
1275 {
1276         int err;
1277
1278         /* Change address */
1279         err = marvell_set_page(phydev, MII_MARVELL_MSCR_PAGE);
1280         if (err < 0)
1281                 return err;
1282
1283         /* Enable 1000 Mbit */
1284         err = phy_write(phydev, 0x15, 0x1048);
1285         if (err < 0)
1286                 return err;
1287
1288         err = marvell_of_reg_init(phydev);
1289         if (err < 0)
1290                 return err;
1291
1292         /* Reset address */
1293         err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1294         if (err < 0)
1295                 return err;
1296
1297         return genphy_soft_reset(phydev);
1298 }
1299
1300 static int m88e1145_config_init_rgmii(struct phy_device *phydev)
1301 {
1302         int err;
1303
1304         err = m88e1111_config_init_rgmii_delays(phydev);
1305         if (err < 0)
1306                 return err;
1307
1308         if (phydev->dev_flags & MARVELL_PHY_M1145_FLAGS_RESISTANCE) {
1309                 err = phy_write(phydev, 0x1d, 0x0012);
1310                 if (err < 0)
1311                         return err;
1312
1313                 err = phy_modify(phydev, 0x1e, 0x0fc0,
1314                                  2 << 9 | /* 36 ohm */
1315                                  2 << 6); /* 39 ohm */
1316                 if (err < 0)
1317                         return err;
1318
1319                 err = phy_write(phydev, 0x1d, 0x3);
1320                 if (err < 0)
1321                         return err;
1322
1323                 err = phy_write(phydev, 0x1e, 0x8000);
1324         }
1325         return err;
1326 }
1327
1328 static int m88e1145_config_init_sgmii(struct phy_device *phydev)
1329 {
1330         return m88e1111_config_init_hwcfg_mode(
1331                 phydev, MII_M1111_HWCFG_MODE_SGMII_NO_CLK,
1332                 MII_M1111_HWCFG_FIBER_COPPER_AUTO);
1333 }
1334
1335 static int m88e1145_config_init(struct phy_device *phydev)
1336 {
1337         int err;
1338
1339         /* Take care of errata E0 & E1 */
1340         err = phy_write(phydev, 0x1d, 0x001b);
1341         if (err < 0)
1342                 return err;
1343
1344         err = phy_write(phydev, 0x1e, 0x418f);
1345         if (err < 0)
1346                 return err;
1347
1348         err = phy_write(phydev, 0x1d, 0x0016);
1349         if (err < 0)
1350                 return err;
1351
1352         err = phy_write(phydev, 0x1e, 0xa2da);
1353         if (err < 0)
1354                 return err;
1355
1356         if (phydev->interface == PHY_INTERFACE_MODE_RGMII_ID) {
1357                 err = m88e1145_config_init_rgmii(phydev);
1358                 if (err < 0)
1359                         return err;
1360         }
1361
1362         if (phydev->interface == PHY_INTERFACE_MODE_SGMII) {
1363                 err = m88e1145_config_init_sgmii(phydev);
1364                 if (err < 0)
1365                         return err;
1366         }
1367         err = m88e1111_set_downshift(phydev, 3);
1368         if (err < 0)
1369                 return err;
1370
1371         err = marvell_of_reg_init(phydev);
1372         if (err < 0)
1373                 return err;
1374
1375         return 0;
1376 }
1377
1378 static int m88e1540_get_fld(struct phy_device *phydev, u8 *msecs)
1379 {
1380         int val;
1381
1382         val = phy_read(phydev, MII_88E1540_COPPER_CTRL3);
1383         if (val < 0)
1384                 return val;
1385
1386         if (!(val & MII_88E1540_COPPER_CTRL3_FAST_LINK_DOWN)) {
1387                 *msecs = ETHTOOL_PHY_FAST_LINK_DOWN_OFF;
1388                 return 0;
1389         }
1390
1391         val = FIELD_GET(MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_MASK, val);
1392
1393         switch (val) {
1394         case MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_00MS:
1395                 *msecs = 0;
1396                 break;
1397         case MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_10MS:
1398                 *msecs = 10;
1399                 break;
1400         case MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_20MS:
1401                 *msecs = 20;
1402                 break;
1403         case MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_40MS:
1404                 *msecs = 40;
1405                 break;
1406         default:
1407                 return -EINVAL;
1408         }
1409
1410         return 0;
1411 }
1412
1413 static int m88e1540_set_fld(struct phy_device *phydev, const u8 *msecs)
1414 {
1415         struct ethtool_eee eee;
1416         int val, ret;
1417
1418         if (*msecs == ETHTOOL_PHY_FAST_LINK_DOWN_OFF)
1419                 return phy_clear_bits(phydev, MII_88E1540_COPPER_CTRL3,
1420                                       MII_88E1540_COPPER_CTRL3_FAST_LINK_DOWN);
1421
1422         /* According to the Marvell data sheet EEE must be disabled for
1423          * Fast Link Down detection to work properly
1424          */
1425         ret = phy_ethtool_get_eee(phydev, &eee);
1426         if (!ret && eee.eee_enabled) {
1427                 phydev_warn(phydev, "Fast Link Down detection requires EEE to be disabled!\n");
1428                 return -EBUSY;
1429         }
1430
1431         if (*msecs <= 5)
1432                 val = MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_00MS;
1433         else if (*msecs <= 15)
1434                 val = MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_10MS;
1435         else if (*msecs <= 30)
1436                 val = MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_20MS;
1437         else
1438                 val = MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_40MS;
1439
1440         val = FIELD_PREP(MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_MASK, val);
1441
1442         ret = phy_modify(phydev, MII_88E1540_COPPER_CTRL3,
1443                          MII_88E1540_COPPER_CTRL3_LINK_DOWN_DELAY_MASK, val);
1444         if (ret)
1445                 return ret;
1446
1447         return phy_set_bits(phydev, MII_88E1540_COPPER_CTRL3,
1448                             MII_88E1540_COPPER_CTRL3_FAST_LINK_DOWN);
1449 }
1450
1451 static int m88e1540_get_tunable(struct phy_device *phydev,
1452                                 struct ethtool_tunable *tuna, void *data)
1453 {
1454         switch (tuna->id) {
1455         case ETHTOOL_PHY_FAST_LINK_DOWN:
1456                 return m88e1540_get_fld(phydev, data);
1457         case ETHTOOL_PHY_DOWNSHIFT:
1458                 return m88e1011_get_downshift(phydev, data);
1459         default:
1460                 return -EOPNOTSUPP;
1461         }
1462 }
1463
1464 static int m88e1540_set_tunable(struct phy_device *phydev,
1465                                 struct ethtool_tunable *tuna, const void *data)
1466 {
1467         switch (tuna->id) {
1468         case ETHTOOL_PHY_FAST_LINK_DOWN:
1469                 return m88e1540_set_fld(phydev, data);
1470         case ETHTOOL_PHY_DOWNSHIFT:
1471                 return m88e1011_set_downshift(phydev, *(const u8 *)data);
1472         default:
1473                 return -EOPNOTSUPP;
1474         }
1475 }
1476
1477 /* The VOD can be out of specification on link up. Poke an
1478  * undocumented register, in an undocumented page, with a magic value
1479  * to fix this.
1480  */
1481 static int m88e6390_errata(struct phy_device *phydev)
1482 {
1483         int err;
1484
1485         err = phy_write(phydev, MII_BMCR,
1486                         BMCR_ANENABLE | BMCR_SPEED1000 | BMCR_FULLDPLX);
1487         if (err)
1488                 return err;
1489
1490         usleep_range(300, 400);
1491
1492         err = phy_write_paged(phydev, 0xf8, 0x08, 0x36);
1493         if (err)
1494                 return err;
1495
1496         return genphy_soft_reset(phydev);
1497 }
1498
1499 static int m88e6390_config_aneg(struct phy_device *phydev)
1500 {
1501         int err;
1502
1503         err = m88e6390_errata(phydev);
1504         if (err)
1505                 return err;
1506
1507         return m88e1510_config_aneg(phydev);
1508 }
1509
1510 /**
1511  * fiber_lpa_mod_linkmode_lpa_t
1512  * @advertising: the linkmode advertisement settings
1513  * @lpa: value of the MII_LPA register for fiber link
1514  *
1515  * A small helper function that translates MII_LPA bits to linkmode LP
1516  * advertisement settings. Other bits in advertising are left
1517  * unchanged.
1518  */
1519 static void fiber_lpa_mod_linkmode_lpa_t(unsigned long *advertising, u32 lpa)
1520 {
1521         linkmode_mod_bit(ETHTOOL_LINK_MODE_1000baseT_Half_BIT,
1522                          advertising, lpa & LPA_1000XHALF);
1523
1524         linkmode_mod_bit(ETHTOOL_LINK_MODE_1000baseT_Full_BIT,
1525                          advertising, lpa & LPA_1000XFULL);
1526 }
1527
1528 static int marvell_read_status_page_an(struct phy_device *phydev,
1529                                        int fiber, int status)
1530 {
1531         int lpa;
1532         int err;
1533
1534         if (!(status & MII_M1011_PHY_STATUS_RESOLVED)) {
1535                 phydev->link = 0;
1536                 return 0;
1537         }
1538
1539         if (status & MII_M1011_PHY_STATUS_FULLDUPLEX)
1540                 phydev->duplex = DUPLEX_FULL;
1541         else
1542                 phydev->duplex = DUPLEX_HALF;
1543
1544         switch (status & MII_M1011_PHY_STATUS_SPD_MASK) {
1545         case MII_M1011_PHY_STATUS_1000:
1546                 phydev->speed = SPEED_1000;
1547                 break;
1548
1549         case MII_M1011_PHY_STATUS_100:
1550                 phydev->speed = SPEED_100;
1551                 break;
1552
1553         default:
1554                 phydev->speed = SPEED_10;
1555                 break;
1556         }
1557
1558         if (!fiber) {
1559                 err = genphy_read_lpa(phydev);
1560                 if (err < 0)
1561                         return err;
1562
1563                 phy_resolve_aneg_pause(phydev);
1564         } else {
1565                 lpa = phy_read(phydev, MII_LPA);
1566                 if (lpa < 0)
1567                         return lpa;
1568
1569                 /* The fiber link is only 1000M capable */
1570                 fiber_lpa_mod_linkmode_lpa_t(phydev->lp_advertising, lpa);
1571
1572                 if (phydev->duplex == DUPLEX_FULL) {
1573                         if (!(lpa & LPA_PAUSE_FIBER)) {
1574                                 phydev->pause = 0;
1575                                 phydev->asym_pause = 0;
1576                         } else if ((lpa & LPA_PAUSE_ASYM_FIBER)) {
1577                                 phydev->pause = 1;
1578                                 phydev->asym_pause = 1;
1579                         } else {
1580                                 phydev->pause = 1;
1581                                 phydev->asym_pause = 0;
1582                         }
1583                 }
1584         }
1585
1586         return 0;
1587 }
1588
1589 /* marvell_read_status_page
1590  *
1591  * Description:
1592  *   Check the link, then figure out the current state
1593  *   by comparing what we advertise with what the link partner
1594  *   advertises.  Start by checking the gigabit possibilities,
1595  *   then move on to 10/100.
1596  */
1597 static int marvell_read_status_page(struct phy_device *phydev, int page)
1598 {
1599         int status;
1600         int fiber;
1601         int err;
1602
1603         status = phy_read(phydev, MII_M1011_PHY_STATUS);
1604         if (status < 0)
1605                 return status;
1606
1607         /* Use the generic register for copper link status,
1608          * and the PHY status register for fiber link status.
1609          */
1610         if (page == MII_MARVELL_FIBER_PAGE) {
1611                 phydev->link = !!(status & MII_M1011_PHY_STATUS_LINK);
1612         } else {
1613                 err = genphy_update_link(phydev);
1614                 if (err)
1615                         return err;
1616         }
1617
1618         if (page == MII_MARVELL_FIBER_PAGE)
1619                 fiber = 1;
1620         else
1621                 fiber = 0;
1622
1623         linkmode_zero(phydev->lp_advertising);
1624         phydev->pause = 0;
1625         phydev->asym_pause = 0;
1626         phydev->speed = SPEED_UNKNOWN;
1627         phydev->duplex = DUPLEX_UNKNOWN;
1628         phydev->port = fiber ? PORT_FIBRE : PORT_TP;
1629
1630         if (phydev->autoneg == AUTONEG_ENABLE)
1631                 err = marvell_read_status_page_an(phydev, fiber, status);
1632         else
1633                 err = genphy_read_status_fixed(phydev);
1634
1635         return err;
1636 }
1637
1638 /* marvell_read_status
1639  *
1640  * Some Marvell's phys have two modes: fiber and copper.
1641  * Both need status checked.
1642  * Description:
1643  *   First, check the fiber link and status.
1644  *   If the fiber link is down, check the copper link and status which
1645  *   will be the default value if both link are down.
1646  */
1647 static int marvell_read_status(struct phy_device *phydev)
1648 {
1649         int err;
1650
1651         /* Check the fiber mode first */
1652         if (linkmode_test_bit(ETHTOOL_LINK_MODE_FIBRE_BIT,
1653                               phydev->supported) &&
1654             phydev->interface != PHY_INTERFACE_MODE_SGMII) {
1655                 err = marvell_set_page(phydev, MII_MARVELL_FIBER_PAGE);
1656                 if (err < 0)
1657                         goto error;
1658
1659                 err = marvell_read_status_page(phydev, MII_MARVELL_FIBER_PAGE);
1660                 if (err < 0)
1661                         goto error;
1662
1663                 /* If the fiber link is up, it is the selected and
1664                  * used link. In this case, we need to stay in the
1665                  * fiber page. Please to be careful about that, avoid
1666                  * to restore Copper page in other functions which
1667                  * could break the behaviour for some fiber phy like
1668                  * 88E1512.
1669                  */
1670                 if (phydev->link)
1671                         return 0;
1672
1673                 /* If fiber link is down, check and save copper mode state */
1674                 err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1675                 if (err < 0)
1676                         goto error;
1677         }
1678
1679         return marvell_read_status_page(phydev, MII_MARVELL_COPPER_PAGE);
1680
1681 error:
1682         marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1683         return err;
1684 }
1685
1686 /* marvell_suspend
1687  *
1688  * Some Marvell's phys have two modes: fiber and copper.
1689  * Both need to be suspended
1690  */
1691 static int marvell_suspend(struct phy_device *phydev)
1692 {
1693         int err;
1694
1695         /* Suspend the fiber mode first */
1696         if (linkmode_test_bit(ETHTOOL_LINK_MODE_FIBRE_BIT,
1697                               phydev->supported)) {
1698                 err = marvell_set_page(phydev, MII_MARVELL_FIBER_PAGE);
1699                 if (err < 0)
1700                         goto error;
1701
1702                 /* With the page set, use the generic suspend */
1703                 err = genphy_suspend(phydev);
1704                 if (err < 0)
1705                         goto error;
1706
1707                 /* Then, the copper link */
1708                 err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1709                 if (err < 0)
1710                         goto error;
1711         }
1712
1713         /* With the page set, use the generic suspend */
1714         return genphy_suspend(phydev);
1715
1716 error:
1717         marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1718         return err;
1719 }
1720
1721 /* marvell_resume
1722  *
1723  * Some Marvell's phys have two modes: fiber and copper.
1724  * Both need to be resumed
1725  */
1726 static int marvell_resume(struct phy_device *phydev)
1727 {
1728         int err;
1729
1730         /* Resume the fiber mode first */
1731         if (linkmode_test_bit(ETHTOOL_LINK_MODE_FIBRE_BIT,
1732                               phydev->supported)) {
1733                 err = marvell_set_page(phydev, MII_MARVELL_FIBER_PAGE);
1734                 if (err < 0)
1735                         goto error;
1736
1737                 /* With the page set, use the generic resume */
1738                 err = genphy_resume(phydev);
1739                 if (err < 0)
1740                         goto error;
1741
1742                 /* Then, the copper link */
1743                 err = marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1744                 if (err < 0)
1745                         goto error;
1746         }
1747
1748         /* With the page set, use the generic resume */
1749         return genphy_resume(phydev);
1750
1751 error:
1752         marvell_set_page(phydev, MII_MARVELL_COPPER_PAGE);
1753         return err;
1754 }
1755
1756 static int marvell_aneg_done(struct phy_device *phydev)
1757 {
1758         int retval = phy_read(phydev, MII_M1011_PHY_STATUS);
1759
1760         return (retval < 0) ? retval : (retval & MII_M1011_PHY_STATUS_RESOLVED);
1761 }
1762
1763 static void m88e1318_get_wol(struct phy_device *phydev,
1764                              struct ethtool_wolinfo *wol)
1765 {
1766         int ret;
1767
1768         wol->supported = WAKE_MAGIC | WAKE_PHY;
1769         wol->wolopts = 0;
1770
1771         ret = phy_read_paged(phydev, MII_MARVELL_WOL_PAGE,
1772                              MII_88E1318S_PHY_WOL_CTRL);
1773         if (ret < 0)
1774                 return;
1775
1776         if (ret & MII_88E1318S_PHY_WOL_CTRL_MAGIC_PACKET_MATCH_ENABLE)
1777                 wol->wolopts |= WAKE_MAGIC;
1778
1779         if (ret & MII_88E1318S_PHY_WOL_CTRL_LINK_UP_ENABLE)
1780                 wol->wolopts |= WAKE_PHY;
1781 }
1782
1783 static int m88e1318_set_wol(struct phy_device *phydev,
1784                             struct ethtool_wolinfo *wol)
1785 {
1786         int err = 0, oldpage;
1787
1788         oldpage = phy_save_page(phydev);
1789         if (oldpage < 0)
1790                 goto error;
1791
1792         if (wol->wolopts & (WAKE_MAGIC | WAKE_PHY)) {
1793                 /* Explicitly switch to page 0x00, just to be sure */
1794                 err = marvell_write_page(phydev, MII_MARVELL_COPPER_PAGE);
1795                 if (err < 0)
1796                         goto error;
1797
1798                 /* If WOL event happened once, the LED[2] interrupt pin
1799                  * will not be cleared unless we reading the interrupt status
1800                  * register. If interrupts are in use, the normal interrupt
1801                  * handling will clear the WOL event. Clear the WOL event
1802                  * before enabling it if !phy_interrupt_is_valid()
1803                  */
1804                 if (!phy_interrupt_is_valid(phydev))
1805                         __phy_read(phydev, MII_M1011_IEVENT);
1806
1807                 /* Enable the WOL interrupt */
1808                 err = __phy_set_bits(phydev, MII_88E1318S_PHY_CSIER,
1809                                      MII_88E1318S_PHY_CSIER_WOL_EIE);
1810                 if (err < 0)
1811                         goto error;
1812
1813                 err = marvell_write_page(phydev, MII_MARVELL_LED_PAGE);
1814                 if (err < 0)
1815                         goto error;
1816
1817                 /* Setup LED[2] as interrupt pin (active low) */
1818                 err = __phy_modify(phydev, MII_88E1318S_PHY_LED_TCR,
1819                                    MII_88E1318S_PHY_LED_TCR_FORCE_INT,
1820                                    MII_88E1318S_PHY_LED_TCR_INTn_ENABLE |
1821                                    MII_88E1318S_PHY_LED_TCR_INT_ACTIVE_LOW);
1822                 if (err < 0)
1823                         goto error;
1824         }
1825
1826         if (wol->wolopts & WAKE_MAGIC) {
1827                 err = marvell_write_page(phydev, MII_MARVELL_WOL_PAGE);
1828                 if (err < 0)
1829                         goto error;
1830
1831                 /* Store the device address for the magic packet */
1832                 err = __phy_write(phydev, MII_88E1318S_PHY_MAGIC_PACKET_WORD2,
1833                                 ((phydev->attached_dev->dev_addr[5] << 8) |
1834                                  phydev->attached_dev->dev_addr[4]));
1835                 if (err < 0)
1836                         goto error;
1837                 err = __phy_write(phydev, MII_88E1318S_PHY_MAGIC_PACKET_WORD1,
1838                                 ((phydev->attached_dev->dev_addr[3] << 8) |
1839                                  phydev->attached_dev->dev_addr[2]));
1840                 if (err < 0)
1841                         goto error;
1842                 err = __phy_write(phydev, MII_88E1318S_PHY_MAGIC_PACKET_WORD0,
1843                                 ((phydev->attached_dev->dev_addr[1] << 8) |
1844                                  phydev->attached_dev->dev_addr[0]));
1845                 if (err < 0)
1846                         goto error;
1847
1848                 /* Clear WOL status and enable magic packet matching */
1849                 err = __phy_set_bits(phydev, MII_88E1318S_PHY_WOL_CTRL,
1850                                      MII_88E1318S_PHY_WOL_CTRL_CLEAR_WOL_STATUS |
1851                                      MII_88E1318S_PHY_WOL_CTRL_MAGIC_PACKET_MATCH_ENABLE);
1852                 if (err < 0)
1853                         goto error;
1854         } else {
1855                 err = marvell_write_page(phydev, MII_MARVELL_WOL_PAGE);
1856                 if (err < 0)
1857                         goto error;
1858
1859                 /* Clear WOL status and disable magic packet matching */
1860                 err = __phy_modify(phydev, MII_88E1318S_PHY_WOL_CTRL,
1861                                    MII_88E1318S_PHY_WOL_CTRL_MAGIC_PACKET_MATCH_ENABLE,
1862                                    MII_88E1318S_PHY_WOL_CTRL_CLEAR_WOL_STATUS);
1863                 if (err < 0)
1864                         goto error;
1865         }
1866
1867         if (wol->wolopts & WAKE_PHY) {
1868                 err = marvell_write_page(phydev, MII_MARVELL_WOL_PAGE);
1869                 if (err < 0)
1870                         goto error;
1871
1872                 /* Clear WOL status and enable link up event */
1873                 err = __phy_modify(phydev, MII_88E1318S_PHY_WOL_CTRL, 0,
1874                                    MII_88E1318S_PHY_WOL_CTRL_CLEAR_WOL_STATUS |
1875                                    MII_88E1318S_PHY_WOL_CTRL_LINK_UP_ENABLE);
1876                 if (err < 0)
1877                         goto error;
1878         } else {
1879                 err = marvell_write_page(phydev, MII_MARVELL_WOL_PAGE);
1880                 if (err < 0)
1881                         goto error;
1882
1883                 /* Clear WOL status and disable link up event */
1884                 err = __phy_modify(phydev, MII_88E1318S_PHY_WOL_CTRL,
1885                                    MII_88E1318S_PHY_WOL_CTRL_LINK_UP_ENABLE,
1886                                    MII_88E1318S_PHY_WOL_CTRL_CLEAR_WOL_STATUS);
1887                 if (err < 0)
1888                         goto error;
1889         }
1890
1891 error:
1892         return phy_restore_page(phydev, oldpage, err);
1893 }
1894
1895 static int marvell_get_sset_count(struct phy_device *phydev)
1896 {
1897         if (linkmode_test_bit(ETHTOOL_LINK_MODE_FIBRE_BIT,
1898                               phydev->supported))
1899                 return ARRAY_SIZE(marvell_hw_stats);
1900         else
1901                 return ARRAY_SIZE(marvell_hw_stats) - NB_FIBER_STATS;
1902 }
1903
1904 static void marvell_get_strings(struct phy_device *phydev, u8 *data)
1905 {
1906         int count = marvell_get_sset_count(phydev);
1907         int i;
1908
1909         for (i = 0; i < count; i++) {
1910                 strlcpy(data + i * ETH_GSTRING_LEN,
1911                         marvell_hw_stats[i].string, ETH_GSTRING_LEN);
1912         }
1913 }
1914
1915 static u64 marvell_get_stat(struct phy_device *phydev, int i)
1916 {
1917         struct marvell_hw_stat stat = marvell_hw_stats[i];
1918         struct marvell_priv *priv = phydev->priv;
1919         int val;
1920         u64 ret;
1921
1922         val = phy_read_paged(phydev, stat.page, stat.reg);
1923         if (val < 0) {
1924                 ret = U64_MAX;
1925         } else {
1926                 val = val & ((1 << stat.bits) - 1);
1927                 priv->stats[i] += val;
1928                 ret = priv->stats[i];
1929         }
1930
1931         return ret;
1932 }
1933
1934 static void marvell_get_stats(struct phy_device *phydev,
1935                               struct ethtool_stats *stats, u64 *data)
1936 {
1937         int count = marvell_get_sset_count(phydev);
1938         int i;
1939
1940         for (i = 0; i < count; i++)
1941                 data[i] = marvell_get_stat(phydev, i);
1942 }
1943
1944 static int m88e1510_loopback(struct phy_device *phydev, bool enable)
1945 {
1946         int err;
1947
1948         if (enable) {
1949                 u16 bmcr_ctl = 0, mscr2_ctl = 0;
1950
1951                 if (phydev->speed == SPEED_1000)
1952                         bmcr_ctl = BMCR_SPEED1000;
1953                 else if (phydev->speed == SPEED_100)
1954                         bmcr_ctl = BMCR_SPEED100;
1955
1956                 if (phydev->duplex == DUPLEX_FULL)
1957                         bmcr_ctl |= BMCR_FULLDPLX;
1958
1959                 err = phy_write(phydev, MII_BMCR, bmcr_ctl);
1960                 if (err < 0)
1961                         return err;
1962
1963                 if (phydev->speed == SPEED_1000)
1964                         mscr2_ctl = BMCR_SPEED1000;
1965                 else if (phydev->speed == SPEED_100)
1966                         mscr2_ctl = BMCR_SPEED100;
1967
1968                 err = phy_modify_paged(phydev, MII_MARVELL_MSCR_PAGE,
1969                                        MII_88E1510_MSCR_2, BMCR_SPEED1000 |
1970                                        BMCR_SPEED100, mscr2_ctl);
1971                 if (err < 0)
1972                         return err;
1973
1974                 /* Need soft reset to have speed configuration takes effect */
1975                 err = genphy_soft_reset(phydev);
1976                 if (err < 0)
1977                         return err;
1978
1979                 /* FIXME: Based on trial and error test, it seem 1G need to have
1980                  * delay between soft reset and loopback enablement.
1981                  */
1982                 if (phydev->speed == SPEED_1000)
1983                         msleep(1000);
1984
1985                 return phy_modify(phydev, MII_BMCR, BMCR_LOOPBACK,
1986                                   BMCR_LOOPBACK);
1987         } else {
1988                 err = phy_modify(phydev, MII_BMCR, BMCR_LOOPBACK, 0);
1989                 if (err < 0)
1990                         return err;
1991
1992                 return phy_config_aneg(phydev);
1993         }
1994 }
1995
1996 static int marvell_vct5_wait_complete(struct phy_device *phydev)
1997 {
1998         int i;
1999         int val;
2000
2001         for (i = 0; i < 32; i++) {
2002                 val = __phy_read(phydev, MII_VCT5_CTRL);
2003                 if (val < 0)
2004                         return val;
2005
2006                 if (val & MII_VCT5_CTRL_COMPLETE)
2007                         return 0;
2008         }
2009
2010         phydev_err(phydev, "Timeout while waiting for cable test to finish\n");
2011         return -ETIMEDOUT;
2012 }
2013
2014 static int marvell_vct5_amplitude(struct phy_device *phydev, int pair)
2015 {
2016         int amplitude;
2017         int val;
2018         int reg;
2019
2020         reg = MII_VCT5_TX_RX_MDI0_COUPLING + pair;
2021         val = __phy_read(phydev, reg);
2022
2023         if (val < 0)
2024                 return 0;
2025
2026         amplitude = (val & MII_VCT5_TX_RX_AMPLITUDE_MASK) >>
2027                 MII_VCT5_TX_RX_AMPLITUDE_SHIFT;
2028
2029         if (!(val & MII_VCT5_TX_RX_COUPLING_POSITIVE_REFLECTION))
2030                 amplitude = -amplitude;
2031
2032         return 1000 * amplitude / 128;
2033 }
2034
2035 static u32 marvell_vct5_distance2cm(int distance)
2036 {
2037         return distance * 805 / 10;
2038 }
2039
2040 static u32 marvell_vct5_cm2distance(int cm)
2041 {
2042         return cm * 10 / 805;
2043 }
2044
2045 static int marvell_vct5_amplitude_distance(struct phy_device *phydev,
2046                                            int distance, int pair)
2047 {
2048         u16 reg;
2049         int err;
2050         int mV;
2051         int i;
2052
2053         err = __phy_write(phydev, MII_VCT5_SAMPLE_POINT_DISTANCE,
2054                           distance);
2055         if (err)
2056                 return err;
2057
2058         reg = MII_VCT5_CTRL_ENABLE |
2059                 MII_VCT5_CTRL_TX_SAME_CHANNEL |
2060                 MII_VCT5_CTRL_SAMPLES_DEFAULT |
2061                 MII_VCT5_CTRL_SAMPLE_POINT |
2062                 MII_VCT5_CTRL_PEEK_HYST_DEFAULT;
2063         err = __phy_write(phydev, MII_VCT5_CTRL, reg);
2064         if (err)
2065                 return err;
2066
2067         err = marvell_vct5_wait_complete(phydev);
2068         if (err)
2069                 return err;
2070
2071         for (i = 0; i < 4; i++) {
2072                 if (pair != PHY_PAIR_ALL && i != pair)
2073                         continue;
2074
2075                 mV = marvell_vct5_amplitude(phydev, i);
2076                 ethnl_cable_test_amplitude(phydev, i, mV);
2077         }
2078
2079         return 0;
2080 }
2081
2082 static int marvell_vct5_amplitude_graph(struct phy_device *phydev)
2083 {
2084         struct marvell_priv *priv = phydev->priv;
2085         int distance;
2086         u16 width;
2087         int page;
2088         int err;
2089         u16 reg;
2090
2091         if (priv->first <= TDR_SHORT_CABLE_LENGTH)
2092                 width = MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_32nS;
2093         else
2094                 width = MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_128nS;
2095
2096         reg = MII_VCT5_TX_PULSE_CTRL_GT_140m_46_86mV |
2097                 MII_VCT5_TX_PULSE_CTRL_DONT_WAIT_LINK_DOWN |
2098                 MII_VCT5_TX_PULSE_CTRL_MAX_AMP | width;
2099
2100         err = phy_write_paged(phydev, MII_MARVELL_VCT5_PAGE,
2101                               MII_VCT5_TX_PULSE_CTRL, reg);
2102         if (err)
2103                 return err;
2104
2105         /* Reading the TDR data is very MDIO heavy. We need to optimize
2106          * access to keep the time to a minimum. So lock the bus once,
2107          * and don't release it until complete. We can then avoid having
2108          * to change the page for every access, greatly speeding things
2109          * up.
2110          */
2111         page = phy_select_page(phydev, MII_MARVELL_VCT5_PAGE);
2112         if (page < 0)
2113                 goto restore_page;
2114
2115         for (distance = priv->first;
2116              distance <= priv->last;
2117              distance += priv->step) {
2118                 err = marvell_vct5_amplitude_distance(phydev, distance,
2119                                                       priv->pair);
2120                 if (err)
2121                         goto restore_page;
2122
2123                 if (distance > TDR_SHORT_CABLE_LENGTH &&
2124                     width == MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_32nS) {
2125                         width = MII_VCT5_TX_PULSE_CTRL_PULSE_WIDTH_128nS;
2126                         reg = MII_VCT5_TX_PULSE_CTRL_GT_140m_46_86mV |
2127                                 MII_VCT5_TX_PULSE_CTRL_DONT_WAIT_LINK_DOWN |
2128                                 MII_VCT5_TX_PULSE_CTRL_MAX_AMP | width;
2129                         err = __phy_write(phydev, MII_VCT5_TX_PULSE_CTRL, reg);
2130                         if (err)
2131                                 goto restore_page;
2132                 }
2133         }
2134
2135 restore_page:
2136         return phy_restore_page(phydev, page, err);
2137 }
2138
2139 static int marvell_cable_test_start_common(struct phy_device *phydev)
2140 {
2141         int bmcr, bmsr, ret;
2142
2143         /* If auto-negotiation is enabled, but not complete, the cable
2144          * test never completes. So disable auto-neg.
2145          */
2146         bmcr = phy_read(phydev, MII_BMCR);
2147         if (bmcr < 0)
2148                 return bmcr;
2149
2150         bmsr = phy_read(phydev, MII_BMSR);
2151
2152         if (bmsr < 0)
2153                 return bmsr;
2154
2155         if (bmcr & BMCR_ANENABLE) {
2156                 ret =  phy_clear_bits(phydev, MII_BMCR, BMCR_ANENABLE);
2157                 if (ret < 0)
2158                         return ret;
2159                 ret = genphy_soft_reset(phydev);
2160                 if (ret < 0)
2161                         return ret;
2162         }
2163
2164         /* If the link is up, allow it some time to go down */
2165         if (bmsr & BMSR_LSTATUS)
2166                 msleep(1500);
2167
2168         return 0;
2169 }
2170
2171 static int marvell_vct7_cable_test_start(struct phy_device *phydev)
2172 {
2173         struct marvell_priv *priv = phydev->priv;
2174         int ret;
2175
2176         ret = marvell_cable_test_start_common(phydev);
2177         if (ret)
2178                 return ret;
2179
2180         priv->cable_test_tdr = false;
2181
2182         /* Reset the VCT5 API control to defaults, otherwise
2183          * VCT7 does not work correctly.
2184          */
2185         ret = phy_write_paged(phydev, MII_MARVELL_VCT5_PAGE,
2186                               MII_VCT5_CTRL,
2187                               MII_VCT5_CTRL_TX_SAME_CHANNEL |
2188                               MII_VCT5_CTRL_SAMPLES_DEFAULT |
2189                               MII_VCT5_CTRL_MODE_MAXIMUM_PEEK |
2190                               MII_VCT5_CTRL_PEEK_HYST_DEFAULT);
2191         if (ret)
2192                 return ret;
2193
2194         ret = phy_write_paged(phydev, MII_MARVELL_VCT5_PAGE,
2195                               MII_VCT5_SAMPLE_POINT_DISTANCE, 0);
2196         if (ret)
2197                 return ret;
2198
2199         return phy_write_paged(phydev, MII_MARVELL_VCT7_PAGE,
2200                                MII_VCT7_CTRL,
2201                                MII_VCT7_CTRL_RUN_NOW |
2202                                MII_VCT7_CTRL_CENTIMETERS);
2203 }
2204
2205 static int marvell_vct5_cable_test_tdr_start(struct phy_device *phydev,
2206                                              const struct phy_tdr_config *cfg)
2207 {
2208         struct marvell_priv *priv = phydev->priv;
2209         int ret;
2210
2211         priv->cable_test_tdr = true;
2212         priv->first = marvell_vct5_cm2distance(cfg->first);
2213         priv->last = marvell_vct5_cm2distance(cfg->last);
2214         priv->step = marvell_vct5_cm2distance(cfg->step);
2215         priv->pair = cfg->pair;
2216
2217         if (priv->first > MII_VCT5_SAMPLE_POINT_DISTANCE_MAX)
2218                 return -EINVAL;
2219
2220         if (priv->last > MII_VCT5_SAMPLE_POINT_DISTANCE_MAX)
2221                 return -EINVAL;
2222
2223         /* Disable  VCT7 */
2224         ret = phy_write_paged(phydev, MII_MARVELL_VCT7_PAGE,
2225                               MII_VCT7_CTRL, 0);
2226         if (ret)
2227                 return ret;
2228
2229         ret = marvell_cable_test_start_common(phydev);
2230         if (ret)
2231                 return ret;
2232
2233         ret = ethnl_cable_test_pulse(phydev, 1000);
2234         if (ret)
2235                 return ret;
2236
2237         return ethnl_cable_test_step(phydev,
2238                                      marvell_vct5_distance2cm(priv->first),
2239                                      marvell_vct5_distance2cm(priv->last),
2240                                      marvell_vct5_distance2cm(priv->step));
2241 }
2242
2243 static int marvell_vct7_distance_to_length(int distance, bool meter)
2244 {
2245         if (meter)
2246                 distance *= 100;
2247
2248         return distance;
2249 }
2250
2251 static bool marvell_vct7_distance_valid(int result)
2252 {
2253         switch (result) {
2254         case MII_VCT7_RESULTS_OPEN:
2255         case MII_VCT7_RESULTS_SAME_SHORT:
2256         case MII_VCT7_RESULTS_CROSS_SHORT:
2257                 return true;
2258         }
2259         return false;
2260 }
2261
2262 static int marvell_vct7_report_length(struct phy_device *phydev,
2263                                       int pair, bool meter)
2264 {
2265         int length;
2266         int ret;
2267
2268         ret = phy_read_paged(phydev, MII_MARVELL_VCT7_PAGE,
2269                              MII_VCT7_PAIR_0_DISTANCE + pair);
2270         if (ret < 0)
2271                 return ret;
2272
2273         length = marvell_vct7_distance_to_length(ret, meter);
2274
2275         ethnl_cable_test_fault_length(phydev, pair, length);
2276
2277         return 0;
2278 }
2279
2280 static int marvell_vct7_cable_test_report_trans(int result)
2281 {
2282         switch (result) {
2283         case MII_VCT7_RESULTS_OK:
2284                 return ETHTOOL_A_CABLE_RESULT_CODE_OK;
2285         case MII_VCT7_RESULTS_OPEN:
2286                 return ETHTOOL_A_CABLE_RESULT_CODE_OPEN;
2287         case MII_VCT7_RESULTS_SAME_SHORT:
2288                 return ETHTOOL_A_CABLE_RESULT_CODE_SAME_SHORT;
2289         case MII_VCT7_RESULTS_CROSS_SHORT:
2290                 return ETHTOOL_A_CABLE_RESULT_CODE_CROSS_SHORT;
2291         default:
2292                 return ETHTOOL_A_CABLE_RESULT_CODE_UNSPEC;
2293         }
2294 }
2295
2296 static int marvell_vct7_cable_test_report(struct phy_device *phydev)
2297 {
2298         int pair0, pair1, pair2, pair3;
2299         bool meter;
2300         int ret;
2301
2302         ret = phy_read_paged(phydev, MII_MARVELL_VCT7_PAGE,
2303                              MII_VCT7_RESULTS);
2304         if (ret < 0)
2305                 return ret;
2306
2307         pair3 = (ret & MII_VCT7_RESULTS_PAIR3_MASK) >>
2308                 MII_VCT7_RESULTS_PAIR3_SHIFT;
2309         pair2 = (ret & MII_VCT7_RESULTS_PAIR2_MASK) >>
2310                 MII_VCT7_RESULTS_PAIR2_SHIFT;
2311         pair1 = (ret & MII_VCT7_RESULTS_PAIR1_MASK) >>
2312                 MII_VCT7_RESULTS_PAIR1_SHIFT;
2313         pair0 = (ret & MII_VCT7_RESULTS_PAIR0_MASK) >>
2314                 MII_VCT7_RESULTS_PAIR0_SHIFT;
2315
2316         ethnl_cable_test_result(phydev, ETHTOOL_A_CABLE_PAIR_A,
2317                                 marvell_vct7_cable_test_report_trans(pair0));
2318         ethnl_cable_test_result(phydev, ETHTOOL_A_CABLE_PAIR_B,
2319                                 marvell_vct7_cable_test_report_trans(pair1));
2320         ethnl_cable_test_result(phydev, ETHTOOL_A_CABLE_PAIR_C,
2321                                 marvell_vct7_cable_test_report_trans(pair2));
2322         ethnl_cable_test_result(phydev, ETHTOOL_A_CABLE_PAIR_D,
2323                                 marvell_vct7_cable_test_report_trans(pair3));
2324
2325         ret = phy_read_paged(phydev, MII_MARVELL_VCT7_PAGE, MII_VCT7_CTRL);
2326         if (ret < 0)
2327                 return ret;
2328
2329         meter = ret & MII_VCT7_CTRL_METERS;
2330
2331         if (marvell_vct7_distance_valid(pair0))
2332                 marvell_vct7_report_length(phydev, 0, meter);
2333         if (marvell_vct7_distance_valid(pair1))
2334                 marvell_vct7_report_length(phydev, 1, meter);
2335         if (marvell_vct7_distance_valid(pair2))
2336                 marvell_vct7_report_length(phydev, 2, meter);
2337         if (marvell_vct7_distance_valid(pair3))
2338                 marvell_vct7_report_length(phydev, 3, meter);
2339
2340         return 0;
2341 }
2342
2343 static int marvell_vct7_cable_test_get_status(struct phy_device *phydev,
2344                                               bool *finished)
2345 {
2346         struct marvell_priv *priv = phydev->priv;
2347         int ret;
2348
2349         if (priv->cable_test_tdr) {
2350                 ret = marvell_vct5_amplitude_graph(phydev);
2351                 *finished = true;
2352                 return ret;
2353         }
2354
2355         *finished = false;
2356
2357         ret = phy_read_paged(phydev, MII_MARVELL_VCT7_PAGE,
2358                              MII_VCT7_CTRL);
2359
2360         if (ret < 0)
2361                 return ret;
2362
2363         if (!(ret & MII_VCT7_CTRL_IN_PROGRESS)) {
2364                 *finished = true;
2365
2366                 return marvell_vct7_cable_test_report(phydev);
2367         }
2368
2369         return 0;
2370 }
2371
2372 #ifdef CONFIG_HWMON
2373 struct marvell_hwmon_ops {
2374         int (*config)(struct phy_device *phydev);
2375         int (*get_temp)(struct phy_device *phydev, long *temp);
2376         int (*get_temp_critical)(struct phy_device *phydev, long *temp);
2377         int (*set_temp_critical)(struct phy_device *phydev, long temp);
2378         int (*get_temp_alarm)(struct phy_device *phydev, long *alarm);
2379 };
2380
2381 static const struct marvell_hwmon_ops *
2382 to_marvell_hwmon_ops(const struct phy_device *phydev)
2383 {
2384         return phydev->drv->driver_data;
2385 }
2386
2387 static int m88e1121_get_temp(struct phy_device *phydev, long *temp)
2388 {
2389         int oldpage;
2390         int ret = 0;
2391         int val;
2392
2393         *temp = 0;
2394
2395         oldpage = phy_select_page(phydev, MII_MARVELL_MISC_TEST_PAGE);
2396         if (oldpage < 0)
2397                 goto error;
2398
2399         /* Enable temperature sensor */
2400         ret = __phy_read(phydev, MII_88E1121_MISC_TEST);
2401         if (ret < 0)
2402                 goto error;
2403
2404         ret = __phy_write(phydev, MII_88E1121_MISC_TEST,
2405                           ret | MII_88E1121_MISC_TEST_TEMP_SENSOR_EN);
2406         if (ret < 0)
2407                 goto error;
2408
2409         /* Wait for temperature to stabilize */
2410         usleep_range(10000, 12000);
2411
2412         val = __phy_read(phydev, MII_88E1121_MISC_TEST);
2413         if (val < 0) {
2414                 ret = val;
2415                 goto error;
2416         }
2417
2418         /* Disable temperature sensor */
2419         ret = __phy_write(phydev, MII_88E1121_MISC_TEST,
2420                           ret & ~MII_88E1121_MISC_TEST_TEMP_SENSOR_EN);
2421         if (ret < 0)
2422                 goto error;
2423
2424         *temp = ((val & MII_88E1121_MISC_TEST_TEMP_MASK) - 5) * 5000;
2425
2426 error:
2427         return phy_restore_page(phydev, oldpage, ret);
2428 }
2429
2430 static int m88e1510_get_temp(struct phy_device *phydev, long *temp)
2431 {
2432         int ret;
2433
2434         *temp = 0;
2435
2436         ret = phy_read_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2437                              MII_88E1510_TEMP_SENSOR);
2438         if (ret < 0)
2439                 return ret;
2440
2441         *temp = ((ret & MII_88E1510_TEMP_SENSOR_MASK) - 25) * 1000;
2442
2443         return 0;
2444 }
2445
2446 static int m88e1510_get_temp_critical(struct phy_device *phydev, long *temp)
2447 {
2448         int ret;
2449
2450         *temp = 0;
2451
2452         ret = phy_read_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2453                              MII_88E1121_MISC_TEST);
2454         if (ret < 0)
2455                 return ret;
2456
2457         *temp = (((ret & MII_88E1510_MISC_TEST_TEMP_THRESHOLD_MASK) >>
2458                   MII_88E1510_MISC_TEST_TEMP_THRESHOLD_SHIFT) * 5) - 25;
2459         /* convert to mC */
2460         *temp *= 1000;
2461
2462         return 0;
2463 }
2464
2465 static int m88e1510_set_temp_critical(struct phy_device *phydev, long temp)
2466 {
2467         temp = temp / 1000;
2468         temp = clamp_val(DIV_ROUND_CLOSEST(temp, 5) + 5, 0, 0x1f);
2469
2470         return phy_modify_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2471                                 MII_88E1121_MISC_TEST,
2472                                 MII_88E1510_MISC_TEST_TEMP_THRESHOLD_MASK,
2473                                 temp << MII_88E1510_MISC_TEST_TEMP_THRESHOLD_SHIFT);
2474 }
2475
2476 static int m88e1510_get_temp_alarm(struct phy_device *phydev, long *alarm)
2477 {
2478         int ret;
2479
2480         *alarm = false;
2481
2482         ret = phy_read_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2483                              MII_88E1121_MISC_TEST);
2484         if (ret < 0)
2485                 return ret;
2486
2487         *alarm = !!(ret & MII_88E1510_MISC_TEST_TEMP_IRQ);
2488
2489         return 0;
2490 }
2491
2492 static int m88e6390_get_temp(struct phy_device *phydev, long *temp)
2493 {
2494         int sum = 0;
2495         int oldpage;
2496         int ret = 0;
2497         int i;
2498
2499         *temp = 0;
2500
2501         oldpage = phy_select_page(phydev, MII_MARVELL_MISC_TEST_PAGE);
2502         if (oldpage < 0)
2503                 goto error;
2504
2505         /* Enable temperature sensor */
2506         ret = __phy_read(phydev, MII_88E6390_MISC_TEST);
2507         if (ret < 0)
2508                 goto error;
2509
2510         ret &= ~MII_88E6390_MISC_TEST_TEMP_SENSOR_MASK;
2511         ret |= MII_88E6390_MISC_TEST_TEMP_SENSOR_ENABLE_SAMPLE_1S;
2512
2513         ret = __phy_write(phydev, MII_88E6390_MISC_TEST, ret);
2514         if (ret < 0)
2515                 goto error;
2516
2517         /* Wait for temperature to stabilize */
2518         usleep_range(10000, 12000);
2519
2520         /* Reading the temperature sense has an errata. You need to read
2521          * a number of times and take an average.
2522          */
2523         for (i = 0; i < MII_88E6390_TEMP_SENSOR_SAMPLES; i++) {
2524                 ret = __phy_read(phydev, MII_88E6390_TEMP_SENSOR);
2525                 if (ret < 0)
2526                         goto error;
2527                 sum += ret & MII_88E6390_TEMP_SENSOR_MASK;
2528         }
2529
2530         sum /= MII_88E6390_TEMP_SENSOR_SAMPLES;
2531         *temp = (sum  - 75) * 1000;
2532
2533         /* Disable temperature sensor */
2534         ret = __phy_read(phydev, MII_88E6390_MISC_TEST);
2535         if (ret < 0)
2536                 goto error;
2537
2538         ret = ret & ~MII_88E6390_MISC_TEST_TEMP_SENSOR_MASK;
2539         ret |= MII_88E6390_MISC_TEST_TEMP_SENSOR_DISABLE;
2540
2541         ret = __phy_write(phydev, MII_88E6390_MISC_TEST, ret);
2542
2543 error:
2544         phy_restore_page(phydev, oldpage, ret);
2545
2546         return ret;
2547 }
2548
2549 static int m88e6393_get_temp(struct phy_device *phydev, long *temp)
2550 {
2551         int err;
2552
2553         err = m88e1510_get_temp(phydev, temp);
2554
2555         /* 88E1510 measures T + 25, while the PHY on 88E6393X switch
2556          * T + 75, so we have to subtract another 50
2557          */
2558         *temp -= 50000;
2559
2560         return err;
2561 }
2562
2563 static int m88e6393_get_temp_critical(struct phy_device *phydev, long *temp)
2564 {
2565         int ret;
2566
2567         *temp = 0;
2568
2569         ret = phy_read_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2570                              MII_88E6390_TEMP_SENSOR);
2571         if (ret < 0)
2572                 return ret;
2573
2574         *temp = (((ret & MII_88E6393_TEMP_SENSOR_THRESHOLD_MASK) >>
2575                   MII_88E6393_TEMP_SENSOR_THRESHOLD_SHIFT) - 75) * 1000;
2576
2577         return 0;
2578 }
2579
2580 static int m88e6393_set_temp_critical(struct phy_device *phydev, long temp)
2581 {
2582         temp = (temp / 1000) + 75;
2583
2584         return phy_modify_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2585                                 MII_88E6390_TEMP_SENSOR,
2586                                 MII_88E6393_TEMP_SENSOR_THRESHOLD_MASK,
2587                                 temp << MII_88E6393_TEMP_SENSOR_THRESHOLD_SHIFT);
2588 }
2589
2590 static int m88e6393_hwmon_config(struct phy_device *phydev)
2591 {
2592         int err;
2593
2594         err = m88e6393_set_temp_critical(phydev, 100000);
2595         if (err)
2596                 return err;
2597
2598         return phy_modify_paged(phydev, MII_MARVELL_MISC_TEST_PAGE,
2599                                 MII_88E6390_MISC_TEST,
2600                                 MII_88E6390_MISC_TEST_TEMP_SENSOR_MASK |
2601                                 MII_88E6393_MISC_TEST_SAMPLES_MASK |
2602                                 MII_88E6393_MISC_TEST_RATE_MASK,
2603                                 MII_88E6390_MISC_TEST_TEMP_SENSOR_ENABLE |
2604                                 MII_88E6393_MISC_TEST_SAMPLES_2048 |
2605                                 MII_88E6393_MISC_TEST_RATE_2_3MS);
2606 }
2607
2608 static int marvell_hwmon_read(struct device *dev, enum hwmon_sensor_types type,
2609                               u32 attr, int channel, long *temp)
2610 {
2611         struct phy_device *phydev = dev_get_drvdata(dev);
2612         const struct marvell_hwmon_ops *ops = to_marvell_hwmon_ops(phydev);
2613         int err = -EOPNOTSUPP;
2614
2615         switch (attr) {
2616         case hwmon_temp_input:
2617                 if (ops->get_temp)
2618                         err = ops->get_temp(phydev, temp);
2619                 break;
2620         case hwmon_temp_crit:
2621                 if (ops->get_temp_critical)
2622                         err = ops->get_temp_critical(phydev, temp);
2623                 break;
2624         case hwmon_temp_max_alarm:
2625                 if (ops->get_temp_alarm)
2626                         err = ops->get_temp_alarm(phydev, temp);
2627                 break;
2628         }
2629
2630         return err;
2631 }
2632
2633 static int marvell_hwmon_write(struct device *dev, enum hwmon_sensor_types type,
2634                                u32 attr, int channel, long temp)
2635 {
2636         struct phy_device *phydev = dev_get_drvdata(dev);
2637         const struct marvell_hwmon_ops *ops = to_marvell_hwmon_ops(phydev);
2638         int err = -EOPNOTSUPP;
2639
2640         switch (attr) {
2641         case hwmon_temp_crit:
2642                 if (ops->set_temp_critical)
2643                         err = ops->set_temp_critical(phydev, temp);
2644                 break;
2645         }
2646
2647         return err;
2648 }
2649
2650 static umode_t marvell_hwmon_is_visible(const void *data,
2651                                         enum hwmon_sensor_types type,
2652                                         u32 attr, int channel)
2653 {
2654         const struct phy_device *phydev = data;
2655         const struct marvell_hwmon_ops *ops = to_marvell_hwmon_ops(phydev);
2656
2657         if (type != hwmon_temp)
2658                 return 0;
2659
2660         switch (attr) {
2661         case hwmon_temp_input:
2662                 return ops->get_temp ? 0444 : 0;
2663         case hwmon_temp_max_alarm:
2664                 return ops->get_temp_alarm ? 0444 : 0;
2665         case hwmon_temp_crit:
2666                 return (ops->get_temp_critical ? 0444 : 0) |
2667                        (ops->set_temp_critical ? 0200 : 0);
2668         default:
2669                 return 0;
2670         }
2671 }
2672
2673 static u32 marvell_hwmon_chip_config[] = {
2674         HWMON_C_REGISTER_TZ,
2675         0
2676 };
2677
2678 static const struct hwmon_channel_info marvell_hwmon_chip = {
2679         .type = hwmon_chip,
2680         .config = marvell_hwmon_chip_config,
2681 };
2682
2683 /* we can define HWMON_T_CRIT and HWMON_T_MAX_ALARM even though these are not
2684  * defined for all PHYs, because the hwmon code checks whether the attributes
2685  * exists via the .is_visible method
2686  */
2687 static u32 marvell_hwmon_temp_config[] = {
2688         HWMON_T_INPUT | HWMON_T_CRIT | HWMON_T_MAX_ALARM,
2689         0
2690 };
2691
2692 static const struct hwmon_channel_info marvell_hwmon_temp = {
2693         .type = hwmon_temp,
2694         .config = marvell_hwmon_temp_config,
2695 };
2696
2697 static const struct hwmon_channel_info *marvell_hwmon_info[] = {
2698         &marvell_hwmon_chip,
2699         &marvell_hwmon_temp,
2700         NULL
2701 };
2702
2703 static const struct hwmon_ops marvell_hwmon_hwmon_ops = {
2704         .is_visible = marvell_hwmon_is_visible,
2705         .read = marvell_hwmon_read,
2706         .write = marvell_hwmon_write,
2707 };
2708
2709 static const struct hwmon_chip_info marvell_hwmon_chip_info = {
2710         .ops = &marvell_hwmon_hwmon_ops,
2711         .info = marvell_hwmon_info,
2712 };
2713
2714 static int marvell_hwmon_name(struct phy_device *phydev)
2715 {
2716         struct marvell_priv *priv = phydev->priv;
2717         struct device *dev = &phydev->mdio.dev;
2718         const char *devname = dev_name(dev);
2719         size_t len = strlen(devname);
2720         int i, j;
2721
2722         priv->hwmon_name = devm_kzalloc(dev, len, GFP_KERNEL);
2723         if (!priv->hwmon_name)
2724                 return -ENOMEM;
2725
2726         for (i = j = 0; i < len && devname[i]; i++) {
2727                 if (isalnum(devname[i]))
2728                         priv->hwmon_name[j++] = devname[i];
2729         }
2730
2731         return 0;
2732 }
2733
2734 static int marvell_hwmon_probe(struct phy_device *phydev)
2735 {
2736         const struct marvell_hwmon_ops *ops = to_marvell_hwmon_ops(phydev);
2737         struct marvell_priv *priv = phydev->priv;
2738         struct device *dev = &phydev->mdio.dev;
2739         int err;
2740
2741         if (!ops)
2742                 return 0;
2743
2744         err = marvell_hwmon_name(phydev);
2745         if (err)
2746                 return err;
2747
2748         priv->hwmon_dev = devm_hwmon_device_register_with_info(
2749                 dev, priv->hwmon_name, phydev, &marvell_hwmon_chip_info, NULL);
2750         if (IS_ERR(priv->hwmon_dev))
2751                 return PTR_ERR(priv->hwmon_dev);
2752
2753         if (ops->config)
2754                 err = ops->config(phydev);
2755
2756         return err;
2757 }
2758
2759 static const struct marvell_hwmon_ops m88e1121_hwmon_ops = {
2760         .get_temp = m88e1121_get_temp,
2761 };
2762
2763 static const struct marvell_hwmon_ops m88e1510_hwmon_ops = {
2764         .get_temp = m88e1510_get_temp,
2765         .get_temp_critical = m88e1510_get_temp_critical,
2766         .set_temp_critical = m88e1510_set_temp_critical,
2767         .get_temp_alarm = m88e1510_get_temp_alarm,
2768 };
2769
2770 static const struct marvell_hwmon_ops m88e6390_hwmon_ops = {
2771         .get_temp = m88e6390_get_temp,
2772 };
2773
2774 static const struct marvell_hwmon_ops m88e6393_hwmon_ops = {
2775         .config = m88e6393_hwmon_config,
2776         .get_temp = m88e6393_get_temp,
2777         .get_temp_critical = m88e6393_get_temp_critical,
2778         .set_temp_critical = m88e6393_set_temp_critical,
2779         .get_temp_alarm = m88e1510_get_temp_alarm,
2780 };
2781
2782 #define DEF_MARVELL_HWMON_OPS(s) (&(s))
2783
2784 #else
2785
2786 #define DEF_MARVELL_HWMON_OPS(s) NULL
2787
2788 static int marvell_hwmon_probe(struct phy_device *phydev)
2789 {
2790         return 0;
2791 }
2792 #endif
2793
2794 static int marvell_probe(struct phy_device *phydev)
2795 {
2796         struct marvell_priv *priv;
2797
2798         priv = devm_kzalloc(&phydev->mdio.dev, sizeof(*priv), GFP_KERNEL);
2799         if (!priv)
2800                 return -ENOMEM;
2801
2802         phydev->priv = priv;
2803
2804         return marvell_hwmon_probe(phydev);
2805 }
2806
2807 static int m88e1510_sfp_insert(void *upstream, const struct sfp_eeprom_id *id)
2808 {
2809         struct phy_device *phydev = upstream;
2810         phy_interface_t interface;
2811         struct device *dev;
2812         int oldpage;
2813         int ret = 0;
2814         u16 mode;
2815
2816         __ETHTOOL_DECLARE_LINK_MODE_MASK(supported) = { 0, };
2817
2818         dev = &phydev->mdio.dev;
2819
2820         sfp_parse_support(phydev->sfp_bus, id, supported);
2821         interface = sfp_select_interface(phydev->sfp_bus, supported);
2822
2823         dev_info(dev, "%s SFP module inserted\n", phy_modes(interface));
2824
2825         switch (interface) {
2826         case PHY_INTERFACE_MODE_1000BASEX:
2827                 mode = MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_1000X;
2828
2829                 break;
2830         case PHY_INTERFACE_MODE_100BASEX:
2831                 mode = MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_100FX;
2832
2833                 break;
2834         case PHY_INTERFACE_MODE_SGMII:
2835                 mode = MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII_SGMII;
2836
2837                 break;
2838         default:
2839                 dev_err(dev, "Incompatible SFP module inserted\n");
2840
2841                 return -EINVAL;
2842         }
2843
2844         oldpage = phy_select_page(phydev, MII_MARVELL_MODE_PAGE);
2845         if (oldpage < 0)
2846                 goto error;
2847
2848         ret = __phy_modify(phydev, MII_88E1510_GEN_CTRL_REG_1,
2849                            MII_88E1510_GEN_CTRL_REG_1_MODE_MASK, mode);
2850         if (ret < 0)
2851                 goto error;
2852
2853         ret = __phy_set_bits(phydev, MII_88E1510_GEN_CTRL_REG_1,
2854                              MII_88E1510_GEN_CTRL_REG_1_RESET);
2855
2856 error:
2857         return phy_restore_page(phydev, oldpage, ret);
2858 }
2859
2860 static void m88e1510_sfp_remove(void *upstream)
2861 {
2862         struct phy_device *phydev = upstream;
2863         int oldpage;
2864         int ret = 0;
2865
2866         oldpage = phy_select_page(phydev, MII_MARVELL_MODE_PAGE);
2867         if (oldpage < 0)
2868                 goto error;
2869
2870         ret = __phy_modify(phydev, MII_88E1510_GEN_CTRL_REG_1,
2871                            MII_88E1510_GEN_CTRL_REG_1_MODE_MASK,
2872                            MII_88E1510_GEN_CTRL_REG_1_MODE_RGMII);
2873         if (ret < 0)
2874                 goto error;
2875
2876         ret = __phy_set_bits(phydev, MII_88E1510_GEN_CTRL_REG_1,
2877                              MII_88E1510_GEN_CTRL_REG_1_RESET);
2878
2879 error:
2880         phy_restore_page(phydev, oldpage, ret);
2881 }
2882
2883 static const struct sfp_upstream_ops m88e1510_sfp_ops = {
2884         .module_insert = m88e1510_sfp_insert,
2885         .module_remove = m88e1510_sfp_remove,
2886         .attach = phy_sfp_attach,
2887         .detach = phy_sfp_detach,
2888 };
2889
2890 static int m88e1510_probe(struct phy_device *phydev)
2891 {
2892         int err;
2893
2894         err = marvell_probe(phydev);
2895         if (err)
2896                 return err;
2897
2898         return phy_sfp_probe(phydev, &m88e1510_sfp_ops);
2899 }
2900
2901 static struct phy_driver marvell_drivers[] = {
2902         {
2903                 .phy_id = MARVELL_PHY_ID_88E1101,
2904                 .phy_id_mask = MARVELL_PHY_ID_MASK,
2905                 .name = "Marvell 88E1101",
2906                 /* PHY_GBIT_FEATURES */
2907                 .probe = marvell_probe,
2908                 .config_init = marvell_config_init,
2909                 .config_aneg = m88e1101_config_aneg,
2910                 .config_intr = marvell_config_intr,
2911                 .handle_interrupt = marvell_handle_interrupt,
2912                 .resume = genphy_resume,
2913                 .suspend = genphy_suspend,
2914                 .read_page = marvell_read_page,
2915                 .write_page = marvell_write_page,
2916                 .get_sset_count = marvell_get_sset_count,
2917                 .get_strings = marvell_get_strings,
2918                 .get_stats = marvell_get_stats,
2919         },
2920         {
2921                 .phy_id = MARVELL_PHY_ID_88E1112,
2922                 .phy_id_mask = MARVELL_PHY_ID_MASK,
2923                 .name = "Marvell 88E1112",
2924                 /* PHY_GBIT_FEATURES */
2925                 .probe = marvell_probe,
2926                 .config_init = m88e1112_config_init,
2927                 .config_aneg = marvell_config_aneg,
2928                 .config_intr = marvell_config_intr,
2929                 .handle_interrupt = marvell_handle_interrupt,
2930                 .resume = genphy_resume,
2931                 .suspend = genphy_suspend,
2932                 .read_page = marvell_read_page,
2933                 .write_page = marvell_write_page,
2934                 .get_sset_count = marvell_get_sset_count,
2935                 .get_strings = marvell_get_strings,
2936                 .get_stats = marvell_get_stats,
2937                 .get_tunable = m88e1011_get_tunable,
2938                 .set_tunable = m88e1011_set_tunable,
2939         },
2940         {
2941                 .phy_id = MARVELL_PHY_ID_88E1111,
2942                 .phy_id_mask = MARVELL_PHY_ID_MASK,
2943                 .name = "Marvell 88E1111",
2944                 /* PHY_GBIT_FEATURES */
2945                 .probe = marvell_probe,
2946                 .config_init = m88e1111gbe_config_init,
2947                 .config_aneg = m88e1111_config_aneg,
2948                 .read_status = marvell_read_status,
2949                 .config_intr = marvell_config_intr,
2950                 .handle_interrupt = marvell_handle_interrupt,
2951                 .resume = genphy_resume,
2952                 .suspend = genphy_suspend,
2953                 .read_page = marvell_read_page,
2954                 .write_page = marvell_write_page,
2955                 .get_sset_count = marvell_get_sset_count,
2956                 .get_strings = marvell_get_strings,
2957                 .get_stats = marvell_get_stats,
2958                 .get_tunable = m88e1111_get_tunable,
2959                 .set_tunable = m88e1111_set_tunable,
2960         },
2961         {
2962                 .phy_id = MARVELL_PHY_ID_88E1111_FINISAR,
2963                 .phy_id_mask = MARVELL_PHY_ID_MASK,
2964                 .name = "Marvell 88E1111 (Finisar)",
2965                 /* PHY_GBIT_FEATURES */
2966                 .probe = marvell_probe,
2967                 .config_init = m88e1111gbe_config_init,
2968                 .config_aneg = m88e1111_config_aneg,
2969                 .read_status = marvell_read_status,
2970                 .config_intr = marvell_config_intr,
2971                 .handle_interrupt = marvell_handle_interrupt,
2972                 .resume = genphy_resume,
2973                 .suspend = genphy_suspend,
2974                 .read_page = marvell_read_page,
2975                 .write_page = marvell_write_page,
2976                 .get_sset_count = marvell_get_sset_count,
2977                 .get_strings = marvell_get_strings,
2978                 .get_stats = marvell_get_stats,
2979                 .get_tunable = m88e1111_get_tunable,
2980                 .set_tunable = m88e1111_set_tunable,
2981         },
2982         {
2983                 .phy_id = MARVELL_PHY_ID_88E1118,
2984                 .phy_id_mask = MARVELL_PHY_ID_MASK,
2985                 .name = "Marvell 88E1118",
2986                 /* PHY_GBIT_FEATURES */
2987                 .probe = marvell_probe,
2988                 .config_init = m88e1118_config_init,
2989                 .config_aneg = m88e1118_config_aneg,
2990                 .config_intr = marvell_config_intr,
2991                 .handle_interrupt = marvell_handle_interrupt,
2992                 .resume = genphy_resume,
2993                 .suspend = genphy_suspend,
2994                 .read_page = marvell_read_page,
2995                 .write_page = marvell_write_page,
2996                 .get_sset_count = marvell_get_sset_count,
2997                 .get_strings = marvell_get_strings,
2998                 .get_stats = marvell_get_stats,
2999         },
3000         {
3001                 .phy_id = MARVELL_PHY_ID_88E1121R,
3002                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3003                 .name = "Marvell 88E1121R",
3004                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1121_hwmon_ops),
3005                 /* PHY_GBIT_FEATURES */
3006                 .probe = marvell_probe,
3007                 .config_init = marvell_1011gbe_config_init,
3008                 .config_aneg = m88e1121_config_aneg,
3009                 .read_status = marvell_read_status,
3010                 .config_intr = marvell_config_intr,
3011                 .handle_interrupt = marvell_handle_interrupt,
3012                 .resume = genphy_resume,
3013                 .suspend = genphy_suspend,
3014                 .read_page = marvell_read_page,
3015                 .write_page = marvell_write_page,
3016                 .get_sset_count = marvell_get_sset_count,
3017                 .get_strings = marvell_get_strings,
3018                 .get_stats = marvell_get_stats,
3019                 .get_tunable = m88e1011_get_tunable,
3020                 .set_tunable = m88e1011_set_tunable,
3021         },
3022         {
3023                 .phy_id = MARVELL_PHY_ID_88E1318S,
3024                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3025                 .name = "Marvell 88E1318S",
3026                 /* PHY_GBIT_FEATURES */
3027                 .probe = marvell_probe,
3028                 .config_init = m88e1318_config_init,
3029                 .config_aneg = m88e1318_config_aneg,
3030                 .read_status = marvell_read_status,
3031                 .config_intr = marvell_config_intr,
3032                 .handle_interrupt = marvell_handle_interrupt,
3033                 .get_wol = m88e1318_get_wol,
3034                 .set_wol = m88e1318_set_wol,
3035                 .resume = genphy_resume,
3036                 .suspend = genphy_suspend,
3037                 .read_page = marvell_read_page,
3038                 .write_page = marvell_write_page,
3039                 .get_sset_count = marvell_get_sset_count,
3040                 .get_strings = marvell_get_strings,
3041                 .get_stats = marvell_get_stats,
3042         },
3043         {
3044                 .phy_id = MARVELL_PHY_ID_88E1145,
3045                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3046                 .name = "Marvell 88E1145",
3047                 /* PHY_GBIT_FEATURES */
3048                 .probe = marvell_probe,
3049                 .config_init = m88e1145_config_init,
3050                 .config_aneg = m88e1101_config_aneg,
3051                 .config_intr = marvell_config_intr,
3052                 .handle_interrupt = marvell_handle_interrupt,
3053                 .resume = genphy_resume,
3054                 .suspend = genphy_suspend,
3055                 .read_page = marvell_read_page,
3056                 .write_page = marvell_write_page,
3057                 .get_sset_count = marvell_get_sset_count,
3058                 .get_strings = marvell_get_strings,
3059                 .get_stats = marvell_get_stats,
3060                 .get_tunable = m88e1111_get_tunable,
3061                 .set_tunable = m88e1111_set_tunable,
3062         },
3063         {
3064                 .phy_id = MARVELL_PHY_ID_88E1149R,
3065                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3066                 .name = "Marvell 88E1149R",
3067                 /* PHY_GBIT_FEATURES */
3068                 .probe = marvell_probe,
3069                 .config_init = m88e1149_config_init,
3070                 .config_aneg = m88e1118_config_aneg,
3071                 .config_intr = marvell_config_intr,
3072                 .handle_interrupt = marvell_handle_interrupt,
3073                 .resume = genphy_resume,
3074                 .suspend = genphy_suspend,
3075                 .read_page = marvell_read_page,
3076                 .write_page = marvell_write_page,
3077                 .get_sset_count = marvell_get_sset_count,
3078                 .get_strings = marvell_get_strings,
3079                 .get_stats = marvell_get_stats,
3080         },
3081         {
3082                 .phy_id = MARVELL_PHY_ID_88E1240,
3083                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3084                 .name = "Marvell 88E1240",
3085                 /* PHY_GBIT_FEATURES */
3086                 .probe = marvell_probe,
3087                 .config_init = m88e1112_config_init,
3088                 .config_aneg = marvell_config_aneg,
3089                 .config_intr = marvell_config_intr,
3090                 .handle_interrupt = marvell_handle_interrupt,
3091                 .resume = genphy_resume,
3092                 .suspend = genphy_suspend,
3093                 .read_page = marvell_read_page,
3094                 .write_page = marvell_write_page,
3095                 .get_sset_count = marvell_get_sset_count,
3096                 .get_strings = marvell_get_strings,
3097                 .get_stats = marvell_get_stats,
3098                 .get_tunable = m88e1011_get_tunable,
3099                 .set_tunable = m88e1011_set_tunable,
3100         },
3101         {
3102                 .phy_id = MARVELL_PHY_ID_88E1116R,
3103                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3104                 .name = "Marvell 88E1116R",
3105                 /* PHY_GBIT_FEATURES */
3106                 .probe = marvell_probe,
3107                 .config_init = m88e1116r_config_init,
3108                 .config_intr = marvell_config_intr,
3109                 .handle_interrupt = marvell_handle_interrupt,
3110                 .resume = genphy_resume,
3111                 .suspend = genphy_suspend,
3112                 .read_page = marvell_read_page,
3113                 .write_page = marvell_write_page,
3114                 .get_sset_count = marvell_get_sset_count,
3115                 .get_strings = marvell_get_strings,
3116                 .get_stats = marvell_get_stats,
3117                 .get_tunable = m88e1011_get_tunable,
3118                 .set_tunable = m88e1011_set_tunable,
3119         },
3120         {
3121                 .phy_id = MARVELL_PHY_ID_88E1510,
3122                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3123                 .name = "Marvell 88E1510",
3124                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3125                 .features = PHY_GBIT_FIBRE_FEATURES,
3126                 .flags = PHY_POLL_CABLE_TEST,
3127                 .probe = m88e1510_probe,
3128                 .config_init = m88e1510_config_init,
3129                 .config_aneg = m88e1510_config_aneg,
3130                 .read_status = marvell_read_status,
3131                 .config_intr = marvell_config_intr,
3132                 .handle_interrupt = marvell_handle_interrupt,
3133                 .get_wol = m88e1318_get_wol,
3134                 .set_wol = m88e1318_set_wol,
3135                 .resume = marvell_resume,
3136                 .suspend = marvell_suspend,
3137                 .read_page = marvell_read_page,
3138                 .write_page = marvell_write_page,
3139                 .get_sset_count = marvell_get_sset_count,
3140                 .get_strings = marvell_get_strings,
3141                 .get_stats = marvell_get_stats,
3142                 .set_loopback = m88e1510_loopback,
3143                 .get_tunable = m88e1011_get_tunable,
3144                 .set_tunable = m88e1011_set_tunable,
3145                 .cable_test_start = marvell_vct7_cable_test_start,
3146                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3147                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3148         },
3149         {
3150                 .phy_id = MARVELL_PHY_ID_88E1540,
3151                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3152                 .name = "Marvell 88E1540",
3153                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3154                 /* PHY_GBIT_FEATURES */
3155                 .flags = PHY_POLL_CABLE_TEST,
3156                 .probe = marvell_probe,
3157                 .config_init = marvell_1011gbe_config_init,
3158                 .config_aneg = m88e1510_config_aneg,
3159                 .read_status = marvell_read_status,
3160                 .config_intr = marvell_config_intr,
3161                 .handle_interrupt = marvell_handle_interrupt,
3162                 .resume = genphy_resume,
3163                 .suspend = genphy_suspend,
3164                 .read_page = marvell_read_page,
3165                 .write_page = marvell_write_page,
3166                 .get_sset_count = marvell_get_sset_count,
3167                 .get_strings = marvell_get_strings,
3168                 .get_stats = marvell_get_stats,
3169                 .get_tunable = m88e1540_get_tunable,
3170                 .set_tunable = m88e1540_set_tunable,
3171                 .cable_test_start = marvell_vct7_cable_test_start,
3172                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3173                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3174         },
3175         {
3176                 .phy_id = MARVELL_PHY_ID_88E1545,
3177                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3178                 .name = "Marvell 88E1545",
3179                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3180                 .probe = marvell_probe,
3181                 /* PHY_GBIT_FEATURES */
3182                 .flags = PHY_POLL_CABLE_TEST,
3183                 .config_init = marvell_1011gbe_config_init,
3184                 .config_aneg = m88e1510_config_aneg,
3185                 .read_status = marvell_read_status,
3186                 .config_intr = marvell_config_intr,
3187                 .handle_interrupt = marvell_handle_interrupt,
3188                 .resume = genphy_resume,
3189                 .suspend = genphy_suspend,
3190                 .read_page = marvell_read_page,
3191                 .write_page = marvell_write_page,
3192                 .get_sset_count = marvell_get_sset_count,
3193                 .get_strings = marvell_get_strings,
3194                 .get_stats = marvell_get_stats,
3195                 .get_tunable = m88e1540_get_tunable,
3196                 .set_tunable = m88e1540_set_tunable,
3197                 .cable_test_start = marvell_vct7_cable_test_start,
3198                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3199                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3200         },
3201         {
3202                 .phy_id = MARVELL_PHY_ID_88E3016,
3203                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3204                 .name = "Marvell 88E3016",
3205                 /* PHY_BASIC_FEATURES */
3206                 .probe = marvell_probe,
3207                 .config_init = m88e3016_config_init,
3208                 .aneg_done = marvell_aneg_done,
3209                 .read_status = marvell_read_status,
3210                 .config_intr = marvell_config_intr,
3211                 .handle_interrupt = marvell_handle_interrupt,
3212                 .resume = genphy_resume,
3213                 .suspend = genphy_suspend,
3214                 .read_page = marvell_read_page,
3215                 .write_page = marvell_write_page,
3216                 .get_sset_count = marvell_get_sset_count,
3217                 .get_strings = marvell_get_strings,
3218                 .get_stats = marvell_get_stats,
3219         },
3220         {
3221                 .phy_id = MARVELL_PHY_ID_88E6341_FAMILY,
3222                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3223                 .name = "Marvell 88E6341 Family",
3224                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3225                 /* PHY_GBIT_FEATURES */
3226                 .flags = PHY_POLL_CABLE_TEST,
3227                 .probe = marvell_probe,
3228                 .config_init = marvell_1011gbe_config_init,
3229                 .config_aneg = m88e6390_config_aneg,
3230                 .read_status = marvell_read_status,
3231                 .config_intr = marvell_config_intr,
3232                 .handle_interrupt = marvell_handle_interrupt,
3233                 .resume = genphy_resume,
3234                 .suspend = genphy_suspend,
3235                 .read_page = marvell_read_page,
3236                 .write_page = marvell_write_page,
3237                 .get_sset_count = marvell_get_sset_count,
3238                 .get_strings = marvell_get_strings,
3239                 .get_stats = marvell_get_stats,
3240                 .get_tunable = m88e1540_get_tunable,
3241                 .set_tunable = m88e1540_set_tunable,
3242                 .cable_test_start = marvell_vct7_cable_test_start,
3243                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3244                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3245         },
3246         {
3247                 .phy_id = MARVELL_PHY_ID_88E6390_FAMILY,
3248                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3249                 .name = "Marvell 88E6390 Family",
3250                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e6390_hwmon_ops),
3251                 /* PHY_GBIT_FEATURES */
3252                 .flags = PHY_POLL_CABLE_TEST,
3253                 .probe = marvell_probe,
3254                 .config_init = marvell_1011gbe_config_init,
3255                 .config_aneg = m88e6390_config_aneg,
3256                 .read_status = marvell_read_status,
3257                 .config_intr = marvell_config_intr,
3258                 .handle_interrupt = marvell_handle_interrupt,
3259                 .resume = genphy_resume,
3260                 .suspend = genphy_suspend,
3261                 .read_page = marvell_read_page,
3262                 .write_page = marvell_write_page,
3263                 .get_sset_count = marvell_get_sset_count,
3264                 .get_strings = marvell_get_strings,
3265                 .get_stats = marvell_get_stats,
3266                 .get_tunable = m88e1540_get_tunable,
3267                 .set_tunable = m88e1540_set_tunable,
3268                 .cable_test_start = marvell_vct7_cable_test_start,
3269                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3270                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3271         },
3272         {
3273                 .phy_id = MARVELL_PHY_ID_88E6393_FAMILY,
3274                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3275                 .name = "Marvell 88E6393 Family",
3276                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e6393_hwmon_ops),
3277                 /* PHY_GBIT_FEATURES */
3278                 .flags = PHY_POLL_CABLE_TEST,
3279                 .probe = marvell_probe,
3280                 .config_init = marvell_1011gbe_config_init,
3281                 .config_aneg = m88e1510_config_aneg,
3282                 .read_status = marvell_read_status,
3283                 .config_intr = marvell_config_intr,
3284                 .handle_interrupt = marvell_handle_interrupt,
3285                 .resume = genphy_resume,
3286                 .suspend = genphy_suspend,
3287                 .read_page = marvell_read_page,
3288                 .write_page = marvell_write_page,
3289                 .get_sset_count = marvell_get_sset_count,
3290                 .get_strings = marvell_get_strings,
3291                 .get_stats = marvell_get_stats,
3292                 .get_tunable = m88e1540_get_tunable,
3293                 .set_tunable = m88e1540_set_tunable,
3294                 .cable_test_start = marvell_vct7_cable_test_start,
3295                 .cable_test_tdr_start = marvell_vct5_cable_test_tdr_start,
3296                 .cable_test_get_status = marvell_vct7_cable_test_get_status,
3297         },
3298         {
3299                 .phy_id = MARVELL_PHY_ID_88E1340S,
3300                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3301                 .name = "Marvell 88E1340S",
3302                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3303                 .probe = marvell_probe,
3304                 /* PHY_GBIT_FEATURES */
3305                 .config_init = marvell_1011gbe_config_init,
3306                 .config_aneg = m88e1510_config_aneg,
3307                 .read_status = marvell_read_status,
3308                 .config_intr = marvell_config_intr,
3309                 .handle_interrupt = marvell_handle_interrupt,
3310                 .resume = genphy_resume,
3311                 .suspend = genphy_suspend,
3312                 .read_page = marvell_read_page,
3313                 .write_page = marvell_write_page,
3314                 .get_sset_count = marvell_get_sset_count,
3315                 .get_strings = marvell_get_strings,
3316                 .get_stats = marvell_get_stats,
3317                 .get_tunable = m88e1540_get_tunable,
3318                 .set_tunable = m88e1540_set_tunable,
3319         },
3320         {
3321                 .phy_id = MARVELL_PHY_ID_88E1548P,
3322                 .phy_id_mask = MARVELL_PHY_ID_MASK,
3323                 .name = "Marvell 88E1548P",
3324                 .driver_data = DEF_MARVELL_HWMON_OPS(m88e1510_hwmon_ops),
3325                 .probe = marvell_probe,
3326                 .features = PHY_GBIT_FIBRE_FEATURES,
3327                 .config_init = marvell_1011gbe_config_init,
3328                 .config_aneg = m88e1510_config_aneg,
3329                 .read_status = marvell_read_status,
3330                 .config_intr = marvell_config_intr,
3331                 .handle_interrupt = marvell_handle_interrupt,
3332                 .resume = genphy_resume,
3333                 .suspend = genphy_suspend,
3334                 .read_page = marvell_read_page,
3335                 .write_page = marvell_write_page,
3336                 .get_sset_count = marvell_get_sset_count,
3337                 .get_strings = marvell_get_strings,
3338                 .get_stats = marvell_get_stats,
3339                 .get_tunable = m88e1540_get_tunable,
3340                 .set_tunable = m88e1540_set_tunable,
3341         },
3342 };
3343
3344 module_phy_driver(marvell_drivers);
3345
3346 static struct mdio_device_id __maybe_unused marvell_tbl[] = {
3347         { MARVELL_PHY_ID_88E1101, MARVELL_PHY_ID_MASK },
3348         { MARVELL_PHY_ID_88E1112, MARVELL_PHY_ID_MASK },
3349         { MARVELL_PHY_ID_88E1111, MARVELL_PHY_ID_MASK },
3350         { MARVELL_PHY_ID_88E1111_FINISAR, MARVELL_PHY_ID_MASK },
3351         { MARVELL_PHY_ID_88E1118, MARVELL_PHY_ID_MASK },
3352         { MARVELL_PHY_ID_88E1121R, MARVELL_PHY_ID_MASK },
3353         { MARVELL_PHY_ID_88E1145, MARVELL_PHY_ID_MASK },
3354         { MARVELL_PHY_ID_88E1149R, MARVELL_PHY_ID_MASK },
3355         { MARVELL_PHY_ID_88E1240, MARVELL_PHY_ID_MASK },
3356         { MARVELL_PHY_ID_88E1318S, MARVELL_PHY_ID_MASK },
3357         { MARVELL_PHY_ID_88E1116R, MARVELL_PHY_ID_MASK },
3358         { MARVELL_PHY_ID_88E1510, MARVELL_PHY_ID_MASK },
3359         { MARVELL_PHY_ID_88E1540, MARVELL_PHY_ID_MASK },
3360         { MARVELL_PHY_ID_88E1545, MARVELL_PHY_ID_MASK },
3361         { MARVELL_PHY_ID_88E3016, MARVELL_PHY_ID_MASK },
3362         { MARVELL_PHY_ID_88E6341_FAMILY, MARVELL_PHY_ID_MASK },
3363         { MARVELL_PHY_ID_88E6390_FAMILY, MARVELL_PHY_ID_MASK },
3364         { MARVELL_PHY_ID_88E6393_FAMILY, MARVELL_PHY_ID_MASK },
3365         { MARVELL_PHY_ID_88E1340S, MARVELL_PHY_ID_MASK },
3366         { MARVELL_PHY_ID_88E1548P, MARVELL_PHY_ID_MASK },
3367         { }
3368 };
3369
3370 MODULE_DEVICE_TABLE(mdio, marvell_tbl);