GNU Linux-libre 6.1.90-gnu
[releases.git] / net / ipv6 / raw.c
1 // SPDX-License-Identifier: GPL-2.0-or-later
2 /*
3  *      RAW sockets for IPv6
4  *      Linux INET6 implementation
5  *
6  *      Authors:
7  *      Pedro Roque             <roque@di.fc.ul.pt>
8  *
9  *      Adapted from linux/net/ipv4/raw.c
10  *
11  *      Fixes:
12  *      Hideaki YOSHIFUJI       :       sin6_scope_id support
13  *      YOSHIFUJI,H.@USAGI      :       raw checksum (RFC2292(bis) compliance)
14  *      Kazunori MIYAZAWA @USAGI:       change process style to use ip6_append_data
15  */
16
17 #include <linux/errno.h>
18 #include <linux/types.h>
19 #include <linux/socket.h>
20 #include <linux/slab.h>
21 #include <linux/sockios.h>
22 #include <linux/net.h>
23 #include <linux/in6.h>
24 #include <linux/netdevice.h>
25 #include <linux/if_arp.h>
26 #include <linux/icmpv6.h>
27 #include <linux/netfilter.h>
28 #include <linux/netfilter_ipv6.h>
29 #include <linux/skbuff.h>
30 #include <linux/compat.h>
31 #include <linux/uaccess.h>
32 #include <asm/ioctls.h>
33
34 #include <net/net_namespace.h>
35 #include <net/ip.h>
36 #include <net/sock.h>
37 #include <net/snmp.h>
38
39 #include <net/ipv6.h>
40 #include <net/ndisc.h>
41 #include <net/protocol.h>
42 #include <net/ip6_route.h>
43 #include <net/ip6_checksum.h>
44 #include <net/addrconf.h>
45 #include <net/transp_v6.h>
46 #include <net/udp.h>
47 #include <net/inet_common.h>
48 #include <net/tcp_states.h>
49 #if IS_ENABLED(CONFIG_IPV6_MIP6)
50 #include <net/mip6.h>
51 #endif
52 #include <linux/mroute6.h>
53
54 #include <net/raw.h>
55 #include <net/rawv6.h>
56 #include <net/xfrm.h>
57
58 #include <linux/proc_fs.h>
59 #include <linux/seq_file.h>
60 #include <linux/export.h>
61
62 #define ICMPV6_HDRLEN   4       /* ICMPv6 header, RFC 4443 Section 2.1 */
63
64 struct raw_hashinfo raw_v6_hashinfo;
65 EXPORT_SYMBOL_GPL(raw_v6_hashinfo);
66
67 bool raw_v6_match(struct net *net, struct sock *sk, unsigned short num,
68                   const struct in6_addr *loc_addr,
69                   const struct in6_addr *rmt_addr, int dif, int sdif)
70 {
71         if (inet_sk(sk)->inet_num != num ||
72             !net_eq(sock_net(sk), net) ||
73             (!ipv6_addr_any(&sk->sk_v6_daddr) &&
74              !ipv6_addr_equal(&sk->sk_v6_daddr, rmt_addr)) ||
75             !raw_sk_bound_dev_eq(net, sk->sk_bound_dev_if,
76                                  dif, sdif))
77                 return false;
78
79         if (ipv6_addr_any(&sk->sk_v6_rcv_saddr) ||
80             ipv6_addr_equal(&sk->sk_v6_rcv_saddr, loc_addr) ||
81             (ipv6_addr_is_multicast(loc_addr) &&
82              inet6_mc_check(sk, loc_addr, rmt_addr)))
83                 return true;
84
85         return false;
86 }
87 EXPORT_SYMBOL_GPL(raw_v6_match);
88
89 /*
90  *      0 - deliver
91  *      1 - block
92  */
93 static int icmpv6_filter(const struct sock *sk, const struct sk_buff *skb)
94 {
95         struct icmp6hdr _hdr;
96         const struct icmp6hdr *hdr;
97
98         /* We require only the four bytes of the ICMPv6 header, not any
99          * additional bytes of message body in "struct icmp6hdr".
100          */
101         hdr = skb_header_pointer(skb, skb_transport_offset(skb),
102                                  ICMPV6_HDRLEN, &_hdr);
103         if (hdr) {
104                 const __u32 *data = &raw6_sk(sk)->filter.data[0];
105                 unsigned int type = hdr->icmp6_type;
106
107                 return (data[type >> 5] & (1U << (type & 31))) != 0;
108         }
109         return 1;
110 }
111
112 #if IS_ENABLED(CONFIG_IPV6_MIP6)
113 typedef int mh_filter_t(struct sock *sock, struct sk_buff *skb);
114
115 static mh_filter_t __rcu *mh_filter __read_mostly;
116
117 int rawv6_mh_filter_register(mh_filter_t filter)
118 {
119         rcu_assign_pointer(mh_filter, filter);
120         return 0;
121 }
122 EXPORT_SYMBOL(rawv6_mh_filter_register);
123
124 int rawv6_mh_filter_unregister(mh_filter_t filter)
125 {
126         RCU_INIT_POINTER(mh_filter, NULL);
127         synchronize_rcu();
128         return 0;
129 }
130 EXPORT_SYMBOL(rawv6_mh_filter_unregister);
131
132 #endif
133
134 /*
135  *      demultiplex raw sockets.
136  *      (should consider queueing the skb in the sock receive_queue
137  *      without calling rawv6.c)
138  *
139  *      Caller owns SKB so we must make clones.
140  */
141 static bool ipv6_raw_deliver(struct sk_buff *skb, int nexthdr)
142 {
143         struct net *net = dev_net(skb->dev);
144         const struct in6_addr *saddr;
145         const struct in6_addr *daddr;
146         struct hlist_head *hlist;
147         struct sock *sk;
148         bool delivered = false;
149         __u8 hash;
150
151         saddr = &ipv6_hdr(skb)->saddr;
152         daddr = saddr + 1;
153
154         hash = raw_hashfunc(net, nexthdr);
155         hlist = &raw_v6_hashinfo.ht[hash];
156         rcu_read_lock();
157         sk_for_each_rcu(sk, hlist) {
158                 int filtered;
159
160                 if (!raw_v6_match(net, sk, nexthdr, daddr, saddr,
161                                   inet6_iif(skb), inet6_sdif(skb)))
162                         continue;
163                 delivered = true;
164                 switch (nexthdr) {
165                 case IPPROTO_ICMPV6:
166                         filtered = icmpv6_filter(sk, skb);
167                         break;
168
169 #if IS_ENABLED(CONFIG_IPV6_MIP6)
170                 case IPPROTO_MH:
171                 {
172                         /* XXX: To validate MH only once for each packet,
173                          * this is placed here. It should be after checking
174                          * xfrm policy, however it doesn't. The checking xfrm
175                          * policy is placed in rawv6_rcv() because it is
176                          * required for each socket.
177                          */
178                         mh_filter_t *filter;
179
180                         filter = rcu_dereference(mh_filter);
181                         filtered = filter ? (*filter)(sk, skb) : 0;
182                         break;
183                 }
184 #endif
185                 default:
186                         filtered = 0;
187                         break;
188                 }
189
190                 if (filtered < 0)
191                         break;
192                 if (filtered == 0) {
193                         struct sk_buff *clone = skb_clone(skb, GFP_ATOMIC);
194
195                         /* Not releasing hash table! */
196                         if (clone)
197                                 rawv6_rcv(sk, clone);
198                 }
199         }
200         rcu_read_unlock();
201         return delivered;
202 }
203
204 bool raw6_local_deliver(struct sk_buff *skb, int nexthdr)
205 {
206         return ipv6_raw_deliver(skb, nexthdr);
207 }
208
209 /* This cleans up af_inet6 a bit. -DaveM */
210 static int rawv6_bind(struct sock *sk, struct sockaddr *uaddr, int addr_len)
211 {
212         struct inet_sock *inet = inet_sk(sk);
213         struct ipv6_pinfo *np = inet6_sk(sk);
214         struct sockaddr_in6 *addr = (struct sockaddr_in6 *) uaddr;
215         __be32 v4addr = 0;
216         int addr_type;
217         int err;
218
219         if (addr_len < SIN6_LEN_RFC2133)
220                 return -EINVAL;
221
222         if (addr->sin6_family != AF_INET6)
223                 return -EINVAL;
224
225         addr_type = ipv6_addr_type(&addr->sin6_addr);
226
227         /* Raw sockets are IPv6 only */
228         if (addr_type == IPV6_ADDR_MAPPED)
229                 return -EADDRNOTAVAIL;
230
231         lock_sock(sk);
232
233         err = -EINVAL;
234         if (sk->sk_state != TCP_CLOSE)
235                 goto out;
236
237         rcu_read_lock();
238         /* Check if the address belongs to the host. */
239         if (addr_type != IPV6_ADDR_ANY) {
240                 struct net_device *dev = NULL;
241
242                 if (__ipv6_addr_needs_scope_id(addr_type)) {
243                         if (addr_len >= sizeof(struct sockaddr_in6) &&
244                             addr->sin6_scope_id) {
245                                 /* Override any existing binding, if another
246                                  * one is supplied by user.
247                                  */
248                                 sk->sk_bound_dev_if = addr->sin6_scope_id;
249                         }
250
251                         /* Binding to link-local address requires an interface */
252                         if (!sk->sk_bound_dev_if)
253                                 goto out_unlock;
254                 }
255
256                 if (sk->sk_bound_dev_if) {
257                         err = -ENODEV;
258                         dev = dev_get_by_index_rcu(sock_net(sk),
259                                                    sk->sk_bound_dev_if);
260                         if (!dev)
261                                 goto out_unlock;
262                 }
263
264                 /* ipv4 addr of the socket is invalid.  Only the
265                  * unspecified and mapped address have a v4 equivalent.
266                  */
267                 v4addr = LOOPBACK4_IPV6;
268                 if (!(addr_type & IPV6_ADDR_MULTICAST) &&
269                     !ipv6_can_nonlocal_bind(sock_net(sk), inet)) {
270                         err = -EADDRNOTAVAIL;
271                         if (!ipv6_chk_addr(sock_net(sk), &addr->sin6_addr,
272                                            dev, 0)) {
273                                 goto out_unlock;
274                         }
275                 }
276         }
277
278         inet->inet_rcv_saddr = inet->inet_saddr = v4addr;
279         sk->sk_v6_rcv_saddr = addr->sin6_addr;
280         if (!(addr_type & IPV6_ADDR_MULTICAST))
281                 np->saddr = addr->sin6_addr;
282         err = 0;
283 out_unlock:
284         rcu_read_unlock();
285 out:
286         release_sock(sk);
287         return err;
288 }
289
290 static void rawv6_err(struct sock *sk, struct sk_buff *skb,
291                struct inet6_skb_parm *opt,
292                u8 type, u8 code, int offset, __be32 info)
293 {
294         struct inet_sock *inet = inet_sk(sk);
295         struct ipv6_pinfo *np = inet6_sk(sk);
296         int err;
297         int harderr;
298
299         /* Report error on raw socket, if:
300            1. User requested recverr.
301            2. Socket is connected (otherwise the error indication
302               is useless without recverr and error is hard.
303          */
304         if (!np->recverr && sk->sk_state != TCP_ESTABLISHED)
305                 return;
306
307         harderr = icmpv6_err_convert(type, code, &err);
308         if (type == ICMPV6_PKT_TOOBIG) {
309                 ip6_sk_update_pmtu(skb, sk, info);
310                 harderr = (np->pmtudisc == IPV6_PMTUDISC_DO);
311         }
312         if (type == NDISC_REDIRECT) {
313                 ip6_sk_redirect(skb, sk);
314                 return;
315         }
316         if (np->recverr) {
317                 u8 *payload = skb->data;
318                 if (!inet->hdrincl)
319                         payload += offset;
320                 ipv6_icmp_error(sk, skb, err, 0, ntohl(info), payload);
321         }
322
323         if (np->recverr || harderr) {
324                 sk->sk_err = err;
325                 sk_error_report(sk);
326         }
327 }
328
329 void raw6_icmp_error(struct sk_buff *skb, int nexthdr,
330                 u8 type, u8 code, int inner_offset, __be32 info)
331 {
332         struct net *net = dev_net(skb->dev);
333         struct hlist_head *hlist;
334         struct sock *sk;
335         int hash;
336
337         hash = raw_hashfunc(net, nexthdr);
338         hlist = &raw_v6_hashinfo.ht[hash];
339         rcu_read_lock();
340         sk_for_each_rcu(sk, hlist) {
341                 /* Note: ipv6_hdr(skb) != skb->data */
342                 const struct ipv6hdr *ip6h = (const struct ipv6hdr *)skb->data;
343
344                 if (!raw_v6_match(net, sk, nexthdr, &ip6h->saddr, &ip6h->daddr,
345                                   inet6_iif(skb), inet6_iif(skb)))
346                         continue;
347                 rawv6_err(sk, skb, NULL, type, code, inner_offset, info);
348         }
349         rcu_read_unlock();
350 }
351
352 static inline int rawv6_rcv_skb(struct sock *sk, struct sk_buff *skb)
353 {
354         if ((raw6_sk(sk)->checksum || rcu_access_pointer(sk->sk_filter)) &&
355             skb_checksum_complete(skb)) {
356                 atomic_inc(&sk->sk_drops);
357                 kfree_skb(skb);
358                 return NET_RX_DROP;
359         }
360
361         /* Charge it to the socket. */
362         skb_dst_drop(skb);
363         if (sock_queue_rcv_skb(sk, skb) < 0) {
364                 kfree_skb(skb);
365                 return NET_RX_DROP;
366         }
367
368         return 0;
369 }
370
371 /*
372  *      This is next to useless...
373  *      if we demultiplex in network layer we don't need the extra call
374  *      just to queue the skb...
375  *      maybe we could have the network decide upon a hint if it
376  *      should call raw_rcv for demultiplexing
377  */
378 int rawv6_rcv(struct sock *sk, struct sk_buff *skb)
379 {
380         struct inet_sock *inet = inet_sk(sk);
381         struct raw6_sock *rp = raw6_sk(sk);
382
383         if (!xfrm6_policy_check(sk, XFRM_POLICY_IN, skb)) {
384                 atomic_inc(&sk->sk_drops);
385                 kfree_skb(skb);
386                 return NET_RX_DROP;
387         }
388         nf_reset_ct(skb);
389
390         if (!rp->checksum)
391                 skb->ip_summed = CHECKSUM_UNNECESSARY;
392
393         if (skb->ip_summed == CHECKSUM_COMPLETE) {
394                 skb_postpull_rcsum(skb, skb_network_header(skb),
395                                    skb_network_header_len(skb));
396                 if (!csum_ipv6_magic(&ipv6_hdr(skb)->saddr,
397                                      &ipv6_hdr(skb)->daddr,
398                                      skb->len, inet->inet_num, skb->csum))
399                         skb->ip_summed = CHECKSUM_UNNECESSARY;
400         }
401         if (!skb_csum_unnecessary(skb))
402                 skb->csum = ~csum_unfold(csum_ipv6_magic(&ipv6_hdr(skb)->saddr,
403                                                          &ipv6_hdr(skb)->daddr,
404                                                          skb->len,
405                                                          inet->inet_num, 0));
406
407         if (inet->hdrincl) {
408                 if (skb_checksum_complete(skb)) {
409                         atomic_inc(&sk->sk_drops);
410                         kfree_skb(skb);
411                         return NET_RX_DROP;
412                 }
413         }
414
415         rawv6_rcv_skb(sk, skb);
416         return 0;
417 }
418
419
420 /*
421  *      This should be easy, if there is something there
422  *      we return it, otherwise we block.
423  */
424
425 static int rawv6_recvmsg(struct sock *sk, struct msghdr *msg, size_t len,
426                          int flags, int *addr_len)
427 {
428         struct ipv6_pinfo *np = inet6_sk(sk);
429         DECLARE_SOCKADDR(struct sockaddr_in6 *, sin6, msg->msg_name);
430         struct sk_buff *skb;
431         size_t copied;
432         int err;
433
434         if (flags & MSG_OOB)
435                 return -EOPNOTSUPP;
436
437         if (flags & MSG_ERRQUEUE)
438                 return ipv6_recv_error(sk, msg, len, addr_len);
439
440         if (np->rxpmtu && np->rxopt.bits.rxpmtu)
441                 return ipv6_recv_rxpmtu(sk, msg, len, addr_len);
442
443         skb = skb_recv_datagram(sk, flags, &err);
444         if (!skb)
445                 goto out;
446
447         copied = skb->len;
448         if (copied > len) {
449                 copied = len;
450                 msg->msg_flags |= MSG_TRUNC;
451         }
452
453         if (skb_csum_unnecessary(skb)) {
454                 err = skb_copy_datagram_msg(skb, 0, msg, copied);
455         } else if (msg->msg_flags&MSG_TRUNC) {
456                 if (__skb_checksum_complete(skb))
457                         goto csum_copy_err;
458                 err = skb_copy_datagram_msg(skb, 0, msg, copied);
459         } else {
460                 err = skb_copy_and_csum_datagram_msg(skb, 0, msg);
461                 if (err == -EINVAL)
462                         goto csum_copy_err;
463         }
464         if (err)
465                 goto out_free;
466
467         /* Copy the address. */
468         if (sin6) {
469                 sin6->sin6_family = AF_INET6;
470                 sin6->sin6_port = 0;
471                 sin6->sin6_addr = ipv6_hdr(skb)->saddr;
472                 sin6->sin6_flowinfo = 0;
473                 sin6->sin6_scope_id = ipv6_iface_scope_id(&sin6->sin6_addr,
474                                                           inet6_iif(skb));
475                 *addr_len = sizeof(*sin6);
476         }
477
478         sock_recv_cmsgs(msg, sk, skb);
479
480         if (np->rxopt.all)
481                 ip6_datagram_recv_ctl(sk, msg, skb);
482
483         err = copied;
484         if (flags & MSG_TRUNC)
485                 err = skb->len;
486
487 out_free:
488         skb_free_datagram(sk, skb);
489 out:
490         return err;
491
492 csum_copy_err:
493         skb_kill_datagram(sk, skb, flags);
494
495         /* Error for blocking case is chosen to masquerade
496            as some normal condition.
497          */
498         err = (flags&MSG_DONTWAIT) ? -EAGAIN : -EHOSTUNREACH;
499         goto out;
500 }
501
502 static int rawv6_push_pending_frames(struct sock *sk, struct flowi6 *fl6,
503                                      struct raw6_sock *rp)
504 {
505         struct ipv6_txoptions *opt;
506         struct sk_buff *skb;
507         int err = 0;
508         int offset;
509         int len;
510         int total_len;
511         __wsum tmp_csum;
512         __sum16 csum;
513
514         if (!rp->checksum)
515                 goto send;
516
517         skb = skb_peek(&sk->sk_write_queue);
518         if (!skb)
519                 goto out;
520
521         offset = rp->offset;
522         total_len = inet_sk(sk)->cork.base.length;
523         opt = inet6_sk(sk)->cork.opt;
524         total_len -= opt ? opt->opt_flen : 0;
525
526         if (offset >= total_len - 1) {
527                 err = -EINVAL;
528                 ip6_flush_pending_frames(sk);
529                 goto out;
530         }
531
532         /* should be check HW csum miyazawa */
533         if (skb_queue_len(&sk->sk_write_queue) == 1) {
534                 /*
535                  * Only one fragment on the socket.
536                  */
537                 tmp_csum = skb->csum;
538         } else {
539                 struct sk_buff *csum_skb = NULL;
540                 tmp_csum = 0;
541
542                 skb_queue_walk(&sk->sk_write_queue, skb) {
543                         tmp_csum = csum_add(tmp_csum, skb->csum);
544
545                         if (csum_skb)
546                                 continue;
547
548                         len = skb->len - skb_transport_offset(skb);
549                         if (offset >= len) {
550                                 offset -= len;
551                                 continue;
552                         }
553
554                         csum_skb = skb;
555                 }
556
557                 skb = csum_skb;
558         }
559
560         offset += skb_transport_offset(skb);
561         err = skb_copy_bits(skb, offset, &csum, 2);
562         if (err < 0) {
563                 ip6_flush_pending_frames(sk);
564                 goto out;
565         }
566
567         /* in case cksum was not initialized */
568         if (unlikely(csum))
569                 tmp_csum = csum_sub(tmp_csum, csum_unfold(csum));
570
571         csum = csum_ipv6_magic(&fl6->saddr, &fl6->daddr,
572                                total_len, fl6->flowi6_proto, tmp_csum);
573
574         if (csum == 0 && fl6->flowi6_proto == IPPROTO_UDP)
575                 csum = CSUM_MANGLED_0;
576
577         BUG_ON(skb_store_bits(skb, offset, &csum, 2));
578
579 send:
580         err = ip6_push_pending_frames(sk);
581 out:
582         return err;
583 }
584
585 static int rawv6_send_hdrinc(struct sock *sk, struct msghdr *msg, int length,
586                         struct flowi6 *fl6, struct dst_entry **dstp,
587                         unsigned int flags, const struct sockcm_cookie *sockc)
588 {
589         struct ipv6_pinfo *np = inet6_sk(sk);
590         struct net *net = sock_net(sk);
591         struct ipv6hdr *iph;
592         struct sk_buff *skb;
593         int err;
594         struct rt6_info *rt = (struct rt6_info *)*dstp;
595         int hlen = LL_RESERVED_SPACE(rt->dst.dev);
596         int tlen = rt->dst.dev->needed_tailroom;
597
598         if (length > rt->dst.dev->mtu) {
599                 ipv6_local_error(sk, EMSGSIZE, fl6, rt->dst.dev->mtu);
600                 return -EMSGSIZE;
601         }
602         if (length < sizeof(struct ipv6hdr))
603                 return -EINVAL;
604         if (flags&MSG_PROBE)
605                 goto out;
606
607         skb = sock_alloc_send_skb(sk,
608                                   length + hlen + tlen + 15,
609                                   flags & MSG_DONTWAIT, &err);
610         if (!skb)
611                 goto error;
612         skb_reserve(skb, hlen);
613
614         skb->protocol = htons(ETH_P_IPV6);
615         skb->priority = READ_ONCE(sk->sk_priority);
616         skb->mark = sockc->mark;
617         skb->tstamp = sockc->transmit_time;
618
619         skb_put(skb, length);
620         skb_reset_network_header(skb);
621         iph = ipv6_hdr(skb);
622
623         skb->ip_summed = CHECKSUM_NONE;
624
625         skb_setup_tx_timestamp(skb, sockc->tsflags);
626
627         if (flags & MSG_CONFIRM)
628                 skb_set_dst_pending_confirm(skb, 1);
629
630         skb->transport_header = skb->network_header;
631         err = memcpy_from_msg(iph, msg, length);
632         if (err) {
633                 err = -EFAULT;
634                 kfree_skb(skb);
635                 goto error;
636         }
637
638         skb_dst_set(skb, &rt->dst);
639         *dstp = NULL;
640
641         /* if egress device is enslaved to an L3 master device pass the
642          * skb to its handler for processing
643          */
644         skb = l3mdev_ip6_out(sk, skb);
645         if (unlikely(!skb))
646                 return 0;
647
648         /* Acquire rcu_read_lock() in case we need to use rt->rt6i_idev
649          * in the error path. Since skb has been freed, the dst could
650          * have been queued for deletion.
651          */
652         rcu_read_lock();
653         IP6_UPD_PO_STATS(net, rt->rt6i_idev, IPSTATS_MIB_OUT, skb->len);
654         err = NF_HOOK(NFPROTO_IPV6, NF_INET_LOCAL_OUT, net, sk, skb,
655                       NULL, rt->dst.dev, dst_output);
656         if (err > 0)
657                 err = net_xmit_errno(err);
658         if (err) {
659                 IP6_INC_STATS(net, rt->rt6i_idev, IPSTATS_MIB_OUTDISCARDS);
660                 rcu_read_unlock();
661                 goto error_check;
662         }
663         rcu_read_unlock();
664 out:
665         return 0;
666
667 error:
668         IP6_INC_STATS(net, rt->rt6i_idev, IPSTATS_MIB_OUTDISCARDS);
669 error_check:
670         if (err == -ENOBUFS && !np->recverr)
671                 err = 0;
672         return err;
673 }
674
675 struct raw6_frag_vec {
676         struct msghdr *msg;
677         int hlen;
678         char c[4];
679 };
680
681 static int rawv6_probe_proto_opt(struct raw6_frag_vec *rfv, struct flowi6 *fl6)
682 {
683         int err = 0;
684         switch (fl6->flowi6_proto) {
685         case IPPROTO_ICMPV6:
686                 rfv->hlen = 2;
687                 err = memcpy_from_msg(rfv->c, rfv->msg, rfv->hlen);
688                 if (!err) {
689                         fl6->fl6_icmp_type = rfv->c[0];
690                         fl6->fl6_icmp_code = rfv->c[1];
691                 }
692                 break;
693         case IPPROTO_MH:
694                 rfv->hlen = 4;
695                 err = memcpy_from_msg(rfv->c, rfv->msg, rfv->hlen);
696                 if (!err)
697                         fl6->fl6_mh_type = rfv->c[2];
698         }
699         return err;
700 }
701
702 static int raw6_getfrag(void *from, char *to, int offset, int len, int odd,
703                        struct sk_buff *skb)
704 {
705         struct raw6_frag_vec *rfv = from;
706
707         if (offset < rfv->hlen) {
708                 int copy = min(rfv->hlen - offset, len);
709
710                 if (skb->ip_summed == CHECKSUM_PARTIAL)
711                         memcpy(to, rfv->c + offset, copy);
712                 else
713                         skb->csum = csum_block_add(
714                                 skb->csum,
715                                 csum_partial_copy_nocheck(rfv->c + offset,
716                                                           to, copy),
717                                 odd);
718
719                 odd = 0;
720                 offset += copy;
721                 to += copy;
722                 len -= copy;
723
724                 if (!len)
725                         return 0;
726         }
727
728         offset -= rfv->hlen;
729
730         return ip_generic_getfrag(rfv->msg, to, offset, len, odd, skb);
731 }
732
733 static int rawv6_sendmsg(struct sock *sk, struct msghdr *msg, size_t len)
734 {
735         struct ipv6_txoptions *opt_to_free = NULL;
736         struct ipv6_txoptions opt_space;
737         DECLARE_SOCKADDR(struct sockaddr_in6 *, sin6, msg->msg_name);
738         struct in6_addr *daddr, *final_p, final;
739         struct inet_sock *inet = inet_sk(sk);
740         struct ipv6_pinfo *np = inet6_sk(sk);
741         struct raw6_sock *rp = raw6_sk(sk);
742         struct ipv6_txoptions *opt = NULL;
743         struct ip6_flowlabel *flowlabel = NULL;
744         struct dst_entry *dst = NULL;
745         struct raw6_frag_vec rfv;
746         struct flowi6 fl6;
747         struct ipcm6_cookie ipc6;
748         int addr_len = msg->msg_namelen;
749         int hdrincl;
750         u16 proto;
751         int err;
752
753         /* Rough check on arithmetic overflow,
754            better check is made in ip6_append_data().
755          */
756         if (len > INT_MAX)
757                 return -EMSGSIZE;
758
759         /* Mirror BSD error message compatibility */
760         if (msg->msg_flags & MSG_OOB)
761                 return -EOPNOTSUPP;
762
763         /* hdrincl should be READ_ONCE(inet->hdrincl)
764          * but READ_ONCE() doesn't work with bit fields.
765          * Doing this indirectly yields the same result.
766          */
767         hdrincl = inet->hdrincl;
768         hdrincl = READ_ONCE(hdrincl);
769
770         /*
771          *      Get and verify the address.
772          */
773         memset(&fl6, 0, sizeof(fl6));
774
775         fl6.flowi6_mark = READ_ONCE(sk->sk_mark);
776         fl6.flowi6_uid = sk->sk_uid;
777
778         ipcm6_init(&ipc6);
779         ipc6.sockc.tsflags = READ_ONCE(sk->sk_tsflags);
780         ipc6.sockc.mark = fl6.flowi6_mark;
781
782         if (sin6) {
783                 if (addr_len < SIN6_LEN_RFC2133)
784                         return -EINVAL;
785
786                 if (sin6->sin6_family && sin6->sin6_family != AF_INET6)
787                         return -EAFNOSUPPORT;
788
789                 /* port is the proto value [0..255] carried in nexthdr */
790                 proto = ntohs(sin6->sin6_port);
791
792                 if (!proto)
793                         proto = inet->inet_num;
794                 else if (proto != inet->inet_num &&
795                          inet->inet_num != IPPROTO_RAW)
796                         return -EINVAL;
797
798                 if (proto > 255)
799                         return -EINVAL;
800
801                 daddr = &sin6->sin6_addr;
802                 if (np->sndflow) {
803                         fl6.flowlabel = sin6->sin6_flowinfo&IPV6_FLOWINFO_MASK;
804                         if (fl6.flowlabel&IPV6_FLOWLABEL_MASK) {
805                                 flowlabel = fl6_sock_lookup(sk, fl6.flowlabel);
806                                 if (IS_ERR(flowlabel))
807                                         return -EINVAL;
808                         }
809                 }
810
811                 /*
812                  * Otherwise it will be difficult to maintain
813                  * sk->sk_dst_cache.
814                  */
815                 if (sk->sk_state == TCP_ESTABLISHED &&
816                     ipv6_addr_equal(daddr, &sk->sk_v6_daddr))
817                         daddr = &sk->sk_v6_daddr;
818
819                 if (addr_len >= sizeof(struct sockaddr_in6) &&
820                     sin6->sin6_scope_id &&
821                     __ipv6_addr_needs_scope_id(__ipv6_addr_type(daddr)))
822                         fl6.flowi6_oif = sin6->sin6_scope_id;
823         } else {
824                 if (sk->sk_state != TCP_ESTABLISHED)
825                         return -EDESTADDRREQ;
826
827                 proto = inet->inet_num;
828                 daddr = &sk->sk_v6_daddr;
829                 fl6.flowlabel = np->flow_label;
830         }
831
832         if (fl6.flowi6_oif == 0)
833                 fl6.flowi6_oif = sk->sk_bound_dev_if;
834
835         if (msg->msg_controllen) {
836                 opt = &opt_space;
837                 memset(opt, 0, sizeof(struct ipv6_txoptions));
838                 opt->tot_len = sizeof(struct ipv6_txoptions);
839                 ipc6.opt = opt;
840
841                 err = ip6_datagram_send_ctl(sock_net(sk), sk, msg, &fl6, &ipc6);
842                 if (err < 0) {
843                         fl6_sock_release(flowlabel);
844                         return err;
845                 }
846                 if ((fl6.flowlabel&IPV6_FLOWLABEL_MASK) && !flowlabel) {
847                         flowlabel = fl6_sock_lookup(sk, fl6.flowlabel);
848                         if (IS_ERR(flowlabel))
849                                 return -EINVAL;
850                 }
851                 if (!(opt->opt_nflen|opt->opt_flen))
852                         opt = NULL;
853         }
854         if (!opt) {
855                 opt = txopt_get(np);
856                 opt_to_free = opt;
857         }
858         if (flowlabel)
859                 opt = fl6_merge_options(&opt_space, flowlabel, opt);
860         opt = ipv6_fixup_options(&opt_space, opt);
861
862         fl6.flowi6_proto = proto;
863         fl6.flowi6_mark = ipc6.sockc.mark;
864
865         if (!hdrincl) {
866                 rfv.msg = msg;
867                 rfv.hlen = 0;
868                 err = rawv6_probe_proto_opt(&rfv, &fl6);
869                 if (err)
870                         goto out;
871         }
872
873         if (!ipv6_addr_any(daddr))
874                 fl6.daddr = *daddr;
875         else
876                 fl6.daddr.s6_addr[15] = 0x1; /* :: means loopback (BSD'ism) */
877         if (ipv6_addr_any(&fl6.saddr) && !ipv6_addr_any(&np->saddr))
878                 fl6.saddr = np->saddr;
879
880         final_p = fl6_update_dst(&fl6, opt, &final);
881
882         if (!fl6.flowi6_oif && ipv6_addr_is_multicast(&fl6.daddr))
883                 fl6.flowi6_oif = np->mcast_oif;
884         else if (!fl6.flowi6_oif)
885                 fl6.flowi6_oif = np->ucast_oif;
886         security_sk_classify_flow(sk, flowi6_to_flowi_common(&fl6));
887
888         if (hdrincl)
889                 fl6.flowi6_flags |= FLOWI_FLAG_KNOWN_NH;
890
891         if (ipc6.tclass < 0)
892                 ipc6.tclass = np->tclass;
893
894         fl6.flowlabel = ip6_make_flowinfo(ipc6.tclass, fl6.flowlabel);
895
896         dst = ip6_dst_lookup_flow(sock_net(sk), sk, &fl6, final_p);
897         if (IS_ERR(dst)) {
898                 err = PTR_ERR(dst);
899                 goto out;
900         }
901         if (ipc6.hlimit < 0)
902                 ipc6.hlimit = ip6_sk_dst_hoplimit(np, &fl6, dst);
903
904         if (ipc6.dontfrag < 0)
905                 ipc6.dontfrag = np->dontfrag;
906
907         if (msg->msg_flags&MSG_CONFIRM)
908                 goto do_confirm;
909
910 back_from_confirm:
911         if (hdrincl)
912                 err = rawv6_send_hdrinc(sk, msg, len, &fl6, &dst,
913                                         msg->msg_flags, &ipc6.sockc);
914         else {
915                 ipc6.opt = opt;
916                 lock_sock(sk);
917                 err = ip6_append_data(sk, raw6_getfrag, &rfv,
918                         len, 0, &ipc6, &fl6, (struct rt6_info *)dst,
919                         msg->msg_flags);
920
921                 if (err)
922                         ip6_flush_pending_frames(sk);
923                 else if (!(msg->msg_flags & MSG_MORE))
924                         err = rawv6_push_pending_frames(sk, &fl6, rp);
925                 release_sock(sk);
926         }
927 done:
928         dst_release(dst);
929 out:
930         fl6_sock_release(flowlabel);
931         txopt_put(opt_to_free);
932         return err < 0 ? err : len;
933 do_confirm:
934         if (msg->msg_flags & MSG_PROBE)
935                 dst_confirm_neigh(dst, &fl6.daddr);
936         if (!(msg->msg_flags & MSG_PROBE) || len)
937                 goto back_from_confirm;
938         err = 0;
939         goto done;
940 }
941
942 static int rawv6_seticmpfilter(struct sock *sk, int level, int optname,
943                                sockptr_t optval, int optlen)
944 {
945         switch (optname) {
946         case ICMPV6_FILTER:
947                 if (optlen > sizeof(struct icmp6_filter))
948                         optlen = sizeof(struct icmp6_filter);
949                 if (copy_from_sockptr(&raw6_sk(sk)->filter, optval, optlen))
950                         return -EFAULT;
951                 return 0;
952         default:
953                 return -ENOPROTOOPT;
954         }
955
956         return 0;
957 }
958
959 static int rawv6_geticmpfilter(struct sock *sk, int level, int optname,
960                                char __user *optval, int __user *optlen)
961 {
962         int len;
963
964         switch (optname) {
965         case ICMPV6_FILTER:
966                 if (get_user(len, optlen))
967                         return -EFAULT;
968                 if (len < 0)
969                         return -EINVAL;
970                 if (len > sizeof(struct icmp6_filter))
971                         len = sizeof(struct icmp6_filter);
972                 if (put_user(len, optlen))
973                         return -EFAULT;
974                 if (copy_to_user(optval, &raw6_sk(sk)->filter, len))
975                         return -EFAULT;
976                 return 0;
977         default:
978                 return -ENOPROTOOPT;
979         }
980
981         return 0;
982 }
983
984
985 static int do_rawv6_setsockopt(struct sock *sk, int level, int optname,
986                                sockptr_t optval, unsigned int optlen)
987 {
988         struct raw6_sock *rp = raw6_sk(sk);
989         int val;
990
991         if (optlen < sizeof(val))
992                 return -EINVAL;
993
994         if (copy_from_sockptr(&val, optval, sizeof(val)))
995                 return -EFAULT;
996
997         switch (optname) {
998         case IPV6_HDRINCL:
999                 if (sk->sk_type != SOCK_RAW)
1000                         return -EINVAL;
1001                 inet_sk(sk)->hdrincl = !!val;
1002                 return 0;
1003         case IPV6_CHECKSUM:
1004                 if (inet_sk(sk)->inet_num == IPPROTO_ICMPV6 &&
1005                     level == IPPROTO_IPV6) {
1006                         /*
1007                          * RFC3542 tells that IPV6_CHECKSUM socket
1008                          * option in the IPPROTO_IPV6 level is not
1009                          * allowed on ICMPv6 sockets.
1010                          * If you want to set it, use IPPROTO_RAW
1011                          * level IPV6_CHECKSUM socket option
1012                          * (Linux extension).
1013                          */
1014                         return -EINVAL;
1015                 }
1016
1017                 /* You may get strange result with a positive odd offset;
1018                    RFC2292bis agrees with me. */
1019                 if (val > 0 && (val&1))
1020                         return -EINVAL;
1021                 if (val < 0) {
1022                         rp->checksum = 0;
1023                 } else {
1024                         rp->checksum = 1;
1025                         rp->offset = val;
1026                 }
1027
1028                 return 0;
1029
1030         default:
1031                 return -ENOPROTOOPT;
1032         }
1033 }
1034
1035 static int rawv6_setsockopt(struct sock *sk, int level, int optname,
1036                             sockptr_t optval, unsigned int optlen)
1037 {
1038         switch (level) {
1039         case SOL_RAW:
1040                 break;
1041
1042         case SOL_ICMPV6:
1043                 if (inet_sk(sk)->inet_num != IPPROTO_ICMPV6)
1044                         return -EOPNOTSUPP;
1045                 return rawv6_seticmpfilter(sk, level, optname, optval, optlen);
1046         case SOL_IPV6:
1047                 if (optname == IPV6_CHECKSUM ||
1048                     optname == IPV6_HDRINCL)
1049                         break;
1050                 fallthrough;
1051         default:
1052                 return ipv6_setsockopt(sk, level, optname, optval, optlen);
1053         }
1054
1055         return do_rawv6_setsockopt(sk, level, optname, optval, optlen);
1056 }
1057
1058 static int do_rawv6_getsockopt(struct sock *sk, int level, int optname,
1059                             char __user *optval, int __user *optlen)
1060 {
1061         struct raw6_sock *rp = raw6_sk(sk);
1062         int val, len;
1063
1064         if (get_user(len, optlen))
1065                 return -EFAULT;
1066
1067         switch (optname) {
1068         case IPV6_HDRINCL:
1069                 val = inet_sk(sk)->hdrincl;
1070                 break;
1071         case IPV6_CHECKSUM:
1072                 /*
1073                  * We allow getsockopt() for IPPROTO_IPV6-level
1074                  * IPV6_CHECKSUM socket option on ICMPv6 sockets
1075                  * since RFC3542 is silent about it.
1076                  */
1077                 if (rp->checksum == 0)
1078                         val = -1;
1079                 else
1080                         val = rp->offset;
1081                 break;
1082
1083         default:
1084                 return -ENOPROTOOPT;
1085         }
1086
1087         len = min_t(unsigned int, sizeof(int), len);
1088
1089         if (put_user(len, optlen))
1090                 return -EFAULT;
1091         if (copy_to_user(optval, &val, len))
1092                 return -EFAULT;
1093         return 0;
1094 }
1095
1096 static int rawv6_getsockopt(struct sock *sk, int level, int optname,
1097                           char __user *optval, int __user *optlen)
1098 {
1099         switch (level) {
1100         case SOL_RAW:
1101                 break;
1102
1103         case SOL_ICMPV6:
1104                 if (inet_sk(sk)->inet_num != IPPROTO_ICMPV6)
1105                         return -EOPNOTSUPP;
1106                 return rawv6_geticmpfilter(sk, level, optname, optval, optlen);
1107         case SOL_IPV6:
1108                 if (optname == IPV6_CHECKSUM ||
1109                     optname == IPV6_HDRINCL)
1110                         break;
1111                 fallthrough;
1112         default:
1113                 return ipv6_getsockopt(sk, level, optname, optval, optlen);
1114         }
1115
1116         return do_rawv6_getsockopt(sk, level, optname, optval, optlen);
1117 }
1118
1119 static int rawv6_ioctl(struct sock *sk, int cmd, unsigned long arg)
1120 {
1121         switch (cmd) {
1122         case SIOCOUTQ: {
1123                 int amount = sk_wmem_alloc_get(sk);
1124
1125                 return put_user(amount, (int __user *)arg);
1126         }
1127         case SIOCINQ: {
1128                 struct sk_buff *skb;
1129                 int amount = 0;
1130
1131                 spin_lock_bh(&sk->sk_receive_queue.lock);
1132                 skb = skb_peek(&sk->sk_receive_queue);
1133                 if (skb)
1134                         amount = skb->len;
1135                 spin_unlock_bh(&sk->sk_receive_queue.lock);
1136                 return put_user(amount, (int __user *)arg);
1137         }
1138
1139         default:
1140 #ifdef CONFIG_IPV6_MROUTE
1141                 return ip6mr_ioctl(sk, cmd, (void __user *)arg);
1142 #else
1143                 return -ENOIOCTLCMD;
1144 #endif
1145         }
1146 }
1147
1148 #ifdef CONFIG_COMPAT
1149 static int compat_rawv6_ioctl(struct sock *sk, unsigned int cmd, unsigned long arg)
1150 {
1151         switch (cmd) {
1152         case SIOCOUTQ:
1153         case SIOCINQ:
1154                 return -ENOIOCTLCMD;
1155         default:
1156 #ifdef CONFIG_IPV6_MROUTE
1157                 return ip6mr_compat_ioctl(sk, cmd, compat_ptr(arg));
1158 #else
1159                 return -ENOIOCTLCMD;
1160 #endif
1161         }
1162 }
1163 #endif
1164
1165 static void rawv6_close(struct sock *sk, long timeout)
1166 {
1167         if (inet_sk(sk)->inet_num == IPPROTO_RAW)
1168                 ip6_ra_control(sk, -1);
1169         ip6mr_sk_done(sk);
1170         sk_common_release(sk);
1171 }
1172
1173 static void raw6_destroy(struct sock *sk)
1174 {
1175         lock_sock(sk);
1176         ip6_flush_pending_frames(sk);
1177         release_sock(sk);
1178 }
1179
1180 static int rawv6_init_sk(struct sock *sk)
1181 {
1182         struct raw6_sock *rp = raw6_sk(sk);
1183
1184         switch (inet_sk(sk)->inet_num) {
1185         case IPPROTO_ICMPV6:
1186                 rp->checksum = 1;
1187                 rp->offset   = 2;
1188                 break;
1189         case IPPROTO_MH:
1190                 rp->checksum = 1;
1191                 rp->offset   = 4;
1192                 break;
1193         default:
1194                 break;
1195         }
1196         return 0;
1197 }
1198
1199 struct proto rawv6_prot = {
1200         .name              = "RAWv6",
1201         .owner             = THIS_MODULE,
1202         .close             = rawv6_close,
1203         .destroy           = raw6_destroy,
1204         .connect           = ip6_datagram_connect_v6_only,
1205         .disconnect        = __udp_disconnect,
1206         .ioctl             = rawv6_ioctl,
1207         .init              = rawv6_init_sk,
1208         .setsockopt        = rawv6_setsockopt,
1209         .getsockopt        = rawv6_getsockopt,
1210         .sendmsg           = rawv6_sendmsg,
1211         .recvmsg           = rawv6_recvmsg,
1212         .bind              = rawv6_bind,
1213         .backlog_rcv       = rawv6_rcv_skb,
1214         .hash              = raw_hash_sk,
1215         .unhash            = raw_unhash_sk,
1216         .obj_size          = sizeof(struct raw6_sock),
1217         .useroffset        = offsetof(struct raw6_sock, filter),
1218         .usersize          = sizeof_field(struct raw6_sock, filter),
1219         .h.raw_hash        = &raw_v6_hashinfo,
1220 #ifdef CONFIG_COMPAT
1221         .compat_ioctl      = compat_rawv6_ioctl,
1222 #endif
1223         .diag_destroy      = raw_abort,
1224 };
1225
1226 #ifdef CONFIG_PROC_FS
1227 static int raw6_seq_show(struct seq_file *seq, void *v)
1228 {
1229         if (v == SEQ_START_TOKEN) {
1230                 seq_puts(seq, IPV6_SEQ_DGRAM_HEADER);
1231         } else {
1232                 struct sock *sp = v;
1233                 __u16 srcp  = inet_sk(sp)->inet_num;
1234                 ip6_dgram_sock_seq_show(seq, v, srcp, 0,
1235                                         raw_seq_private(seq)->bucket);
1236         }
1237         return 0;
1238 }
1239
1240 static const struct seq_operations raw6_seq_ops = {
1241         .start =        raw_seq_start,
1242         .next =         raw_seq_next,
1243         .stop =         raw_seq_stop,
1244         .show =         raw6_seq_show,
1245 };
1246
1247 static int __net_init raw6_init_net(struct net *net)
1248 {
1249         if (!proc_create_net_data("raw6", 0444, net->proc_net, &raw6_seq_ops,
1250                         sizeof(struct raw_iter_state), &raw_v6_hashinfo))
1251                 return -ENOMEM;
1252
1253         return 0;
1254 }
1255
1256 static void __net_exit raw6_exit_net(struct net *net)
1257 {
1258         remove_proc_entry("raw6", net->proc_net);
1259 }
1260
1261 static struct pernet_operations raw6_net_ops = {
1262         .init = raw6_init_net,
1263         .exit = raw6_exit_net,
1264 };
1265
1266 int __init raw6_proc_init(void)
1267 {
1268         return register_pernet_subsys(&raw6_net_ops);
1269 }
1270
1271 void raw6_proc_exit(void)
1272 {
1273         unregister_pernet_subsys(&raw6_net_ops);
1274 }
1275 #endif  /* CONFIG_PROC_FS */
1276
1277 /* Same as inet6_dgram_ops, sans udp_poll.  */
1278 const struct proto_ops inet6_sockraw_ops = {
1279         .family            = PF_INET6,
1280         .owner             = THIS_MODULE,
1281         .release           = inet6_release,
1282         .bind              = inet6_bind,
1283         .connect           = inet_dgram_connect,        /* ok           */
1284         .socketpair        = sock_no_socketpair,        /* a do nothing */
1285         .accept            = sock_no_accept,            /* a do nothing */
1286         .getname           = inet6_getname,
1287         .poll              = datagram_poll,             /* ok           */
1288         .ioctl             = inet6_ioctl,               /* must change  */
1289         .gettstamp         = sock_gettstamp,
1290         .listen            = sock_no_listen,            /* ok           */
1291         .shutdown          = inet_shutdown,             /* ok           */
1292         .setsockopt        = sock_common_setsockopt,    /* ok           */
1293         .getsockopt        = sock_common_getsockopt,    /* ok           */
1294         .sendmsg           = inet_sendmsg,              /* ok           */
1295         .recvmsg           = sock_common_recvmsg,       /* ok           */
1296         .mmap              = sock_no_mmap,
1297         .sendpage          = sock_no_sendpage,
1298 #ifdef CONFIG_COMPAT
1299         .compat_ioctl      = inet6_compat_ioctl,
1300 #endif
1301 };
1302
1303 static struct inet_protosw rawv6_protosw = {
1304         .type           = SOCK_RAW,
1305         .protocol       = IPPROTO_IP,   /* wild card */
1306         .prot           = &rawv6_prot,
1307         .ops            = &inet6_sockraw_ops,
1308         .flags          = INET_PROTOSW_REUSE,
1309 };
1310
1311 int __init rawv6_init(void)
1312 {
1313         return inet6_register_protosw(&rawv6_protosw);
1314 }
1315
1316 void rawv6_exit(void)
1317 {
1318         inet6_unregister_protosw(&rawv6_protosw);
1319 }