GNU Linux-libre 4.9.284-gnu1
[releases.git] / net / tipc / msg.c
1 /*
2  * net/tipc/msg.c: TIPC message header routines
3  *
4  * Copyright (c) 2000-2006, 2014-2015, Ericsson AB
5  * Copyright (c) 2005, 2010-2011, Wind River Systems
6  * All rights reserved.
7  *
8  * Redistribution and use in source and binary forms, with or without
9  * modification, are permitted provided that the following conditions are met:
10  *
11  * 1. Redistributions of source code must retain the above copyright
12  *    notice, this list of conditions and the following disclaimer.
13  * 2. Redistributions in binary form must reproduce the above copyright
14  *    notice, this list of conditions and the following disclaimer in the
15  *    documentation and/or other materials provided with the distribution.
16  * 3. Neither the names of the copyright holders nor the names of its
17  *    contributors may be used to endorse or promote products derived from
18  *    this software without specific prior written permission.
19  *
20  * Alternatively, this software may be distributed under the terms of the
21  * GNU General Public License ("GPL") version 2 as published by the Free
22  * Software Foundation.
23  *
24  * THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS"
25  * AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
26  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
27  * ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT OWNER OR CONTRIBUTORS BE
28  * LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
29  * CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF
30  * SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS
31  * INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN
32  * CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
33  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
34  * POSSIBILITY OF SUCH DAMAGE.
35  */
36
37 #include <net/sock.h>
38 #include "core.h"
39 #include "msg.h"
40 #include "addr.h"
41 #include "name_table.h"
42
43 #define MAX_FORWARD_SIZE 1024
44 #define BUF_HEADROOM (LL_MAX_HEADER + 48)
45 #define BUF_TAILROOM 16
46
47 static unsigned int align(unsigned int i)
48 {
49         return (i + 3) & ~3u;
50 }
51
52 /**
53  * tipc_buf_acquire - creates a TIPC message buffer
54  * @size: message size (including TIPC header)
55  *
56  * Returns a new buffer with data pointers set to the specified size.
57  *
58  * NOTE: Headroom is reserved to allow prepending of a data link header.
59  *       There may also be unrequested tailroom present at the buffer's end.
60  */
61 struct sk_buff *tipc_buf_acquire(u32 size, gfp_t gfp)
62 {
63         struct sk_buff *skb;
64         unsigned int buf_size = (BUF_HEADROOM + size + 3) & ~3u;
65
66         skb = alloc_skb_fclone(buf_size, gfp);
67         if (skb) {
68                 skb_reserve(skb, BUF_HEADROOM);
69                 skb_put(skb, size);
70                 skb->next = NULL;
71         }
72         return skb;
73 }
74
75 void tipc_msg_init(u32 own_node, struct tipc_msg *m, u32 user, u32 type,
76                    u32 hsize, u32 dnode)
77 {
78         memset(m, 0, hsize);
79         msg_set_version(m);
80         msg_set_user(m, user);
81         msg_set_hdr_sz(m, hsize);
82         msg_set_size(m, hsize);
83         msg_set_prevnode(m, own_node);
84         msg_set_type(m, type);
85         if (hsize > SHORT_H_SIZE) {
86                 msg_set_orignode(m, own_node);
87                 msg_set_destnode(m, dnode);
88         }
89 }
90
91 struct sk_buff *tipc_msg_create(uint user, uint type,
92                                 uint hdr_sz, uint data_sz, u32 dnode,
93                                 u32 onode, u32 dport, u32 oport, int errcode)
94 {
95         struct tipc_msg *msg;
96         struct sk_buff *buf;
97
98         buf = tipc_buf_acquire(hdr_sz + data_sz, GFP_ATOMIC);
99         if (unlikely(!buf))
100                 return NULL;
101
102         msg = buf_msg(buf);
103         tipc_msg_init(onode, msg, user, type, hdr_sz, dnode);
104         msg_set_size(msg, hdr_sz + data_sz);
105         msg_set_origport(msg, oport);
106         msg_set_destport(msg, dport);
107         msg_set_errcode(msg, errcode);
108         if (hdr_sz > SHORT_H_SIZE) {
109                 msg_set_orignode(msg, onode);
110                 msg_set_destnode(msg, dnode);
111         }
112         return buf;
113 }
114
115 /* tipc_buf_append(): Append a buffer to the fragment list of another buffer
116  * @*headbuf: in:  NULL for first frag, otherwise value returned from prev call
117  *            out: set when successful non-complete reassembly, otherwise NULL
118  * @*buf:     in:  the buffer to append. Always defined
119  *            out: head buf after successful complete reassembly, otherwise NULL
120  * Returns 1 when reassembly complete, otherwise 0
121  */
122 int tipc_buf_append(struct sk_buff **headbuf, struct sk_buff **buf)
123 {
124         struct sk_buff *head = *headbuf;
125         struct sk_buff *frag = *buf;
126         struct sk_buff *tail = NULL;
127         struct tipc_msg *msg;
128         u32 fragid;
129         int delta;
130         bool headstolen;
131
132         if (!frag)
133                 goto err;
134
135         msg = buf_msg(frag);
136         fragid = msg_type(msg);
137         frag->next = NULL;
138         skb_pull(frag, msg_hdr_sz(msg));
139
140         if (fragid == FIRST_FRAGMENT) {
141                 if (unlikely(head))
142                         goto err;
143                 *buf = NULL;
144                 if (skb_has_frag_list(frag) && __skb_linearize(frag))
145                         goto err;
146                 frag = skb_unshare(frag, GFP_ATOMIC);
147                 if (unlikely(!frag))
148                         goto err;
149                 head = *headbuf = frag;
150                 TIPC_SKB_CB(head)->tail = NULL;
151                 return 0;
152         }
153
154         if (!head)
155                 goto err;
156
157         if (skb_try_coalesce(head, frag, &headstolen, &delta)) {
158                 kfree_skb_partial(frag, headstolen);
159         } else {
160                 tail = TIPC_SKB_CB(head)->tail;
161                 if (!skb_has_frag_list(head))
162                         skb_shinfo(head)->frag_list = frag;
163                 else
164                         tail->next = frag;
165                 head->truesize += frag->truesize;
166                 head->data_len += frag->len;
167                 head->len += frag->len;
168                 TIPC_SKB_CB(head)->tail = frag;
169         }
170
171         if (fragid == LAST_FRAGMENT) {
172                 TIPC_SKB_CB(head)->validated = false;
173                 if (unlikely(!tipc_msg_validate(head)))
174                         goto err;
175                 *buf = head;
176                 TIPC_SKB_CB(head)->tail = NULL;
177                 *headbuf = NULL;
178                 return 1;
179         }
180         *buf = NULL;
181         return 0;
182 err:
183         kfree_skb(*buf);
184         kfree_skb(*headbuf);
185         *buf = *headbuf = NULL;
186         return 0;
187 }
188
189 /* tipc_msg_validate - validate basic format of received message
190  *
191  * This routine ensures a TIPC message has an acceptable header, and at least
192  * as much data as the header indicates it should.  The routine also ensures
193  * that the entire message header is stored in the main fragment of the message
194  * buffer, to simplify future access to message header fields.
195  *
196  * Note: Having extra info present in the message header or data areas is OK.
197  * TIPC will ignore the excess, under the assumption that it is optional info
198  * introduced by a later release of the protocol.
199  */
200 bool tipc_msg_validate(struct sk_buff *skb)
201 {
202         struct tipc_msg *msg;
203         int msz, hsz;
204
205         if (unlikely(TIPC_SKB_CB(skb)->validated))
206                 return true;
207         if (unlikely(!pskb_may_pull(skb, MIN_H_SIZE)))
208                 return false;
209
210         hsz = msg_hdr_sz(buf_msg(skb));
211         if (unlikely(hsz < MIN_H_SIZE) || (hsz > MAX_H_SIZE))
212                 return false;
213         if (unlikely(!pskb_may_pull(skb, hsz)))
214                 return false;
215
216         msg = buf_msg(skb);
217         if (unlikely(msg_version(msg) != TIPC_VERSION))
218                 return false;
219
220         msz = msg_size(msg);
221         if (unlikely(msz < hsz))
222                 return false;
223         if (unlikely((msz - hsz) > TIPC_MAX_USER_MSG_SIZE))
224                 return false;
225         if (unlikely(skb->len < msz))
226                 return false;
227
228         TIPC_SKB_CB(skb)->validated = true;
229         return true;
230 }
231
232 /**
233  * tipc_msg_build - create buffer chain containing specified header and data
234  * @mhdr: Message header, to be prepended to data
235  * @m: User message
236  * @dsz: Total length of user data
237  * @pktmax: Max packet size that can be used
238  * @list: Buffer or chain of buffers to be returned to caller
239  *
240  * Returns message data size or errno: -ENOMEM, -EFAULT
241  */
242 int tipc_msg_build(struct tipc_msg *mhdr, struct msghdr *m,
243                    int offset, int dsz, int pktmax, struct sk_buff_head *list)
244 {
245         int mhsz = msg_hdr_sz(mhdr);
246         int msz = mhsz + dsz;
247         int pktno = 1;
248         int pktsz;
249         int pktrem = pktmax;
250         int drem = dsz;
251         struct tipc_msg pkthdr;
252         struct sk_buff *skb;
253         char *pktpos;
254         int rc;
255
256         msg_set_size(mhdr, msz);
257
258         /* No fragmentation needed? */
259         if (likely(msz <= pktmax)) {
260                 skb = tipc_buf_acquire(msz, GFP_KERNEL);
261                 if (unlikely(!skb))
262                         return -ENOMEM;
263                 skb_orphan(skb);
264                 __skb_queue_tail(list, skb);
265                 skb_copy_to_linear_data(skb, mhdr, mhsz);
266                 pktpos = skb->data + mhsz;
267                 if (copy_from_iter(pktpos, dsz, &m->msg_iter) == dsz)
268                         return dsz;
269                 rc = -EFAULT;
270                 goto error;
271         }
272
273         /* Prepare reusable fragment header */
274         tipc_msg_init(msg_prevnode(mhdr), &pkthdr, MSG_FRAGMENTER,
275                       FIRST_FRAGMENT, INT_H_SIZE, msg_destnode(mhdr));
276         msg_set_size(&pkthdr, pktmax);
277         msg_set_fragm_no(&pkthdr, pktno);
278         msg_set_importance(&pkthdr, msg_importance(mhdr));
279
280         /* Prepare first fragment */
281         skb = tipc_buf_acquire(pktmax, GFP_KERNEL);
282         if (!skb)
283                 return -ENOMEM;
284         skb_orphan(skb);
285         __skb_queue_tail(list, skb);
286         pktpos = skb->data;
287         skb_copy_to_linear_data(skb, &pkthdr, INT_H_SIZE);
288         pktpos += INT_H_SIZE;
289         pktrem -= INT_H_SIZE;
290         skb_copy_to_linear_data_offset(skb, INT_H_SIZE, mhdr, mhsz);
291         pktpos += mhsz;
292         pktrem -= mhsz;
293
294         do {
295                 if (drem < pktrem)
296                         pktrem = drem;
297
298                 if (copy_from_iter(pktpos, pktrem, &m->msg_iter) != pktrem) {
299                         rc = -EFAULT;
300                         goto error;
301                 }
302                 drem -= pktrem;
303
304                 if (!drem)
305                         break;
306
307                 /* Prepare new fragment: */
308                 if (drem < (pktmax - INT_H_SIZE))
309                         pktsz = drem + INT_H_SIZE;
310                 else
311                         pktsz = pktmax;
312                 skb = tipc_buf_acquire(pktsz, GFP_KERNEL);
313                 if (!skb) {
314                         rc = -ENOMEM;
315                         goto error;
316                 }
317                 skb_orphan(skb);
318                 __skb_queue_tail(list, skb);
319                 msg_set_type(&pkthdr, FRAGMENT);
320                 msg_set_size(&pkthdr, pktsz);
321                 msg_set_fragm_no(&pkthdr, ++pktno);
322                 skb_copy_to_linear_data(skb, &pkthdr, INT_H_SIZE);
323                 pktpos = skb->data + INT_H_SIZE;
324                 pktrem = pktsz - INT_H_SIZE;
325
326         } while (1);
327         msg_set_type(buf_msg(skb), LAST_FRAGMENT);
328         return dsz;
329 error:
330         __skb_queue_purge(list);
331         __skb_queue_head_init(list);
332         return rc;
333 }
334
335 /**
336  * tipc_msg_bundle(): Append contents of a buffer to tail of an existing one
337  * @skb: the buffer to append to ("bundle")
338  * @msg:  message to be appended
339  * @mtu:  max allowable size for the bundle buffer
340  * Consumes buffer if successful
341  * Returns true if bundling could be performed, otherwise false
342  */
343 bool tipc_msg_bundle(struct sk_buff *skb, struct tipc_msg *msg, u32 mtu)
344 {
345         struct tipc_msg *bmsg;
346         unsigned int bsz;
347         unsigned int msz = msg_size(msg);
348         u32 start, pad;
349         u32 max = mtu - INT_H_SIZE;
350
351         if (likely(msg_user(msg) == MSG_FRAGMENTER))
352                 return false;
353         if (!skb)
354                 return false;
355         bmsg = buf_msg(skb);
356         bsz = msg_size(bmsg);
357         start = align(bsz);
358         pad = start - bsz;
359
360         if (unlikely(msg_user(msg) == TUNNEL_PROTOCOL))
361                 return false;
362         if (unlikely(msg_user(msg) == BCAST_PROTOCOL))
363                 return false;
364         if (unlikely(msg_user(bmsg) != MSG_BUNDLER))
365                 return false;
366         if (unlikely(skb_tailroom(skb) < (pad + msz)))
367                 return false;
368         if (unlikely(max < (start + msz)))
369                 return false;
370         if ((msg_importance(msg) < TIPC_SYSTEM_IMPORTANCE) &&
371             (msg_importance(bmsg) == TIPC_SYSTEM_IMPORTANCE))
372                 return false;
373
374         skb_put(skb, pad + msz);
375         skb_copy_to_linear_data_offset(skb, start, msg, msz);
376         msg_set_size(bmsg, start + msz);
377         msg_set_msgcnt(bmsg, msg_msgcnt(bmsg) + 1);
378         return true;
379 }
380
381 /**
382  *  tipc_msg_extract(): extract bundled inner packet from buffer
383  *  @skb: buffer to be extracted from.
384  *  @iskb: extracted inner buffer, to be returned
385  *  @pos: position in outer message of msg to be extracted.
386  *        Returns position of next msg
387  *  Consumes outer buffer when last packet extracted
388  *  Returns true when when there is an extracted buffer, otherwise false
389  */
390 bool tipc_msg_extract(struct sk_buff *skb, struct sk_buff **iskb, int *pos)
391 {
392         struct tipc_msg *msg;
393         int imsz, offset;
394
395         *iskb = NULL;
396         if (unlikely(skb_linearize(skb)))
397                 goto none;
398
399         msg = buf_msg(skb);
400         offset = msg_hdr_sz(msg) + *pos;
401         if (unlikely(offset > (msg_size(msg) - MIN_H_SIZE)))
402                 goto none;
403
404         *iskb = skb_clone(skb, GFP_ATOMIC);
405         if (unlikely(!*iskb))
406                 goto none;
407         skb_pull(*iskb, offset);
408         imsz = msg_size(buf_msg(*iskb));
409         skb_trim(*iskb, imsz);
410         if (unlikely(!tipc_msg_validate(*iskb)))
411                 goto none;
412         *pos += align(imsz);
413         return true;
414 none:
415         kfree_skb(skb);
416         kfree_skb(*iskb);
417         *iskb = NULL;
418         return false;
419 }
420
421 /**
422  * tipc_msg_make_bundle(): Create bundle buf and append message to its tail
423  * @list: the buffer chain, where head is the buffer to replace/append
424  * @skb: buffer to be created, appended to and returned in case of success
425  * @msg: message to be appended
426  * @mtu: max allowable size for the bundle buffer, inclusive header
427  * @dnode: destination node for message. (Not always present in header)
428  * Returns true if success, otherwise false
429  */
430 bool tipc_msg_make_bundle(struct sk_buff **skb,  struct tipc_msg *msg,
431                           u32 mtu, u32 dnode)
432 {
433         struct sk_buff *_skb;
434         struct tipc_msg *bmsg;
435         u32 msz = msg_size(msg);
436         u32 max = mtu - INT_H_SIZE;
437
438         if (msg_user(msg) == MSG_FRAGMENTER)
439                 return false;
440         if (msg_user(msg) == TUNNEL_PROTOCOL)
441                 return false;
442         if (msg_user(msg) == BCAST_PROTOCOL)
443                 return false;
444         if (msz > (max / 2))
445                 return false;
446
447         _skb = tipc_buf_acquire(max, GFP_ATOMIC);
448         if (!_skb)
449                 return false;
450
451         skb_trim(_skb, INT_H_SIZE);
452         bmsg = buf_msg(_skb);
453         tipc_msg_init(msg_prevnode(msg), bmsg, MSG_BUNDLER, 0,
454                       INT_H_SIZE, dnode);
455         if (msg_isdata(msg))
456                 msg_set_importance(bmsg, TIPC_CRITICAL_IMPORTANCE);
457         else
458                 msg_set_importance(bmsg, TIPC_SYSTEM_IMPORTANCE);
459         msg_set_seqno(bmsg, msg_seqno(msg));
460         msg_set_ack(bmsg, msg_ack(msg));
461         msg_set_bcast_ack(bmsg, msg_bcast_ack(msg));
462         tipc_msg_bundle(_skb, msg, mtu);
463         *skb = _skb;
464         return true;
465 }
466
467 /**
468  * tipc_msg_reverse(): swap source and destination addresses and add error code
469  * @own_node: originating node id for reversed message
470  * @skb:  buffer containing message to be reversed; may be replaced.
471  * @err:  error code to be set in message, if any
472  * Consumes buffer at failure
473  * Returns true if success, otherwise false
474  */
475 bool tipc_msg_reverse(u32 own_node,  struct sk_buff **skb, int err)
476 {
477         struct sk_buff *_skb = *skb;
478         struct tipc_msg *hdr = buf_msg(_skb);
479         struct tipc_msg ohdr;
480         int dlen = min_t(uint, msg_data_sz(hdr), MAX_FORWARD_SIZE);
481
482         if (skb_linearize(_skb))
483                 goto exit;
484         hdr = buf_msg(_skb);
485         if (msg_dest_droppable(hdr))
486                 goto exit;
487         if (msg_errcode(hdr))
488                 goto exit;
489
490         /* Take a copy of original header before altering message */
491         memcpy(&ohdr, hdr, msg_hdr_sz(hdr));
492
493         /* Never return SHORT header; expand by replacing buffer if necessary */
494         if (msg_short(hdr)) {
495                 *skb = tipc_buf_acquire(BASIC_H_SIZE + dlen, GFP_ATOMIC);
496                 if (!*skb)
497                         goto exit;
498                 memcpy((*skb)->data + BASIC_H_SIZE, msg_data(hdr), dlen);
499                 kfree_skb(_skb);
500                 _skb = *skb;
501                 hdr = buf_msg(_skb);
502                 memcpy(hdr, &ohdr, BASIC_H_SIZE);
503                 msg_set_hdr_sz(hdr, BASIC_H_SIZE);
504         }
505
506         if (skb_cloned(_skb) &&
507             pskb_expand_head(_skb, BUF_HEADROOM, BUF_TAILROOM, GFP_ATOMIC))
508                 goto exit;
509
510         /* Now reverse the concerned fields */
511         msg_set_errcode(hdr, err);
512         msg_set_origport(hdr, msg_destport(&ohdr));
513         msg_set_destport(hdr, msg_origport(&ohdr));
514         msg_set_destnode(hdr, msg_prevnode(&ohdr));
515         msg_set_prevnode(hdr, own_node);
516         msg_set_orignode(hdr, own_node);
517         msg_set_size(hdr, msg_hdr_sz(hdr) + dlen);
518         skb_trim(_skb, msg_size(hdr));
519         skb_orphan(_skb);
520         return true;
521 exit:
522         kfree_skb(_skb);
523         *skb = NULL;
524         return false;
525 }
526
527 /**
528  * tipc_msg_lookup_dest(): try to find new destination for named message
529  * @skb: the buffer containing the message.
530  * @err: error code to be used by caller if lookup fails
531  * Does not consume buffer
532  * Returns true if a destination is found, false otherwise
533  */
534 bool tipc_msg_lookup_dest(struct net *net, struct sk_buff *skb, int *err)
535 {
536         struct tipc_msg *msg = buf_msg(skb);
537         u32 dport, dnode;
538         u32 onode = tipc_own_addr(net);
539
540         if (!msg_isdata(msg))
541                 return false;
542         if (!msg_named(msg))
543                 return false;
544         if (msg_errcode(msg))
545                 return false;
546         *err = TIPC_ERR_NO_NAME;
547         if (skb_linearize(skb))
548                 return false;
549         msg = buf_msg(skb);
550         if (msg_reroute_cnt(msg))
551                 return false;
552         dnode = addr_domain(net, msg_lookup_scope(msg));
553         dport = tipc_nametbl_translate(net, msg_nametype(msg),
554                                        msg_nameinst(msg), &dnode);
555         if (!dport)
556                 return false;
557         msg_incr_reroute_cnt(msg);
558         if (dnode != onode)
559                 msg_set_prevnode(msg, onode);
560         msg_set_destnode(msg, dnode);
561         msg_set_destport(msg, dport);
562         *err = TIPC_OK;
563         return true;
564 }
565
566 /* tipc_msg_reassemble() - clone a buffer chain of fragments and
567  *                         reassemble the clones into one message
568  */
569 bool tipc_msg_reassemble(struct sk_buff_head *list, struct sk_buff_head *rcvq)
570 {
571         struct sk_buff *skb, *_skb;
572         struct sk_buff *frag = NULL;
573         struct sk_buff *head = NULL;
574         int hdr_len;
575
576         /* Copy header if single buffer */
577         if (skb_queue_len(list) == 1) {
578                 skb = skb_peek(list);
579                 hdr_len = skb_headroom(skb) + msg_hdr_sz(buf_msg(skb));
580                 _skb = __pskb_copy(skb, hdr_len, GFP_ATOMIC);
581                 if (!_skb)
582                         return false;
583                 __skb_queue_tail(rcvq, _skb);
584                 return true;
585         }
586
587         /* Clone all fragments and reassemble */
588         skb_queue_walk(list, skb) {
589                 frag = skb_clone(skb, GFP_ATOMIC);
590                 if (!frag)
591                         goto error;
592                 frag->next = NULL;
593                 if (tipc_buf_append(&head, &frag))
594                         break;
595                 if (!head)
596                         goto error;
597         }
598         __skb_queue_tail(rcvq, frag);
599         return true;
600 error:
601         pr_warn("Failed do clone local mcast rcv buffer\n");
602         kfree_skb(head);
603         return false;
604 }
605
606 /* tipc_skb_queue_sorted(); sort pkt into list according to sequence number
607  * @list: list to be appended to
608  * @seqno: sequence number of buffer to add
609  * @skb: buffer to add
610  */
611 void __tipc_skb_queue_sorted(struct sk_buff_head *list, u16 seqno,
612                              struct sk_buff *skb)
613 {
614         struct sk_buff *_skb, *tmp;
615
616         if (skb_queue_empty(list) || less(seqno, buf_seqno(skb_peek(list)))) {
617                 __skb_queue_head(list, skb);
618                 return;
619         }
620
621         if (more(seqno, buf_seqno(skb_peek_tail(list)))) {
622                 __skb_queue_tail(list, skb);
623                 return;
624         }
625
626         skb_queue_walk_safe(list, _skb, tmp) {
627                 if (more(seqno, buf_seqno(_skb)))
628                         continue;
629                 if (seqno == buf_seqno(_skb))
630                         break;
631                 __skb_queue_before(list, _skb, skb);
632                 return;
633         }
634         kfree_skb(skb);
635 }