Updates for 2.6.23.
[releases.git] / deblob-check
1 #! /bin/sh
2
3 # deblob-check version 2008-03-29 $Rev$
4 # Inspired in gNewSense's find-firmware script.
5 # Written by Alexandre Oliva <lxoliva@fsfla.org>
6
7 # Check http://www.fsfla.org/svn/fsfla/software/linux-libre for newer
8 # versions.
9
10 # Copyright (C) 2008 Alexandre Oliva
11 #
12 # This program is free software; you can redistribute it and/or modify
13 # it under the terms of the GNU General Public License as published by
14 # the Free Software Foundation; either version 2 of the License, or
15 # (at your option) any later version.
16 #
17 # This program is distributed in the hope that it will be useful, but
18 # WITHOUT ANY WARRANTY; without even the implied warranty of
19 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
20 # General Public License for more details.
21 #
22 # You should have received a copy of the GNU General Public License
23 # along with this program; if not, write to the Free Software
24 # Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301
25 # USA
26
27
28 # usage: deblob-check [-S] [-vv] [-s S] [-lDdBbCcXxPpFftVh?H] \
29 #        [*.tar* patch-* *.patch]
30
31 # Look for too-long undocumented sequences of numbers (generally blobs
32 # in disguise) in source files.
33
34 # The order of command line flags is significant.  Flags given out of
35 # the order above won't be handled correctly, sorry.
36
37 # -s --sensitivity: must be followed by a blank and a number.
38 #               Specifies the number of consecutive integral or
39 #               character constants that trigger the blob detector.
40
41 # The default sensitivity is 32 constants.
42
43 # The sensitivity, if present, must be the first option.  The action
44 # selection, if present, must be the first argument, except for the
45 # sensitivity and verbosity.
46
47 # The default can be overridden with one of:
48
49 # -l --list-blobs: list files that contain sequences that match the
50 #               blob detector test and that are not known to be false
51 #               positives.  This is the default option.
52
53 # -d --deblob --mark-blobs: print the processed input, replacing
54 #               sequences that match the blob detector test and that
55 #               are NOT known to be false positives with
56 #               /*(DEBLOBBED)*/.
57
58 # -D --cat: print the processed input, as it would have been fed to
59 #               the blob detector script.  Use -S to save the sed
60 #               script used to process it, and search for `sedcat:' in
61 #               comments to locate the relevant adaptation points.
62
63 # -b --print-marked-blobs: like -d, but print only the matching
64 #               sequences.
65
66 # -B --print-blobs: like -b, but do not deblob the sequences.
67
68 # -c --print-marked-blobs-with-context: like -b, but try to maximize
69 #               the context around the blobs.  This maximization will
70 #               sometimes disregard known false positives, if they
71 #               happen to be contained within the extended match.
72 #               This is probably an indication that the false positive
73 #               matching rule could be improved.
74
75 # -C --print-blobs-with-context: like -B, but try to maximize the
76 #               context around the blobs.
77
78 # -X --print-all-matches: print all blobs, be they known false
79 #               positives or blobs.
80
81 # -x --list-all-matches: list files that contain sequences that appear
82 #               to be blobs, be they known false positives or not.
83
84 # -p --mark-false-positives: print the processed input, replacing
85 #               sequences that match the blob detector test, but that
86 #               are known to be false positives, with /*(DEBLOBBED)*/.
87
88 # -P --list-false-positives: list files that contain false positives.
89
90 # -f --print-marked-false-positives: like -p, but print only the
91 #               matching sequences.
92
93 # -F --print-false-positives: like -f, but do not deblob the sequences.
94
95 # -t --test: run (very minimal) self-test.
96
97 # -V --version: print a version number
98
99 # -h -? -H --help: print short or long help message
100
101
102 # debugging options:
103
104 # -S --save-scripts: save scripts and temporary files.
105
106 # -v --verbose: increase verbosity level, for internal debugging.  May
107 #               be given at most twice.
108
109 # The exit status is only significant for the --list options: it will
110 # be true if nothing was found, and false otherwise.
111
112 : # Mark the end of the help message.
113
114 # TODO:
115
116 # - Improve handling of command-line arguments, so as to not make the
117 # order relevant.
118
119 # - Add an option for the user to feed their own false positive
120 # patterns.
121
122 # - Add support to recognize known blobs (or other non-Free
123 # signatures, really), to speed up the scanning of files containing
124 # blobs, and to avoid attempts to disguise blobs.
125
126 # - Factor out the code in the various print_* and list_* parts of the
127 # sed script, at least in the shell sources.  Make sure they're all
128 # included and expanded in a saved --cat script though.
129
130 # - Add support for file name tagging in patterns, such that blobs or
131 # false positives are recognized only when handling the specific
132 # filename, be it stand-alone, as part of a patch or a tarball.  This
133 # should help avoid recognition of actual blobs as false positives
134 # just because there's a symbol with a different name elsewhere.
135
136 #   It is convenient that the patterns provided by the user to
137 # recognize file names can be empty (for backward compatibility), but
138 # this should ideally be phased out in favor of more precise matches.
139 # It's important that files can be recognized with leading tarball or
140 # patch names, that the filename used within the tarball contain
141 # leading garbage, and even that a partial pathname be recognizable
142 # (say recognize drivers/net/whatever.c when the input file is named
143 # ../net/whatever.c).
144
145 #   Rather than using regular expressions to recognize multiple files
146 # it's convenient (but not quite essential) that filename patterns be
147 # specifiable as regular expressions, rather than simple filenames,
148 # but there are other ways around this.
149
150 #   Maintaining begin/end markers in a stack-like fashion as part of
151 # the processed stream, and using the names in them as (optional) part
152 # of the recognition patterns, would enable us to do it.
153
154 #   Introducing annotations next to the false positives (and recognized
155 # blobs) as an early part of the process may speed things up and
156 # enable fast processing, but how to introduce the annotations quickly
157 # in the first place?  Given patterns such as
158
159 #   \(\(file1\)\(.*\)\(pat1\)\|\(file2\)\(.*\)\(pat2\)\|...\)
160
161 # how do we get sed to introduce a marker that contains file2 right
162 # before or right after pat2, without turning a big efficient regexp
163 # into a slowish sequence of s/// commands?
164
165 # - Re-check and narrow false-positive patterns to make sure they
166 # apply only to the relevant content.
167
168 # - Scripting abilities, so as to be able to automate the removal of
169 # source files or of blobs from source files in a tarball without
170 # having to extract the entire tarball (as in tar --update/--delete)
171 # would be nice.  Carrying over removed files automatically into
172 # patches would also be great, and this sort of script would be
173 # perfect to document what has been done to a tarball plus a set of
174 # patches.  Something like deblob.script:
175 #
176 #   tarball linux-2.6.24.tar.bz2
177 #   delete net/wireloss/freedom.c drivers/me/crazy.c
178 #   deblob include/linux/slab-blob-kfree.h
179 #   deconfig drivers/char/drm DRM_IS_BAD
180 #
181 #   patch patch-2.6.25-rc7.bz2
182 #   delete arch/power/over/you.c
183
184 # such that the deletes from an earlier file would carry over into the
185 # subsequent ones, and new tarballs and patch files would be generated
186 # with the libre- prefix in their basename, and the xdeltas between
187 # the original files and the modified files would be minimal, and
188 # redundant with this script and the input script while at that.
189
190 # - Improve documentation of the code.
191
192 # - Write a decent testsuite.
193
194 # - Insert your idea here. :-)
195
196 # Yeah, lots of stuff to do.  Want to help?
197
198 rm="rm -f"
199 case $1 in
200 --save-scripts | -S)
201   shift
202   rm="echo preserving"
203   ;;
204 esac
205
206 # Choose verbosity level for sed script debugging and performance
207 # analysis.
208 case $1 in
209 --verbose | -v)
210   shift
211   case $1 in
212   --verbose | -v)
213     shift
214     v="i\\
215 :
216 p;
217 i\\
218 "
219     ;;
220   *)
221     v="P;i\\
222 "
223     ;;
224   esac
225   ;;
226 *) 
227   v="# "
228   ;;
229 esac
230
231 sens=31 # 32 - 1
232 case $1 in
233 --sensitivity | -s)
234   sens=$2;
235   shift 2 || exit 1
236
237   if test "$sens" -gt 0 2>/dev/null; then
238     :
239   else
240     echo invalid sensitivity: $sens >&2
241     exit 1
242   fi
243
244   sens=`expr $sens - 1`
245   ;;
246 esac
247
248 test_mode=false
249
250 name=deblob-check
251
252 case $1 in
253 --version | -V)
254   sed '/^# '$name' version /,/^# Written by/ { s/^# //; p; }; d' < $0
255   exit 0
256   ;;
257
258 -\? | -h)
259   sed -n '/^# usage:/,/# -h/ { /^# -/,/^$/{s/^# \(-.*\):.*/\1/p; d; }; s/^\(# \?\)\?//p; }' < $0 &&
260   echo
261   echo "run \`$name --help | more' for full usage"
262   exit 0
263   ;;
264
265 --help | -H)
266   sed -n '/^# '$name' version /,/^[^#]/ s/^\(# \?\)\?//p' < $0
267   exit 0
268   ;;
269
270 --test | -t)
271   test_mode=:
272   ;;
273
274 --mark-false-positives | -p)
275   shift;
276   set_sed_cmd () {
277     set_sedmain "b list_both;" "p;" "b list_matches;"
278   }
279   ;;
280
281 --print-marked-false-positives | -f)
282   shift;
283   set_sed_cmd () {
284     set_sedmain "b print_marked_matches;" "" "b print_marked_matches;"
285   }
286   ;;
287
288 --print-false-positives | -F)
289   shift;
290   set_sed_cmd () {
291     set_sedmain "b print_matches;" "" "b print_matches;"
292   }
293   ;;
294
295 --deblob | --mark-blobs | -d)
296   shift;
297   set_sed_cmd () {
298     set_sedmain "b list_blobs;" "p;" "p;"
299   }
300   ;;
301
302 --cat | -D)
303   shift;
304   set_sed_cmd () {
305     set_sedmain \
306       "# sedcat: Actual blob detected, but there may be false positives." \
307       "# sedcat: No blob whatsoever found." \
308       "# sedcat: False positives found." \
309       "p; d; # sedcat: Just print stuff, remove this line to run the actual script."
310   }
311   ;;
312
313 --print-marked-blobs | -b)
314   shift;
315   set_sed_cmd () {
316     set_sedmain "b print_marked_blobs;"
317   }
318   ;;
319
320 --print-blobs | -B)
321   shift;
322   set_sed_cmd () {
323     set_sedmain "b print_blobs;"
324   }
325   ;;
326
327 --print-marked-blobs-with-context | -c)
328   shift;
329   set_sed_cmd () {
330     set_sedmain "b print_marked_cblobs;"
331   }
332   ;;
333
334 --print-blobs-with-context | -C)
335   shift;
336   set_sed_cmd () {
337     set_sedmain "b print_cblobs;"
338   }
339   ;;
340
341 --list-false-positives | -P)
342   shift;
343   set_sed_cmd () {
344     set_sedmain "" "" "
345 i\\
346 $file
347 q 1;"
348   }
349   ;;
350
351 --list-all-matches | -x)
352   shift;
353   set_sed_cmd () {
354     set_sedmain "
355 i\\
356 $file
357 q 1;" "" "
358 i\\
359 $file
360 q 1;"
361   }
362   ;;
363
364 --print-all-matches | -X)
365   shift;
366   set_sed_cmd () {
367     set_sedmain "b print_both;" "" "b print_matches;"
368   }
369   ;;
370
371 *)
372   case $1 in
373   -- | -l | --list-blobs) shift;;
374   esac
375   case $1 in
376   -*)
377     if test ! -f "$1"; then
378       echo "$name: \`$1' given too late or out of the proper sequence." >&2
379       echo "$name: The order of arguments is significant, see the usage." >&2
380       exit 1
381     fi
382     ;;
383   esac
384       
385   set_sed_cmd () {
386     set_sedmain "
387 i\\
388 $file
389 q 1;"
390   }
391   ;;
392
393 esac
394
395 case $1 in
396 --) shift;;
397 esac
398
399 if $test_mode; then
400   pass=:
401
402   # Exercise some nasty inputs to see that we recognize them as blobs
403   # with full context.
404   for string in \
405     "1,2,3,4" \
406     "= {
407 1, 0x2, 03, L'\x4'
408 }" \
409     "=
410 {
411   '\\x1', '\\002'
412   ,
413   {
414     { \"\\x3\", },
415     \"\\004\"
416   },
417 };" \
418     ".long 1,2
419      .long \$3,\$4" \
420     "#define X { 1, 2, \\
421                  3, 4, /* comment */ \\
422                }" \
423   "= {
424 /*
425  * multi-line
426  * comment
427  */
428  {
429    0x4c00c000, 0x00000000, 0x00060000, 0x00000000,
430  },
431 }" \
432   ; do
433     case `echo "$string" | $0 -s 4 -c` in
434     "::: - :::
435 $string") ;;
436     *) echo "failed positive test for:
437 $string" >&2
438        pass=false;;
439     esac
440   done
441
442   # Make sure we do not recognize these as blobs.
443   for string in \
444     "#define X { 1, 2 }
445 #define Y { 3, 4 }" \
446     " 0x00, 0x00, 0x00 " \
447   ; do
448     case `echo "$string" | $0 -s 4` in
449     "") ;;
450     *) echo "failed negative test for:
451 $string" >&2
452        pass=false;;
453     esac
454   done
455
456   # How did we do?
457   if $pass; then
458     echo success
459   fi
460
461   $pass
462   exit
463 fi
464
465 # Call addx as needed to set up more patterns to be recognized as
466 # false positives.  Takes the input filename in $1.
467
468 set_except () {
469   # Look for a multi-line definition starting with a line that matches
470   # $1 (implicitly anchored to the beginning of the line), and ending
471   # at the first ';'.
472   initnc () {
473     addx "$1[^;]*;"
474   }
475
476   # Look for a multi-line definition starting with a line that matches
477   # $1 (implicitly anchored to the beginning of the line), and ending
478   # at the first ';' that's not within comments.
479   initc () {
480     addx "$1\\([^;]*\\|$comment\\)*;"
481   }
482
483   # Accept as a non-blob an expression $1 that would have otherwise
484   # triggered blob detection.  The expression must end in a way that
485   # would trigger the blob detection machinery.
486   accept () {
487     addx "$1"
488   }
489
490   # Match up to the end a comment started in $1.
491   ocomment () {
492     addx "$1\\([^*]\\|[*][*]*[^*/]\\|[*]*[\\n]\\)*[*]*[*][/]"
493   }
494
495   # Match $1 followed by backslash-terminated lines and a last
496   # non-backslash-terminated line.
497   oprepline () {
498     addx "$1\\([^\\n]*\\\\[\\n]\\)*[^\\n\\\\]*$eol"
499   }
500
501   case /$1 in
502   */*linux*.tar* | */*kernel*.tar* | */*linux-*.*.*/*)
503     # false alarms, contain source
504     # drivers/net/wan/wanxlfw.inc_shipped -> wanxlfw.S
505     accept 'static u8 firmware\[\]={[\n]0x60,\(0x00,\)*0x16,\(0x00,\)*\([\n]\(0x[0-9A-F][0-9A-F],\)*\)*[\n]0x23,0xFC,0x00,0x00,0x00,0x01,0xFF,0xF9,0x00,0xD4,0x61,0x00,0x06,0x74,0x33,0xFC,\([\n]\(0x[0-9A-F][0-9A-F],\)*\)*0x00[\n]};'
506     # drivers/usb/serial/xircom_pgs_fw.h -> xircom_pgs.S
507     initnc 'static const struct ezusb_hex_record xircom_pgs_firmware\[\] ='
508     # drivers/usb/serial/keyspan_pda_fw_h -> keyspan_pda.S
509     initnc 'static const struct ezusb_hex_record keyspan_pda_firmware\[\] ='
510     # arch/m68k/ifpsp060/*.sa -> src/*.s
511     accept '    \.long  0x60ff0000,0x02360000,0x60ff0000,0x16260000[\n]'"$sepx$blobpat*"
512     accept '    \.long  0x60ff0000,0x17400000,0x60ff0000,0x15f40000[\n]'"$sepx$blobpat*"
513     # arch/powerpc/platforms/cell/spufs/spu_save_dump.h_shipped -> spu_save.c
514     initnc 'static unsigned int spu_save_code\[\]  __attribute__((__aligned__(128))) ='
515     # arch/powerpc/platforms/cell/spufs/spu_restore_dump.h_shipped -> spu_restore.c
516     initnc 'static unsigned int spu_restore_code\[\]  __attribute__((__aligned__(128))) ='
517     # drivers/net/ixp2000/ixp2400_tx.ucode -> ixp2400_tx.uc
518     initnc '    \.initial_reg_values    = (struct ixp2000_reg_value \[\]) {'
519     # drivers/net/ixp2000/ixp2400_rx.ucode -> ixp2400_rx.uc
520     initnc '    \.initial_reg_values    = (struct ixp2000_reg_value \[\]) {'
521     # crypto/tcrypt.h
522     initnc '[   ]*\.\(digest\|entries\|input\|key\|output\|plaintext\|result\)[         ]*= {'
523
524     # checked:
525
526     accept '    \$3 = {{pge = {{ste = {\(\([0-9][0-9a-fx{},\n   ]*\|\(pge\|ste\) =\|<repeats [0-9]\+ times>\)[{},\n     ]*\)*<repeats 11 times>}'"$eol"
527     # arch/sparc/lib/divdi3.S
528     accept '__clz_tab:[\n]      \.byte  0\(,[0-5]\)\+'"$sepx$blobpat*"
529     accept 'PITBL:[\n]  \.long  0xC0040000,0xC90FDAA2,'"$blobpat*"
530     # arch/m68k/mac/mac_penguin.S
531     accept '\(0x[0F][0F],\)\+\\[\n]\(\(0x[0F][0F],\)\+\\[\n]\)*\(0x[0F][0F],\)\+0x00'
532     # arch/s390/kernel/head.S
533     accept '\.lowcase:[\n]      \.byte 0x00\(,0x0[1-7]\)\+'"$sepx$blobpat*$eol"
534     # arch/s390/kernel/bitmap.S
535     accept '_zb_findmap:[\n]         \.byte  0\(,[123],0\)\+,4'"$sepx$blobpat*$eol"
536     accept '_sb_findmap:[\n]         \.byte  8\(,0,[123]\)\+,0'"$sepx$blobpat*$eol"
537     # arch/powerpc/lib/copyuser_64.S
538     accept '    \.section __ex_table,"a"'"$sepx$blobpat*"
539     # arch/powerpc/platforms/iseries/mf.c
540     accept '    memcpy(src, "\\x01\\x00\\x00\\x01\\x00\\x00\\x00\\x00\\x00\\x00\\x00\\x00".*PROGxxxx'
541     # arch/ppc/platforms/ev64260.c
542     initnc 'static const unsigned int cpu_745x\[2\]\[16\] ='
543     # arch/alpha/lib/fls.c
544     initnc 'const unsigned char __flsm1_tab\[256\] ='
545     # drivers/input/misc/map_to_7segment.h
546     accept '#define _MAP_0_32_ASCII_SEG7_NON_PRINTABLE  \\[\n]  \(0,\)\+'"$eol"
547     # sound/oss/ad1848.c
548     initc '     static int      init_values_b\[\] ='
549     # drivers/input/keyboard/atkbd.c
550     initnc 'static unsigned char atkbd_set2_keycode\[512\] ='
551     # drivers/usb/serial/keyspan_pda.S and
552     # drivers/usb/serial/xircom_pgs.S
553     accept 'desc_config1:[\n]   \.byte 0x09, 0x02'"$sepx$blobpat*"
554     accept 'string_mfg:[\n]\?\(;\?      \.byte[^\n]*[\n]\)\+string_mfg_end:'
555     accept 'string_product:[\n]\?\(;\?  \.byte[^\n]*[\n]\)\+string_product_end:'
556     # drivers/media/video/pwc/pwc-nala.h
557     accept '   [/][*] \(SQCIF\|QSIF\|QCIF\|SIF\|CIF\|VGA\) [*][/][\n]   {[\n]      {'"$blobpat*"
558     # drivers/video/logo/*.ppm
559     accept 'P[13]\([\n]#[^\n]*\)*[\n]*\([\n][0-9 ]*\)\+'
560     # Documentation/specialix.txt
561     accept 'for i in [  0-9\\\n]*[\n]do'
562     # Documentation/cpu-freq/cpufreq-stats.txt
563     accept '         :   3600000   3400000   3200000   3000000   2800000 '
564     # Documentation/scsi/sym53c8xx_2.txt and
565     # Documentation/scsi/ncr53c8xx_2.txt
566     accept '00 00[\n]64 01[\n]8e 0b[\n][\n][0-9a-f \n]*fe fe'
567     accept '0f 00 08 08 64 00 0a 00 - id 0[\n]'"$blobpat*"
568     accept 'default nvram data:'"$sepx$blobpat*"
569     # Documentation/video4linux/sn9c102.txt
570     accept '0x0458     0x7025[\n]'"$blobpat*"
571     # Documentation/video4linux/et61x251.txt
572     accept '0x102c     0x6151[\n]'"$blobpat*"
573     # Documentation/video4linux/zc0301.txt
574     accept '0x041e     0x4017[\n]'"$blobpat*"
575     # Documentation/uml/UserModeLinux-HOWTO.txt
576     accept '  (gdb) x\/100x \$25[\n]  0x507d2434:     0x507d2434      0x00000000      0x08048000      0x080a4f8c'"$sepx$blobpat*"
577     # Documentation/isdn/README.inc
578     accept '      1  0  0  0  0x308'"$sepx$blobpat*"
579     # Documentation/sched-stats.txt
580     accept 'domain<N> <cpumask> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36'"$eol"
581     # net/ipv4/ipvs/ip_vs_sync.c and
582     # net/sctp/sm_make_chunk.c and
583     # include/linux/sctp.h
584     accept '[ * ]*0                   1                   2                   3[\n][ *  ]*0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1'
585     # arch/x86/lguest/boot.c
586     accept ' \*  1 1 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0'
587     # drivers/net/fealnx.c
588     ocomment '  [/][*] Configure the PCI bus bursts and FIFO thresholds.'
589     # drivers/hwmon/via686a.c
590     ocomment '[/][*] the original LUT values from Alex van Kaam <darkside@chello\.nl>'
591     # drivers/media/video/saa7114.c
592     initc 'static const unsigned char init\[\] = {[^;]*MODE=0 ;.*SAA_7114_NTSC_HSYNC_START'
593
594     # in 2.6.23 only
595     accept " Psize    Ipps       Tput     Rxint     Txint    Done     Ndone[\\n] ---------------------------------------------------------------\\([\\n][ 0-9]\\+\\)\\+$eol"
596     initnc 'static u_short ataplain_map\[NR_KEYS\] __initdata ='
597     initnc 'static RegInitializer initData\[\] __initdata ='
598
599     # new in 2.6.25
600     accept "%canned_values = ([\\n]     \\([0-9]\\+ => \\[[     \\n]\\+\\(\\([0-9]\\+\\|'0x[0-9a-f]\\+'\\),[    \\n]*\\)*\\]\\(, \\|[\\n]\\)\\)*);"
601
602     # from 2.6.25-rc* patches
603     initnc '    int bcomm_irq\[3\*16\] ='
604     initnc '    static const int8 countLeadingZerosHigh\[\] ='
605     initnc 'static struct nic_qp_map nic_qp_mapping_[01]\[\] ='
606     initnc 'static struct regval ov_initvals\[\] ='
607     initnc 'static struct regval stk1125_initvals\[\] ='
608     initnc 'static u8 bnx2x_stats_len_arr\[BNX2X_NUM_STATS\] ='
609     initnc 'static const struct arb_line read_arb_data\[NUM_RD_Q\]\[MAX_RD_ORD + 1\] ='
610     initnc 'static const struct arb_line write_arb_data\[NUM_WR_Q\]\[MAX_WR_ORD + 1\] ='
611     oprepline '#define AR5K_RATES_11A '
612     oprepline '#define AR5K_RATES_11B '
613     oprepline '#define AR5K_RATES_11G '
614     oprepline '#define AR5K_RATES_TURBO '
615     oprepline '#define AR5K_RATES_XR '
616     initnc '            } blinkrates\[\] ='
617     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
618     initnc 'static const struct ath5k_ini_mode rf5413_ini_mode_end\[\] ='
619     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
620     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
621     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
622     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
623     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
624
625     # quite suspicious
626     # arch/parisc/kernel/perf_images.h
627     initc 'static uint32_t onyx_images\[\]\[PCXU_IMAGE_SIZE\/sizeof(uint32_t)\] __read_mostly ='
628     initc 'static uint32_t cuda_images\[\]\[PCXW_IMAGE_SIZE\/sizeof(uint32_t)\] __read_mostly ='
629
630     # These are regarded as ok
631     initnc 'static const u8 SN9C102_\(Y\|UV\)_QTABLE[01]\[64\] = {'
632     initnc '    static const u8 jpeg_header\[589\] = {'
633     accept '[   ]\{1,2\}err = sn9c102_write_const_regs(cam\(,[  \n]\+{0x[0-9a-fA-F][0-9a-fA-F], 0x[0-9a-fA-F][0-9a-fA-F]}\)*);'
634
635     # too lax?
636     initnc 'static yyconst flex_int\(16\|32\)_t yy_[^[]*\[[][0-9]*\] ='
637     initnc 'static const yytype_u\?int\(8\|16\) yy[^[]*\[\] ='
638     initnc '\(\|        \)static \(const \|\)\(unsigned \(short\|char\)\|struct SiS_[^ ]*\) SiS[^[]*\(\[[] [*0-9]*\]\)\+ *='
639
640     initnc 'static const a3d_Hrtf_t A3dHrirZeros = {'
641     initnc 'static const a3d_Hrtf_t A3dHrirImpulse = {'
642     initnc 'static const a3d_Hrtf_t A3dHrirOnes = {'
643     initnc 'static const a3d_Hrtf_t A3dHrirSatTest = {'
644     initnc 'static const a3d_Hrtf_t A3dHrirDImpulse = {'
645     initnc 'static const a3d_ItdDline_t A3dItdDlineZeros = {'
646     initnc 'static auxxEqCoeffSet_t asEqCoefsNormal = {'
647     initnc 'static xtalk_dline_t const alXtalkDlineTest = {'
648     initnc 'static struct nand_ecclayout rtc_from4_nand_oobinfo = {'
649     initnc 'static const s16 tempLUT\[\] ='
650     initnc 'static const u8 viaLUT\[\] ='
651     initnc 'static struct { int xres, yres, left, right, upper, lower, hslen, vslen, vfreq; } timmings\[\] __initdata = {'
652     initnc 'static struct platinum_regvals platinum_reg_init_[0-9]* = {'
653     initnc '} sisfb_ddc[sf]modes\[\] __devinitdata ='
654     initnc 'static struct dvb_pll_desc [^\n]* = {'
655     initnc 'static u32 LABELPATCHES\[\] __attribute((unused)) ='
656
657     initnc 'static dbdev_tab_t dbdev_tab\[\] ='
658     accept '\(EXP\|LOG\|ATAN\)TBL:'"$sepx$blobpat*"
659     initnc 'static char fm_volume_table\[128\] ='
660     initnc 'unsigned int snd_gf1_scale_table\[SNDRV_GF1_SCALE_TABLE_SIZE\] ='
661     # remaining after original deblob_2_6_24, not fully checked
662
663     oprepline '#define OV51[18]_\(Y\|UV\)QUANTABLE {'
664     initnc '            static unsigned char const data_bit\[64\] ='
665     initnc '            static const u8 data_sbit\[32\] ='
666     initnc '    \.RightCoefs ='
667     initnc '    #define WakeupSeq    {'
668     initnc '    SetRate44100\[\] ='
669     initnc '    const short period\[32\] ='
670     initnc '    const static int desc_idx_table\[\] ='
671     initnc '    int prop_bcomm_irq\[3\*16\] ='
672     initnc '    static char logSlopeTable\[128\] ='
673     initnc '    static const int uc_\(dup\|word\)_table\[\]\[2\] ='
674     initnc '    static const struct mc7_timing_params mc7_timings\[\] ='
675     initnc '    static const u8 biphase_tbl\[\] ='
676     initnc '    static const u8 cs170\[7 \* 8\] ='
677     initnc '    static const u8 cs3[13]a\[8 \* 4\] ='
678     initnc '    static const u8 dramsr13\[12 \* 5\] ='
679     initnc '    static const u8 log10\[\] ='
680     initnc '    static const u8 mpeg_hdr_data\[\] ='
681     initnc '    static const u8 sdramtype\[13\]\[5\] ='
682     initnc '    static const u8 t\[\] ='
683     initnc '    static const unsigned int avg_pkts\[NCCTRL_WIN\] ='
684     initnc '    static const unsigned short ac97_defaults\[\] ='
685     initnc '    static int exp_lut\[256\] ='
686     initnc '    static u16 jpeg_tables\[\]\[70\] ='
687     initnc '    static u16 tables\[\] ='
688     initnc '    static u32 logMagTable\[128\] ='
689     initnc '    static u8 init_bufs\[13\]\[5\] ='
690     initnc '    static u8 sine \[\] ='
691     initnc '    static u_short geometry_table\[\]\[[45]\] ='
692     initnc '    static unsigned char CRCTable1\[\] ='
693     initnc '    static unsigned char CRCTable2\[\] ='
694     initnc '    static unsigned char default_colors\[\] ='
695     initnc '    static unsigned char iso_regs\[8\]\[4\] ='
696     initnc '    static unsigned char log_scale\[101\] ='
697     initnc '    static unsigned char msg\[\] ='
698     initnc '    static unsigned char static_pad\[\] ='
699     initnc '    static unsigned char table_alaw2ulaw\[\] ='
700     initnc '    static unsigned char table_ulaw2alaw\[\] ='
701     initnc '    u32 reg_boundaries\[\] ='
702     initnc '    u8 b\[\] ='
703     initnc '    uint8_t tx\[\] ='
704     initnc '    unsigned char saa7111_regs\[\] ='
705     initnc '    unsigned char sas_pcd_m_pg\[\] ='
706     initnc '    } modedb\[5\] ='
707     initnc '    } reg_tbl\[\] ='
708     initnc '    } vals\[\] ='
709     initnc '    } vm_devices\[\] ='
710     initnc '    static const code distfix\[32\] ='
711     initnc '    static const code lenfix\[512\] ='
712     initnc '  int poly\[\]='
713     initnc '  static const unsigned char asso_values\[\] ='
714     initnc '  static unsigned char asso_values\[\] ='
715     initnc '  } cards_ds\[\] ='
716     initnc '    static const int8 countLeadingZerosHigh\[\] ='
717     initnc '    static const unsigned short d\(base\|ext\)\[32\] ='
718     initnc '#define OV511_QUANTABLESIZE 64'
719     initnc 'BYTE BtCard::SRAMTable_\(NTSC\|PAL\)\[\] ='
720     initnc 'BYTE SRAMTable\[\]\[ 60 \] ='
721     accept 'irq_prio_[hdlc]*:'"$sepx$blobpat*"
722     initc '__u8 _ascebc\[256\] ='
723     initc '__u8 _ebc_tolower\[256\] ='
724     initc '__u8 _ebc_toupper\[256\] ='
725     initnc 'adapter_tag_info_t aic7[9x]xx_tag_info\[\] ='
726     initnc 'char dmasound_alaw2dma8\[\] ='
727     initnc 'char dmasound_ulaw2dma8\[\] ='
728     initnc 'const struct aper_size_info_16 agp3_generic_sizes\[AGP_GENERIC_SIZES_ENTRIES\] ='
729     initnc 'const u16 crc_itu_t_table\[256\] ='
730     initnc 'const u8 byte_rev_table\[256\] ='
731     initnc 'const u8 crc7_syndrome_table\[256\] ='
732     initnc 'const unsigned char INIT_2\[127\] ='
733     initnc 'int snd_sf_vol_table\[128\] ='
734     initnc 'static      u_char  irq_to_siubit\[\] ='
735     initnc 'static      u_char  irq_to_siureg\[\] ='
736     initnc 'static Byte_t RData\[RDATASIZE\] ='
737     initnc 'static __const__ __u16 gx_coeff\[256\] ='
738     initnc 'static __u8 init7121ntsc\[\] ='
739     initnc 'static __u8 init7121pal\[\] ='
740     initnc 'static __u8 mode8420\(pro\|con\)\[\] ='
741     initnc 'static byte capidtmf_leading_zeroes_table\[0x100\] ='
742     initnc 'static char channel_map_madi_ss\[HDSPM_MAX_CHANNELS\] ='
743     initnc 'static char coefficients\[NM_TOTAL_COEFF_COUNT \* 4\] ='
744     initnc 'static char ecc_syndrome_table\[\] ='
745     initnc 'static char isdn_audio_alaw_to_ulaw\[\] ='
746     initnc 'static char isdn_audio_ulaw_to_alaw\[\] ='
747     initnc 'static char mix_cvt\[101\] ='
748     initnc 'static char opl3_volume_table\[128\] ='
749     initnc 'static const RegInitializer initData\[\] __initdata ='
750     initnc 'static const __u16 crc10_table\[256\] ='
751     initnc 'static const __u32 crc_c\[256\] ='
752     initnc 'static const char zr360[56]0_dht\[0x1a4\] ='
753     initnc 'static const char zr360[56]0_dqt\[0x86\] ='
754     initnc 'static const fixp_t cos_table\[46\] ='
755     initnc 'static const int init_seq\[\] ='
756     initnc 'static const int mobile_vid_table\[32\] ='
757     initnc 'static const s16 snd_opl4_pitch_map\[0x600\] ='
758     initnc 'static const s8 \(b43\(\|legacy\)\|bcm43xx\)_tssi2dbm_[bg]_table\[\] ='
759     initnc 'static const s8 budtab\[256\] ='
760     initnc 'static const struct aper_size_info_32 u3_sizes\[8\] ='
761     initnc 'static const struct aper_size_info_8 via_generic_sizes\[9\] ='
762     initnc 'static const struct color clut_vga16\[16\] ='
763     initnc 'static const struct gain_entry gain_table\[2\]\[108\] ='
764     initnc 'static const struct mV_pos __initdata mobilevrm_mV\[32\] ='
765     initnc 'static const struct mV_pos __initdata vrm85_mV\[32\] ='
766     initnc 'static const struct menelaus_vtg_value vcore_values\[\] ='
767     initnc 'static const struct opl4_region regions_[0-9a-frums]*\[\] ='
768     initnc 'static const struct regval regval_table\[\] ='
769     initnc 'static const struct rf_channel rf_vals_5222\[\] ='
770     initnc 'static const struct rf_channel rf_vals_5225_2527\[\] ='
771     initnc 'static const struct rf_channel rf_vals_5226\[\] ='
772     initnc 'static const struct rf_channel rf_vals_bg\[\] ='
773     initnc 'static const struct rf_channel rf_vals_bg_2522\[\] ='
774     initnc 'static const struct rf_channel rf_vals_bg_2523\[\] ='
775     initnc 'static const struct rf_channel rf_vals_bg_2524\[\] ='
776     initnc 'static const struct rf_channel rf_vals_bg_2525\[\] ='
777     initnc 'static const struct rf_channel rf_vals_bg_2525e\[\] ='
778     initnc 'static const struct rf_channel rf_vals_bg_2528\[\] ='
779     initnc 'static const struct rf_channel rf_vals_noseq\[\] ='
780     initnc 'static const struct rf_channel rf_vals_seq\[\] ='
781     initnc 'static const u16 Sbox\[256\] ='
782     initnc 'static const u16 count_lut\[\] ='
783     # drivers/net/e1000e/phy.c
784     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
785     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
786     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
787     initnc 'static const u16 stufftab\[5 \* 256\] ='
788     initnc 'static const u16 tkip_sbox\[256\] ='
789     initnc 'static const u16 wm8753_reg\[\] ='
790     initnc 'static const u32 SS[0-3]\[256\] ='
791     initnc 'static const u32 S[1-8]\[64\] ='
792     initnc 'static const u32 T[0-5]\[256\] ='
793     initnc 'static const u32 Tm\[24\]\[8\] ='
794     initnc 'static const u32 bass_table\[41\]\[5\] ='
795     initnc 'static const u32 bf_sbox\[256 \* 4\] ='
796     initnc 'static const u32 camellia_sp0222\[256\] ='
797     initnc 'static const u32 camellia_sp1110\[256\] ='
798     initnc 'static const u32 camellia_sp3033\[256\] ='
799     initnc 'static const u32 camellia_sp4404\[256\] ='
800     initnc 'static const u32 crc32c_table\[256\] ='
801     initnc 'static const u32 db_table\[101\] ='
802     initnc 'static const u32 m8xx_size_to_gray\[M8XX_SIZES_NO\] ='
803     initnc 'static const u32 mds\[4\]\[256\] ='
804     initnc 'static const u32 pc2\[1024\] ='
805     initnc 'static const u32 s[1-7]\[256\] ='
806     initnc 'static const u32 sb8\[256\] ='
807     initnc 'static const u32 tfrc_calc_x_lookup\[TFRC_CALC_X_ARRSIZE\]\[2\] ='
808     initnc 'static const u32 treble_table\[41\]\[5\] ='
809     initnc 'static const u64 [CT][0-7]\[256\] ='
810     initnc 'static const u64 sbox[1-4]\[256\] ='
811     initnc 'static const u64 sha512_K\[80\] ='
812     initnc 'static const u8 Tr\[4\]\[8\] ='
813     initnc 'static const u8 aes_sbox\[256\] ='
814     initnc 'static const u8 calc_sb_tbl\[512\] ='
815     initnc 'static const u8 exp_to_poly\[492\] ='
816     initnc 'static const u8 legal_ansi_char_array\[0x40\] ='
817     initnc 'static const u8 parity\[\] ='
818     initnc 'static const u8 pc1\[256\] ='
819     initnc 'static const u8 poly_to_exp\[255\] ='
820     initnc 'static const u8 q[01]\[256\] ='
821     initnc 'static const u8 ratio_lut\[\] ='
822     initnc 'static const u8 rs\[256\] ='
823     initnc 'static const u8 rtl8225_agc\[\] ='
824     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
825     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
826     initnc 'static const u8 rtl8225z2_tx_gain_cck_ofdm\[\] ='
827     initnc 'static const u8 setup\[\] ='
828     initnc 'static const u8 speedtab \[3\]\[12\] ='
829     initnc 'static const u_char irq_to_siubit\[\] ='
830     initnc 'static const u_char irq_to_siureg\[\] ='
831     initnc 'static const u_char nand_ecc_precalc_table\[\] ='
832     initnc 'static const uint8_t parity\[256\] ='
833     initnc 'static const unsigned char \(UV\|Y\)_QUANTABLE\[64\] ='
834     initnc 'static const unsigned char __initdata mV_mobilevrm\[32\] ='
835     initnc 'static const unsigned char __initdata mV_vrm85\[32\] ='
836     initnc 'static const unsigned char barco_p1\[2\]\[9\]\[7\]\[3\] ='
837     initnc 'static const unsigned char bitcounts\[256\] ='
838     initnc 'static const unsigned char blue\[256\] ='
839     initnc 'static const unsigned char chktab[hl]\[256\] ='
840     initnc 'static const unsigned char comet_miireg2offset\[32\] ='
841     initnc 'static const unsigned char euc2sjisibm_g3upper_map\[\]\[2\] ='
842     initnc 'static const unsigned char green\[256\] ='
843     initnc 'static const unsigned char hash_table_ops\[64\*4\] ='
844     initnc 'static const unsigned char hid_keyboard\[256\] ='
845     initnc 'static const unsigned char mts_direction\[256\/8\] ='
846     initnc 'static const unsigned char red\[256\] ='
847     initnc 'static const unsigned char sjisibm2euc_map\[\]\[2\] ='
848     initnc 'static const unsigned char vol_cvt_datt\[128\] ='
849     initnc 'static const unsigned char wm_vol\[256\] ='
850     initnc 'static const unsigned int MulIdx\[16\]\[16\] ='
851     initnc 'static const unsigned int crctab32\[\] ='
852     initnc 'static const unsigned short crc_flex_table\[\] ='
853     initnc 'static const unsigned short logtable\[256\] ='
854     initnc 'static const unsigned short wd7000_iobase\[\] ='
855     initnc 'static const unsigned short x86_keycodes\[256\] ='
856     initnc 'static const unsigned table\[\] ='
857     initnc 'static int MV300_reg_8bit\[256\] ='
858     initnc 'static int fifo_map\[\]\[MAX_TX_FIFOS\] ='
859     initnc 'static int initial_lfsr\[\] ='
860     initnc 'static int log_tbl\[129\] ='
861     initnc 'static int logitech_expanded_keymap\[LOGITECH_EXPANDED_KEYMAP_SIZE\] ='
862     initnc 'static int miro_fmtuner\[\]  ='
863     initnc 'static int miro_tunermap\[\] ='
864     initnc 'static int register_size\[\] ='
865     initnc 'static int reserve_list\[MAX_RES_ARGS\] ='
866     initnc 'static int reverse6\[64\] ='
867     initnc 'static short attack_time_tbl\[128\] ='
868     initnc 'static short beep_wform\[256\] ='
869     initnc 'static short decay_time_tbl\[128\] ='
870     initnc 'static short isdn_audio_[ua]law_to_s16\[\] ='
871     initnc 'static struct cipher_testvec anubis_cbc_dec_tv_template\[\] ='
872     initnc 'static struct cipher_testvec anubis_cbc_enc_tv_template\[\] ='
873     initnc 'static struct cipher_testvec anubis_dec_tv_template\[\] ='
874     initnc 'static struct cipher_testvec anubis_enc_tv_template\[\] ='
875     initnc 'static struct cipher_testvec camellia_cbc_dec_tv_template\[\] ='
876     initnc 'static struct cipher_testvec camellia_cbc_enc_tv_template\[\] ='
877     initnc 'static struct cipher_testvec camellia_dec_tv_template\[\] ='
878     initnc 'static struct cipher_testvec camellia_enc_tv_template\[\] ='
879     initnc 'static struct cipher_testvec cast6_dec_tv_template\[\] ='
880     initnc 'static struct cipher_testvec cast6_enc_tv_template\[\] ='
881     initnc 'static struct cipher_testvec serpent_dec_tv_template\[\] ='
882     initnc 'static struct cipher_testvec serpent_enc_tv_template\[\] ='
883     initnc 'static struct cipher_testvec tea_dec_tv_template\[\] ='
884     initnc 'static struct cipher_testvec tea_enc_tv_template\[\] ='
885     initnc 'static struct cipher_testvec tf_dec_tv_template\[\] ='
886     initnc 'static struct cipher_testvec tf_enc_tv_template\[\] ='
887     initnc 'static struct cipher_testvec tnepres_dec_tv_template\[\] ='
888     initnc 'static struct cipher_testvec xeta_dec_tv_template\[\] ='
889     initnc 'static struct cipher_testvec xeta_enc_tv_template\[\] ='
890     initnc 'static struct cipher_testvec xtea_dec_tv_template\[\] ='
891     initnc 'static struct cipher_testvec xtea_enc_tv_template\[\] ='
892     initnc 'static struct comp_testvec deflate_decomp_tv_template\[\] ='
893     initnc 'static struct hash_testvec aes_xcbc128_tv_template\[\] ='
894     initnc 'static struct hash_testvec crc32c_tv_template\[\] ='
895     initnc 'static struct hash_testvec hmac_sha256_tv_template\[\] ='
896     initnc 'static struct hash_testvec sha256_tv_template\[\] ='
897     initnc 'static struct hash_testvec sha384_tv_template\[\] ='
898     initnc 'static struct hash_testvec sha512_tv_template\[\] ='
899     initnc 'static struct hash_testvec wp256_tv_template\[\] ='
900     initnc 'static struct hash_testvec wp384_tv_template\[\] ='
901     initnc 'static struct hash_testvec wp512_tv_template\[\] ='
902     initnc 'static struct iwl\(3945\)\?_tx_power power_gain_table\[2\]\[IWL_MAX_GAIN_ENTRIES\] ='
903     initnc 'static struct ovcamchip_regvals regvals_init_\(76be\|7[16]20\|7x10\)\[\] ='
904     initnc 'static struct regval_list ov7670_default_regs\[\] ='
905     initnc 'static struct s_c2 SetRate48000\[\] ='
906     initnc 'static struct tea6420_multiplex TEA6420_line\[MXB_AUDIOS+1\]\[2\] ='
907     initnc 'static struct wm_info i810_wm_16_100\[\] ='
908     initnc 'static struct wm_info i810_wm_16_133\[\] ='
909     initnc 'static struct wm_info i810_wm_24_100\[\] ='
910     initnc 'static struct wm_info i810_wm_24_133\[\] ='
911     initnc 'static struct wm_info i810_wm_8_100\[\] ='
912     initnc 'static struct wm_info i810_wm_8_133\[\] ='
913     initnc 'static struct { struct fb_bitfield red, green, blue, transp; int bits_per_pixel; } colors\[\] ='
914     initnc 'static u16 asEqCoefsPipes\[64\] ='
915     initnc 'static u16 asEqCoefsZeros\[50\] ='
916     initnc 'static u16 asEqOutStateZeros\[48\] ='
917     initnc 'static u16 default_key_map \[256\] ='
918     initnc 'static u16 eq_levels\[64\] ='
919     initnc 'static u32  crc32tab\[\] __attribute__ ((aligned(8))) ='
920     initnc 'static u32 ac3_frames\[3\]\[32\] ='
921     initnc 'static u32 adwDecim8\[33\] ='
922     initnc 'static u32 h_prescale\[64\] ='
923     initnc 'static u32 v_gain\[64\] ='
924     initnc 'static u8 cvs_time_value\[\]\[XFER_UDMA_6 - XFER_UDMA_0 + 1\] ='
925     initnc 'static u8 SRAM_Table\[\]\[60\] ='
926     initnc 'static u8 act_time_value\[\]\[8\] ='
927     initnc 'static u8 alps_tdee4_stv0297_inittab\[\] ='
928     initnc 'static u8 bnx2_5706_stats_len_arr\[BNX2_NUM_STATS\] ='
929     initnc 'static u8 bnx2_5708_stats_len_arr\[BNX2_NUM_STATS\] ='
930     initnc 'static u8 flit_desc_map\[\] ='
931     initnc 'static u8 ini_time_value\[\]\[8\] ='
932     initnc 'static u8 init_tab \[\] ='
933     initnc 'static u8 mac_reader\[\] ='
934     initnc 'static u8 mt2131_config1\[\] ='
935     initnc 'static u8 mt2266_init2\[\] ='
936     initnc 'static u8 opera1_inittab\[\] ='
937     initnc 'static u8 rco_time_value\[\]\[8\] ='
938     initnc 'static u8 saa7113_init_regs\[\] ='
939     initnc 'static u8 samsung_tbmu24112_inittab\[\] ='
940     initnc 'static u8 tas3004_treble_table\[\] ='
941     initnc 'static u8 w1_crc8_table\[\] ='
942     initnc 'static u_char const data_sizes_32\[32\] ='
943     initnc 'static u_long ident_map\[32\] ='
944     initnc 'static u_short ctrl_map\[NR_KEYS\] *='
945     initnc 'static u_short shift_ctrl_map\[NR_KEYS\] ='
946     initnc 'static u_short shift_map\[NR_KEYS\] *='
947     initnc 'static uchar perm1\[56\] ='
948     initnc 'static uchar perm2\[48\] ='
949     initnc 'static uchar perm3\[64\] ='
950     initnc 'static uchar perm4\[48\] ='
951     initnc 'static uchar perm5\[32\] ='
952     initnc 'static uchar perm6\[64\] ='
953     initnc 'static uchar sbox\[8\]\[4\]\[16\] ='
954     initnc 'static uint16_t crc_table\[256\] ='
955     initnc 'static uint8_t lpfcAlpaArray\[\] ='
956     initnc 'static uint8_t seqprog\[\] ='
957     initnc 'static unsigned char V110_OffMatrix_9600\[\] ='
958     initnc 'static unsigned char V110_OnMatrix_9600\[\] ='
959     initnc 'static unsigned char a2232_65EC02code\[\] ='
960     initnc 'static unsigned char alaw_main\[\] ='
961     initnc 'static unsigned char atkbd_set3_keycode\[512\] ='
962     initnc 'static unsigned char atkbd_unxlate_table\[128\] ='
963     initnc 'static unsigned char banner_table\[\] ='
964     initnc 'static unsigned char bootlogo_bits\[\] ='
965     initnc 'static unsigned char bus2core_8260\[\] ='
966     initnc 'static unsigned char bus2core_8280\[\] ='
967     initnc 'static unsigned char caseorder\[256\] ='
968     initnc 'static unsigned char crystal_key\[\] ='
969     initnc 'static unsigned char dsp_ulaw\[\] ='
970     initnc 'static unsigned char expressiontab\[128\] ='
971     initnc 'static unsigned char header2\[\] ='
972     initnc 'static unsigned char hidp_keycode\[256\] ='
973     initnc 'static unsigned char ima_adpcm_capture\[\] ='
974     initnc 'static unsigned char ima_adpcm_init\[\] ='
975     initnc 'static unsigned char ima_adpcm_playback\[\] ='
976     initnc 'static unsigned char irq_xlate\[32\] ='
977     initnc 'static unsigned char mulaw_main\[\] ='
978     initnc 'static unsigned char nkbd_keycode\[128\] ='
979     initnc 'static unsigned char pan_volumes\[256\] ='
980     initnc 'static unsigned char parm_block\[32\] ='
981     initnc 'static unsigned char raw3270_ebcgraf\[64\] ='
982     initnc 'static unsigned char rfcomm_crc_table\[256\] ='
983     initnc 'static unsigned char rwa_unlock\[\] __initdata ='
984     initnc 'static unsigned char seqprog\[\] ='
985     initnc 'static unsigned char snd_opl4_volume_table\[128\] ='
986     initnc 'static unsigned char splash_bits\[\] ='
987     initnc 'static unsigned char sunkbd_keycode\[128\] ='
988     initnc 'static unsigned char ufs_fragtable_8fpb\[\] ='
989     initnc 'static unsigned char ufs_fragtable_other\[\] ='
990     initnc 'static unsigned char ulaw_dsp\[\] ='
991     initnc 'static unsigned char usb_kbd_keycode\[256\] ='
992     initnc 'static unsigned char vga_font\[cmapsz\] \(BTDATA \|\)='
993     initnc 'static unsigned char voltab[12]\[128\] ='
994     initnc 'static unsigned char vpd89_data\[\] ='
995     initnc 'static unsigned char xtkbd_keycode\[256\] ='
996     initnc 'static unsigned int ac3_bitrates\[32\] ='
997     initnc 'static unsigned int bass_volume_table\[\] ='
998     initnc 'static unsigned int bitrates\[3\]\[16\] ='
999     initnc 'static unsigned int isa_dma_port\[8\]\[7\] ='
1000     initnc 'static unsigned int master_volume_table\[\] ='
1001     initnc 'static unsigned int mixer_volume_table\[\] ='
1002     initnc 'static unsigned int pan_table\[63\] ='
1003     initnc 'static unsigned int snapper_bass_volume_table\[\] ='
1004     initnc 'static unsigned int snapper_treble_volume_table\[\] ='
1005     initnc 'static unsigned int treble_volume_table\[\] ='
1006     initnc 'static unsigned int valid_mem\[\] ='
1007     initnc 'static unsigned long arthur_to_linux_signals\[32\] ='
1008     initnc 'static unsigned long shmedia_opcode_table\[64\] ='
1009     initnc 'static unsigned nv\([34]\|10\)TableP\(FIFO\|GRAPH\|RAMIN\)\[\]\[2\] ='
1010     initnc 'static unsigned short fcstab\[256\] ='
1011     initnc 'static unsigned short init[1234]\[128\] \/\*__devinitdata\*\/ ='
1012     initnc 'static unsigned short log_table\[LOG_TABLE_SIZE\*2\] ='
1013     initnc 'static unsigned short rc_ioport\[\] ='
1014     initnc 'static unsigned short translations\[\]\[256\] ='
1015     initnc 'static unsigned short treble_parm\[12\]\[9\] ='
1016     initnc 'struct RGBColors TextCLUT\[256\] ='
1017     initnc 'struct VgaRegs GenVgaTextRegs\[NREGS+1\] ='
1018     initnc 'struct battery_thresh  spitz_battery_levels_noac\[\] ='
1019     initnc 'struct battery_thresh spitz_battery_levels_acin\[\] ='
1020     initnc 'struct fb_bitfield rgb_bitfields\[\]\[4\] ='
1021     initnc 'struct mode_registers std_modes\[\] ='
1022     initnc 'struct vmode_attr vmode_attrs\[VMODE_MAX\] ='
1023     initnc 'u16 const crc16_table\[256\] ='
1024     initnc 'u16 const crc_ccitt_table\[256\] ='
1025     initnc 'u16 hfsplus_compose_table\[\] ='
1026     initnc 'u16 hfsplus_decompose_table\[\] ='
1027     initnc 'u_char const data_sizes_16\[32\] ='
1028     initnc 'u_short alt_map\[NR_KEYS\] ='
1029     initnc 'u_short altgr_map\[NR_KEYS\] ='
1030     initnc 'u_short ctrl_alt_map\[NR_KEYS\] ='
1031     initnc 'u_short ctrl_map\[NR_KEYS\] *='
1032     initnc 'u_short plain_map\[NR_KEYS\] *='
1033     initnc 'u_short shift_ctrl_map\[NR_KEYS\] ='
1034     initnc 'u_short shift_map\[NR_KEYS\] *='
1035     initnc 'uint patch_2[0f]00\[\] ='
1036     initnc 'uint16_t e1000_igp_cable_length_table\[IGP01E1000_AGC_LENGTH_TABLE_SIZE\] ='
1037     initnc 'uint16_t e1000_igp_2_cable_length_table\[IGP02E1000_AGC_LENGTH_TABLE_SIZE\] ='
1038     initnc '} euc2sjisibm_jisx0212_map\[\] ='
1039     initnc '} freq\[\] ='
1040     initnc '} hps_h_coeff_tab \[\] ='
1041     initnc '} hps_v_coeff_tab \[\] ='
1042     initnc '} init_tab\[\] ='
1043     initnc '} maven_gamma\[\] ='
1044     initnc '} mem_table\[\] ='
1045     initnc '} mxb_saa7740_init\[\] ='
1046     initnc '} pll_table\[\] ='
1047     initnc '} qam256_snr_tab\[\] ='
1048     initnc '} qam64_snr_tab\[\] ='
1049     initnc '} sil_port\[\] ='
1050     initnc '} vsb_snr_tab\[\] ='
1051     initnc '} yss225_registers\[\] __devinitdata ='
1052     ;;
1053   */patch*2.6.25-rc*)
1054     initnc ';[/][*]@@ -[0-9]*,[0-9]* +[0-9]*,[0-9]* @@ static uchar sbox\[8\]\[4\]\[16\] = {[*][/];'
1055     accept '    \$3 = {{pge = {{ste = {\(\([0-9][0-9a-fx{},\n   ]*\|\(pge\|ste\) =\|<repeats [0-9]\+ times>\)[{},\n     ]*\)*<repeats 11 times>}'"$eol"
1056     initnc 'static yyconst flex_int\(16\|32\)_t yy_[^[]*\[[0-9]*\] ='
1057     initnc 'static const yytype_u\?int\(8\|16\) yy[^[]*\[\] ='
1058     initnc '    int bcomm_irq\[3\*16\] ='
1059     initnc '    static const int8 countLeadingZerosHigh\[\] ='
1060     initnc 'static unsigned long shmedia_opcode_table\[64\] ='
1061     initnc 'u_char const data_sizes_16\[32\] ='
1062     initnc 'static u_char const data_sizes_32\[32\] ='
1063     initnc '            \.\(digest\|entries\|input\|key\|output\|plaintext\|result\)[   ]*= {'
1064     initnc 'static struct [^\n]*_testvec [^\n]*_tv_template\[\] ='
1065     initnc 'static struct nic_qp_map nic_qp_mapping_[01]\[\] ='
1066     initnc 'static u8 mt2266_init2\[\] ='
1067     initnc 'static struct regval ov_initvals\[\] ='
1068     initnc 'static struct regval stk1125_initvals\[\] ='
1069     initnc 'static u8 bnx2x_stats_len_arr\[BNX2X_NUM_STATS\] ='
1070     initnc 'static const struct arb_line read_arb_data\[NUM_RD_Q\]\[MAX_RD_ORD + 1\] ='
1071     initnc 'static const struct arb_line write_arb_data\[NUM_WR_Q\]\[MAX_WR_ORD + 1\] ='
1072     initnc 'uint16_t e1000_igp_cable_length_table\[IGP01E1000_AGC_LENGTH_TABLE_SIZE\] ='
1073     initnc 'uint16_t e1000_igp_2_cable_length_table\[IGP02E1000_AGC_LENGTH_TABLE_SIZE\] ='
1074     oprepline '#define AR5K_RATES_11A '
1075     oprepline '#define AR5K_RATES_11B '
1076     oprepline '#define AR5K_RATES_11G '
1077     oprepline '#define AR5K_RATES_TURBO '
1078     oprepline '#define AR5K_RATES_XR '
1079     initnc '            } blinkrates\[\] ='
1080     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
1081     initnc 'static const struct ath5k_ini_mode rf5413_ini_mode_end\[\] ='
1082     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
1083     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
1084     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
1085     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
1086     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
1087     initnc 'static const u8 rtl8225_agc\[\] ='
1088     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
1089     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
1090     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
1091     accept '     \( 49,\)*[\n]\([ 0-9,]*[\n]\)*     \( 49,\)*'"$eol"
1092     initnc 'static const unsigned char wm_vol\[256\] ='
1093     accept 'domain<N> <cpumask> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36'"$eol"
1094     # drivers/net/e1000e/phy.c
1095     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
1096     accept '    24 => \[[\n]\([^\n]*[\n]\)*     \]\(, [0-9]\+ => \[\)\?'"$eol"
1097     accept '            '"'"'0x[^\n]*[\n]\([^\n]*[\n]\)*        \]\(, [0-9]\+ => \[\)\?'"$eol"
1098     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
1099     ;;
1100   */nouveau-drm*.patch)
1101     initnc '\(static uint32_t\|}\) nv04_graph_ctx_regs \[\] ='
1102     initnc 'static int nv10_graph_ctx_regs \[\] ='
1103
1104     # Although the developers of the drivers are not trying to stop
1105     # anyone from modifying it or understanding it, they acknowledge
1106     # these are bits of code, obtained through mmio interactions.
1107     # This means these blobs are not source code, AND original authors
1108     # of the blobs have power to stop others from modifying them.
1109     # Non-Free software, for sure.
1110
1111     # initnc 'static uint32_t nv\(4[013467ace]\|49_4b\|8[46]\)_ctx_\(voodoo\|prog\)\[\] ='
1112     ;;
1113   */linux-2.6-lirc.patch)
1114     initnc 'const unsigned char map_table\[\] ='
1115     ;;
1116   */linux-2.6-modsign-mpilib.patch)
1117     initnc 'const unsigned char __clz_tab\[\] ='
1118     ;;
1119   */linux-2.6-wireless*.patch)
1120     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
1121     initnc 'static const s8 \(b43\(legacy\)\?\|bcm43xx\)_tssi2dbm_[bg]_table\[\] ='
1122     initnc 'static struct iwl\(3945\)\?_tx_power power_gain_table\[2\]\[IWL_MAX_GAIN_ENTRIES\] ='
1123     initnc 'static const struct gain_entry gain_table\[2\]\[108\] ='
1124     initnc 'static const struct rf_channel rf_vals_5222\[\] ='
1125     initnc 'static const struct rf_channel rf_vals_5225_2527\[\] ='
1126     initnc 'static const struct rf_channel rf_vals_5226\[\] ='
1127     initnc 'static const struct rf_channel rf_vals_bg\[\] ='
1128     initnc 'static const struct rf_channel rf_vals_bg_2522\[\] ='
1129     initnc 'static const struct rf_channel rf_vals_bg_2523\[\] ='
1130     initnc 'static const struct rf_channel rf_vals_bg_2524\[\] ='
1131     initnc 'static const struct rf_channel rf_vals_bg_2525\[\] ='
1132     initnc 'static const struct rf_channel rf_vals_bg_2525e\[\] ='
1133     initnc 'static const struct rf_channel rf_vals_bg_2528\[\] ='
1134     initnc 'static const struct rf_channel rf_vals_noseq\[\] ='
1135     initnc 'static const struct rf_channel rf_vals_seq\[\] ='
1136     initnc '    static const u8 t\[\] ='
1137     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
1138     initnc 'static const u8 rtl8225_agc\[\] ='
1139     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
1140     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
1141     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
1142     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
1143     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
1144     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
1145     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
1146     oprepline '#define AR5K_RATES_11A '
1147     oprepline '#define AR5K_RATES_11B '
1148     oprepline '#define AR5K_RATES_11G '
1149     oprepline '#define AR5K_RATES_TURBO '
1150     oprepline '#define AR5K_RATES_XR '
1151     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
1152     initnc 'static const struct ath5k_ini_mode rf\(5413\|24\(13\|25\)\)_ini_mode_end\[\] ='
1153     initnc '            } blinkrates\[\] ='
1154
1155     # git logs
1156     accept '   sudo modprobe ath5k debug=0x00000400[\n][        ]*[\n]\([       ]*Band[^\n]*[\n]\([     ]*\(\(channels\|rates\):\|[-    0-9a-f]*\|\[\.\.\. etc \]\)[\n]\)\+\)\+       540 000c 0000 0000'
1157     oprepline ' { 1, MODULATION_XR, 3000, 1, 150, 3 },'
1158     ;;
1159   */linux-2.6-drm-i915-modeset.patch)
1160     initnc 'static const u32 filter_table\[\] ='
1161     ;;
1162   */linux-2.6-netdev-e1000e*.patch)
1163     # drivers/net/e1000e/phy.c
1164     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
1165     ;;
1166   esac
1167 }  
1168
1169 # Regular expression that matches a literal constant.
1170 constx="[0-9][0-9a-fA-FxX]*"
1171 # Regular expression that matches a separator between consecutive
1172 # literal constants.
1173 sepx="\\([,:{}  \\nLlUu\"\'\\\\]\\+[xX\$]\\?\\|[        \\n]*[.][a-zA-Z][a-zA-Z0-9]*[   ]\\+[\$]\\?\\)"
1174
1175 # Regular expression that matches a continuation of a blob, after an
1176 # initial constant.  *, \+ and \? can be safely appended to it without
1177 # \(\)s.
1178 blobcont="\\($sepx$constx\\)"
1179
1180 # Regular expression that matches the initial constant of a blob plus
1181 # its continuation.  *, \+ and \? can be safely appended to it without
1182 # \(\)s.
1183 blobpat="$constx$blobcont"
1184
1185 # Regular expression that matches a blob with the exact number of
1186 # constants specified as sensitivity.
1187 blobseq="$blobpat\\{$sens\\}"
1188
1189 # Regular expression that matches a blob with the exact specified
1190 # length, or longer.
1191 blobfseq="$blobseq$blobcont*"
1192
1193 # Regular expression that matches the beginning of the pattern or a
1194 # line break.  It must be \(\)ed, such that it can be named in
1195 # replacement patterns without being named.
1196 bol="\\(^\\|[\\n]\\)"
1197
1198 # Regular expression that matches the end of the pattern or a line
1199 # break.  It must be \(\)ed, such that it can be named in replacement
1200 # patterns without being named.
1201 eol="\\([\\n]\\|\$\\)"
1202
1203 # Regular expression that matches a C-style comment.
1204 comment="\\([/][*]\\([^*]*\\|[*]\\+[^/*]\\)*[*]\\+[/]\\|[/][/][^\\n]*[\\n]\\)"
1205
1206 # Regular expression that matches comments typically used in assembly.
1207 asmcomment="\\($comment\\|[;#][^\\n]*[\\n]\\)"
1208
1209 # Regular expression that matches a braced initializer containing at
1210 # least one blob.
1211 initblob="[^\\n]*=\\([  \\n\\\\]*\\|$comment\\)*{\\([^;]*\\|$comment\\)*$blobseq\\([^;]*\\|$comment\\)*}\\?\\([         \\n\\\\]*\\|$comment\\);\\?"
1212
1213 # Regular expression that matches a C (possibly multi-line) #define
1214 # that contains a blob.
1215 defineblob='[   ]*#[    ]*define[       ]\+\([^\n]*\\[\n]\)*[^\n]*'"$blobseq"'\([^\n]*\\[\n]\)*'
1216
1217 # Regular expression that matches an assembly label followed by a blob
1218 # without any intervening label.
1219 asmblob="[a-zA-Z_.][^\\n:;#/    ]*[ ]*:\\([^:]*\\|$asmcomment\\)*$blobseq\\([^:]*\\|$asmcomment\\)*"
1220
1221 # Regular expression that matches one or more blobs without
1222 # intervening line breaks.
1223 sblobctx="\\([^\\n]*$blobfseq\\)\\+"
1224
1225 # Regular expression that matches the context for a long blob match.
1226 lblobctx="\\($initblob\\|$defineblob\\|$asmblob\\|$sblobctx\\)"
1227
1228 # Set up the sed script that will go through the (processed) input,
1229 # looking for sequences of blobs and printing whatever was requested.
1230 # It accepts 3 arguments.
1231
1232 # $1 is the action in case blobs were found in the input.
1233
1234 # $2 is the action in case no blobs were found, not even false positives.
1235
1236 # $3 is the action in case false positives were located.
1237
1238 # $4 is the action for every complete input pattern.
1239
1240 set_sedmain () {
1241   falsepos=`sed 's,^\\\|,,;s,^,\\\\(,;s,$,\\\\),' < "$falsepos_name"`
1242
1243   if test -s "$falsepos_name"; then
1244     check_false_positives="$v:???falsepos
1245 /$bol$falsepos/!b blob;
1246 $v:+++falsepos
1247 h;
1248 s/$bol$falsepos/\\1;\/**\/;/g;
1249 # See if, after removing all matches, we end up without any blobs.
1250 $v:???blobseq
1251 /$blobseq/!{
1252   g;
1253   b falsepos;
1254 }
1255 g;
1256 "
1257   else
1258     falsepos="$^"
1259     check_false_positives=
1260   fi
1261
1262   sedmain="
1263 /^;[/][*]\\(end .*\\)\\?[*][/];$/{
1264   $4;
1265   d;
1266 }
1267 /^;[/][*]begin /!{
1268   : internal_error
1269   i\\
1270 Internal error at
1271   p;
1272   q 2;
1273 }
1274 $v:reading file in
1275 h;
1276 n;
1277 : read_more
1278 /^;[/][*]end [^\\n]*[*][/];$/! {
1279   H;
1280   n;
1281   b read_more;
1282 }
1283 H;
1284 g;
1285 $4
1286 s/^\(;[/][*]begin [^\n]*[\n]\)*//;
1287 s/\\($bol;[/][*]\\(end [^\n]*\\)\\?[*][/];\\)*$//;
1288 $v:???!blobseq
1289 /$blobseq/!b clean;
1290 $check_false_positives
1291 # Fall through.
1292 : blob
1293 $v:blob
1294 $1
1295 d;
1296 : clean
1297 $2
1298 d;
1299 : falsepos
1300 $v:falsepos
1301 $3
1302 d;
1303
1304 : print_matches
1305 $v:print_matches
1306 /^$falsepos/! {
1307   $v:delete unmatching lines
1308   h;
1309   s/[\\n]$falsepos.*//;
1310   : print_matches_nomatch_loop
1311   /[\\n]/ {
1312     s/^[^\\n]*[\\n]//;
1313     x;
1314     s/^[^\\n]*[\\n]//;
1315     x;
1316     b print_matches_nomatch_loop;
1317   }
1318   x;
1319   b print_matches_delete_to_eol;
1320 }
1321 h;
1322 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1323 $v:narrowed to match
1324 /$blobfseq/ {
1325   i\\
1326 ::: $file :::
1327   p;
1328 }
1329 g;
1330 s/^\\($falsepos[^\\n]*\\)//;
1331 : print_matches_delete_to_eol
1332 $v:delete to eol
1333 s/^[^\\n]*//;
1334 /^$/d;
1335 s/^[\\n]//;
1336 b print_matches;
1337
1338 : print_marked_matches
1339 $v:print_marked_matches
1340 /^$falsepos/! {
1341   h;
1342   s/[\\n]$falsepos.*//;
1343   : print_marked_matches_nomatch_loop
1344   /[\\n]/ {
1345     s/^[^\\n]*[\\n]//;
1346     x;
1347     s/^[^\\n]*[\\n]//;
1348     x;
1349     b print_marked_matches_nomatch_loop;
1350   }
1351   x;
1352   b print_marked_matches_delete_to_eol;
1353 }
1354 h;
1355 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1356 $v:narrowed to match
1357 /$blobfseq/{
1358   i\\
1359 ::: $file :::
1360   s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[    ]*;/{\/*(DEBLOBBED)*\/};/g;
1361   s/$blobfseq/\/*(DEBLOBBED)*\//g;
1362   p;
1363 }
1364 g;
1365 s/^\\($falsepos[^\\n]*\\)//;
1366 : print_marked_matches_delete_to_eol
1367 $v:delete to eol
1368 s/^[^\\n]*//;
1369 /^$/d;
1370 s/^[\\n]//;
1371 b print_marked_matches;
1372
1373 : print_blobs
1374 $v:print_blobs
1375 /^$falsepos/ {
1376   $v:delete false positive
1377   # This is tricky.  We don't want to print the false positive.
1378   /^$falsepos[^\\n]*$blobseq/ {
1379     $v:delete false positive immediately followed by blob
1380     h;
1381     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1382     : print_blobs_match_loop
1383     /[\\n]/ {
1384       s/^[^\\n]*[\\n]//;
1385       x;
1386       s/^[^\\n]*[\\n]//;
1387       x;
1388       b print_blobs_match_loop;
1389     }
1390     G;
1391     b print_blobs_delete_to_eol;
1392   }
1393   s/^$falsepos//;
1394   b print_blobs_delete_to_eol;
1395 }
1396 /^[^\\n]*$blobseq/! {
1397   $v:delete non-blob header
1398   h;
1399   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1400   : print_blobs_nomatch_loop
1401   /[\\n]/ {
1402     s/^[^\\n]*[\\n]//;
1403     x;
1404     s/^[^\\n]*[\\n]//;
1405     x;
1406     b print_blobs_nomatch_loop;
1407   }
1408   x;
1409   b print_blobs_delete_to_eol;
1410 }
1411 h;
1412 i\\
1413 ::: $file :::
1414 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1415 $v:narrowed to blob
1416 p;
1417 g;
1418 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1419 : print_blobs_delete_to_eol
1420 $v:delete to eol
1421 s/^[^\\n]*//;
1422 /^$/d;
1423 s/^[\\n]//;
1424 b print_blobs;
1425
1426 : print_marked_blobs
1427 $v:print_marked_blobs
1428 /^$falsepos/ {
1429   $v:delete false positive
1430   # This is tricky.  We don't want to print the false positive.
1431   /^$falsepos[^\\n]*$blobseq/ {
1432     $v:delete false positive immediately followed by blob
1433     h;
1434     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1435     : print_marked_blobs_match_loop
1436     /[\\n]/ {
1437       s/^[^\\n]*[\\n]//;
1438       x;
1439       s/^[^\\n]*[\\n]//;
1440       x;
1441       b print_marked_blobs_match_loop;
1442     }
1443     G;
1444     b print_marked_blobs_delete_to_eol;
1445   }
1446   s/^falsepos//;
1447   b print_marked_blobs_delete_to_eol;
1448 }
1449 /^[^\\n]*$blobseq/! {
1450   $v:delete non-blob header
1451   h;
1452   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1453   : print_marked_blobs_nomatch_loop
1454   /[\\n]/ {
1455     s/^[^\\n]*[\\n]//;
1456     x;
1457     s/^[^\\n]*[\\n]//;
1458     x;
1459     b print_marked_blobs_nomatch_loop;
1460   }
1461   x;
1462   b print_marked_blobs_delete_to_eol;
1463 }
1464 h;
1465 i\\
1466 ::: $file :::
1467 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1468 $v:narrowed to blob
1469 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1470 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1471 p;
1472 g;
1473 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1474 : print_marked_blobs_delete_to_eol
1475 $v:delete to eol
1476 s/^[^\\n]*//;
1477 /^$/d;
1478 s/^[\\n]//;
1479 b print_marked_blobs;
1480
1481 : print_cblobs
1482 $v:print_cblobs
1483 /^$falsepos/ {
1484   $v:delete false positive
1485   # This is tricky.  We don't want to print the false positive.
1486   /^$falsepos[^\\n]*$blobseq/ {
1487     $v:delete false positive immediately followed by blob
1488     h;
1489     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1490     : print_cblobs_match_loop
1491     /[\\n]/ {
1492       s/^[^\\n]*[\\n]//;
1493       x;
1494       s/^[^\\n]*[\\n]//;
1495       x;
1496       b print_cblobs_match_loop;
1497     }
1498     G;
1499     b print_cblobs_delete_to_eol;
1500   }
1501   s/^$falsepos//;
1502   b print_cblobs_delete_to_eol;
1503 }
1504 /^$lblobctx/! {
1505   $v:delete non-blob header
1506   h;
1507   s/[\\n]\\($falsepos\\|$lblobctx\\).*//;
1508   : print_cblobs_nomatch_loop
1509   /[\\n]/ {
1510     s/^[^\\n]*[\\n]//;
1511     x;
1512     s/^[^\\n]*[\\n]//;
1513     x;
1514     b print_cblobs_nomatch_loop;
1515   }
1516   x;
1517   b print_cblobs_delete_to_eol;
1518 }
1519 h;
1520 i\\
1521 ::: $file :::
1522 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1523 $v:narrowed to blob
1524 p;
1525 g;
1526 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)//;
1527 : print_cblobs_delete_to_eol
1528 $v:delete to eol
1529 s/^[^\\n]*//;
1530 /^$/d;
1531 s/^[\\n]//;
1532 b print_cblobs;
1533
1534 : print_marked_cblobs
1535 $v:print_marked_cblobs
1536 /^$falsepos/ {
1537   $v:delete false positive
1538   # This is tricky.  We don't want to print the false positive.
1539   /^$falsepos[^\\n]*$blobseq/ {
1540     $v:delete false positive immediately followed by blob
1541     h;
1542     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1543     : print_marked_cblobs_match_loop
1544     /[\\n]/ {
1545       s/^[^\\n]*[\\n]//;
1546       x;
1547       s/^[^\\n]*[\\n]//;
1548       x;
1549       b print_marked_cblobs_match_loop;
1550     }
1551     G;
1552     b print_marked_cblobs_delete_to_eol;
1553   }
1554   s/^$falsepos//;
1555   b print_marked_cblobs_delete_to_eol;
1556 }
1557 /^$lblobctx/! {
1558   $v:delete non-blob header
1559   h;
1560   s/[\\n]\\($falsepos\\|$lblobctx\\).*//;
1561   : print_marked_cblobs_nomatch_loop
1562   /[\\n]/ {
1563     s/^[^\\n]*[\\n]//;
1564     x;
1565     s/^[^\\n]*[\\n]//;
1566     x;
1567     b print_marked_cblobs_nomatch_loop;
1568   }
1569   x;
1570   b print_marked_cblobs_delete_to_eol;
1571 }
1572 h;
1573 i\\
1574 ::: $file :::
1575 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1576 $v:narrowed to blob
1577 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1578 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1579 p;
1580 g;
1581 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)//;
1582 : print_marked_cblobs_delete_to_eol
1583 $v:delete to eol
1584 s/^[^\\n]*//;
1585 /^$/d;
1586 s/^[\\n]//;
1587 b print_marked_cblobs;
1588
1589 : print_both
1590 $v:print_both
1591 /^\\($falsepos\\|[^\\n]*$blobseq\\)/! {
1592   $v:delete non-blob header
1593   h;
1594   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1595   : print_both_nomatch_loop
1596   /[\\n]/ {
1597     s/^[^\\n]*[\\n]//;
1598     x;
1599     s/^[^\\n]*[\\n]//;
1600     x;
1601     b print_both_nomatch_loop;
1602   }
1603   x;
1604   b print_both_delete_to_eol;
1605 }
1606 h;
1607 i\\
1608 ::: $file :::
1609 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1610 $v:narrowed to blob
1611 p;
1612 g;
1613 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)//;
1614 : print_both_delete_to_eol
1615 $v:delete to eol
1616 s/^[^\\n]*//;
1617 /^$/d;
1618 s/^[\\n]//;
1619 b print_both;
1620
1621 : list_matches
1622 $v:list_matches
1623 /^$falsepos/! {
1624   $v:print unmatching lines
1625   h;
1626   s/[\\n]$falsepos.*//;
1627   p;
1628   : list_matches_nomatch_loop
1629   /[\\n]/ {
1630     s/^[^\\n]*[\\n]//;
1631     x;
1632     s/^[^\\n]*[\\n]//;
1633     x;
1634     b list_matches_nomatch_loop;
1635   }
1636   x;
1637   b list_matches_delete_to_eol;
1638 }
1639 h;
1640 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1641 $v:narrowed to match
1642 /$blobfseq/{
1643   s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[    ]*;/{\/*(DEBLOBBED)*\/};/g;
1644   s/$blobfseq/\/*(DEBLOBBED)*\//g;
1645 }
1646 p;
1647 g;
1648 s/^\\($falsepos[^\\n]*\\)//;
1649 : list_matches_delete_to_eol
1650 $v:delete to eol
1651 s/^[^\\n]*//;
1652 /^$/d;
1653 s/^[\\n]//;
1654 b list_matches;
1655
1656 : list_blobs
1657 $v:list_blobs
1658 /^$falsepos/ {
1659   $v:print false positive
1660   # This is tricky.  We don't want to deblob the false positive.
1661   /^$falsepos[^\\n]*$blobseq/ {
1662     $v:print false positive immediately followed by blob
1663     h;
1664     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1665     : list_blobs_match_loop
1666     /[\\n]/ {
1667       P;
1668       s/^[^\\n]*[\\n]//;
1669       x;
1670       s/^[^\\n]*[\\n]//;
1671       x;
1672       b list_blobs_match_loop;
1673     }
1674     G;
1675     b list_blobs_delete_to_eol;
1676   }
1677   h;
1678   s/^\\($falsepos[^\\n]*\\)[\\n].*/\\1/;
1679   p;
1680   g;
1681   s/^\\($falsepos[^\\n]*\\)//;
1682   b list_blobs_delete_to_eol;
1683 }
1684 /^[^\\n]*$blobseq/! {
1685   $v:print non-blob header
1686   h;
1687   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1688   p;
1689   : list_blobs_nomatch_loop
1690   /[\\n]/ {
1691     s/^[^\\n]*[\\n]//;
1692     x;
1693     s/^[^\\n]*[\\n]//;
1694     x;
1695     b list_blobs_nomatch_loop;
1696   }
1697   x;
1698   b list_blobs_delete_to_eol;
1699 }
1700 h;
1701 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1702 $v:narrowed to blob
1703 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1704 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1705 p;
1706 g;
1707 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1708 : list_blobs_delete_to_eol
1709 $v:delete to eol
1710 s/^[^\\n]*//;
1711 /^$/d;
1712 s/^[\\n]//;
1713 b list_blobs;
1714
1715 : list_both
1716 $v:list_both
1717 /^\\($falsepos\\|[^\\n]*$blobseq\\)/! {
1718   $v:print non-blob header
1719   h;
1720   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1721   p;
1722   : list_both_nomatch_loop
1723   /[\\n]/ {
1724     s/^[^\\n]*[\\n]//;
1725     x;
1726     s/^[^\\n]*[\\n]//;
1727     x;
1728     b list_both_nomatch_loop;
1729   }
1730   x;
1731   b list_both_delete_to_eol;
1732 }
1733 h;
1734 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1735 $v:narrowed to blob
1736 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1737 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1738 p;
1739 g;
1740 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)//;
1741 : list_both_delete_to_eol
1742 $v:delete to eol
1743 s/^[^\\n]*//;
1744 /^$/d;
1745 s/^[\\n]//;
1746 b list_both;
1747
1748 "
1749 }
1750
1751 # Process an input file named in $1 and run it through the blob
1752 # recognizer.  Functions set_except and set_sed_cmd provide additional
1753 # arguments on a per-file and per-action basis.
1754
1755 check () {
1756   case "$#" in 1) ;; *) echo ICE >&2; exit 1;; esac
1757
1758   input=$1
1759
1760   falsepos_name=`mktemp -t deblob-check-falsepos-XXXXXX`
1761   tempfiles="$falsepos_name"
1762
1763   # Add $1 to falsepos.  Its usage makes it implicitly anchored to
1764   # the beginning of the line.
1765   addx () {
1766     if test -n "$1"; then
1767       echo -n "\\|$1" >> $falsepos_name
1768     fi
1769   }
1770
1771   set_except "$input"
1772
1773   set_sed_cmd "$input"
1774
1775   rm -f "$falsepos_name"
1776   tempfiles=
1777
1778   # Choose the input source...
1779   case $input in
1780   -) in= ;;
1781   *) in='< "$input"' ;;
1782   esac
1783
1784   set fnord # shifted out below
1785
1786   # Decompress as needed...
1787   case $input in
1788   *.bz2) cmd='bunzip2' ;;
1789   *.gz) cmd='gunzip' ;;
1790   *) cmd= ;;
1791   esac
1792   if test -n "$cmd"; then
1793     set "$@" "$cmd"
1794   fi
1795
1796   # Extract or otherwise munge...
1797   case $input in
1798   *.tar*)
1799     cmd="tar -xf - --to-command='echo \";/*begin \$TAR_FILENAME*/;\"; cat; echo \";/**/;\"; echo \";/*end \$TAR_FILENAME*/;\"'"
1800     ;;
1801   *patch* | *diff*)
1802     sedpatch='
1803       /^[-]/d;
1804       /^\(@@\|+++\) / {
1805         i\
1806 ;/**/;\
1807 ;/*end patchlet */;\
1808 ;/*begin patchlet */;
1809         s/^/;\/*/;
1810         s/$/*\/;/;
1811       };
1812       s/^[ +]//;'
1813     cmd='sed "$sedpatch"'
1814     ;;
1815   *)
1816     cmd='cat'
1817     ;;
1818   esac
1819   cmd="{ echo \";/*begin $input*/;\"; $cmd; echo \";/*end $input*/;\"; }"
1820   set "$@" "$cmd"
1821
1822   case $input in
1823   *.tar*)
1824     cmd="{ cat; cat > /dev/null; }"
1825     set "$@" "$cmd"
1826     ;;
1827   esac
1828
1829   # Then run through the selected action.
1830   if test "$rm" != "rm -f" || test ! `echo "$sedmain" | wc -c` -lt 1024; then
1831     scriptname=`mktemp -t deblob-check-sedmain-XXXXXX`
1832     tempfiles="$tempfiles $scriptname"
1833     echo "$sedmain" > $scriptname
1834     cmd="sed -n -f \"$scriptname\""
1835   else
1836     cmd='sed -n "$sedmain"'
1837   fi
1838   set "$@" "$cmd"
1839
1840   test $# != 1 || set "$@" "cat"
1841
1842   shift # fnord goes out here
1843
1844   pipe=
1845   for cmd
1846   do
1847     if test -z "$pipe"; then
1848       pipe="$cmd $in"
1849     else
1850       pipe="$pipe | $cmd"
1851     fi
1852   done
1853
1854   eval "$pipe"
1855   status=$?
1856
1857   $rm $tempfiles
1858   tempfiles=
1859
1860   (exit $status)
1861 }
1862
1863 # If no input given, use stdin.
1864 case $# in
1865 0)
1866   test -t 0 && echo reading from standard input >&2
1867   set fnord -
1868   shift
1869   ;;
1870 esac
1871
1872 # The lines below commented out out #list: can be used to get a list
1873 # of matching inputs.  ATM this is useless, so we just use a shell
1874 # boolean.
1875
1876 #list: n=$#
1877 pass=:
1878
1879 tempfiles=
1880 trap "status=$?; test -z \"$tempfiles\" || rm -f $tempfiles; (exit $status); exit" 0 1 2 15
1881
1882 # Go through each of the input files in the command line.
1883 for file
1884 do
1885   # If we print anything whatsoever (even a blank line) while
1886   # processing it, we've failed.
1887   if check "$file"; then
1888     :
1889   else
1890     pass=false
1891     #list: set fnord "$@" "$file"
1892     #list: shift
1893   fi
1894 done
1895
1896 #list: shift $n
1897
1898 #list: exec test $# = 0
1899 $pass
1900 exit