Make yy matching rules even more lax. A few additional sound and thread matches...
[releases.git] / deblob-check
1 #! /bin/sh
2
3 # deblob-check version 2008-03-29 $Rev$
4 # Inspired in gNewSense's find-firmware script.
5 # Written by Alexandre Oliva <lxoliva@fsfla.org>
6
7 # Check http://www.fsfla.org/svn/fsfla/software/linux-libre for newer
8 # versions.
9
10 # Copyright (C) 2008 Alexandre Oliva
11 #
12 # This program is free software; you can redistribute it and/or modify
13 # it under the terms of the GNU General Public License as published by
14 # the Free Software Foundation; either version 2 of the License, or
15 # (at your option) any later version.
16 #
17 # This program is distributed in the hope that it will be useful, but
18 # WITHOUT ANY WARRANTY; without even the implied warranty of
19 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
20 # General Public License for more details.
21 #
22 # You should have received a copy of the GNU General Public License
23 # along with this program; if not, write to the Free Software
24 # Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301
25 # USA
26
27
28 # usage: deblob-check [-S] [-vv] [-s S] [-lDdBbCcXxPpFftVh?H] \
29 #        [*.tar* patch-* *.patch]
30
31 # Look for too-long undocumented sequences of numbers (generally blobs
32 # in disguise) in source files.
33
34 # The order of command line flags is significant.  Flags given out of
35 # the order above won't be handled correctly, sorry.
36
37 # -s --sensitivity: must be followed by a blank and a number.
38 #               Specifies the number of consecutive integral or
39 #               character constants that trigger the blob detector.
40
41 # The default sensitivity is 32 constants.
42
43 # The sensitivity, if present, must be the first option.  The action
44 # selection, if present, must be the first argument, except for the
45 # sensitivity and verbosity.
46
47 # The default can be overridden with one of:
48
49 # -l --list-blobs: list files that contain sequences that match the
50 #               blob detector test and that are not known to be false
51 #               positives.  This is the default option.
52
53 # -d --deblob --mark-blobs: print the processed input, replacing
54 #               sequences that match the blob detector test and that
55 #               are NOT known to be false positives with
56 #               /*(DEBLOBBED)*/.
57
58 # -D --cat: print the processed input, as it would have been fed to
59 #               the blob detector script.  Use -S to save the sed
60 #               script used to process it, and search for `sedcat:' in
61 #               comments to locate the relevant adaptation points.
62
63 # -b --print-marked-blobs: like -d, but print only the matching
64 #               sequences.
65
66 # -B --print-blobs: like -b, but do not deblob the sequences.
67
68 # -c --print-marked-blobs-with-context: like -b, but try to maximize
69 #               the context around the blobs.  This maximization will
70 #               sometimes disregard known false positives, if they
71 #               happen to be contained within the extended match.
72 #               This is probably an indication that the false positive
73 #               matching rule could be improved.
74
75 # -C --print-blobs-with-context: like -B, but try to maximize the
76 #               context around the blobs.
77
78 # -X --print-all-matches: print all blobs, be they known false
79 #               positives or blobs.
80
81 # -x --list-all-matches: list files that contain sequences that appear
82 #               to be blobs, be they known false positives or not.
83
84 # -p --mark-false-positives: print the processed input, replacing
85 #               sequences that match the blob detector test, but that
86 #               are known to be false positives, with /*(DEBLOBBED)*/.
87
88 # -P --list-false-positives: list files that contain false positives.
89
90 # -f --print-marked-false-positives: like -p, but print only the
91 #               matching sequences.
92
93 # -F --print-false-positives: like -f, but do not deblob the sequences.
94
95 # -t --test: run (very minimal) self-test.
96
97 # -V --version: print a version number
98
99 # -h -? -H --help: print short or long help message
100
101
102 # debugging options:
103
104 # -S --save-scripts: save scripts and temporary files.
105
106 # -v --verbose: increase verbosity level, for internal debugging.  May
107 #               be given at most twice.
108
109 # The exit status is only significant for the --list options: it will
110 # be true if nothing was found, and false otherwise.
111
112 : # Mark the end of the help message.
113
114 # TODO:
115
116 # - Improve handling of command-line arguments, so as to not make the
117 # order relevant.
118
119 # - Add an option for the user to feed their own false positive
120 # patterns.
121
122 # - Add support to recognize known blobs (or other non-Free
123 # signatures, really), to speed up the scanning of files containing
124 # blobs, and to avoid attempts to disguise blobs.
125
126 # - Factor out the code in the various print_* and list_* parts of the
127 # sed script, at least in the shell sources.  Make sure they're all
128 # included and expanded in a saved --cat script though.
129
130 # - Add support for file name tagging in patterns, such that blobs or
131 # false positives are recognized only when handling the specific
132 # filename, be it stand-alone, as part of a patch or a tarball.  This
133 # should help avoid recognition of actual blobs as false positives
134 # just because there's a symbol with a different name elsewhere.
135
136 #   It is convenient that the patterns provided by the user to
137 # recognize file names can be empty (for backward compatibility), but
138 # this should ideally be phased out in favor of more precise matches.
139 # It's important that files can be recognized with leading tarball or
140 # patch names, that the filename used within the tarball contain
141 # leading garbage, and even that a partial pathname be recognizable
142 # (say recognize drivers/net/whatever.c when the input file is named
143 # ../net/whatever.c).
144
145 #   Rather than using regular expressions to recognize multiple files
146 # it's convenient (but not quite essential) that filename patterns be
147 # specifiable as regular expressions, rather than simple filenames,
148 # but there are other ways around this.
149
150 #   Maintaining begin/end markers in a stack-like fashion as part of
151 # the processed stream, and using the names in them as (optional) part
152 # of the recognition patterns, would enable us to do it.
153
154 #   Introducing annotations next to the false positives (and recognized
155 # blobs) as an early part of the process may speed things up and
156 # enable fast processing, but how to introduce the annotations quickly
157 # in the first place?  Given patterns such as
158
159 #   \(\(file1\)\(.*\)\(pat1\)\|\(file2\)\(.*\)\(pat2\)\|...\)
160
161 # how do we get sed to introduce a marker that contains file2 right
162 # before or right after pat2, without turning a big efficient regexp
163 # into a slowish sequence of s/// commands?
164
165 # - Re-check and narrow false-positive patterns to make sure they
166 # apply only to the relevant content.
167
168 # - Scripting abilities, so as to be able to automate the removal of
169 # source files or of blobs from source files in a tarball without
170 # having to extract the entire tarball (as in tar --update/--delete)
171 # would be nice.  Carrying over removed files automatically into
172 # patches would also be great, and this sort of script would be
173 # perfect to document what has been done to a tarball plus a set of
174 # patches.  Something like deblob.script:
175 #
176 #   tarball linux-2.6.24.tar.bz2
177 #   delete net/wireloss/freedom.c drivers/me/crazy.c
178 #   deblob include/linux/slab-blob-kfree.h
179 #   deconfig drivers/char/drm DRM_IS_BAD
180 #
181 #   patch patch-2.6.25-rc7.bz2
182 #   delete arch/power/over/you.c
183
184 # such that the deletes from an earlier file would carry over into the
185 # subsequent ones, and new tarballs and patch files would be generated
186 # with the libre- prefix in their basename, and the xdeltas between
187 # the original files and the modified files would be minimal, and
188 # redundant with this script and the input script while at that.
189
190 # - Improve documentation of the code.
191
192 # - Write a decent testsuite.
193
194 # - Insert your idea here. :-)
195
196 # Yeah, lots of stuff to do.  Want to help?
197
198 # This makes it much faster, and mostly immune to non-ASCII stuff, as
199 # long as a 8-bit-safe sed is used.  Probably a safe assumption these
200 # days.
201 case ${LANG+set} in set) LANG=C; export LANG;; esac
202
203 rm="rm -f"
204 case $1 in
205 --save-scripts | -S)
206   shift
207   rm="echo preserving"
208   ;;
209 esac
210
211 # Choose verbosity level for sed script debugging and performance
212 # analysis.
213 case $1 in
214 --verbose | -v)
215   shift
216   case $1 in
217   --verbose | -v)
218     shift
219     v="i\\
220 :
221 p;
222 i\\
223 "
224     ;;
225   *)
226     v="P;i\\
227 "
228     ;;
229   esac
230   ;;
231 *) 
232   v="# "
233   ;;
234 esac
235
236 sens=31 # 32 - 1
237 case $1 in
238 --sensitivity | -s)
239   sens=$2;
240   shift 2 || exit 1
241
242   if test "$sens" -gt 0 2>/dev/null; then
243     :
244   else
245     echo invalid sensitivity: $sens >&2
246     exit 1
247   fi
248
249   sens=`expr $sens - 1`
250   ;;
251 esac
252
253 test_mode=false
254
255 name=deblob-check
256
257 case $1 in
258 --version | -V)
259   sed '/^# '$name' version /,/^# Written by/ { s/^# //; p; }; d' < $0
260   exit 0
261   ;;
262
263 -\? | -h)
264   sed -n '/^# usage:/,/# -h/ { /^# -/,/^$/{s/^# \(-.*\):.*/\1/p; d; }; s/^\(# \?\)\?//p; }' < $0 &&
265   echo
266   echo "run \`$name --help | more' for full usage"
267   exit 0
268   ;;
269
270 --help | -H)
271   sed -n '/^# '$name' version /,/^[^#]/ s/^\(# \?\)\?//p' < $0
272   exit 0
273   ;;
274
275 --test | -t)
276   test_mode=:
277   ;;
278
279 --mark-false-positives | -p)
280   shift;
281   set_sed_cmd () {
282     set_sedmain "b list_both;" "p;" "b list_matches;"
283   }
284   ;;
285
286 --print-marked-false-positives | -f)
287   shift;
288   set_sed_cmd () {
289     set_sedmain "b print_marked_matches;" "" "b print_marked_matches;"
290   }
291   ;;
292
293 --print-false-positives | -F)
294   shift;
295   set_sed_cmd () {
296     set_sedmain "b print_matches;" "" "b print_matches;"
297   }
298   ;;
299
300 --deblob | --mark-blobs | -d)
301   shift;
302   set_sed_cmd () {
303     set_sedmain "b list_blobs;" "p;" "p;"
304   }
305   ;;
306
307 --cat | -D)
308   shift;
309   set_sed_cmd () {
310     set_sedmain \
311       "# sedcat: Actual blob detected, but there may be false positives." \
312       "# sedcat: No blob whatsoever found." \
313       "# sedcat: False positives found." \
314       "p; d; # sedcat: Just print stuff, remove this line to run the actual script."
315   }
316   ;;
317
318 --print-marked-blobs | -b)
319   shift;
320   set_sed_cmd () {
321     set_sedmain "b print_marked_blobs;"
322   }
323   ;;
324
325 --print-blobs | -B)
326   shift;
327   set_sed_cmd () {
328     set_sedmain "b print_blobs;"
329   }
330   ;;
331
332 --print-marked-blobs-with-context | -c)
333   shift;
334   set_sed_cmd () {
335     set_sedmain "b print_marked_cblobs;"
336   }
337   ;;
338
339 --print-blobs-with-context | -C)
340   shift;
341   set_sed_cmd () {
342     set_sedmain "b print_cblobs;"
343   }
344   ;;
345
346 --list-false-positives | -P)
347   shift;
348   set_sed_cmd () {
349     set_sedmain "" "" "
350 i\\
351 $file
352 q 1;"
353   }
354   ;;
355
356 --list-all-matches | -x)
357   shift;
358   set_sed_cmd () {
359     set_sedmain "
360 i\\
361 $file
362 q 1;" "" "
363 i\\
364 $file
365 q 1;"
366   }
367   ;;
368
369 --print-all-matches | -X)
370   shift;
371   set_sed_cmd () {
372     set_sedmain "b print_both;" "" "b print_matches;"
373   }
374   ;;
375
376 *)
377   case $1 in
378   -- | -l | --list-blobs) shift;;
379   esac
380   case $1 in
381   -*)
382     if test ! -f "$1"; then
383       echo "$name: \`$1' given too late or out of the proper sequence." >&2
384       echo "$name: The order of arguments is significant, see the usage." >&2
385       exit 1
386     fi
387     ;;
388   esac
389       
390   set_sed_cmd () {
391     set_sedmain "
392 i\\
393 $file
394 q 1;"
395   }
396   ;;
397
398 esac
399
400 case $1 in
401 --) shift;;
402 esac
403
404 if $test_mode; then
405   pass=:
406
407   # Exercise some nasty inputs to see that we recognize them as blobs
408   # with full context.
409   for string in \
410     "1,2,3,4" \
411     "= {
412 1, 0x2, 03, L'\x4'
413 }" \
414     "=
415 {
416   '\\x1', '\\002'
417   ,
418   {
419     { \"\\x3\", },
420     \"\\004\"
421   },
422 };" \
423     ".long 1,2
424      .long \$3,\$4" \
425     "#define X { 1, 2, \\
426                  3, 4, /* comment */ \\
427                }" \
428   "= {
429 /*
430  * multi-line
431  * comment
432  */
433  {
434    0x4c00c000, 0x00000000, 0x00060000, 0x00000000,
435  },
436 }" \
437   ; do
438     case `echo "$string" | $0 -s 4 -c` in
439     "::: - :::
440 $string") ;;
441     *) echo "failed positive test for:
442 $string" >&2
443        pass=false;;
444     esac
445   done
446
447   # Make sure we do not recognize these as blobs.
448   for string in \
449     "#define X { 1, 2 }
450 #define Y { 3, 4 }" \
451     " 0x00, 0x00, 0x00 " \
452   ; do
453     case `echo "$string" | $0 -s 4` in
454     "") ;;
455     *) echo "failed negative test for:
456 $string" >&2
457        pass=false;;
458     esac
459   done
460
461   # How did we do?
462   if $pass; then
463     echo success
464   fi
465
466   $pass
467   exit
468 fi
469
470 # Call addx as needed to set up more patterns to be recognized as
471 # false positives.  Takes the input filename in $1.
472
473 set_except () {
474   # Look for a multi-line definition starting with a line that matches
475   # $1 (implicitly anchored to the beginning of the line), and ending
476   # at the first ';'.
477   initnc () {
478     addx "$1[^;]*;"
479   }
480
481   # Look for a multi-line definition starting with a line that matches
482   # $1 (implicitly anchored to the beginning of the line), and ending
483   # at the first ';' that's not within comments.
484   initc () {
485     addx "$1\\([^;]*\\|$comment\\)*;"
486   }
487
488   # Accept as a non-blob an expression $1 that would have otherwise
489   # triggered blob detection.  The expression must end in a way that
490   # would trigger the blob detection machinery.
491   accept () {
492     addx "$1"
493   }
494
495   # Match up to the end a comment started in $1.
496   ocomment () {
497     addx "$1\\([^*]\\|[*][*]*[^*/]\\|[*]*[\\n]\\)*[*]*[*][/]"
498   }
499
500   # Match $1 followed by backslash-terminated lines and a last
501   # non-backslash-terminated line.
502   oprepline () {
503     addx "$1\\([^\\n]*\\\\[\\n]\\)*[^\\n\\\\]*$eol"
504   }
505
506   case /$1 in
507   */*linux*.tar* | */*kernel*.tar* | */*linux-*.*.*/*)
508     # false alarms, contain source
509     # drivers/net/wan/wanxlfw.inc_shipped -> wanxlfw.S
510     accept 'static u8 firmware\[\]={[\n]0x60,\(0x00,\)*0x16,\(0x00,\)*\([\n]\(0x[0-9A-F][0-9A-F],\)*\)*[\n]0x23,0xFC,0x00,0x00,0x00,0x01,0xFF,0xF9,0x00,0xD4,0x61,0x00,0x06,0x74,0x33,0xFC,\([\n]\(0x[0-9A-F][0-9A-F],\)*\)*0x00[\n]};'
511     # drivers/usb/serial/xircom_pgs_fw.h -> xircom_pgs.S
512     initnc 'static const struct ezusb_hex_record xircom_pgs_firmware\[\] ='
513     # drivers/usb/serial/keyspan_pda_fw_h -> keyspan_pda.S
514     initnc 'static const struct ezusb_hex_record keyspan_pda_firmware\[\] ='
515     # arch/m68k/ifpsp060/*.sa -> src/*.s
516     accept '    \.long  0x60ff0000,0x02360000,0x60ff0000,0x16260000[\n]'"$sepx$blobpat*"
517     accept '    \.long  0x60ff0000,0x17400000,0x60ff0000,0x15f40000[\n]'"$sepx$blobpat*"
518     # arch/powerpc/platforms/cell/spufs/spu_save_dump.h_shipped -> spu_save.c
519     initnc 'static unsigned int spu_save_code\[\]  __attribute__((__aligned__(128))) ='
520     # arch/powerpc/platforms/cell/spufs/spu_restore_dump.h_shipped -> spu_restore.c
521     initnc 'static unsigned int spu_restore_code\[\]  __attribute__((__aligned__(128))) ='
522     # drivers/net/ixp2000/ixp2400_tx.ucode -> ixp2400_tx.uc
523     initnc '    \.initial_reg_values    = (struct ixp2000_reg_value \[\]) {'
524     # drivers/net/ixp2000/ixp2400_rx.ucode -> ixp2400_rx.uc
525     initnc '    \.initial_reg_values    = (struct ixp2000_reg_value \[\]) {'
526     # crypto/tcrypt.h
527     initnc '[   ]*\.\(digest\|entries\|input\|key\|output\|plaintext\|result\)[         ]*= {'
528
529     # checked:
530
531     accept '    \$3 = {{pge = {{ste = {\(\([0-9][0-9a-fx{},\n   ]*\|\(pge\|ste\) =\|<repeats [0-9]\+ times>\)[{},\n     ]*\)*<repeats 11 times>}'"$eol"
532     # arch/sparc/lib/divdi3.S
533     accept '__clz_tab:[\n]      \.byte  0\(,[0-5]\)\+'"$sepx$blobpat*"
534     accept 'PITBL:[\n]  \.long  0xC0040000,0xC90FDAA2,'"$blobpat*"
535     # arch/m68k/mac/mac_penguin.S
536     accept '\(0x[0F][0F],\)\+\\[\n]\(\(0x[0F][0F],\)\+\\[\n]\)*\(0x[0F][0F],\)\+0x00'
537     # arch/s390/kernel/head.S
538     accept '\.lowcase:[\n]      \.byte 0x00\(,0x0[1-7]\)\+'"$sepx$blobpat*$eol"
539     # arch/s390/kernel/bitmap.S
540     accept '_zb_findmap:[\n]         \.byte  0\(,[123],0\)\+,4'"$sepx$blobpat*$eol"
541     accept '_sb_findmap:[\n]         \.byte  8\(,0,[123]\)\+,0'"$sepx$blobpat*$eol"
542     # arch/powerpc/lib/copyuser_64.S
543     accept '    \.section __ex_table,"a"'"$sepx$blobpat*"
544     # arch/powerpc/platforms/iseries/mf.c
545     accept '    memcpy(src, "\\x01\\x00\\x00\\x01\\x00\\x00\\x00\\x00\\x00\\x00\\x00\\x00".*PROGxxxx'
546     # arch/ppc/platforms/ev64260.c
547     initnc 'static const unsigned int cpu_745x\[2\]\[16\] ='
548     # arch/alpha/lib/fls.c
549     initnc 'const unsigned char __flsm1_tab\[256\] ='
550     # drivers/input/misc/map_to_7segment.h
551     accept '#define _MAP_0_32_ASCII_SEG7_NON_PRINTABLE  \\[\n]  \(0,\)\+'"$eol"
552     # sound/oss/ad1848.c
553     initc '     static int      init_values_b\[\] ='
554     # drivers/input/keyboard/atkbd.c
555     initnc 'static unsigned char atkbd_set2_keycode\[512\] ='
556     # drivers/usb/serial/keyspan_pda.S and
557     # drivers/usb/serial/xircom_pgs.S
558     accept 'desc_config1:[\n]   \.byte 0x09, 0x02'"$sepx$blobpat*"
559     accept 'string_mfg:[\n]\?\(;\?      \.byte[^\n]*[\n]\)\+string_mfg_end:'
560     accept 'string_product:[\n]\?\(;\?  \.byte[^\n]*[\n]\)\+string_product_end:'
561     # drivers/media/video/pwc/pwc-nala.h
562     accept '   [/][*] \(SQCIF\|QSIF\|QCIF\|SIF\|CIF\|VGA\) [*][/][\n]   {[\n]      {'"$blobpat*"
563     # drivers/video/logo/*.ppm
564     accept 'P[13]\([\n]#[^\n]*\)*[\n]*\([\n][0-9 ]*\)\+'
565     # Documentation/specialix.txt
566     accept 'for i in [  0-9\\\n]*[\n]do'
567     # Documentation/cpu-freq/cpufreq-stats.txt
568     accept '         :   3600000   3400000   3200000   3000000   2800000 '
569     # Documentation/scsi/sym53c8xx_2.txt and
570     # Documentation/scsi/ncr53c8xx_2.txt
571     accept '00 00[\n]64 01[\n]8e 0b[\n][\n][0-9a-f \n]*fe fe'
572     accept '0f 00 08 08 64 00 0a 00 - id 0[\n]'"$blobpat*"
573     accept 'default nvram data:'"$sepx$blobpat*"
574     # Documentation/video4linux/sn9c102.txt
575     accept '0x0458     0x7025[\n]'"$blobpat*"
576     # Documentation/video4linux/et61x251.txt
577     accept '0x102c     0x6151[\n]'"$blobpat*"
578     # Documentation/video4linux/zc0301.txt
579     accept '0x041e     0x4017[\n]'"$blobpat*"
580     # Documentation/uml/UserModeLinux-HOWTO.txt
581     accept '  (gdb) x\/100x \$25[\n]  0x507d2434:     0x507d2434      0x00000000      0x08048000      0x080a4f8c'"$sepx$blobpat*"
582     # Documentation/isdn/README.inc
583     accept '      1  0  0  0  0x308'"$sepx$blobpat*"
584     # Documentation/sched-stats.txt
585     accept 'domain<N> <cpumask> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36'"$eol"
586     # net/ipv4/ipvs/ip_vs_sync.c and
587     # net/sctp/sm_make_chunk.c and
588     # include/linux/sctp.h
589     accept '[ * ]*0                   1                   2                   3[\n][ *  ]*0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1'
590     # arch/x86/lguest/boot.c
591     accept ' \*  1 1 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0'
592     # drivers/net/fealnx.c
593     ocomment '  [/][*] Configure the PCI bus bursts and FIFO thresholds.'
594     # drivers/hwmon/via686a.c
595     ocomment '[/][*] the original LUT values from Alex van Kaam <darkside@chello\.nl>'
596     # drivers/media/video/saa7114.c
597     initc 'static const unsigned char init\[\] = {[^;]*MODE=0 ;.*SAA_7114_NTSC_HSYNC_START'
598
599     # in 2.6.23 only
600     accept " Psize    Ipps       Tput     Rxint     Txint    Done     Ndone[\\n] ---------------------------------------------------------------\\([\\n][ 0-9]\\+\\)\\+$eol"
601     initnc 'static u_short ataplain_map\[NR_KEYS\] __initdata ='
602     initnc 'static RegInitializer initData\[\] __initdata ='
603     initnc '    static const unsigned char invert5\[\] ='
604     initnc 'static unsigned char alpa2target\[\] ='
605     initnc 'static unsigned char target2alpa\[\] ='
606     oprepline '#define INIT_THREAD [{0},]\+[    ]*\\[   ]*[{0},]\+'
607     initnc 'static uint tas300\(1c\|4\)_\(master\|mixer\|treble\|bass\)_tab\[\]='
608     initnc 'static short dmasound_[au]law2dma16\[\] ='
609     initnc 'static const unsigned short DACVolTable\[101\] ='
610
611     # new in 2.6.25
612     accept "%canned_values = ([\\n]     \\([0-9]\\+ => \\[[     \\n]\\+\\(\\([0-9]\\+\\|'0x[0-9a-f]\\+'\\),[    \\n]*\\)*\\]\\(, \\|[\\n]\\)\\)*);"
613
614     # from 2.6.25-rc* patches
615     initnc '    int bcomm_irq\[3\*16\] ='
616     initnc '    static const int8 countLeadingZerosHigh\[\] ='
617     initnc 'static struct nic_qp_map nic_qp_mapping_[01]\[\] ='
618     initnc 'static struct regval ov_initvals\[\] ='
619     initnc 'static struct regval stk1125_initvals\[\] ='
620     initnc 'static u8 bnx2x_stats_len_arr\[BNX2X_NUM_STATS\] ='
621     initnc 'static const struct arb_line read_arb_data\[NUM_RD_Q\]\[MAX_RD_ORD + 1\] ='
622     initnc 'static const struct arb_line write_arb_data\[NUM_WR_Q\]\[MAX_WR_ORD + 1\] ='
623     oprepline '#define AR5K_RATES_11A '
624     oprepline '#define AR5K_RATES_11B '
625     oprepline '#define AR5K_RATES_11G '
626     oprepline '#define AR5K_RATES_TURBO '
627     oprepline '#define AR5K_RATES_XR '
628     initnc '            } blinkrates\[\] ='
629     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
630     initnc 'static const struct ath5k_ini_mode rf5413_ini_mode_end\[\] ='
631     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
632     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
633     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
634     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
635     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
636
637     # quite suspicious
638     # arch/parisc/kernel/perf_images.h
639     initc 'static uint32_t onyx_images\[\]\[PCXU_IMAGE_SIZE\/sizeof(uint32_t)\] __read_mostly ='
640     initc 'static uint32_t cuda_images\[\]\[PCXW_IMAGE_SIZE\/sizeof(uint32_t)\] __read_mostly ='
641
642     # These are regarded as ok
643     initnc 'static const u8 SN9C102_\(Y\|UV\)_QTABLE[01]\[64\] = {'
644     initnc '    static const u8 jpeg_header\[589\] = {'
645     accept '[   ]\{1,2\}err = sn9c102_write_const_regs(cam\(,[  \n]\+{0x[0-9a-fA-F][0-9a-fA-F], 0x[0-9a-fA-F][0-9a-fA-F]}\)*);'
646
647     # too lax?
648     initnc 'static yyconst flex_int\(16\|32\)_t yy_[^[]*\[[][0-9]*\] ='
649     initnc 'static const \(yytype_u\?int\(8\|16\)\|unsigned \(short\( int\)\?\|char\)\) yy[^[]*\[\] ='
650     initnc '\(\|        \)static \(const \|\)\(unsigned \(short\|char\)\|struct SiS_[^ ]*\) SiS[^[]*\(\[[] [*0-9]*\]\)\+ *='
651
652     initnc 'static const a3d_Hrtf_t A3dHrirZeros = {'
653     initnc 'static const a3d_Hrtf_t A3dHrirImpulse = {'
654     initnc 'static const a3d_Hrtf_t A3dHrirOnes = {'
655     initnc 'static const a3d_Hrtf_t A3dHrirSatTest = {'
656     initnc 'static const a3d_Hrtf_t A3dHrirDImpulse = {'
657     initnc 'static const a3d_ItdDline_t A3dItdDlineZeros = {'
658     initnc 'static auxxEqCoeffSet_t asEqCoefsNormal = {'
659     initnc 'static xtalk_dline_t const alXtalkDlineTest = {'
660     initnc 'static struct nand_ecclayout rtc_from4_nand_oobinfo = {'
661     initnc 'static const s16 tempLUT\[\] ='
662     initnc 'static const u8 viaLUT\[\] ='
663     initnc 'static struct { int xres, yres, left, right, upper, lower, hslen, vslen, vfreq; } timmings\[\] __initdata = {'
664     initnc 'static struct platinum_regvals platinum_reg_init_[0-9]* = {'
665     initnc '} sisfb_ddc[sf]modes\[\] __devinitdata ='
666     initnc 'static struct dvb_pll_desc [^\n]* = {'
667     initnc 'static u32 LABELPATCHES\[\] __attribute((unused)) ='
668
669     initnc 'static dbdev_tab_t dbdev_tab\[\] ='
670     accept '\(EXP\|LOG\|ATAN\)TBL:'"$sepx$blobpat*"
671     initnc 'static char fm_volume_table\[128\] ='
672     initnc 'unsigned int snd_gf1_scale_table\[SNDRV_GF1_SCALE_TABLE_SIZE\] ='
673     # remaining after original deblob_2_6_24, not fully checked
674
675     oprepline '#define OV51[18]_\(Y\|UV\)QUANTABLE {'
676     initnc '            static unsigned char const data_bit\[64\] ='
677     initnc '            static const u8 data_sbit\[32\] ='
678     initnc '    \.RightCoefs ='
679     initnc '    #define WakeupSeq    {'
680     initnc '    SetRate44100\[\] ='
681     initnc '    const short period\[32\] ='
682     initnc '    const static int desc_idx_table\[\] ='
683     initnc '    int prop_bcomm_irq\[3\*16\] ='
684     initnc '    static char logSlopeTable\[128\] ='
685     initnc '    static const int uc_\(dup\|word\)_table\[\]\[2\] ='
686     initnc '    static const struct mc7_timing_params mc7_timings\[\] ='
687     initnc '    static const u8 biphase_tbl\[\] ='
688     initnc '    static const u8 cs170\[7 \* 8\] ='
689     initnc '    static const u8 cs3[13]a\[8 \* 4\] ='
690     initnc '    static const u8 dramsr13\[12 \* 5\] ='
691     initnc '    static const u8 log10\[\] ='
692     initnc '    static const u8 mpeg_hdr_data\[\] ='
693     initnc '    static const u8 sdramtype\[13\]\[5\] ='
694     initnc '    static const u8 t\[\] ='
695     initnc '    static const unsigned int avg_pkts\[NCCTRL_WIN\] ='
696     initnc '    static const unsigned short ac97_defaults\[\] ='
697     initnc '    static int exp_lut\[256\] ='
698     initnc '    static u16 jpeg_tables\[\]\[70\] ='
699     initnc '    static u16 tables\[\] ='
700     initnc '    static u32 logMagTable\[128\] ='
701     initnc '    static u8 init_bufs\[13\]\[5\] ='
702     initnc '    static u8 sine \[\] ='
703     initnc '    static u_short geometry_table\[\]\[[45]\] ='
704     initnc '    static unsigned char CRCTable1\[\] ='
705     initnc '    static unsigned char CRCTable2\[\] ='
706     initnc '    static unsigned char default_colors\[\] ='
707     initnc '    static unsigned char iso_regs\[8\]\[4\] ='
708     initnc '    static unsigned char log_scale\[101\] ='
709     initnc '    static unsigned char msg\[\] ='
710     initnc '    static unsigned char static_pad\[\] ='
711     initnc '    static unsigned char table_alaw2ulaw\[\] ='
712     initnc '    static unsigned char table_ulaw2alaw\[\] ='
713     initnc '    u32 reg_boundaries\[\] ='
714     initnc '    u8 b\[\] ='
715     initnc '    uint8_t tx\[\] ='
716     initnc '    unsigned char saa7111_regs\[\] ='
717     initnc '    unsigned char sas_pcd_m_pg\[\] ='
718     initnc '    } modedb\[5\] ='
719     initnc '    } reg_tbl\[\] ='
720     initnc '    } vals\[\] ='
721     initnc '    } vm_devices\[\] ='
722     initnc '    static const code distfix\[32\] ='
723     initnc '    static const code lenfix\[512\] ='
724     initnc '  int poly\[\]='
725     initnc '  static const unsigned char asso_values\[\] ='
726     initnc '  static unsigned char asso_values\[\] ='
727     initnc '  } cards_ds\[\] ='
728     initnc '    static const int8 countLeadingZerosHigh\[\] ='
729     initnc '    static const unsigned short d\(base\|ext\)\[32\] ='
730     initnc '#define OV511_QUANTABLESIZE 64'
731     initnc 'BYTE BtCard::SRAMTable_\(NTSC\|PAL\)\[\] ='
732     initnc 'BYTE SRAMTable\[\]\[ 60 \] ='
733     accept 'irq_prio_[hdlc]*:'"$sepx$blobpat*"
734     initc '__u8 _ascebc\[256\] ='
735     initc '__u8 _ebc_tolower\[256\] ='
736     initc '__u8 _ebc_toupper\[256\] ='
737     initnc 'adapter_tag_info_t aic7[9x]xx_tag_info\[\] ='
738     initnc 'char dmasound_alaw2dma8\[\] ='
739     initnc 'char dmasound_ulaw2dma8\[\] ='
740     initnc 'const struct aper_size_info_16 agp3_generic_sizes\[AGP_GENERIC_SIZES_ENTRIES\] ='
741     initnc 'const u16 crc_itu_t_table\[256\] ='
742     initnc 'const u8 byte_rev_table\[256\] ='
743     initnc 'const u8 crc7_syndrome_table\[256\] ='
744     initnc 'const unsigned char INIT_2\[127\] ='
745     initnc 'int snd_sf_vol_table\[128\] ='
746     initnc 'static      u_char  irq_to_siubit\[\] ='
747     initnc 'static      u_char  irq_to_siureg\[\] ='
748     initnc 'static Byte_t RData\[RDATASIZE\] ='
749     initnc 'static __const__ __u16 gx_coeff\[256\] ='
750     initnc 'static __u8 init7121ntsc\[\] ='
751     initnc 'static __u8 init7121pal\[\] ='
752     initnc 'static __u8 mode8420\(pro\|con\)\[\] ='
753     initnc 'static byte capidtmf_leading_zeroes_table\[0x100\] ='
754     initnc 'static char channel_map_madi_ss\[HDSPM_MAX_CHANNELS\] ='
755     initnc 'static char coefficients\[NM_TOTAL_COEFF_COUNT \* 4\] ='
756     initnc 'static char ecc_syndrome_table\[\] ='
757     initnc 'static char isdn_audio_alaw_to_ulaw\[\] ='
758     initnc 'static char isdn_audio_ulaw_to_alaw\[\] ='
759     initnc 'static char mix_cvt\[101\] ='
760     initnc 'static char opl3_volume_table\[128\] ='
761     initnc 'static const RegInitializer initData\[\] __initdata ='
762     initnc 'static const __u16 crc10_table\[256\] ='
763     initnc 'static const __u32 crc_c\[256\] ='
764     initnc 'static const char zr360[56]0_dht\[0x1a4\] ='
765     initnc 'static const char zr360[56]0_dqt\[0x86\] ='
766     initnc 'static const fixp_t cos_table\[46\] ='
767     initnc 'static const int init_seq\[\] ='
768     initnc 'static const int mobile_vid_table\[32\] ='
769     initnc 'static const s16 snd_opl4_pitch_map\[0x600\] ='
770     initnc 'static const s8 \(b43\(\|legacy\)\|bcm43xx\)_tssi2dbm_[bg]_table\[\] ='
771     initnc 'static const s8 budtab\[256\] ='
772     initnc 'static const struct aper_size_info_32 u3_sizes\[8\] ='
773     initnc 'static const struct aper_size_info_8 via_generic_sizes\[9\] ='
774     initnc 'static const struct color clut_vga16\[16\] ='
775     initnc 'static const struct gain_entry gain_table\[2\]\[108\] ='
776     initnc 'static const struct mV_pos __initdata mobilevrm_mV\[32\] ='
777     initnc 'static const struct mV_pos __initdata vrm85_mV\[32\] ='
778     initnc 'static const struct menelaus_vtg_value vcore_values\[\] ='
779     initnc 'static const struct opl4_region regions_[0-9a-frums]*\[\] ='
780     initnc 'static const struct regval regval_table\[\] ='
781     initnc 'static const struct rf_channel rf_vals_5222\[\] ='
782     initnc 'static const struct rf_channel rf_vals_5225_2527\[\] ='
783     initnc 'static const struct rf_channel rf_vals_5226\[\] ='
784     initnc 'static const struct rf_channel rf_vals_bg\[\] ='
785     initnc 'static const struct rf_channel rf_vals_bg_2522\[\] ='
786     initnc 'static const struct rf_channel rf_vals_bg_2523\[\] ='
787     initnc 'static const struct rf_channel rf_vals_bg_2524\[\] ='
788     initnc 'static const struct rf_channel rf_vals_bg_2525\[\] ='
789     initnc 'static const struct rf_channel rf_vals_bg_2525e\[\] ='
790     initnc 'static const struct rf_channel rf_vals_bg_2528\[\] ='
791     initnc 'static const struct rf_channel rf_vals_noseq\[\] ='
792     initnc 'static const struct rf_channel rf_vals_seq\[\] ='
793     initnc 'static const u16 Sbox\[256\] ='
794     initnc 'static const u16 count_lut\[\] ='
795     # drivers/net/e1000e/phy.c
796     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
797     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
798     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
799     initnc 'static const u16 stufftab\[5 \* 256\] ='
800     initnc 'static const u16 tkip_sbox\[256\] ='
801     initnc 'static const u16 wm8753_reg\[\] ='
802     initnc 'static const u32 SS[0-3]\[256\] ='
803     initnc 'static const u32 S[1-8]\[64\] ='
804     initnc 'static const u32 T[0-5]\[256\] ='
805     initnc 'static const u32 Tm\[24\]\[8\] ='
806     initnc 'static const u32 bass_table\[41\]\[5\] ='
807     initnc 'static const u32 bf_sbox\[256 \* 4\] ='
808     initnc 'static const u32 camellia_sp0222\[256\] ='
809     initnc 'static const u32 camellia_sp1110\[256\] ='
810     initnc 'static const u32 camellia_sp3033\[256\] ='
811     initnc 'static const u32 camellia_sp4404\[256\] ='
812     initnc 'static const u32 crc32c_table\[256\] ='
813     initnc 'static const u32 db_table\[101\] ='
814     initnc 'static const u32 m8xx_size_to_gray\[M8XX_SIZES_NO\] ='
815     initnc 'static const u32 mds\[4\]\[256\] ='
816     initnc 'static const u32 pc2\[1024\] ='
817     initnc 'static const u32 s[1-7]\[256\] ='
818     initnc 'static const u32 sb8\[256\] ='
819     initnc 'static const u32 tfrc_calc_x_lookup\[TFRC_CALC_X_ARRSIZE\]\[2\] ='
820     initnc 'static const u32 treble_table\[41\]\[5\] ='
821     initnc 'static const u64 [CT][0-7]\[256\] ='
822     initnc 'static const u64 sbox[1-4]\[256\] ='
823     initnc 'static const u64 sha512_K\[80\] ='
824     initnc 'static const u8 Tr\[4\]\[8\] ='
825     initnc 'static const u8 aes_sbox\[256\] ='
826     initnc 'static const u8 calc_sb_tbl\[512\] ='
827     initnc 'static const u8 exp_to_poly\[492\] ='
828     initnc 'static const u8 legal_ansi_char_array\[0x40\] ='
829     initnc 'static const u8 parity\[\] ='
830     initnc 'static const u8 pc1\[256\] ='
831     initnc 'static const u8 poly_to_exp\[255\] ='
832     initnc 'static const u8 q[01]\[256\] ='
833     initnc 'static const u8 ratio_lut\[\] ='
834     initnc 'static const u8 rs\[256\] ='
835     initnc 'static const u8 rtl8225_agc\[\] ='
836     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
837     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
838     initnc 'static const u8 rtl8225z2_tx_gain_cck_ofdm\[\] ='
839     initnc 'static const u8 setup\[\] ='
840     initnc 'static const u8 speedtab \[3\]\[12\] ='
841     initnc 'static const u_char irq_to_siubit\[\] ='
842     initnc 'static const u_char irq_to_siureg\[\] ='
843     initnc 'static const u_char nand_ecc_precalc_table\[\] ='
844     initnc 'static const uint8_t parity\[256\] ='
845     initnc 'static const unsigned char \(UV\|Y\)_QUANTABLE\[64\] ='
846     initnc 'static const unsigned char __initdata mV_mobilevrm\[32\] ='
847     initnc 'static const unsigned char __initdata mV_vrm85\[32\] ='
848     initnc 'static const unsigned char barco_p1\[2\]\[9\]\[7\]\[3\] ='
849     initnc 'static const unsigned char bitcounts\[256\] ='
850     initnc 'static const unsigned char blue\[256\] ='
851     initnc 'static const unsigned char chktab[hl]\[256\] ='
852     initnc 'static const unsigned char comet_miireg2offset\[32\] ='
853     initnc 'static \(const \)\?unsigned char euc2sjisibm_g3upper_map\[\]\[2\] ='
854     initnc 'static const unsigned char green\[256\] ='
855     initnc 'static const unsigned char hash_table_ops\[64\*4\] ='
856     initnc 'static const unsigned char hid_keyboard\[256\] ='
857     initnc 'static const unsigned char mts_direction\[256\/8\] ='
858     initnc 'static const unsigned char red\[256\] ='
859     initnc 'static \(const \)\?unsigned char sjisibm2euc_map\[\]\[2\] ='
860     initnc 'static const unsigned char vol_cvt_datt\[128\] ='
861     initnc 'static const unsigned char wm_vol\[256\] ='
862     initnc 'static const unsigned int MulIdx\[16\]\[16\] ='
863     initnc 'static const unsigned int crctab32\[\] ='
864     initnc 'static const unsigned short crc_flex_table\[\] ='
865     initnc 'static const unsigned short logtable\[256\] ='
866     initnc 'static const unsigned short wd7000_iobase\[\] ='
867     initnc 'static const unsigned short x86_keycodes\[256\] ='
868     initnc 'static const unsigned table\[\] ='
869     initnc 'static int MV300_reg_8bit\[256\] ='
870     initnc 'static int fifo_map\[\]\[MAX_TX_FIFOS\] ='
871     initnc 'static int initial_lfsr\[\] ='
872     initnc 'static int log_tbl\[129\] ='
873     initnc 'static int logitech_expanded_keymap\[LOGITECH_EXPANDED_KEYMAP_SIZE\] ='
874     initnc 'static int miro_fmtuner\[\]  ='
875     initnc 'static int miro_tunermap\[\] ='
876     initnc 'static int register_size\[\] ='
877     initnc 'static int reserve_list\[MAX_RES_ARGS\] ='
878     initnc 'static int reverse6\[64\] ='
879     initnc 'static short attack_time_tbl\[128\] ='
880     initnc 'static short beep_wform\[256\] ='
881     initnc 'static short decay_time_tbl\[128\] ='
882     initnc 'static short isdn_audio_[ua]law_to_s16\[\] ='
883     initnc 'static struct cipher_testvec anubis_cbc_dec_tv_template\[\] ='
884     initnc 'static struct cipher_testvec anubis_cbc_enc_tv_template\[\] ='
885     initnc 'static struct cipher_testvec anubis_dec_tv_template\[\] ='
886     initnc 'static struct cipher_testvec anubis_enc_tv_template\[\] ='
887     initnc 'static struct cipher_testvec camellia_cbc_dec_tv_template\[\] ='
888     initnc 'static struct cipher_testvec camellia_cbc_enc_tv_template\[\] ='
889     initnc 'static struct cipher_testvec camellia_dec_tv_template\[\] ='
890     initnc 'static struct cipher_testvec camellia_enc_tv_template\[\] ='
891     initnc 'static struct cipher_testvec cast6_dec_tv_template\[\] ='
892     initnc 'static struct cipher_testvec cast6_enc_tv_template\[\] ='
893     initnc 'static struct cipher_testvec serpent_dec_tv_template\[\] ='
894     initnc 'static struct cipher_testvec serpent_enc_tv_template\[\] ='
895     initnc 'static struct cipher_testvec tea_dec_tv_template\[\] ='
896     initnc 'static struct cipher_testvec tea_enc_tv_template\[\] ='
897     initnc 'static struct cipher_testvec tf_dec_tv_template\[\] ='
898     initnc 'static struct cipher_testvec tf_enc_tv_template\[\] ='
899     initnc 'static struct cipher_testvec tnepres_dec_tv_template\[\] ='
900     initnc 'static struct cipher_testvec xeta_dec_tv_template\[\] ='
901     initnc 'static struct cipher_testvec xeta_enc_tv_template\[\] ='
902     initnc 'static struct cipher_testvec xtea_dec_tv_template\[\] ='
903     initnc 'static struct cipher_testvec xtea_enc_tv_template\[\] ='
904     initnc 'static struct comp_testvec deflate_decomp_tv_template\[\] ='
905     initnc 'static struct hash_testvec aes_xcbc128_tv_template\[\] ='
906     initnc 'static struct hash_testvec crc32c_tv_template\[\] ='
907     initnc 'static struct hash_testvec hmac_sha256_tv_template\[\] ='
908     initnc 'static struct hash_testvec sha256_tv_template\[\] ='
909     initnc 'static struct hash_testvec sha384_tv_template\[\] ='
910     initnc 'static struct hash_testvec sha512_tv_template\[\] ='
911     initnc 'static struct hash_testvec wp256_tv_template\[\] ='
912     initnc 'static struct hash_testvec wp384_tv_template\[\] ='
913     initnc 'static struct hash_testvec wp512_tv_template\[\] ='
914     initnc 'static struct iwl\(3945\)\?_tx_power power_gain_table\[2\]\[IWL_MAX_GAIN_ENTRIES\] ='
915     initnc 'static struct ovcamchip_regvals regvals_init_\(76be\|7[16]20\|7x10\)\[\] ='
916     initnc 'static struct regval_list ov7670_default_regs\[\] ='
917     initnc 'static struct s_c2 SetRate48000\[\] ='
918     initnc 'static struct tea6420_multiplex TEA6420_line\[MXB_AUDIOS+1\]\[2\] ='
919     initnc 'static struct wm_info i810_wm_16_100\[\] ='
920     initnc 'static struct wm_info i810_wm_16_133\[\] ='
921     initnc 'static struct wm_info i810_wm_24_100\[\] ='
922     initnc 'static struct wm_info i810_wm_24_133\[\] ='
923     initnc 'static struct wm_info i810_wm_8_100\[\] ='
924     initnc 'static struct wm_info i810_wm_8_133\[\] ='
925     initnc 'static struct { struct fb_bitfield red, green, blue, transp; int bits_per_pixel; } colors\[\] ='
926     initnc 'static u16 asEqCoefsPipes\[64\] ='
927     initnc 'static u16 asEqCoefsZeros\[50\] ='
928     initnc 'static u16 asEqOutStateZeros\[48\] ='
929     initnc 'static u16 default_key_map \[256\] ='
930     initnc 'static u16 eq_levels\[64\] ='
931     initnc 'static u32  crc32tab\[\] __attribute__ ((aligned(8))) ='
932     initnc 'static u32 ac3_frames\[3\]\[32\] ='
933     initnc 'static u32 adwDecim8\[33\] ='
934     initnc 'static u32 h_prescale\[64\] ='
935     initnc 'static u32 v_gain\[64\] ='
936     initnc 'static u8 cvs_time_value\[\]\[XFER_UDMA_6 - XFER_UDMA_0 + 1\] ='
937     initnc 'static u8 SRAM_Table\[\]\[60\] ='
938     initnc 'static u8 act_time_value\[\]\[8\] ='
939     initnc 'static u8 alps_tdee4_stv0297_inittab\[\] ='
940     initnc 'static u8 bnx2_5706_stats_len_arr\[BNX2_NUM_STATS\] ='
941     initnc 'static u8 bnx2_5708_stats_len_arr\[BNX2_NUM_STATS\] ='
942     initnc 'static u8 flit_desc_map\[\] ='
943     initnc 'static u8 ini_time_value\[\]\[8\] ='
944     initnc 'static u8 init_tab \[\] ='
945     initnc 'static u8 mac_reader\[\] ='
946     initnc 'static u8 mt2131_config1\[\] ='
947     initnc 'static u8 mt2266_init2\[\] ='
948     initnc 'static u8 opera1_inittab\[\] ='
949     initnc 'static u8 rco_time_value\[\]\[8\] ='
950     initnc 'static u8 saa7113_init_regs\[\] ='
951     initnc 'static u8 samsung_tbmu24112_inittab\[\] ='
952     initnc 'static u8 tas3004_treble_table\[\] ='
953     initnc 'static u8 w1_crc8_table\[\] ='
954     initnc 'static u_char const data_sizes_32\[32\] ='
955     initnc 'static u_long ident_map\[32\] ='
956     initnc 'static u_short alt_map\[NR_KEYS\] ='
957     initnc 'static u_short altgr_map\[NR_KEYS\] ='
958     initnc 'static u_short ctrl_alt_map\[NR_KEYS\] ='
959     initnc 'static u_short ctrl_map\[NR_KEYS\] *='
960     initnc 'static u_short shift_ctrl_map\[NR_KEYS\] ='
961     initnc 'static u_short shift_map\[NR_KEYS\] *='
962     initnc 'static uchar perm1\[56\] ='
963     initnc 'static uchar perm2\[48\] ='
964     initnc 'static uchar perm3\[64\] ='
965     initnc 'static uchar perm4\[48\] ='
966     initnc 'static uchar perm5\[32\] ='
967     initnc 'static uchar perm6\[64\] ='
968     initnc 'static uchar sbox\[8\]\[4\]\[16\] ='
969     initnc 'static uint16_t crc_table\[256\] ='
970     initnc 'static uint8_t lpfcAlpaArray\[\] ='
971     initnc 'static uint8_t seqprog\[\] ='
972     initnc 'static unsigned char V110_OffMatrix_9600\[\] ='
973     initnc 'static unsigned char V110_OnMatrix_9600\[\] ='
974     initnc 'static unsigned char a2232_65EC02code\[\] ='
975     initnc 'static unsigned char alaw_main\[\] ='
976     initnc 'static unsigned char atkbd_set3_keycode\[512\] ='
977     initnc 'static unsigned char atkbd_unxlate_table\[128\] ='
978     initnc 'static unsigned char banner_table\[\] ='
979     initnc 'static unsigned char bootlogo_bits\[\] ='
980     initnc 'static unsigned char bus2core_8260\[\] ='
981     initnc 'static unsigned char bus2core_8280\[\] ='
982     initnc 'static unsigned char caseorder\[256\] ='
983     initnc 'static unsigned char crystal_key\[\] ='
984     initnc 'static unsigned char dsp_ulaw\[\] ='
985     initnc 'static unsigned char expressiontab\[128\] ='
986     initnc 'static unsigned char header2\[\] ='
987     initnc 'static unsigned char hidp_keycode\[256\] ='
988     initnc 'static unsigned char ima_adpcm_capture\[\] ='
989     initnc 'static unsigned char ima_adpcm_init\[\] ='
990     initnc 'static unsigned char ima_adpcm_playback\[\] ='
991     initnc 'static unsigned char irq_xlate\[32\] ='
992     initnc 'static unsigned char mulaw_main\[\] ='
993     initnc 'static unsigned char nkbd_keycode\[128\] ='
994     initnc 'static unsigned char pan_volumes\[256\] ='
995     initnc 'static unsigned char parm_block\[32\] ='
996     initnc 'static unsigned char raw3270_ebcgraf\[64\] ='
997     initnc 'static unsigned char rfcomm_crc_table\[256\] ='
998     initnc 'static unsigned char rwa_unlock\[\] __initdata ='
999     initnc 'static unsigned char seqprog\[\] ='
1000     initnc 'static unsigned char snd_opl4_volume_table\[128\] ='
1001     initnc 'static unsigned char splash_bits\[\] ='
1002     initnc 'static unsigned char sunkbd_keycode\[128\] ='
1003     initnc 'static unsigned char ufs_fragtable_8fpb\[\] ='
1004     initnc 'static unsigned char ufs_fragtable_other\[\] ='
1005     initnc 'static unsigned char ulaw_dsp\[\] ='
1006     initnc 'static unsigned char usb_kbd_keycode\[256\] ='
1007     initnc 'static unsigned char vga_font\[cmapsz\] \(BTDATA \|\)='
1008     initnc 'static unsigned char voltab[12]\[128\] ='
1009     initnc 'static unsigned char vpd89_data\[\] ='
1010     initnc 'static unsigned char xtkbd_keycode\[256\] ='
1011     initnc 'static unsigned int ac3_bitrates\[32\] ='
1012     initnc 'static unsigned int bass_volume_table\[\] ='
1013     initnc 'static unsigned int bitrates\[3\]\[16\] ='
1014     initnc 'static unsigned int isa_dma_port\[8\]\[7\] ='
1015     initnc 'static unsigned int master_volume_table\[\] ='
1016     initnc 'static unsigned int mixer_volume_table\[\] ='
1017     initnc 'static unsigned int pan_table\[63\] ='
1018     initnc 'static unsigned int snapper_bass_volume_table\[\] ='
1019     initnc 'static unsigned int snapper_treble_volume_table\[\] ='
1020     initnc 'static unsigned int treble_volume_table\[\] ='
1021     initnc 'static unsigned int valid_mem\[\] ='
1022     initnc 'static unsigned long arthur_to_linux_signals\[32\] ='
1023     initnc 'static unsigned long shmedia_opcode_table\[64\] ='
1024     initnc 'static unsigned nv\([34]\|10\)TableP\(FIFO\|GRAPH\|RAMIN\)\[\]\[2\] ='
1025     initnc 'static unsigned short fcstab\[256\] ='
1026     initnc 'static unsigned short init[1234]\[128\] \/\*__devinitdata\*\/ ='
1027     initnc 'static unsigned short log_table\[LOG_TABLE_SIZE\*2\] ='
1028     initnc 'static unsigned short rc_ioport\[\] ='
1029     initnc 'static unsigned short translations\[\]\[256\] ='
1030     initnc 'static unsigned short treble_parm\[12\]\[9\] ='
1031     initnc 'struct RGBColors TextCLUT\[256\] ='
1032     initnc 'struct VgaRegs GenVgaTextRegs\[NREGS+1\] ='
1033     initnc 'struct battery_thresh  spitz_battery_levels_noac\[\] ='
1034     initnc 'struct battery_thresh spitz_battery_levels_acin\[\] ='
1035     initnc 'struct fb_bitfield rgb_bitfields\[\]\[4\] ='
1036     initnc 'struct mode_registers std_modes\[\] ='
1037     initnc 'struct vmode_attr vmode_attrs\[VMODE_MAX\] ='
1038     initnc 'u16 const crc16_table\[256\] ='
1039     initnc 'u16 const crc_ccitt_table\[256\] ='
1040     initnc 'u16 hfsplus_compose_table\[\] ='
1041     initnc 'u16 hfsplus_decompose_table\[\] ='
1042     initnc 'u_char const data_sizes_16\[32\] ='
1043     initnc 'u_short alt_map\[NR_KEYS\] ='
1044     initnc 'u_short altgr_map\[NR_KEYS\] ='
1045     initnc 'u_short ctrl_alt_map\[NR_KEYS\] ='
1046     initnc 'u_short ctrl_map\[NR_KEYS\] *='
1047     initnc 'u_short plain_map\[NR_KEYS\] *='
1048     initnc 'u_short shift_ctrl_map\[NR_KEYS\] ='
1049     initnc 'u_short shift_map\[NR_KEYS\] *='
1050     initnc 'uint patch_2[0f]00\[\] ='
1051     initnc 'uint16_t e1000_igp_cable_length_table\[IGP01E1000_AGC_LENGTH_TABLE_SIZE\] ='
1052     initnc 'uint16_t e1000_igp_2_cable_length_table\[IGP02E1000_AGC_LENGTH_TABLE_SIZE\] ='
1053     initnc '} euc2sjisibm_jisx0212_map\[\] ='
1054     initnc '} freq\[\] ='
1055     initnc '} hps_h_coeff_tab \[\] ='
1056     initnc '} hps_v_coeff_tab \[\] ='
1057     initnc '} init_tab\[\] ='
1058     initnc '} maven_gamma\[\] ='
1059     initnc '} mem_table\[\] ='
1060     initnc '} mxb_saa7740_init\[\] ='
1061     initnc '} pll_table\[\] ='
1062     initnc '} qam256_snr_tab\[\] ='
1063     initnc '} qam64_snr_tab\[\] ='
1064     initnc '} sil_port\[\] ='
1065     initnc '} vsb_snr_tab\[\] ='
1066     initnc '} yss225_registers\[\] __devinitdata ='
1067     ;;
1068   */patch*2.6.25-rc*)
1069     initnc ';[/][*]@@ -[0-9]*,[0-9]* +[0-9]*,[0-9]* @@ static uchar sbox\[8\]\[4\]\[16\] = {[*][/];'
1070     accept '    \$3 = {{pge = {{ste = {\(\([0-9][0-9a-fx{},\n   ]*\|\(pge\|ste\) =\|<repeats [0-9]\+ times>\)[{},\n     ]*\)*<repeats 11 times>}'"$eol"
1071     initnc 'static yyconst flex_int\(16\|32\)_t yy_[^[]*\[[0-9]*\] ='
1072     initnc 'static const yytype_u\?int\(8\|16\) yy[^[]*\[\] ='
1073     initnc '    int bcomm_irq\[3\*16\] ='
1074     initnc '    static const int8 countLeadingZerosHigh\[\] ='
1075     initnc 'static unsigned long shmedia_opcode_table\[64\] ='
1076     initnc 'u_char const data_sizes_16\[32\] ='
1077     initnc 'static u_char const data_sizes_32\[32\] ='
1078     initnc '            \.\(digest\|entries\|input\|key\|output\|plaintext\|result\)[   ]*= {'
1079     initnc 'static struct [^\n]*_testvec [^\n]*_tv_template\[\] ='
1080     initnc 'static struct nic_qp_map nic_qp_mapping_[01]\[\] ='
1081     initnc 'static u8 mt2266_init2\[\] ='
1082     initnc 'static struct regval ov_initvals\[\] ='
1083     initnc 'static struct regval stk1125_initvals\[\] ='
1084     initnc 'static u8 bnx2x_stats_len_arr\[BNX2X_NUM_STATS\] ='
1085     initnc 'static const struct arb_line read_arb_data\[NUM_RD_Q\]\[MAX_RD_ORD + 1\] ='
1086     initnc 'static const struct arb_line write_arb_data\[NUM_WR_Q\]\[MAX_WR_ORD + 1\] ='
1087     initnc 'uint16_t e1000_igp_cable_length_table\[IGP01E1000_AGC_LENGTH_TABLE_SIZE\] ='
1088     initnc 'uint16_t e1000_igp_2_cable_length_table\[IGP02E1000_AGC_LENGTH_TABLE_SIZE\] ='
1089     oprepline '#define AR5K_RATES_11A '
1090     oprepline '#define AR5K_RATES_11B '
1091     oprepline '#define AR5K_RATES_11G '
1092     oprepline '#define AR5K_RATES_TURBO '
1093     oprepline '#define AR5K_RATES_XR '
1094     initnc '            } blinkrates\[\] ='
1095     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
1096     initnc 'static const struct ath5k_ini_mode rf5413_ini_mode_end\[\] ='
1097     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
1098     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
1099     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
1100     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
1101     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
1102     initnc 'static const u8 rtl8225_agc\[\] ='
1103     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
1104     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
1105     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
1106     accept '     \( 49,\)*[\n]\([ 0-9,]*[\n]\)*     \( 49,\)*'"$eol"
1107     initnc 'static const unsigned char wm_vol\[256\] ='
1108     accept 'domain<N> <cpumask> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36'"$eol"
1109     # drivers/net/e1000e/phy.c
1110     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
1111     accept '    24 => \[[\n]\([^\n]*[\n]\)*     \]\(, [0-9]\+ => \[\)\?'"$eol"
1112     accept '            '"'"'0x[^\n]*[\n]\([^\n]*[\n]\)*        \]\(, [0-9]\+ => \[\)\?'"$eol"
1113     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
1114     ;;
1115   */nouveau-drm*.patch)
1116     initnc '\(static uint32_t\|}\) nv04_graph_ctx_regs \[\] ='
1117     initnc 'static int nv10_graph_ctx_regs \[\] ='
1118
1119     # Although the developers of the drivers are not trying to stop
1120     # anyone from modifying it or understanding it, they acknowledge
1121     # these are bits of code, obtained through mmio interactions.
1122     # This means these blobs are not source code, AND original authors
1123     # of the blobs have power to stop others from modifying them.
1124     # Non-Free software, for sure.
1125
1126     # initnc 'static uint32_t nv\(4[013467ace]\|49_4b\|8[46]\)_ctx_\(voodoo\|prog\)\[\] ='
1127     ;;
1128   */linux-2.6-lirc.patch)
1129     initnc 'const unsigned char map_table\[\] ='
1130     ;;
1131   */linux-2.6-modsign-mpilib.patch)
1132     initnc 'const unsigned char __clz_tab\[\] ='
1133     ;;
1134   */linux-2.6-wireless*.patch)
1135     initnc 'const u\(8\|16\|32\) b43_ntab_\(\(adjustpower\|estimatepowerlt\|gainctl\|iqlt\|loftlt\|noisevar1\|tdi[24]0a\)[01]\|channelest\|frame\(lookup\|struct\)\|mcs\|pilot\|tdtrn\|tmap\)\[\] ='
1136     initnc 'static const s8 \(b43\(legacy\)\?\|bcm43xx\)_tssi2dbm_[bg]_table\[\] ='
1137     initnc 'static struct iwl\(3945\)\?_tx_power power_gain_table\[2\]\[IWL_MAX_GAIN_ENTRIES\] ='
1138     initnc 'static const struct gain_entry gain_table\[2\]\[108\] ='
1139     initnc 'static const struct rf_channel rf_vals_5222\[\] ='
1140     initnc 'static const struct rf_channel rf_vals_5225_2527\[\] ='
1141     initnc 'static const struct rf_channel rf_vals_5226\[\] ='
1142     initnc 'static const struct rf_channel rf_vals_bg\[\] ='
1143     initnc 'static const struct rf_channel rf_vals_bg_2522\[\] ='
1144     initnc 'static const struct rf_channel rf_vals_bg_2523\[\] ='
1145     initnc 'static const struct rf_channel rf_vals_bg_2524\[\] ='
1146     initnc 'static const struct rf_channel rf_vals_bg_2525\[\] ='
1147     initnc 'static const struct rf_channel rf_vals_bg_2525e\[\] ='
1148     initnc 'static const struct rf_channel rf_vals_bg_2528\[\] ='
1149     initnc 'static const struct rf_channel rf_vals_noseq\[\] ='
1150     initnc 'static const struct rf_channel rf_vals_seq\[\] ='
1151     initnc '    static const u8 t\[\] ='
1152     initnc 'static const u16 rtl8225bcd_rxgain\[\] ='
1153     initnc 'static const u8 rtl8225_agc\[\] ='
1154     initnc 'static const u8 rtl8225_tx_power_cck\[\] ='
1155     initnc 'static const u8 rtl8225_tx_power_cck_ch14\[\] ='
1156     initnc 'static const u16 rtl8225z2_rxgain\[\] ='
1157     initnc 'static const struct ath5k_ini_rf rfregs_5111\[\] ='
1158     initnc 'static const struct ath5k_ini_rf rfregs_5112\[\] ='
1159     initnc 'static const struct ath5k_ini_rf rfregs_5112a\[\] ='
1160     initnc 'static const struct ath5k_ini_rf rfregs_5413\[\] ='
1161     oprepline '#define AR5K_RATES_11A '
1162     oprepline '#define AR5K_RATES_11B '
1163     oprepline '#define AR5K_RATES_11G '
1164     oprepline '#define AR5K_RATES_TURBO '
1165     oprepline '#define AR5K_RATES_XR '
1166     initnc 'static const struct ath5k_ini ar5212_ini\[\] ='
1167     initnc 'static const struct ath5k_ini_mode rf\(5413\|24\(13\|25\)\)_ini_mode_end\[\] ='
1168     initnc '            } blinkrates\[\] ='
1169
1170     # git logs
1171     accept '   sudo modprobe ath5k debug=0x00000400[\n][        ]*[\n]\([       ]*Band[^\n]*[\n]\([     ]*\(\(channels\|rates\):\|[-    0-9a-f]*\|\[\.\.\. etc \]\)[\n]\)\+\)\+       540 000c 0000 0000'
1172     oprepline ' { 1, MODULATION_XR, 3000, 1, 150, 3 },'
1173     ;;
1174   */linux-2.6-drm-i915-modeset.patch)
1175     initnc 'static const u32 filter_table\[\] ='
1176     ;;
1177   */linux-2.6-netdev-e1000e*.patch)
1178     # drivers/net/e1000e/phy.c
1179     initnc 'static const u16 e1000_igp_2_cable_length_table\[\] ='
1180     ;;
1181   esac
1182 }  
1183
1184 # Regular expression that matches a literal constant.
1185 constx="[0-9][0-9a-fA-FxX]*"
1186 # Regular expression that matches a separator between consecutive
1187 # literal constants.
1188 sepx="\\([,:{}  \\nLlUu\"\'\\\\]\\+[xX\$]\\?\\|[        \\n]*[.][a-zA-Z][a-zA-Z0-9]*[   ]\\+[\$]\\?\\)"
1189
1190 # Regular expression that matches a continuation of a blob, after an
1191 # initial constant.  *, \+ and \? can be safely appended to it without
1192 # \(\)s.
1193 blobcont="\\($sepx$constx\\)"
1194
1195 # Regular expression that matches the initial constant of a blob plus
1196 # its continuation.  *, \+ and \? can be safely appended to it without
1197 # \(\)s.
1198 blobpat="$constx$blobcont"
1199
1200 # Regular expression that matches a blob with the exact number of
1201 # constants specified as sensitivity.
1202 blobseq="$blobpat\\{$sens\\}"
1203
1204 # Regular expression that matches a blob with the exact specified
1205 # length, or longer.
1206 blobfseq="$blobseq$blobcont*"
1207
1208 # Regular expression that matches the beginning of the pattern or a
1209 # line break.  It must be \(\)ed, such that it can be named in
1210 # replacement patterns without being named.
1211 bol="\\(^\\|[\\n]\\)"
1212
1213 # Regular expression that matches the end of the pattern or a line
1214 # break.  It must be \(\)ed, such that it can be named in replacement
1215 # patterns without being named.
1216 eol="\\([\\n]\\|\$\\)"
1217
1218 # Regular expression that matches a C-style comment.
1219 comment="\\([/][*]\\([^*]*\\|[*]\\+[^/*]\\)*[*]\\+[/]\\|[/][/][^\\n]*[\\n]\\)"
1220
1221 # Regular expression that matches comments typically used in assembly.
1222 asmcomment="\\($comment\\|[;#][^\\n]*[\\n]\\)"
1223
1224 # Regular expression that matches a braced initializer containing at
1225 # least one blob.
1226 initblob="[^\\n]*=\\([  \\n\\\\]*\\|$comment\\)*{\\([^;]*\\|$comment\\)*$blobseq\\([^;]*\\|$comment\\)*}\\?\\([         \\n\\\\]*\\|$comment\\);\\?"
1227
1228 # Regular expression that matches a C (possibly multi-line) #define
1229 # that contains a blob.
1230 defineblob='[   ]*#[    ]*define[       ]\+\([^\n]*\\[\n]\)*[^\n]*'"$blobseq"'\([^\n]*\\[\n]\)*'
1231
1232 # Regular expression that matches an assembly label followed by a blob
1233 # without any intervening label.
1234 asmblob="[a-zA-Z_.][^\\n:;#/    ]*[ ]*:\\([^:]*\\|$asmcomment\\)*$blobseq\\([^:]*\\|$asmcomment\\)*"
1235
1236 # Regular expression that matches one or more blobs without
1237 # intervening line breaks.
1238 sblobctx="\\([^\\n]*$blobfseq\\)\\+"
1239
1240 # Regular expression that matches the context for a long blob match.
1241 lblobctx="\\($initblob\\|$defineblob\\|$asmblob\\|$sblobctx\\)"
1242
1243 # Set up the sed script that will go through the (processed) input,
1244 # looking for sequences of blobs and printing whatever was requested.
1245 # It accepts 3 arguments.
1246
1247 # $1 is the action in case blobs were found in the input.
1248
1249 # $2 is the action in case no blobs were found, not even false positives.
1250
1251 # $3 is the action in case false positives were located.
1252
1253 # $4 is the action for every complete input pattern.
1254
1255 set_sedmain () {
1256   falsepos=`sed 's,^\\\|,,;s,^,\\\\(,;s,$,\\\\),' < "$falsepos_name"`
1257
1258   if test -s "$falsepos_name"; then
1259     check_false_positives="$v:???falsepos
1260 /$bol$falsepos/!b blob;
1261 $v:+++falsepos
1262 h;
1263 s/$bol$falsepos/\\1;\/**\/;/g;
1264 # See if, after removing all matches, we end up without any blobs.
1265 $v:???blobseq
1266 /$blobseq/!{
1267   g;
1268   b falsepos;
1269 }
1270 g;
1271 "
1272   else
1273     falsepos="$^"
1274     check_false_positives=
1275   fi
1276
1277   sedmain="
1278 /^;[/][*]\\(end .*\\)\\?[*][/];$/{
1279   $4;
1280   d;
1281 }
1282 /^;[/][*]begin /!{
1283   : internal_error
1284   i\\
1285 Internal error at
1286   p;
1287   q 2;
1288 }
1289 $v:reading file in
1290 h;
1291 n;
1292 : read_more
1293 /^;[/][*]end [^\\n]*[*][/];$/! {
1294   H;
1295   n;
1296   b read_more;
1297 }
1298 H;
1299 g;
1300 $4
1301 s/^\(;[/][*]begin [^\n]*[\n]\)*//;
1302 s/\\($bol;[/][*]\\(end [^\n]*\\)\\?[*][/];\\)*$//;
1303 $v:???!blobseq
1304 /$blobseq/!b clean;
1305 $check_false_positives
1306 # Fall through.
1307 : blob
1308 $v:blob
1309 $1
1310 d;
1311 : clean
1312 $2
1313 d;
1314 : falsepos
1315 $v:falsepos
1316 $3
1317 d;
1318
1319 : print_matches
1320 $v:print_matches
1321 /^$falsepos/! {
1322   $v:delete unmatching lines
1323   h;
1324   s/[\\n]$falsepos.*//;
1325   : print_matches_nomatch_loop
1326   /[\\n]/ {
1327     s/^[^\\n]*[\\n]//;
1328     x;
1329     s/^[^\\n]*[\\n]//;
1330     x;
1331     b print_matches_nomatch_loop;
1332   }
1333   x;
1334   b print_matches_delete_to_eol;
1335 }
1336 h;
1337 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1338 $v:narrowed to match
1339 /$blobfseq/ {
1340   i\\
1341 ::: $file :::
1342   p;
1343 }
1344 g;
1345 s/^\\($falsepos[^\\n]*\\)//;
1346 : print_matches_delete_to_eol
1347 $v:delete to eol
1348 s/^[^\\n]*//;
1349 /^$/d;
1350 s/^[\\n]//;
1351 b print_matches;
1352
1353 : print_marked_matches
1354 $v:print_marked_matches
1355 /^$falsepos/! {
1356   h;
1357   s/[\\n]$falsepos.*//;
1358   : print_marked_matches_nomatch_loop
1359   /[\\n]/ {
1360     s/^[^\\n]*[\\n]//;
1361     x;
1362     s/^[^\\n]*[\\n]//;
1363     x;
1364     b print_marked_matches_nomatch_loop;
1365   }
1366   x;
1367   b print_marked_matches_delete_to_eol;
1368 }
1369 h;
1370 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1371 $v:narrowed to match
1372 /$blobfseq/{
1373   i\\
1374 ::: $file :::
1375   s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[    ]*;/{\/*(DEBLOBBED)*\/};/g;
1376   s/$blobfseq/\/*(DEBLOBBED)*\//g;
1377   p;
1378 }
1379 g;
1380 s/^\\($falsepos[^\\n]*\\)//;
1381 : print_marked_matches_delete_to_eol
1382 $v:delete to eol
1383 s/^[^\\n]*//;
1384 /^$/d;
1385 s/^[\\n]//;
1386 b print_marked_matches;
1387
1388 : print_blobs
1389 $v:print_blobs
1390 /^$falsepos/ {
1391   $v:delete false positive
1392   # This is tricky.  We don't want to print the false positive.
1393   /^$falsepos[^\\n]*$blobseq/ {
1394     $v:delete false positive immediately followed by blob
1395     h;
1396     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1397     : print_blobs_match_loop
1398     /[\\n]/ {
1399       s/^[^\\n]*[\\n]//;
1400       x;
1401       s/^[^\\n]*[\\n]//;
1402       x;
1403       b print_blobs_match_loop;
1404     }
1405     G;
1406     b print_blobs_delete_to_eol;
1407   }
1408   s/^$falsepos//;
1409   b print_blobs_delete_to_eol;
1410 }
1411 /^[^\\n]*$blobseq/! {
1412   $v:delete non-blob header
1413   h;
1414   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1415   : print_blobs_nomatch_loop
1416   /[\\n]/ {
1417     s/^[^\\n]*[\\n]//;
1418     x;
1419     s/^[^\\n]*[\\n]//;
1420     x;
1421     b print_blobs_nomatch_loop;
1422   }
1423   x;
1424   b print_blobs_delete_to_eol;
1425 }
1426 h;
1427 i\\
1428 ::: $file :::
1429 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1430 $v:narrowed to blob
1431 p;
1432 g;
1433 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1434 : print_blobs_delete_to_eol
1435 $v:delete to eol
1436 s/^[^\\n]*//;
1437 /^$/d;
1438 s/^[\\n]//;
1439 b print_blobs;
1440
1441 : print_marked_blobs
1442 $v:print_marked_blobs
1443 /^$falsepos/ {
1444   $v:delete false positive
1445   # This is tricky.  We don't want to print the false positive.
1446   /^$falsepos[^\\n]*$blobseq/ {
1447     $v:delete false positive immediately followed by blob
1448     h;
1449     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1450     : print_marked_blobs_match_loop
1451     /[\\n]/ {
1452       s/^[^\\n]*[\\n]//;
1453       x;
1454       s/^[^\\n]*[\\n]//;
1455       x;
1456       b print_marked_blobs_match_loop;
1457     }
1458     G;
1459     b print_marked_blobs_delete_to_eol;
1460   }
1461   s/^falsepos//;
1462   b print_marked_blobs_delete_to_eol;
1463 }
1464 /^[^\\n]*$blobseq/! {
1465   $v:delete non-blob header
1466   h;
1467   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1468   : print_marked_blobs_nomatch_loop
1469   /[\\n]/ {
1470     s/^[^\\n]*[\\n]//;
1471     x;
1472     s/^[^\\n]*[\\n]//;
1473     x;
1474     b print_marked_blobs_nomatch_loop;
1475   }
1476   x;
1477   b print_marked_blobs_delete_to_eol;
1478 }
1479 h;
1480 i\\
1481 ::: $file :::
1482 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1483 $v:narrowed to blob
1484 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1485 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1486 p;
1487 g;
1488 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1489 : print_marked_blobs_delete_to_eol
1490 $v:delete to eol
1491 s/^[^\\n]*//;
1492 /^$/d;
1493 s/^[\\n]//;
1494 b print_marked_blobs;
1495
1496 : print_cblobs
1497 $v:print_cblobs
1498 /^$falsepos/ {
1499   $v:delete false positive
1500   # This is tricky.  We don't want to print the false positive.
1501   /^$falsepos[^\\n]*$blobseq/ {
1502     $v:delete false positive immediately followed by blob
1503     h;
1504     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1505     : print_cblobs_match_loop
1506     /[\\n]/ {
1507       s/^[^\\n]*[\\n]//;
1508       x;
1509       s/^[^\\n]*[\\n]//;
1510       x;
1511       b print_cblobs_match_loop;
1512     }
1513     G;
1514     b print_cblobs_delete_to_eol;
1515   }
1516   s/^$falsepos//;
1517   b print_cblobs_delete_to_eol;
1518 }
1519 /^$lblobctx/! {
1520   $v:delete non-blob header
1521   h;
1522   s/[\\n]\\($falsepos\\|$lblobctx\\).*//;
1523   : print_cblobs_nomatch_loop
1524   /[\\n]/ {
1525     s/^[^\\n]*[\\n]//;
1526     x;
1527     s/^[^\\n]*[\\n]//;
1528     x;
1529     b print_cblobs_nomatch_loop;
1530   }
1531   x;
1532   b print_cblobs_delete_to_eol;
1533 }
1534 h;
1535 i\\
1536 ::: $file :::
1537 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1538 $v:narrowed to blob
1539 p;
1540 g;
1541 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)//;
1542 : print_cblobs_delete_to_eol
1543 $v:delete to eol
1544 s/^[^\\n]*//;
1545 /^$/d;
1546 s/^[\\n]//;
1547 b print_cblobs;
1548
1549 : print_marked_cblobs
1550 $v:print_marked_cblobs
1551 /^$falsepos/ {
1552   $v:delete false positive
1553   # This is tricky.  We don't want to print the false positive.
1554   /^$falsepos[^\\n]*$blobseq/ {
1555     $v:delete false positive immediately followed by blob
1556     h;
1557     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1558     : print_marked_cblobs_match_loop
1559     /[\\n]/ {
1560       s/^[^\\n]*[\\n]//;
1561       x;
1562       s/^[^\\n]*[\\n]//;
1563       x;
1564       b print_marked_cblobs_match_loop;
1565     }
1566     G;
1567     b print_marked_cblobs_delete_to_eol;
1568   }
1569   s/^$falsepos//;
1570   b print_marked_cblobs_delete_to_eol;
1571 }
1572 /^$lblobctx/! {
1573   $v:delete non-blob header
1574   h;
1575   s/[\\n]\\($falsepos\\|$lblobctx\\).*//;
1576   : print_marked_cblobs_nomatch_loop
1577   /[\\n]/ {
1578     s/^[^\\n]*[\\n]//;
1579     x;
1580     s/^[^\\n]*[\\n]//;
1581     x;
1582     b print_marked_cblobs_nomatch_loop;
1583   }
1584   x;
1585   b print_marked_cblobs_delete_to_eol;
1586 }
1587 h;
1588 i\\
1589 ::: $file :::
1590 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1591 $v:narrowed to blob
1592 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1593 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1594 p;
1595 g;
1596 s/^\\($lblobctx[^\\n]*\\($blobfseq[^\\n]*\\)*\\)//;
1597 : print_marked_cblobs_delete_to_eol
1598 $v:delete to eol
1599 s/^[^\\n]*//;
1600 /^$/d;
1601 s/^[\\n]//;
1602 b print_marked_cblobs;
1603
1604 : print_both
1605 $v:print_both
1606 /^\\($falsepos\\|[^\\n]*$blobseq\\)/! {
1607   $v:delete non-blob header
1608   h;
1609   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1610   : print_both_nomatch_loop
1611   /[\\n]/ {
1612     s/^[^\\n]*[\\n]//;
1613     x;
1614     s/^[^\\n]*[\\n]//;
1615     x;
1616     b print_both_nomatch_loop;
1617   }
1618   x;
1619   b print_both_delete_to_eol;
1620 }
1621 h;
1622 i\\
1623 ::: $file :::
1624 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1625 $v:narrowed to blob
1626 p;
1627 g;
1628 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)//;
1629 : print_both_delete_to_eol
1630 $v:delete to eol
1631 s/^[^\\n]*//;
1632 /^$/d;
1633 s/^[\\n]//;
1634 b print_both;
1635
1636 : list_matches
1637 $v:list_matches
1638 /^$falsepos/! {
1639   $v:print unmatching lines
1640   h;
1641   s/[\\n]$falsepos.*//;
1642   p;
1643   : list_matches_nomatch_loop
1644   /[\\n]/ {
1645     s/^[^\\n]*[\\n]//;
1646     x;
1647     s/^[^\\n]*[\\n]//;
1648     x;
1649     b list_matches_nomatch_loop;
1650   }
1651   x;
1652   b list_matches_delete_to_eol;
1653 }
1654 h;
1655 s/^\\($falsepos[^\\n]*\\)\\([\\n].*\\)\\?$/\\1/;
1656 $v:narrowed to match
1657 /$blobfseq/{
1658   s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[    ]*;/{\/*(DEBLOBBED)*\/};/g;
1659   s/$blobfseq/\/*(DEBLOBBED)*\//g;
1660 }
1661 p;
1662 g;
1663 s/^\\($falsepos[^\\n]*\\)//;
1664 : list_matches_delete_to_eol
1665 $v:delete to eol
1666 s/^[^\\n]*//;
1667 /^$/d;
1668 s/^[\\n]//;
1669 b list_matches;
1670
1671 : list_blobs
1672 $v:list_blobs
1673 /^$falsepos/ {
1674   $v:print false positive
1675   # This is tricky.  We don't want to deblob the false positive.
1676   /^$falsepos[^\\n]*$blobseq/ {
1677     $v:print false positive immediately followed by blob
1678     h;
1679     s/^\\($falsepos\\)[^\\n]*$blobseq.*/\\1/;
1680     : list_blobs_match_loop
1681     /[\\n]/ {
1682       P;
1683       s/^[^\\n]*[\\n]//;
1684       x;
1685       s/^[^\\n]*[\\n]//;
1686       x;
1687       b list_blobs_match_loop;
1688     }
1689     G;
1690     b list_blobs_delete_to_eol;
1691   }
1692   h;
1693   s/^\\($falsepos[^\\n]*\\)[\\n].*/\\1/;
1694   p;
1695   g;
1696   s/^\\($falsepos[^\\n]*\\)//;
1697   b list_blobs_delete_to_eol;
1698 }
1699 /^[^\\n]*$blobseq/! {
1700   $v:print non-blob header
1701   h;
1702   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1703   p;
1704   : list_blobs_nomatch_loop
1705   /[\\n]/ {
1706     s/^[^\\n]*[\\n]//;
1707     x;
1708     s/^[^\\n]*[\\n]//;
1709     x;
1710     b list_blobs_nomatch_loop;
1711   }
1712   x;
1713   b list_blobs_delete_to_eol;
1714 }
1715 h;
1716 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)\\([\\n].*\\)\\?$/\\1/;
1717 $v:narrowed to blob
1718 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1719 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1720 p;
1721 g;
1722 s/^\\([^\\n]*\\($blobfseq[^\\n]*\\)\\+\\)//;
1723 : list_blobs_delete_to_eol
1724 $v:delete to eol
1725 s/^[^\\n]*//;
1726 /^$/d;
1727 s/^[\\n]//;
1728 b list_blobs;
1729
1730 : list_both
1731 $v:list_both
1732 /^\\($falsepos\\|[^\\n]*$blobseq\\)/! {
1733   $v:print non-blob header
1734   h;
1735   s/[\\n]\\($falsepos\\|[^\\n]*$blobseq\\).*//;
1736   p;
1737   : list_both_nomatch_loop
1738   /[\\n]/ {
1739     s/^[^\\n]*[\\n]//;
1740     x;
1741     s/^[^\\n]*[\\n]//;
1742     x;
1743     b list_both_nomatch_loop;
1744   }
1745   x;
1746   b list_both_delete_to_eol;
1747 }
1748 h;
1749 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)\\([\\n].*\\)\\?$/\\1/;
1750 $v:narrowed to blob
1751 s/{\\($sepx\\)\\?$blobfseq\\($sepx\\)\\?}[      ]*;/{\/*(DEBLOBBED)*\/};/g;
1752 s/$blobfseq/\/*(DEBLOBBED)*\//g;
1753 p;
1754 g;
1755 s/^\\(\\($falsepos[^\\n]*\\|[^\\n]*$blobfseq[^\\n]*\\)\\($blobfseq[^\\n]*\\)*\\)//;
1756 : list_both_delete_to_eol
1757 $v:delete to eol
1758 s/^[^\\n]*//;
1759 /^$/d;
1760 s/^[\\n]//;
1761 b list_both;
1762
1763 "
1764 }
1765
1766 # Process an input file named in $1 and run it through the blob
1767 # recognizer.  Functions set_except and set_sed_cmd provide additional
1768 # arguments on a per-file and per-action basis.
1769
1770 check () {
1771   case "$#" in 1) ;; *) echo ICE >&2; exit 1;; esac
1772
1773   input=$1
1774
1775   falsepos_name=`mktemp -t deblob-check-falsepos-XXXXXX`
1776   tempfiles="$falsepos_name"
1777
1778   # Add $1 to falsepos.  Its usage makes it implicitly anchored to
1779   # the beginning of the line.
1780   addx () {
1781     if test -n "$1"; then
1782       echo -n "\\|$1" >> $falsepos_name
1783     fi
1784   }
1785
1786   set_except "$input"
1787
1788   set_sed_cmd "$input"
1789
1790   rm -f "$falsepos_name"
1791   tempfiles=
1792
1793   # Choose the input source...
1794   case $input in
1795   -) in= ;;
1796   *) in='< "$input"' ;;
1797   esac
1798
1799   set fnord # shifted out below
1800
1801   # Decompress as needed...
1802   case $input in
1803   *.bz2) cmd='bunzip2' ;;
1804   *.gz) cmd='gunzip' ;;
1805   *) cmd= ;;
1806   esac
1807   if test -n "$cmd"; then
1808     set "$@" "$cmd"
1809   fi
1810
1811   # Extract or otherwise munge...
1812   case $input in
1813   *.tar*)
1814     cmd="tar -xf - --to-command='echo \";/*begin \$TAR_FILENAME*/;\"; cat; echo \";/**/;\"; echo \";/*end \$TAR_FILENAME*/;\"'"
1815     ;;
1816   *patch* | *diff*)
1817     sedpatch='
1818       /^[-]/d;
1819       /^\(@@\|+++\) / {
1820         i\
1821 ;/**/;\
1822 ;/*end patchlet */;\
1823 ;/*begin patchlet */;
1824         s/^/;\/*/;
1825         s/$/*\/;/;
1826       };
1827       s/^[ +]//;'
1828     cmd='sed "$sedpatch"'
1829     ;;
1830   *)
1831     cmd='cat'
1832     ;;
1833   esac
1834   cmd="{ echo \";/*begin $input*/;\"; $cmd; echo \";/*end $input*/;\"; }"
1835   set "$@" "$cmd"
1836
1837   case $input in
1838   *.tar*)
1839     cmd="{ cat; cat > /dev/null; }"
1840     set "$@" "$cmd"
1841     ;;
1842   esac
1843
1844   # Then run through the selected action.
1845   if test "$rm" != "rm -f" || test ! `echo "$sedmain" | wc -c` -lt 1024; then
1846     scriptname=`mktemp -t deblob-check-sedmain-XXXXXX`
1847     tempfiles="$tempfiles $scriptname"
1848     echo "$sedmain" > $scriptname
1849     cmd="sed -n -f \"$scriptname\""
1850   else
1851     cmd='sed -n "$sedmain"'
1852   fi
1853   set "$@" "$cmd"
1854
1855   test $# != 1 || set "$@" "cat"
1856
1857   shift # fnord goes out here
1858
1859   pipe=
1860   for cmd
1861   do
1862     if test -z "$pipe"; then
1863       pipe="$cmd $in"
1864     else
1865       pipe="$pipe | $cmd"
1866     fi
1867   done
1868
1869   eval "$pipe"
1870   status=$?
1871
1872   $rm $tempfiles
1873   tempfiles=
1874
1875   (exit $status)
1876 }
1877
1878 # If no input given, use stdin.
1879 case $# in
1880 0)
1881   test -t 0 && echo reading from standard input >&2
1882   set fnord -
1883   shift
1884   ;;
1885 esac
1886
1887 # The lines below commented out out #list: can be used to get a list
1888 # of matching inputs.  ATM this is useless, so we just use a shell
1889 # boolean.
1890
1891 #list: n=$#
1892 pass=:
1893
1894 tempfiles=
1895 trap "status=$?; test -z \"$tempfiles\" || rm -f $tempfiles; (exit $status); exit" 0 1 2 15
1896
1897 # Go through each of the input files in the command line.
1898 for file
1899 do
1900   # If we print anything whatsoever (even a blank line) while
1901   # processing it, we've failed.
1902   if check "$file"; then
1903     :
1904   else
1905     pass=false
1906     #list: set fnord "$@" "$file"
1907     #list: shift
1908   fi
1909 done
1910
1911 #list: shift $n
1912
1913 #list: exec test $# = 0
1914 $pass
1915 exit