source: trunk/source/compiler/nx0.lisp @ 12354

Last change on this file since 12354 was 12354, checked in by gb, 10 years ago

Don't do anything special with THE forms in NX-TRANSFORM.

  • Property svn:eol-style set to native
  • Property svn:keywords set to Author Date Id Revision
File size: 107.4 KB
Line 
1;;; -*- Mode: Lisp; Package: CCL -*-
2;;;
3;;;   Copyright (C) 1994-2001 Digitool, Inc
4;;;   This file is part of OpenMCL. 
5;;;
6;;;   OpenMCL is licensed under the terms of the Lisp Lesser GNU Public
7;;;   License , known as the LLGPL and distributed with OpenMCL as the
8;;;   file "LICENSE".  The LLGPL consists of a preamble and the LGPL,
9;;;   which is distributed with OpenMCL as the file "LGPL".  Where these
10;;;   conflict, the preamble takes precedence. 
11;;;
12;;;   OpenMCL is referenced in the preamble as the "LIBRARY."
13;;;
14;;;   The LLGPL is also available online at
15;;;   http://opensource.franz.com/preamble.html
16
17
18
19(in-package "CCL")
20
21;; :compiler:nx0.lisp - part of the compiler
22
23
24(defstruct pending-declarations
25  vdecls
26  fdecls
27  mdecls)
28
29; Phony AFUNC "defstruct":
30(defun make-afunc (&aux (v (%make-afunc)))
31  (setf (afunc-fn-refcount v) 0)
32  (setf (afunc-fn-downward-refcount v) 0)
33  (setf (afunc-bits v) 0)
34  v)
35
36(defvar *compile-code-coverage* nil "True to instrument for code coverage")
37
38(defvar *nx-blocks* nil)
39(defvar *nx-tags* nil)
40(defvar *nx-parent-function* nil)
41(defvar *nx-current-function* nil)
42(defvar *nx-lexical-environment* nil)
43(defvar *nx-symbol-macros* nil)
44(defvar *nx-inner-functions* nil)
45(defvar *nx-cur-func-name* nil)
46(defvar *nx-current-note* nil)
47(defparameter *nx-source-note-map* nil) ;; there might be external refs, from macros.
48(defvar *nx-form-type* t)
49;(defvar *nx-proclaimed-inline* nil)
50;(defvar *nx-proclaimed-inline* (make-hash-table :size 400 :test #'eq))
51(defvar *nx-proclaimed-ignore* nil)
52(defvar *nx-parsing-lambda-decls* nil) ; el grosso.
53(defparameter *nx-standard-declaration-handlers* nil)
54(defparameter *nx-hoist-declarations* t)
55(defparameter *nx-loop-nesting-level* 0)
56(defvar *nx-break-on-program-errors* t)
57
58(defvar *nx1-vcells* nil)
59(defvar *nx1-fcells* nil)
60
61(defvar *nx1-operators* (make-hash-table :size 300 :test #'eq))
62
63
64; The compiler can (generally) use temporary vectors for VARs.
65(defun nx-cons-var (name &optional (bits 0))
66  (%istruct 'var name bits nil nil nil nil 0 nil))
67
68
69
70
71(defvar *nx-lambdalist* (make-symbol "lambdalist"))
72(defvar *nx-nil* (list (make-symbol "nil")))
73(defvar *nx-t* (list (make-symbol "t")))
74
75(defparameter *nx-current-compiler-policy* (%default-compiler-policy))
76
77(defvar *nx-next-method-var* nil)
78(defvar *nx-call-next-method-function* nil)
79
80(defvar *nx-sfname* nil)
81(defvar *nx-operators* ())
82(defvar *nx-warnings* nil)
83
84(defvar *nx1-compiler-special-forms* nil "Real special forms")
85
86(defmacro without-compiling-code-coverage (&body body)
87  "Disable code coverage in the lexical scope of the form"
88  `(compiler-let ((*nx-current-code-note* nil))
89     ,@body))
90
91(defparameter *nx-never-tail-call*
92  '(error cerror break warn type-error file-error
93    signal-program-error signal-simple-program-error
94    print-call-history
95    #-bccl %get-frame-pointer
96    #-bccl break-loop)
97  "List of functions which never return multiple values and
98   should never be tail-called.")
99
100(defvar *cross-compiling* nil "bootstrapping")
101
102
103(defparameter *nx-operator-result-types*
104  '((#.(%nx1-operator list) . list)
105    (#.(%nx1-operator memq) . list)
106    (#.(%nx1-operator %temp-list) . list)
107    (#.(%nx1-operator assq) . list)
108    (#.(%nx1-operator cons) . cons)
109    (#.(%nx1-operator rplaca) . cons)
110    (#.(%nx1-operator %rplaca) . cons)
111    (#.(%nx1-operator rplacd) . cons)
112    (#.(%nx1-operator %rplacd) . cons)
113    (#.(%nx1-operator %temp-cons) . cons)
114    (#.(%nx1-operator %i+) . fixnum)
115    (#.(%nx1-operator %i-) . fixnum)
116    (#.(%nx1-operator %i*) . fixnum)
117    (#.(%nx1-operator %ilsl) . fixnum)
118    (#.(%nx1-operator %ilsr) . fixnum)
119    (#.(%nx1-operator %iasr) . fixnum)
120    (#.(%nx1-operator %ilogior2) . fixnum)
121    (#.(%nx1-operator %ilogand2) . fixnum)
122    (#.(%nx1-operator %ilogxor2) . fixnum)
123    (#.(%nx1-operator %code-char) . character)
124    (#.(%nx1-operator schar) . character)
125    (#.(%nx1-operator length) . fixnum)
126    (#.(%nx1-operator uvsize) . fixnum)
127    (#.(%nx1-operator %double-float/-2) . double-float)
128    (#.(%nx1-operator %double-float/-2!) . double-float) ; no such operator
129    (#.(%nx1-operator %double-float+-2) . double-float)
130    (#.(%nx1-operator %double-float+-2!) . double-float)
131    (#.(%nx1-operator %double-float--2) . double-float)
132    (#.(%nx1-operator %double-float--2!) . double-float)
133    (#.(%nx1-operator %double-float*-2) . double-float)
134    (#.(%nx1-operator %double-float*-2!) . double-float)
135    (#.(%nx1-operator %short-float/-2) . double-float)
136    (#.(%nx1-operator %short-float+-2) . double-float)
137    (#.(%nx1-operator %short-float--2) . double-float)
138    (#.(%nx1-operator %short-float*-2) . double-float)
139    (#.(%nx1-operator %double-to-single) . single-float)
140    (#.(%nx1-operator %single-to-double) . double-float)
141    (#.(%nx1-operator %fixnum-to-single) . single-float)
142    (#.(%nx1-operator %fixnum-to-double) . double-float)
143    (#.(%nx1-operator char-code) . #.`(integer 0 (,char-code-limit)))
144   ))
145
146(defparameter *nx-operator-result-types-by-name*
147  '((%ilognot . fixnum)
148    (%ilogxor . fixnum)
149    (%ilogand . fixnum)
150    (%ilogior . fixnum)
151    (char-code . #. `(integer 0 (,char-code-limit)))))
152
153(setq *nx-known-declarations*
154  '(special inline notinline type ftype function ignore optimize dynamic-extent ignorable
155    ignore-if-unused settable unsettable
156     notspecial global-function-name debugging-function-name resident))
157
158(defun find-optimize-quantity (name env)
159  (let ((pair ()))
160    (loop
161      (when (listp env) (return))
162      (when (setq pair (assq name (lexenv.mdecls env)))
163        (return (%cdr pair)))
164      (setq env (lexenv.parent-env env)))))
165   
166(defun debug-optimize-quantity (env)
167  (or (find-optimize-quantity 'debug env)
168      *nx-debug*))
169
170(defun space-optimize-quantity (env)
171  (or (find-optimize-quantity 'space env)
172      *nx-space*))
173
174(defun safety-optimize-quantity (env)
175  (or (find-optimize-quantity 'safety env)
176      *nx-safety*))
177
178(defun speed-optimize-quantity (env)
179  (or (find-optimize-quantity 'speed env)
180      *nx-speed*))
181
182(defun compilation-speed-optimize-quantity (env)
183  (or (find-optimize-quantity 'compilation-speed env)
184      *nx-cspeed*))
185
186(defvar *nx-ignore-if-unused* ())
187(defvar *nx-new-p2decls* ())
188(defvar *nx-inlined-self* t)
189(defvar *nx-all-vars* nil)
190(defvar *nx-bound-vars* nil)
191(defvar *nx-punted-vars* nil)
192(defvar *nx-inline-expansions* nil)
193(defparameter *nx-compile-time-compiler-macros* nil)
194(defvar *nx-global-function-name* nil)
195(defvar *nx-can-constant-fold* ())
196(defvar *nx-synonyms* ())
197(defvar *nx-load-time-eval-token* ())
198
199(define-condition compiler-function-overflow (condition) ())
200
201(defun compiler-function-overflow ()
202  (signal 'compiler-function-overflow)
203  (error "Function size exceeds compiler limitation."))
204
205(defvar *compiler-macros* (make-hash-table :size 100 :test #'eq))
206
207;;; Just who was responsible for the "FUNCALL" nonsense ?
208;;; Whoever it is deserves a slow and painful death ...
209
210(defmacro define-compiler-macro  (name arglist &body body &environment env)
211  "Define a compiler-macro for NAME."
212  (let* ((block-name name)
213         (def-name (validate-function-name name)))
214    (unless (eq def-name block-name)
215      (setq block-name (cadr block-name)))
216    (let ((body (parse-macro-1 block-name arglist body env)))
217      `(eval-when (:compile-toplevel :load-toplevel :execute)
218         (eval-when (:load-toplevel :execute)
219           (record-source-file ',name 'compiler-macro))
220         (setf (compiler-macro-function ',name)
221               (nfunction (compiler-macro-function ,name)  ,body))
222         ',name))))
223
224;;; This is silly (as may be the whole idea of actually -using-
225;;; compiler-macros).  Compiler-macroexpand-1 will return a second
226;;; value of NIL if the value returned by the expansion function is EQ
227;;; to the original form.  This differs from the behavior of
228;;; macroexpand-1, but users are not encouraged to write macros which
229;;; return their &whole args (as the DEFINE-COMPILER-MACRO issue
230;;; encourages them to do ...)  Cheer up! Neither of these things have
231;;; to exist!
232(defun compiler-macroexpand-1 (form &optional env)
233  (let ((expander nil)
234        (newdef nil))
235    (if (and (consp form)
236             (symbolp (car form))
237             (setq expander (compiler-macro-function (car form) env)))
238      (values (setq newdef (funcall *macroexpand-hook* expander form env)) (neq newdef form))
239      (values form nil))))
240
241; ... If this exists, it should probably be exported.
242(defun compiler-macroexpand (form &optional env)
243  (multiple-value-bind (new win) (compiler-macroexpand-1 form env)
244    (do* ((won-at-least-once win))
245         ((null win) (values new won-at-least-once))
246      (multiple-value-setq (new win) (compiler-macroexpand-1 new env)))))
247
248
249
250
251(defun compiler-macro-function (name &optional env)
252  "If NAME names a compiler-macro in ENV, return the expansion function, else
253   return NIL. Can be set with SETF when ENV is NIL."
254  (setq name (validate-function-name name))
255  (unless (nx-lexical-finfo name env)
256    (or (cdr (assq name *nx-compile-time-compiler-macros*))
257        (values (gethash name *compiler-macros*)))))
258
259(defun set-compiler-macro-function (name def)
260  (setq name (validate-function-name name))
261  (if def
262    (setf (gethash name *compiler-macros*) def)
263    (remhash name *compiler-macros*))
264  def)
265
266(defsetf compiler-macro-function set-compiler-macro-function)
267
268(defparameter *nx-add-xref-entry-hook* nil
269  "When non-NIL, assumed to be a function of 3 arguments
270which asserts that the specied relation from the current
271function to the indicated name is true.")
272
273;; Cross-referencing
274(defun nx-record-xref-info (relation name)
275  (let* ((axe (fboundp '%add-xref-entry)))
276    (when axe
277      (funcall axe relation *nx-cur-func-name* name))))
278
279
280
281(defun nx-apply-env-hook (hook env &rest args)
282  (declare (dynamic-extent args))
283  (when (fixnump hook) (setq hook (uvref *nx-current-compiler-policy* hook)))
284  (if hook
285    (if (functionp hook)
286      (apply hook env args)
287      t)))
288
289(defun nx-self-calls-inlineable (env)
290  (nx-apply-env-hook policy.inline-self-calls env))
291
292(defun nx-allow-register-allocation (env)
293  (not (nx-apply-env-hook policy.inhibit-register-allocation env)))
294
295(defun nx-trust-declarations (env)
296  (unless (eq (safety-optimize-quantity env) 3)
297    (nx-apply-env-hook policy.trust-declarations env)))
298
299(defun nx-open-code-in-line (env)
300  (nx-apply-env-hook policy.open-code-inline env))
301
302(defun nx-inline-car-cdr (env)
303  (unless (eq (safety-optimize-quantity env) 3)
304    (nx-apply-env-hook policy.inhibit-safety-checking env)))
305
306(defun nx-inhibit-safety-checking (env)
307  (unless (eq (safety-optimize-quantity env) 3)
308    (nx-apply-env-hook policy.inhibit-safety-checking env)))
309
310(defun nx-tailcalls (env)
311  (nx-apply-env-hook policy.allow-tail-recursion-elimination env))
312
313(defun nx-allow-transforms (env)
314  (nx-apply-env-hook policy.allow-transforms env))
315
316(defun nx-force-boundp-checks (var env)
317  (or (eq (safety-optimize-quantity env) 3)
318      (nx-apply-env-hook policy.force-boundp-checks var env)))
319
320(defun nx-substititute-constant-value (symbol value env)
321  (nx-apply-env-hook policy.allow-constant-substitution symbol value env))
322
323#-BOOTSTRAPPED
324(eval-when (compile)
325  (unless (boundp 'policy.declarations-typecheck)
326    (load "ccl:library;lispequ.lisp")))
327
328(defun nx-declarations-typecheck (env)
329  (nx-apply-env-hook policy.declarations-typecheck env))
330
331
332#-bccl
333(defun nx1-default-operator ()
334 (or (gethash *nx-sfname* *nx1-operators*)
335     (error "Bug - operator not found for  ~S" *nx-sfname*)))
336
337(defun nx-new-temp-var (pending &optional (pname "COMPILER-VAR"))
338  (let ((var (nx-new-var pending (make-symbol pname))))
339    (nx-set-var-bits var (%ilogior (%ilsl $vbitignoreunused 1)
340                                   (%ilsl $vbittemporary 1)
341                                   (nx-var-bits var)))
342    var))
343
344(defun nx-new-vdecl (pending name class &optional info)
345  (push (cons name (cons class info)) (pending-declarations-vdecls pending)))
346
347(defun nx-new-fdecl (pending name class &optional info)
348  (push (cons name (cons class info)) (pending-declarations-fdecls pending)))
349
350(defun nx-new-var (pending sym &optional (check t))
351  (nx-init-var pending (nx-cons-var (nx-need-var sym check) 0)))
352                   
353(defun nx-proclaimed-special-p (sym)
354  (setq sym (nx-need-sym sym))
355  (let* ((defenv (definition-environment *nx-lexical-environment*))
356         (specials (if defenv (defenv.specials defenv))))
357    (or (assq sym specials)
358        (proclaimed-special-p sym))))
359
360(defun nx-proclaimed-parameter-p (sym)
361  (setq sym (nx-need-sym sym))
362  (or (constantp sym)
363      (multiple-value-bind (special-p info) (nx-lex-info sym t)
364        (or 
365         (and (eq special-p :special) info)
366         (let* ((defenv (definition-environment *nx-lexical-environment*)))
367           (if defenv 
368             (or (%cdr (assq sym (defenv.specials defenv)))
369                 (assq sym (defenv.constants defenv)))))))))
370
371(defun nx-process-declarations (pending decls &optional (env *nx-lexical-environment*) &aux s f)
372  (dolist (decl decls pending)
373    (dolist (spec (%cdr decl))
374      (if (memq (setq s (car spec)) *nx-known-declarations*)
375        (if (setq f (getf *nx-standard-declaration-handlers* s))
376          (funcall f pending spec env))
377        ; Any type name is now (ANSI CL) a valid declaration.
378        (if (specifier-type-if-known s env)
379          (nx-process-type-decl pending spec s (%cdr spec) env)
380          (nx-bad-decls spec))))))
381
382; Put all variable decls for the symbol VAR into effect in environment ENV.  Now.
383; Returns list of all new vdecls pertaining to VAR.
384(defun nx-effect-vdecls (pending var env)
385  (let ((vdecls (lexenv.vdecls env))
386        (own nil))
387    (dolist (decl (pending-declarations-vdecls pending) (setf (lexenv.vdecls env) vdecls))
388      (when (eq (car decl) var) 
389        (when (eq (cadr decl) 'type)
390          (let* ((newtype (cddr decl))
391                 (merged-type (nx1-type-intersect var newtype (nx-declared-type var env))))
392             (unless (eq merged-type newtype)
393              (rplacd (cdr decl) merged-type))))
394        (push decl vdecls)
395        (push (cdr decl) own)))
396    own))
397
398
399(defun nx1-typed-var-initform (pending sym form &optional (env *nx-lexical-environment*))
400  (let* ((type t)
401         (*nx-form-type* (if (nx-trust-declarations env)
402                           (dolist (decl (pending-declarations-vdecls pending) type)
403                             (when (and (eq (car decl) sym) (eq (cadr decl) 'type))
404                               (setq type (nx1-type-intersect sym (nx-target-type type) (cddr decl)))))
405                           t)))
406    (nx1-typed-form form env)))
407
408; Guess.
409(defun nx-effect-fdecls (pending var env)
410  (let ((fdecls (lexenv.fdecls env))
411        (own nil))
412    (dolist (decl (pending-declarations-fdecls pending) (setf (lexenv.fdecls env) fdecls))
413      (when (eq (car decl) var) 
414        (push decl fdecls)
415        (push (cdr decl) own)))
416    own))
417
418
419
420
421(defun nx-acode-form-typep (form type env)
422  (acode-form-typep form type  (nx-trust-declarations env)))
423
424(defun acode-form-typep (form type trust-decls)
425  (if (acode-p form)
426    (let* ((op (acode-operator form))
427           (opval-p (or (eq op (%nx1-operator fixnum)) (eq op (%nx1-operator immediate))))
428           (optype (acode-form-type form trust-decls)))
429      (values
430       (if optype 
431         (subtypep optype (nx-target-type type))
432         (if opval-p (typep (%cadr form) (nx-target-type type))))))))
433
434(defun nx-acode-form-type (form env)
435  (acode-form-type form (nx-trust-declarations env)))
436
437(defparameter *numeric-acode-ops*
438  (list (%nx1-operator add2)
439        (%nx1-operator sub2)
440        (%nx1-operator mul2)))
441
442
443(defun acode-form-type (form trust-decls)
444  (nx-target-type 
445   (if (acode-p form)
446     (let* ((op (acode-operator form)))
447       (if (eq op (%nx1-operator fixnum))
448         'fixnum
449         (if (eq op (%nx1-operator immediate))
450           (type-of (%cadr form))
451           (and trust-decls
452                (if (eq op (%nx1-operator typed-form))
453                  (if (eq (%cadr form) 'number)
454                    (or (acode-form-type (nx-untyped-form form) trust-decls)
455                        'number)
456                    (%cadr form))
457                  (if (eq op (%nx1-operator lexical-reference))
458                    (let* ((var (cadr form))
459                           (bits (nx-var-bits var))
460                           (punted (logbitp $vbitpunted bits)))
461                      (if (or punted
462                              (eql 0 (%ilogand $vsetqmask bits)))
463                        (var-inittype var)))
464                    (if (or (eq op (%nx1-operator %aref1))
465                            (eq op (%nx1-operator simple-typed-aref2))
466                            (eq op (%nx1-operator general-aref2))
467                            (eq op (%nx1-operator simple-typed-aref3))
468                            (eq op (%nx1-operator general-aref3)))
469                      (let* ((atype (acode-form-type (cadr form) t))
470                             (actype (if atype (specifier-type atype))))
471                        (if (typep actype 'array-ctype)
472                          (type-specifier (array-ctype-specialized-element-type
473                                           actype))))
474                      (if (member op *numeric-acode-ops*)
475                        (multiple-value-bind (f1 f2)
476                            (nx-binop-numeric-contagion (cadr form)
477                                                        (caddr form)
478                                                        trust-decls)
479                          (if (and (acode-form-typep f1 'float trust-decls)
480                                   (acode-form-typep f2 'float trust-decls))
481
482                            (if (or (acode-form-typep f1 'double-float trust-decls)
483                                    (acode-form-typep f2 'double-float trust-decls))
484                            'double-float
485                            'single-float)))
486                        (cdr (assq op *nx-operator-result-types*)))))))))))))
487
488(defun nx-binop-numeric-contagion (form1 form2 trust-decls)
489  (cond ((acode-form-typep form1 'double-float trust-decls)
490         (if (acode-form-typep form2 'double-float trust-decls)
491           (values form1 form2)
492           (let* ((c2 (acode-real-constant-p form2)))
493             (if c2
494               (values form1 (make-acode (%nx1-operator immediate)
495                                         (float c2 0.0d0)))
496               (if (acode-form-typep form2 'fixnum trust-decls)
497                 (values form1 (make-acode (%nx1-operator %fixnum-to-double)
498                                           form2))
499                 (values form1 form2))))))
500        ((acode-form-typep form2 'double-float trust-decls)
501         (let* ((c1 (acode-real-constant-p form1)))
502           (if c1
503             (values (make-acode (%nx1-operator immediate)
504                                 (float c1 0.0d0)) form2)
505             (if (acode-form-typep form1 'fixnum trust-decls)
506               (values (make-acode (%nx1-operator %fixnum-to-double)
507                                   form1) form2)
508               (values form1 form2)))))
509        ((acode-form-typep form1 'single-float trust-decls)
510         (if (acode-form-typep form2 'single-float trust-decls)
511           (values form1 form2)
512           (let* ((c2 (acode-real-constant-p form2)))
513             (if c2
514               (values form1 (make-acode (%nx1-operator immediate)
515                                         (float c2 0.0f0)))
516               (if (acode-form-typep form2 'fixnum trust-decls)
517                 (values form1 (make-acode (%nx1-operator %fixnum-to-single)
518                                           form2))
519                 (values form1 form2))))))
520        ((acode-form-typep form2 'single-float trust-decls)
521         (let* ((c1 (acode-real-constant-p form1)))
522           (if c1
523             (values (make-acode (%nx1-operator immediate)
524                                 (float c1 0.0f0)) form2)
525             (if (acode-form-typep form1 'fixnum trust-decls)
526               (values (make-acode (%nx1-operator %fixnum-to-single)
527                                   form1) form2)
528               (values form1 form2)))))
529        (t
530         (values form1 form2))))
531
532(defun acode-punted-var-p (var)
533  (let ((bits (nx-var-bits var)))
534    (and (%ilogbitp $vbitpunted bits)
535         (not (%ilogbitp $vbitspecial bits)))))
536
537;; Use acode-unwrapped-form-value to reason about the value of a form at
538;; compile time.   To actually generate code, use acode-unwrapped-form.
539(defun acode-unwrapped-form-value (form)
540  ;; Currently no difference, but if had any operators like with-code-note,
541  ;; would unwrap them here.
542  (acode-unwrapped-form form))
543
544; Strip off any type info or "punted" lexical references.
545; ??? Is it true that the "value" of the punted reference is unwrapped ? ???
546(defun acode-unwrapped-form (form) 
547  (while (and (consp (setq form (nx-untyped-form form)))
548           (eq (%car form) (%nx1-operator lexical-reference))
549           (acode-punted-var-p (cadr form)))
550    (setq form (var-ea (cadr form))))
551  form)
552
553(defun acode-fixnum-form-p (x)
554  (setq x (acode-unwrapped-form-value x))
555  (if (acode-p x)
556    (if (eq (acode-operator x) (%nx1-operator fixnum)) 
557      (cadr x))))
558
559(defun acode-integer-constant-p (x bits)
560  (let* ((int (or (acode-fixnum-form-p x)
561                  (progn
562                    (setq x (acode-unwrapped-form x))
563                    (if (acode-p x)
564                      (if (and (eq (acode-operator x) (%nx1-operator immediate))
565                               (typep (cadr x) 'fixnum))
566                        (cadr x)))))))
567    (and int
568         (or
569           (typep int `(signed-byte ,bits))
570           (typep int `(unsigned-byte ,bits)))
571         int)))
572
573(defun acode-real-constant-p (x)
574  (or (acode-fixnum-form-p x)
575      (progn
576        (setq x (acode-unwrapped-form x))
577        (if (acode-p x)
578          (if (and (eq (acode-operator x) (%nx1-operator immediate))
579                   (typep (cadr x) 'real))
580            (cadr x))))))
581
582
583
584(defun nx-lookup-target-uvector-subtag (name)
585  (or (cdr (assoc name (arch::target-uvector-subtags (backend-target-arch *target-backend*))))
586      (nx-error "Type ~s not supported on target ~s"
587                name (backend-target-arch-name *target-backend*))))
588
589(defun nx-target-uvector-subtag-name (subtag)
590  (or (car (rassoc subtag (arch::target-uvector-subtags (backend-target-arch *target-backend*))))
591      (nx-error "Subtag ~s not native on target ~s"
592                subtag (backend-target-arch-name *target-backend*))))
593
594(defun nx-error-for-simple-2d-array-type (type-keyword)
595  (ecase type-keyword
596    (:simple-vector arch::error-object-not-simple-array-t-2d)
597    (:simple-string arch::error-object-not-simple-array-char-2d)
598    (:bit-vector arch::error-object-not-simple-array-bit-2d)
599    (:unsigned-8-bit-vector arch::error-object-not-simple-array-u8-2d)
600    (:signed-8-bit-vector arch::error-object-not-simple-array-s8-2d)
601    (:unsigned-16-bit-vector arch::error-object-not-simple-array-u16-2d)
602    (:signed-16-bit-vector arch::error-object-not-simple-array-s16-2d)
603    (:unsigned-32-bit-vector arch::error-object-not-simple-array-u32-2d)
604    (:signed-32-bit-vector arch::error-object-not-simple-array-s32-2d)
605    (:unsigned-64-bit-vector arch::error-object-not-simple-array-u64-2d)
606    (:signed-64-bit-vector arch::error-object-not-simple-array-s64-2d)
607    (:double-float-vector arch::error-object-not-simple-array-double-float-2d)
608    (:single-float-vector arch::error-object-not-simple-array-single-float-2d)
609    (:fixnum-vector arch::error-object-not-simple-array-fixnum-2d)))
610
611(defun nx-error-for-simple-3d-array-type (type-keyword)
612  (ecase type-keyword
613    (:simple-vector arch::error-object-not-simple-array-t-3d)
614    (:simple-string arch::error-object-not-simple-array-char-3d)
615    (:bit-vector arch::error-object-not-simple-array-bit-3d)
616    (:unsigned-8-bit-vector arch::error-object-not-simple-array-u8-3d)
617    (:signed-8-bit-vector arch::error-object-not-simple-array-s8-3d)
618    (:unsigned-16-bit-vector arch::error-object-not-simple-array-u16-3d)
619    (:signed-16-bit-vector arch::error-object-not-simple-array-s16-3d)
620    (:unsigned-32-bit-vector arch::error-object-not-simple-array-u32-3d)
621    (:signed-32-bit-vector arch::error-object-not-simple-array-s32-3d)
622    (:unsigned-64-bit-vector arch::error-object-not-simple-array-u64-3d)
623    (:signed-64-bit-vector arch::error-object-not-simple-array-s64-3d)
624    (:double-float-vector arch::error-object-not-simple-array-double-float-3d)
625    (:single-float-vector arch::error-object-not-simple-array-single-float-3d)
626    (:fixnum-vector arch::error-object-not-simple-array-fixnum-3d)))
627
628(defun acode-s16-constant-p (x)
629  (setq x (acode-unwrapped-form x))
630  (if (acode-p x)
631    (let* ((op (acode-operator x)))
632      (if (eql op (%nx1-operator fixnum))
633        (let* ((val (cadr x)))
634          (if (target-word-size-case
635               (32 (typep val '(signed-byte #.(- 16 2))))
636               (64 (typep val '(signed-byte #.(- 16 3)))))
637            (ash val (target-word-size-case
638                      (32 2)
639                      (64 3)))))
640        (if (eql op (%nx1-operator %unbound-marker))
641          (arch::target-unbound-marker-value
642           (backend-target-arch *target-backend*))
643          (if (eql op (%nx1-operator %slot-unbound-marker))
644            (arch::target-slot-unbound-marker-value
645             (backend-target-arch *target-backend*))))))))
646
647(defun acode-s32-constant-p (x)
648  (setq x (acode-unwrapped-form x))
649  (if (acode-p x)
650    (let* ((op (acode-operator x)))
651      (if (eql op (%nx1-operator fixnum))
652        (let* ((val (cadr x)))
653          (if (target-word-size-case
654               (32 (typep val '(signed-byte #.(- 32 2))))
655               (64 (typep val '(signed-byte #.(- 32 3)))))
656            (ash val (target-word-size-case
657                      (32 2)
658                      (64 3)))))
659        (if (eql op (%nx1-operator %unbound-marker))
660          (arch::target-unbound-marker-value
661           (backend-target-arch *target-backend*))
662          (if (eql op (%nx1-operator %slot-unbound-marker))
663            (arch::target-slot-unbound-marker-value
664             (backend-target-arch *target-backend*))))))))
665
666(defun acode-fixnum-type-p (form trust-decls)
667  (or (acode-fixnum-form-p form)
668      (and trust-decls
669           (acode-p form)
670           (eq (acode-operator form) (%nx1-operator typed-form))
671           (subtypep (cadr form) 'fixnum))))
672
673
674(defun nx-acode-fixnum-type-p (form env)
675    (acode-fixnum-type-p form (nx-trust-declarations env)))
676
677; Is acode-expression the result of alphatizing (%int-to-ptr <integer>) ?
678(defun acode-absolute-ptr-p (acode-expression &optional skip)
679  (and (acode-p acode-expression)
680       (or skip (prog1 (eq (acode-operator acode-expression) (%nx1-operator %macptrptr%))
681                  (setq acode-expression (%cadr acode-expression))))
682       (eq (acode-operator acode-expression) (%nx1-operator %consmacptr%))
683       (eq (acode-operator (setq acode-expression (%cadr acode-expression))) 
684           (%nx1-operator %immediate-int-to-ptr))
685       (let ((op (acode-operator (setq acode-expression (%cadr acode-expression)))))
686         (if (or (eq op (%nx1-operator fixnum))
687                 (and (eq op (%nx1-operator immediate))
688                      (integerp (%cadr acode-expression))))
689           (%cadr acode-expression)))))
690
691(defun specifier-type-if-known (typespec &optional env &key whine)
692  (handler-case (specifier-type typespec env)
693    (parse-unknown-type (c) 
694      (when (and whine *compiler-warn-on-undefined-type-references*)
695        (nx1-whine :undefined-type typespec))
696      (values nil (parse-unknown-type-specifier c)))
697    ;; catch any errors due to destructuring in type-expand
698    (program-error (c)
699      (when whine
700        (nx1-whine :invalid-type typespec c))
701      (values nil typespec))))
702
703#+debugging-version
704(defun specifier-type-if-known (typespec &optional env &key whine)
705  (handler-bind ((parse-unknown-type (lambda (c)
706                                       (break "caught unknown-type ~s" c)
707                                       (when (and whine *compiler-warn-on-undefined-type-references*)
708                                         (nx1-whine :undefined-type typespec))
709                                       (return-from specifier-type-if-known
710                                         (values nil (parse-unknown-type-specifier c)))))
711                 (program-error (lambda (c)
712                                  (break "caught program-error ~s" c)
713                                  (when whine
714                                    (nx1-whine :invalid-type typespec c))
715                                  (return-from specifier-type-if-known
716                                    (values nil typespec)))))
717    (specifier-type typespec env)))
718
719(defun nx-check-vdecl-var-ref (decl)
720  (unless (eq (cadr decl) 'special)
721    (let* ((sym (car decl))
722           (info (nx-lex-info sym)))
723      (when (or (eq info :symbol-macro)
724                (and (null info) (not (nx-proclaimed-special-p sym))))
725        (nx1-whine :unknown-declaration-variable (cadr decl) sym)))))
726
727
728(defun nx-effect-other-decls (pending env)
729  (flet ((merge-decls (new old)
730                      (dolist (decl new old) (pushnew decl old :test #'eq))))
731    (let ((vdecls (pending-declarations-vdecls pending))
732          (fdecls (pending-declarations-fdecls pending))
733          (mdecls (pending-declarations-mdecls pending)))
734      (when vdecls
735        (let ((env-vdecls (lexenv.vdecls env)))
736          (dolist (decl vdecls (setf (lexenv.vdecls env) env-vdecls))
737            (unless (memq decl env-vdecls)
738              (nx-check-vdecl-var-ref decl)
739              (when (eq (cadr decl) 'type)
740                (let* ((var (car decl))
741                       (newtype (cddr decl))
742                       (merged-type (nx1-type-intersect var newtype (nx-declared-type var env))))
743                  (unless (eq merged-type newtype)
744                    (rplacd (cdr decl) merged-type))))
745              (push decl env-vdecls)))))
746      (when fdecls (setf (lexenv.fdecls env) (merge-decls fdecls (lexenv.vdecls env))))
747      (when mdecls (setf (lexenv.mdecls env) (merge-decls mdecls (lexenv.mdecls env))))
748      (setq *nx-inlined-self* (and (nx-self-calls-inlineable env) 
749                                   (let ((name *nx-global-function-name*)) 
750                                     (and name (not (nx-declared-notinline-p name env))))))
751      (unless (nx-allow-register-allocation env)
752        (nx-inhibit-register-allocation))
753      (setq *nx-new-p2decls*
754            (if (eql (safety-optimize-quantity env) 3)
755              (logior $decl_full_safety
756                      (if (nx-tailcalls env) $decl_tailcalls 0))
757              (%ilogior
758                (if (nx-tailcalls env) $decl_tailcalls 0)
759                (if (nx-open-code-in-line env) $decl_opencodeinline 0)
760                (if (nx-inhibit-safety-checking env) $decl_unsafe 0)
761                (if (nx-trust-declarations env) $decl_trustdecls 0)))))))
762
763#|     
764(defun nx-find-misc-decl (declname env)
765  (loop
766    (unless (and env (eq (uvref env 0) 'lexical-environment)) (return))
767    (dolist (mdecl (lexenv.mdecls env))
768      (if (atom mdecl)
769        (if (eq mdecl declname)
770          (return-from nx-find-misc-decl t))
771        (if (eq (%car mdecl) declname)
772          (return-from nx-find-misc-decl (%cdr mdecl)))))
773    (setq env (lexenv.parent-env env))))
774|#
775
776
777(defun nx-bad-decls (decls)
778  (nx1-whine :bad-declaration decls))
779
780
781(defnxdecl special (pending decl env &aux whined)
782  (declare (ignore env))
783  (dolist (s (%cdr decl))
784    (if (symbolp s) 
785      (nx-new-vdecl pending s 'special)
786      (unless (shiftf whined t) (nx-bad-decls decl)))))
787
788(defnxdecl notspecial (pending decl env &aux whined)
789  (declare (ignore env))
790  (dolist (s (%cdr decl))
791    (if (symbolp s)
792      (nx-new-vdecl pending s 'notspecial)
793      (unless (shiftf whined t) (nx-bad-decls decl)))))
794
795(defnxdecl dynamic-extent (pending decl env &aux whined)
796  (declare (ignore env))
797  (dolist (s (%cdr decl))
798    (if (symbolp s) 
799      (nx-new-vdecl pending s 'dynamic-extent t)
800      (if (and (consp s)
801               (eq (%car s) 'function)
802               (consp (%cdr s))
803               (valid-function-name-p (cadr s))
804               (setq s (validate-function-name (cadr s))))
805        (nx-new-fdecl pending s 'dynamic-extent t)
806        (unless (shiftf whined t) (nx-bad-decls decl))))))
807
808(defnxdecl ignorable (pending decl env &aux whined)
809  (declare (ignore env))
810  (dolist (s (%cdr decl))
811    (if (symbolp s) 
812      (nx-new-vdecl pending s 'ignorable)
813      (if (and (consp s)
814               (eq (%car s) 'function)
815               (consp (%cdr s))
816               (valid-function-name-p (cadr s))
817               (setq s (validate-function-name (cadr s))))
818        (nx-new-fdecl pending s 'ignorable)
819        (unless (shiftf whined t) (nx-bad-decls decl))))))
820
821(defnxdecl ftype (pending decl env &aux whined)
822  (destructuring-bind (type &rest fnames) (%cdr decl)
823    (if (specifier-type-if-known type env)
824      (dolist (s fnames)
825        (if (or (symbolp s) (setf-function-name-p s))
826            (nx-new-fdecl pending s 'ftype type)
827            (unless (shiftf whined t) (nx-bad-decls decl))))
828      (nx1-whine :unknown-type-in-declaration type))))
829
830(defnxdecl settable (pending decl env)
831  (nx-settable-decls pending decl env t))
832
833(defnxdecl unsettable (pending decl env)
834  (nx-settable-decls pending decl env nil))
835
836(defun nx-settable-decls (pending decl env val &aux whined)
837  (declare (ignore env))
838  (dolist (s (%cdr decl))
839    (if (symbolp s)
840      (nx-new-vdecl pending s 'settable val)
841      (unless (shiftf whined t) (nx-bad-decls decl)))))
842
843(defnxdecl function (pending decl env)
844  (nx-process-type-decl pending decl (car decl) (cdr decl) env))
845
846(defnxdecl type (pending decl env)
847  (nx-process-type-decl pending decl (cadr decl) (cddr decl) env))
848
849(defun nx-process-type-decl (pending decl type vars env &aux whined)
850  (if (specifier-type-if-known type env)
851    (dolist (sym vars)
852      (if (symbolp sym)
853        (nx-new-vdecl pending sym 'type type)
854        (unless (shiftf whined t) (nx-bad-decls decl))))
855    (nx1-whine :unknown-type-in-declaration type)))
856
857(defnxdecl global-function-name (pending decl env)
858  (declare (ignore pending))
859  (when *nx-parsing-lambda-decls*
860    (let ((name (cadr decl)))
861      (setq *nx-global-function-name* (setf (afunc-name *nx-current-function*) name))
862      (setq *nx-inlined-self* (not (nx-declared-notinline-p name env))))))
863
864(defnxdecl debugging-function-name (pending decl env)
865  (declare (ignore pending env))
866  (when *nx-parsing-lambda-decls*
867    (setf (afunc-name *nx-current-function*) (cadr decl))))
868
869(defnxdecl resident (pending decl env)
870  (declare (ignore env pending))
871  (declare (ignore decl))
872  (nx-decl-set-fbit $fbitresident))
873
874
875(defun nx-inline-decl (pending decl val &aux valid-name whined)
876  (dolist (s (%cdr decl))
877    (multiple-value-setq (valid-name s) (valid-function-name-p s))
878    (if valid-name
879      (progn
880        (if (nx-self-call-p s nil t)
881          (setq *nx-inlined-self* val))
882        (nx-new-fdecl pending s 'inline (if val 'inline 'notinline)))
883      (unless (shiftf whined t) (nx-bad-decls decl)))))
884
885(defnxdecl inline (pending decl env)
886  (declare (ignore env))
887  (nx-inline-decl pending decl t))
888
889(defnxdecl notinline (pending decl env)
890  (declare (ignore env))
891  (nx-inline-decl pending decl nil))
892
893(defnxdecl ignore (pending decl env &aux whined)
894  (declare (ignore env))
895  (dolist (s (%cdr decl))
896    (if (symbolp s)     
897      (nx-new-vdecl pending s 'ignore t)
898      (if (and (consp s)
899               (eq (%car s) 'function)
900               (consp (%cdr s))
901               (valid-function-name-p (cadr s))
902               (setq s (validate-function-name (cadr s))))
903        (nx-new-fdecl pending s 'ignore t)
904        (unless (shiftf whined t) (nx-bad-decls decl))))))
905
906(defnxdecl ignore-if-unused (pending decl env &aux whined)
907  (declare (ignore env))
908  (dolist (s (%cdr decl))
909    (if (symbolp s) 
910      (nx-new-vdecl pending s 'ignore-if-unused)
911      (unless (shiftf whined t) (nx-bad-decls decl)))))
912
913(defun nx-self-call-p (name &optional ignore-lexical (allow *nx-inlined-self*))
914  (when (and name (symbolp name))
915    (let ((current-afunc *nx-current-function*)
916          (target-afunc (unless ignore-lexical (nth-value 1 (nx-lexical-finfo name)))))
917      (or (eq current-afunc target-afunc)
918          (and allow
919               (eq name *nx-global-function-name*)
920               (null target-afunc)
921               (null (afunc-parent current-afunc)))))))
922
923(defun nx-check-var-usage (var)
924  (let* ((sym (var-name var))
925         (bits (nx-var-bits var))
926         (expansion (var-ea var))
927         (setqed (%ilogbitp $vbitsetq bits))
928         (reffed (%ilogbitp $vbitreffed bits))
929         (closed (%ilogbitp $vbitclosed bits))
930         (special (%ilogbitp $vbitspecial bits))
931         (ignored (%ilogbitp $vbitignore bits))
932         (ignoreunused (%ilogbitp $vbitignoreunused bits)))
933    (if (or special reffed closed)
934      (progn
935        (if ignored (nx1-whine :ignore sym))
936        (nx-set-var-bits var (%ilogand (nx-check-downward-vcell var bits) (%ilognot (%ilsl $vbitignore 1)))))
937      (progn
938        (if (and setqed ignored) (nx1-whine :ignore sym))
939        (or ignored ignoreunused 
940            (progn (and (consp expansion) (eq (car expansion) :symbol-macro) (setq sym (list :symbol-macro sym))) (nx1-whine :unused sym)))
941        (when (%izerop (%ilogand bits (%ilogior $vrefmask $vsetqmask)))
942          (nx-set-var-bits var (%ilogior (%ilsl $vbitignore 1) bits)))))))
943
944; if an inherited var isn't setqed, it gets no vcell.  If it -is- setqed, but
945; all inheritors are downward, the vcell can be stack-consed.  Set a bit so that
946; the right thing happens when the var is bound.
947; Set the bit for the next-method var even if it is not setqed.
948(defun nx-check-downward-vcell (v bits)
949  (if (and (%ilogbitp $vbitclosed bits)
950           (or (%ilogbitp $vbitsetq bits)
951               (eq v *nx-next-method-var*))
952           (nx-afuncs-downward-p v (afunc-inner-functions *nx-current-function*)))
953    (%ilogior (%ilsl $vbitcloseddownward 1) bits)
954    bits))
955
956; afunc is "downward wrt v" if it doesn't inherit v or if all refs to afunc
957; are "downward" and no inner function of afunc is not downward with respect to v.
958(defun nx-afunc-downward-p (v afunc)
959  (or (dolist (i (afunc-inherited-vars afunc) t)
960        (when (eq (nx-root-var i) v) (return nil)))
961      (if (nx-afuncs-downward-p v (afunc-inner-functions afunc))
962        (eq (afunc-fn-refcount afunc)
963            (afunc-fn-downward-refcount afunc)))))
964
965(defun nx-afuncs-downward-p (v afuncs)
966  (dolist (afunc afuncs t)
967    (unless (nx-afunc-downward-p v afunc) (return nil))))
968
969(defun nx1-punt-bindings (vars initforms)
970  (dolist (v vars)
971    (nx1-punt-var v (pop initforms))))
972
973;;; at the beginning of a binding construct, note which lexical
974;;; variables are bound to other variables and the number of setqs
975;;; done so far on the initform.  After executing the body, if neither
976;;; variable has been closed over, the new variable hasn't been
977;;; setq'ed, and the old guy wasn't setq'ed in the body, the binding
978;;; can be punted.
979(defun nx1-note-var-binding (var initform)
980  (let* ((init (nx-untyped-form initform))
981         (inittype (nx-acode-form-type initform *nx-lexical-environment*))
982         (bits (nx-var-bits var)))
983    (when (%ilogbitp $vbitspecial bits) (nx-record-xref-info :binds (var-name var)))
984    (when inittype (setf (var-inittype var) inittype))
985    (when (and (not (%ilogbitp $vbitspecial bits))
986               (acode-p init))
987      (let* ((op (acode-operator init)))
988        (if (eq op (%nx1-operator lexical-reference))
989          (let* ((target (%cadr init))
990                 (setq-count (%ilsr 8 (%ilogand $vsetqmask (nx-var-bits target)))))
991            (unless (eq setq-count (%ilsr 8 $vsetqmask))
992              (cons var (cons setq-count target))))
993          (if (and (%ilogbitp $vbitdynamicextent bits)
994                   (or (eq op (%nx1-operator closed-function))
995                       (eq op (%nx1-operator simple-function))))
996            (let* ((afunc (%cadr init)))
997              (setf (afunc-fn-downward-refcount afunc)
998                    (afunc-fn-refcount afunc)
999                    (afunc-bits afunc) (logior (ash 1 $fbitdownward) (ash 1 $fbitbounddownward)
1000                                               (the fixnum (afunc-bits afunc))))
1001              nil)))))))
1002
1003
1004;;; Process entries involving variables bound to other variables at
1005;;; the end of a binding construct.  Each entry is of the form
1006;;; (source-var setq-count . target-var), where setq-count is the
1007;;; assignment count of TARGET-VAR at the time that the binding's
1008;;; initform was evaluated (not, in the case of LET, at the time that
1009;;; the bindinw was established.).  If the target isn't closed-over
1010;;; and SETQed (somewhere), and wasn't setqed in the body (e.g.,
1011;;; still has the same assignment-count as it had when the initform
1012;;; was executed), then we can "punt" the source (and replace references
1013;;; to it with references to the target.)
1014;;; It obviously makes no sense to do this if the source is SPECIAL;
1015;;; in some cases (LET), we create the source variable and add it to
1016;;; this alist before it's known whether or not the source variable
1017;;; is SPECIAL. so we have to ignore that case here.
1018(defun nx1-check-var-bindings (alist)
1019  (dolist (pair alist)
1020    (let* ((var (car pair))
1021           (target (cddr pair))
1022           (vbits (nx-var-bits var))
1023           (target-bits (nx-var-bits target)))
1024      (unless (or
1025               ;; var can't be special, setq'ed or closed; target can't be
1026               ;; setq'ed AND closed.
1027               (neq (%ilogand vbits (%ilogior (%ilsl $vbitsetq 1)
1028                                              (%ilsl $vbitclosed 1)
1029                                              (%ilsl $vbitspecial 1))) 0)
1030               (eq (%ilogior (%ilsl $vbitsetq 1) (%ilsl $vbitclosed 1)) 
1031                   (%ilogand
1032                     (%ilogior (%ilsl $vbitsetq 1) (%ilsl $vbitclosed 1))
1033                     target-bits))
1034               (neq (%ilsr 8 (%ilogand $vsetqmask target-bits)) (cadr pair)))
1035             (push (cons var target) *nx-punted-vars*)))))
1036
1037(defun nx1-punt-var (var initform)
1038  (let* ((bits (nx-var-bits var))
1039         (mask (%ilogior (%ilsl $vbitsetq 1) (ash -1 $vbitspecial) (%ilsl $vbitclosed 1)))
1040         (nrefs (%ilogand $vrefmask bits))
1041         (val (nx-untyped-form initform))
1042         (op (if (acode-p val) (acode-operator val))))
1043    (when (%izerop (%ilogand mask bits))
1044      (if
1045        (or 
1046         (nx-t val)
1047         (nx-null val)
1048         (and (eql nrefs 1) (not (logbitp $vbitdynamicextent bits)) ( acode-absolute-ptr-p val t))
1049         (eq op (%nx1-operator fixnum))
1050         (eq op (%nx1-operator immediate)))
1051        (progn
1052          (nx-set-var-bits var (%ilogior (%ilsl $vbitpuntable 1) bits)))))
1053    (when (and (%ilogbitp $vbitdynamicextent bits)
1054               (or (eq op (%nx1-operator closed-function))
1055                   (eq op (%nx1-operator simple-function))))
1056      (let* ((afunc (cadr val)))
1057        (setf (afunc-bits afunc) (%ilogior (%ilsl $fbitbounddownward 1) (afunc-bits afunc))
1058              (afunc-fn-downward-refcount afunc) 1))) 
1059    nil))
1060           
1061(defnxdecl optimize (pending specs env)
1062  (declare (ignore env))
1063  (let* ((q nil)
1064         (v nil)
1065         (mdecls (pending-declarations-mdecls pending)))
1066    (dolist (spec (%cdr specs) (setf (pending-declarations-mdecls pending) mdecls))
1067      (if (atom spec)
1068        (setq q spec v 3)
1069        (setq q (%car spec) v (cadr spec)))
1070      (if (and (fixnump v) (<= 0 v 3) (memq q '(speed space compilation-speed safety debug)))
1071        (push (cons q v) mdecls)
1072        (nx-bad-decls spec)))))
1073
1074(defun %proclaim-optimize (specs &aux q v)
1075  (dolist (spec specs)
1076    (if (atom spec)
1077      (setq q spec v 3)
1078      (setq q (%car spec) v (cadr spec)))
1079    (or (and (fixnump v)
1080             (<= 0 v 3)
1081             (case q
1082               (speed (setq *nx-speed* v))
1083               (space (setq *nx-space* v))
1084               (compilation-speed (setq *nx-cspeed* v))
1085               (safety (setq *nx-safety* v))
1086               (debug (setq *nx-debug* v))))
1087        (bad-proclaim-spec `(optimize ,spec)))))
1088
1089(defun nx-lexical-finfo (sym &optional (env *nx-lexical-environment*))
1090  (let* ((info nil)
1091         (barrier-crossed nil))
1092    (if env
1093      (loop
1094        (when (eq 'barrier (lexenv.variables env))
1095          (setq barrier-crossed t))
1096        (when (setq info (%cdr (assq sym (lexenv.functions env))))
1097          (return (values info (if (and (eq (car info) 'function)
1098                                        (consp (%cdr info)))
1099                                 (progn
1100                                   (when barrier-crossed
1101                                     (nx-error "Illegal reference to lexically-defined function ~S." sym))
1102                                   (%cadr info))))))
1103        (if (listp (setq env (lexenv.parent-env env)))
1104          (return (values nil nil))))
1105      (values nil nil))))
1106
1107(defun nx-inline-expansion (sym &optional (env *nx-lexical-environment*) global-only)
1108  (let* ((lambda-form nil)
1109         (containing-env nil)
1110         (token nil))
1111    (if (and (nx-declared-inline-p sym env)
1112             (not (gethash sym *nx1-alphatizers*))
1113             (not *nx-current-code-note*))
1114      (multiple-value-bind (info afunc) (unless global-only (nx-lexical-finfo sym env))
1115        (if info (setq token afunc 
1116                       containing-env (afunc-environment afunc)
1117                       lambda-form (afunc-lambdaform afunc)))
1118        (setq info (cdr (retrieve-environment-function-info sym env)))
1119        (if (def-info.lambda info)
1120            (setq lambda-form (def-info.lambda info)
1121                  token sym
1122                  containing-env (new-lexical-environment (definition-environment env)))
1123            (unless info
1124              (if (cdr (setq info (assq sym *nx-globally-inline*)))
1125                (setq lambda-form (%cdr info)
1126                      token sym
1127                      containing-env (new-lexical-environment (new-definition-environment nil))))))))
1128    (values lambda-form (nx-closed-environment env containing-env) token)))
1129
1130(defun nx-closed-environment (current-env target)
1131  (when target
1132    (let* ((intervening-functions nil))
1133      (do* ((env current-env (lexenv.parent-env env)))
1134           ((or (eq env target) (null env) (istruct-typep env 'definition-environment)))
1135        (let* ((fn (lexenv.lambda env)))
1136          (when fn (push fn intervening-functions))))
1137      (let* ((result target))
1138        (dolist (fn intervening-functions result)
1139          (setf (lexenv.lambda (setq result (new-lexical-environment result))) fn))))))
1140
1141(defun nx-root-var (v)
1142  (do* ((v v bits)
1143        (bits (var-bits v) (var-bits v)))
1144       ((fixnump bits) v)))
1145
1146(defun nx-reconcile-inherited-vars (more)
1147  (let ((last nil)) ; Bop 'til ya drop.
1148    (loop
1149      (setq last more more nil)
1150      (dolist (callee last)
1151        (dolist (caller (afunc-callers callee))
1152          (unless (or (eq caller callee)
1153                      (eq caller (afunc-parent callee)))
1154            (dolist (v (afunc-inherited-vars callee))
1155              (let ((root-v (nx-root-var v)))
1156                (unless (dolist (caller-v (afunc-inherited-vars caller))
1157                          (when (eq root-v (nx-root-var caller-v))
1158                            (return t)))
1159                  ; caller must inherit root-v in order to call callee without using closure.
1160                  ; can't just bind afunc & call nx-lex-info here, 'cause caller may have
1161                  ; already shadowed another var with same name.  So:
1162                  ; 1) find the ancestor of callee which bound v; this afunc is also an ancestor
1163                  ;    of caller
1164                  ; 2) ensure that each afunc on the inheritance path from caller to this common
1165                  ;    ancestor inherits root-v.
1166                  (let ((ancestor (afunc-parent callee))
1167                        (inheritors (list caller)))
1168                    (until (eq (setq v (var-bits v)) root-v)
1169                      (setq ancestor (afunc-parent ancestor)))
1170                    (do* ((p (afunc-parent caller) (afunc-parent p)))
1171                         ((eq p ancestor))
1172                      (push p inheritors))
1173                    (dolist (f inheritors)
1174                      (setq v (nx-cons-var (var-name v) v))
1175                      (unless (dolist (i (afunc-inherited-vars f))
1176                                (when (eq root-v (nx-root-var i))
1177                                  (return (setq v i))))
1178                        (pushnew f more)
1179                        (push v (afunc-inherited-vars f))
1180                        ; change shared structure of all refs in acode with one swell foop.
1181                        (nx1-afunc-ref f))))))))))   
1182      (unless more (return)))))
1183
1184(defun nx-inherit-var (var binder current)
1185  (if (eq binder current)
1186    (progn
1187      (nx-set-var-bits var (%ilogior2 (%ilsl $vbitclosed 1) (nx-var-bits var)))
1188      var)
1189    (let ((sym (var-name var)))
1190      (or (dolist (already (afunc-inherited-vars current))
1191            (when (eq sym (var-name already)) (return already)))
1192          (progn
1193            (setq var (nx-cons-var sym (nx-inherit-var var binder (afunc-parent current))))
1194            (push var (afunc-inherited-vars current))
1195            var)))))
1196
1197(defun nx-lex-info (sym &optional current-only)
1198  (let* ((current-function *nx-current-function*)
1199         (catch nil)
1200         (barrier-crossed nil))
1201    (multiple-value-bind 
1202      (info afunc)
1203      (do* ((env *nx-lexical-environment* (lexenv.parent-env env))
1204            (continue env (and env (not (istruct-typep env 'definition-environment))))
1205            (binder current-function (or (if continue (lexenv.lambda env)) binder)))
1206           ((or (not continue) (and (neq binder current-function) current-only)) 
1207            (values nil nil))
1208        (let ((vars (lexenv.variables env)))
1209          (if (eq vars 'catch) 
1210            (setq catch t)
1211            (if (eq vars 'barrier)
1212              (setq barrier-crossed t)
1213              (let ((v (dolist (var vars)
1214                         (when (eq (var-name var) sym) (return var)))))
1215                (when v (return (values v binder)))
1216                (dolist (decl (lexenv.vdecls env))
1217                  (when (and (eq (car decl) sym)
1218                             (eq (cadr decl) 'special))
1219                    (return-from nx-lex-info (values :special nil nil)))))))))
1220      (if info
1221        (if (var-expansion info)
1222          (values :symbol-macro (cdr (var-expansion info)) info)
1223          (if (%ilogbitp $vbitspecial (nx-var-bits info))
1224            (values :special info nil)
1225            (if barrier-crossed
1226              (nx-error "Illegal reference to lexically defined variable ~S." sym)
1227              (if (eq afunc current-function)
1228                (values info nil catch)
1229                (values (nx-inherit-var info afunc current-function) t catch)))))
1230        (values nil nil nil)))))
1231
1232
1233(defun nx-block-info (blockname &optional (afunc *nx-current-function*) &aux
1234  blocks
1235  parent
1236  (toplevel (eq afunc *nx-current-function*))
1237  blockinfo)
1238 (when afunc
1239  (setq
1240   blocks (if toplevel *nx-blocks* (afunc-blocks afunc))
1241   blockinfo (assq blockname blocks)
1242   parent (afunc-parent afunc))
1243  (if blockinfo
1244   (values blockinfo nil)
1245   (when parent
1246    (when (setq blockinfo (nx-block-info blockname parent))
1247     (values blockinfo t))))))
1248
1249(defun nx-tag-info (tagname &optional (afunc *nx-current-function*) &aux
1250                            tags
1251                            parent
1252                            index
1253                            counter
1254                            (toplevel (eq afunc *nx-current-function*))
1255                            taginfo)
1256  (when afunc
1257    (setq
1258     tags (if toplevel *nx-tags* (afunc-tags afunc))
1259     taginfo (assoc tagname tags)
1260     parent (afunc-parent afunc))
1261    (if taginfo
1262      (values taginfo nil)
1263      (when (and parent (setq taginfo (nx-tag-info tagname parent)))
1264        (unless (setq index (cadr taginfo))
1265          (setq counter (caddr taginfo))
1266          (%rplaca counter (%i+ (%car counter) 1))
1267          (setq index (%car counter))
1268          (%rplaca (%cdr taginfo) index))
1269        (values taginfo index)))))
1270
1271(defun nx1-transitively-punt-bindings (pairs) 
1272  (dolist (pair (nreverse pairs))
1273    (let* ((var         (%car pair))
1274           (boundto     (%cdr pair))
1275           (varbits     (nx-var-bits var))
1276           (boundtobits (nx-var-bits boundto)))
1277      (declare (fixnum varbits boundtobits))
1278      (unless (eq (%ilogior
1279                    (%ilsl $vbitsetq 1)
1280                    (%ilsl $vbitclosed 1))
1281                  (%ilogand
1282                    (%ilogior
1283                      (%ilsl $vbitsetq 1)
1284                      (%ilsl $vbitclosed 1))
1285                    boundtobits))
1286        ;; Can't happen -
1287        (unless (%izerop (%ilogand (%ilogior
1288                                     (%ilsl $vbitsetq 1) 
1289                                     (ash -1 $vbitspecial)
1290                                     (%ilsl $vbitclosed 1)) varbits))
1291          (error "Bug-o-rama - \"punted\" var had bogus bits. ~
1292Or something. Right? ~s ~s" var varbits))
1293        (let* ((varcount     (%ilogand $vrefmask varbits)) 
1294               (boundtocount (%ilogand $vrefmask boundtobits)))
1295          (nx-set-var-bits var (%ilogior
1296                                 (%ilsl $vbitpuntable 1)
1297                                 (%i- varbits varcount)))
1298          (setf (var-refs var) (+ (var-refs var) (var-refs boundto)))
1299          (nx-set-var-bits
1300           boundto
1301           (%i+ (%i- boundtobits boundtocount)
1302                (%ilogand $vrefmask
1303                          (%i+ (%i- boundtocount 1) varcount)))))))))
1304
1305;;; Home-baked handler-case replacement.  About 10 times as fast as full handler-case.
1306;;;(LET ((S 0)) (DOTIMES (I 1000000) (INCF S))) took 45,678 microseconds
1307;;;(LET ((S 0)) (DOTIMES (I 1000000) (BLOCK X (ERROR (CATCH 'X (RETURN-FROM X (INCF S))))))) took 57,485
1308;;;(LET ((S 0)) (DOTIMES (I 1000000) (HANDLER-CASE (INCF S) (ERROR (C) C)))) took 168,947
1309(defmacro with-program-error-handler (handler &body body)
1310  (let ((tag (gensym)))
1311    `(block ,tag
1312       (,handler (catch 'program-error-handler (return-from ,tag (progn ,@body)))))))
1313
1314(defun runtime-program-error-form (c)
1315  `(signal-program-error "Invalid program: ~a" ,(princ-to-string c)))
1316
1317(defun nx1-compile-lambda (name lambda-form &optional
1318                                 (p (make-afunc))
1319                                 q
1320                                 parent-env
1321                                 (policy *default-compiler-policy*)
1322                                 load-time-eval-token)
1323
1324  (if q
1325     (setf (afunc-parent p) q))
1326
1327  ;; In the case of a method function, the name will get reset at load time to the
1328  ;; method object.  However, during compilation, we want any inner functions to use
1329  ;; the fully qualified method name, so store that.
1330  (when (method-lambda-p lambda-form)
1331    (setq name (or *nx-method-warning-name* name)))
1332
1333  (setf (afunc-name p)
1334        (let ((parent-name (and (afunc-parent p) (afunc-name (afunc-parent p)))))
1335          (if parent-name
1336            (if (and (consp parent-name) (eq (%car parent-name) :internal))
1337              (if name
1338                `(:internal ,name ,@(cdr parent-name))
1339                parent-name)
1340              (if name
1341                `(:internal ,name ,parent-name)
1342                `(:internal ,parent-name)))
1343            name)))
1344
1345  (unless (lambda-expression-p lambda-form)
1346    (nx-error "~S is not a valid lambda expression." lambda-form))
1347
1348  (let* ((*nx-current-function* p)
1349         (*nx-parent-function* q)
1350         (*nx-current-note* (or *nx-current-note* (nx-source-note lambda-form)))
1351         (*nx-lexical-environment* (new-lexical-environment parent-env))
1352         (*nx-load-time-eval-token* load-time-eval-token)
1353         (*nx-all-vars* nil)
1354         (*nx-bound-vars* nil)
1355         (*nx-punted-vars* nil)
1356         (*nx-current-compiler-policy* policy)
1357         (*nx-blocks* nil)
1358         (*nx-tags* nil)
1359         (*nx-loop-nesting-level* 0)
1360         (*nx-inner-functions* nil)
1361         (*nx-global-function-name* nil)
1362         (*nx-warnings* nil)
1363         (*nx1-fcells* nil)
1364         (*nx1-vcells* nil)
1365         (*nx-inline-expansions* nil)
1366         (*nx-parsing-lambda-decls* nil)
1367         (*nx-next-method-var* (if q *nx-next-method-var*))
1368         (*nx-call-next-method-function* (if q *nx-call-next-method-function*))
1369         (*nx-cur-func-name* name))
1370    (if (%non-empty-environment-p *nx-lexical-environment*)
1371      (setf (afunc-bits p) (logior (ash 1 $fbitnonnullenv) (the fixnum (afunc-bits p)))))
1372
1373    (setf (afunc-lambdaform p) lambda-form)
1374
1375    (when *nx-current-note*
1376      (setf (afunc-lfun-info p)
1377            (list* '%function-source-note *nx-current-note* (afunc-lfun-info p))))
1378
1379    (with-program-error-handler
1380        (lambda (c)
1381          (setf (afunc-acode p) (nx1-lambda '(&rest args) `(args ,(runtime-program-error-form c)) nil)))
1382      (handler-bind ((warning (lambda (c)
1383                                (nx1-whine :program-error c)
1384                                (muffle-warning c)))
1385                     (program-error (lambda (c)
1386                                      (when *nx-break-on-program-errors*
1387                                        (cerror "continue compilation ignoring this form" c))
1388                                      (when (typep c 'compile-time-program-error)
1389                                        (setq c (make-condition 'simple-program-error
1390                                                                :format-control (simple-condition-format-control c)
1391                                                                :format-arguments (simple-condition-format-arguments c))))
1392                                      (unless *nx-break-on-program-errors*
1393                                        (nx1-whine :program-error c))
1394                                      (throw 'program-error-handler c))))
1395        (multiple-value-bind (body decls)
1396            (with-program-error-handler (lambda (c) (runtime-program-error-form c))
1397              (parse-body (%cddr lambda-form) *nx-lexical-environment* t))
1398          (setf (afunc-acode p) (nx1-lambda (%cadr lambda-form) body decls)))))
1399
1400    (nx1-transitively-punt-bindings *nx-punted-vars*)
1401    (setf (afunc-blocks p) *nx-blocks*)
1402    (setf (afunc-tags p) *nx-tags*)
1403    (setf (afunc-inner-functions p) *nx-inner-functions*)
1404    (setf (afunc-all-vars p) *nx-all-vars*)
1405    (setf (afunc-vcells p) *nx1-vcells*)
1406    (setf (afunc-fcells p) *nx1-fcells*)
1407    (let* ((warnings (merge-compiler-warnings *nx-warnings*))
1408           (name *nx-cur-func-name*))       
1409      (dolist (inner *nx-inner-functions*)
1410        (dolist (w (afunc-warnings inner))
1411          (push name (compiler-warning-function-name w))
1412          (push w warnings)))
1413      (setf (afunc-warnings p) warnings))
1414    p))
1415
1416(defun method-lambda-p (form)
1417  (and (consp form)
1418       (consp (setq form (%cdr form)))       
1419       (eq (caar form) '&method)))
1420
1421
1422(defun nx1-lambda (ll body decls &aux (l ll) methvar)
1423  (let* ((old-env *nx-lexical-environment*)
1424         (*nx-bound-vars* *nx-bound-vars*))
1425    (with-nx-declarations (pending)
1426      (let* ((*nx-parsing-lambda-decls* t))
1427        (nx-process-declarations pending decls))
1428      (when (eq (car l) '&lap)
1429        (let ((bits nil))
1430          (unless (and (eq (length (%cdr l)) 1) (fixnump (setq bits (%cadr l))))
1431            (unless (setq bits (encode-lambda-list (%cdr l)))
1432              (nx-error "invalid lambda-list  - ~s" l)))
1433          (return-from nx1-lambda
1434                       (make-acode
1435                        (%nx1-operator lambda-list)
1436                        (list (cons '&lap bits))
1437                        nil
1438                        nil
1439                        nil
1440                        nil
1441                        (nx1-env-body body old-env)
1442                        *nx-new-p2decls*))))
1443      (when (eq (car l) '&method)
1444        (setf (afunc-bits *nx-current-function*)
1445              (%ilogior (%ilsl $fbitmethodp 1)
1446                        (afunc-bits *nx-current-function*)))
1447        (setq *nx-inlined-self* nil)
1448        (setq *nx-next-method-var* (setq methvar (let ((var (nx-new-var
1449                                                             pending
1450                                                             (%cadr ll))))
1451                                                   (nx-set-var-bits var (%ilogior 
1452                                                                          (%ilsl $vbitignoreunused 1) 
1453                                                                          ;(%ilsl $vbitnoreg 1)
1454                                                                          (nx-var-bits var)))
1455                                                   var)))
1456                                                   
1457        (setq ll (%cddr ll)))
1458      (multiple-value-bind (req opt rest keys auxen lexpr)
1459                           (nx-parse-simple-lambda-list pending ll)
1460        (nx-effect-other-decls pending *nx-lexical-environment*)
1461        (setq body (nx1-env-body body old-env))
1462        (nx1-punt-bindings (%car auxen) (%cdr auxen))
1463        (when methvar
1464          (push methvar req)
1465          (unless (eq 0 (%ilogand (%ilogior (%ilsl $vbitreffed 1)
1466                                            (%ilsl $vbitclosed 1)
1467                                            (%ilsl $vbitsetq 1))
1468                                  (nx-var-bits methvar)))
1469            (setf (afunc-bits *nx-current-function*)
1470                  (%ilogior 
1471                   (%ilsl $fbitnextmethp 1)
1472                   (afunc-bits *nx-current-function*)))))
1473        (let ((acode (make-acode
1474                      (%nx1-operator lambda-list) 
1475                      req
1476                      opt 
1477                      (if lexpr (list rest) rest)
1478                      keys
1479                      auxen
1480                      body
1481                      *nx-new-p2decls*)))
1482          (when *nx-current-code-note*
1483            (setf (acode-note acode) *nx-current-code-note*))
1484          acode)))))
1485
1486(defun nx-parse-simple-lambda-list (pending ll &aux
1487                                              req
1488                                              opt
1489                                              rest
1490                                              keys
1491                                              lexpr
1492                                              sym)
1493  (multiple-value-bind (ok reqsyms opttail resttail keytail auxtail)
1494                       (verify-lambda-list ll)
1495    (unless ok (nx-error "Bad lambda list : ~S" ll))
1496    (dolist (var reqsyms)
1497      (push (nx-new-var pending var t) req))
1498    (when (eq (pop opttail) '&optional)
1499      (let* (optvars optinits optsuppliedp)
1500        (until (eq opttail resttail) 
1501          (setq sym (pop opttail))
1502          (let* ((var sym)
1503                 (initform nil)
1504                 (spvar nil))
1505            (when (consp var)
1506              (setq sym (pop var) initform (pop var) spvar (%car var)))
1507            (push (nx1-typed-var-initform pending sym initform) optinits)
1508            (push (nx-new-var pending sym t) optvars)
1509            (push (if spvar (nx-new-var pending spvar t)) optsuppliedp)))
1510        (if optvars
1511          (setq opt (list (nreverse optvars) (nreverse optinits) (nreverse optsuppliedp)))
1512          (nx1-whine :lambda ll))))
1513    (let ((temp (pop resttail)))
1514      (when (or (eq temp '&rest)
1515                (setq lexpr (eq temp '&lexpr)))
1516        (setq rest (nx-new-var pending (%car resttail) t))))
1517    (when (eq (%car keytail) '&key) 
1518      (setq keytail (%cdr keytail))
1519      (let* ((keysyms ())
1520             (keykeys ())
1521             (keyinits ())
1522             (keysupp ())
1523             (kallowother (not (null (memq '&allow-other-keys ll))))
1524             (kvar ())
1525             (kkey ())
1526             (kinit ())
1527             (ksupp))
1528        (until (eq keytail auxtail)
1529          (unless (eq (setq sym (pop keytail)) '&allow-other-keys)     
1530            (setq kinit *nx-nil* ksupp nil)
1531            (if (atom sym)
1532              (setq kvar sym kkey (make-keyword sym))
1533              (progn
1534                (if (consp (%car sym))
1535                  (setq kkey (%caar sym) kvar (%cadar sym))
1536                  (progn
1537                    (setq kvar (%car sym))
1538                    (setq kkey (make-keyword kvar))))
1539                (setq kinit (nx1-typed-var-initform pending kvar (%cadr sym)))
1540                (setq ksupp (%caddr sym))))
1541            (push (nx-new-var pending kvar t) keysyms)
1542            (push kkey keykeys)
1543            (push kinit keyinits)
1544            (push (if ksupp (nx-new-var pending ksupp t)) keysupp)))
1545        (setq 
1546         keys
1547         (list
1548          kallowother
1549          (nreverse keysyms)
1550          (nreverse keysupp)
1551          (nreverse keyinits)
1552          (apply #'vector (nreverse keykeys))))))
1553    (let (auxvals auxvars)
1554      (dolist (pair (%cdr auxtail))
1555        (let* ((auxvar (nx-pair-name pair))
1556               (auxval (nx1-typed-var-initform pending auxvar (nx-pair-initform pair))))
1557          (push auxval auxvals)
1558          (push (nx-new-var pending auxvar t) auxvars)))
1559      (values
1560       (nreverse req) 
1561       opt 
1562       rest
1563       keys
1564       (list (nreverse auxvars) (nreverse auxvals))
1565       lexpr))))
1566
1567(defun nx-new-structured-var (pending sym)
1568  (if sym
1569    (nx-new-var pending sym t)
1570    (nx-new-temp-var pending)))
1571
1572(defun nx-parse-structured-lambda-list (pending ll &optional no-acode whole-p &aux
1573                                           req
1574                                           opt
1575                                           rest
1576                                           keys
1577                                           sym)
1578  (multiple-value-bind (ok reqsyms opttail resttail keytail auxtail all whole structured-p)
1579                       (verify-lambda-list ll t whole-p nil)
1580    (declare (ignore all))
1581    (unless ok (nx-error "Bad lambda list : ~S" ll))
1582    (if (or whole (and whole-p structured-p)) (setq whole (nx-new-structured-var pending whole)))
1583    (dolist (var reqsyms)
1584      (push (if (symbolp var)
1585                    (nx-new-structured-var pending var)
1586                    (nx-structured-lambda-form pending var no-acode))
1587                  req))
1588    (when (eq (pop opttail) '&optional)
1589      (let* (optvars optinits optsuppliedp)
1590        (until (eq opttail resttail) 
1591          (setq sym (pop opttail))
1592          (let* ((var sym)
1593                 (initform nil)
1594                 (spvar nil))
1595            (when (consp var)
1596              (setq sym (pop var) initform (pop var) spvar (%car var)))
1597            (push (if no-acode initform (nx1-form initform)) optinits)
1598            (push (if (symbolp sym)
1599                          (nx-new-structured-var pending sym)
1600                          (nx-structured-lambda-form pending sym no-acode))
1601                        optvars)
1602            (push (if spvar (nx-new-var pending spvar)) optsuppliedp)))
1603        (if optvars
1604          (setq opt (list (nreverse optvars) (nreverse optinits) (nreverse optsuppliedp)))
1605          (nx1-whine :lambda ll))))
1606    (let ((var (pop resttail)))
1607      (when (or (eq var '&rest)
1608                (eq var '&body))
1609        (setq var (pop resttail)
1610              rest (if (symbolp var)
1611                     (nx-new-structured-var pending var)
1612                     (nx-structured-lambda-form pending var no-acode)))))
1613    (when (eq (%car keytail) '&key) 
1614      (setq keytail (%cdr keytail))
1615      (let* ((keysyms ())
1616             (keykeys ())
1617             (keyinits ())
1618             (keysupp ())
1619             (kallowother (not (null (memq '&allow-other-keys ll))))
1620             (kvar ())
1621             (kkey ())
1622             (kinit ())
1623             (ksupp))
1624        (until (eq keytail auxtail)
1625          (unless (eq (setq sym (pop keytail)) '&allow-other-keys)     
1626            (setq kinit *nx-nil* ksupp nil)
1627            (if (atom sym)
1628              (setq kvar sym kkey (make-keyword sym))
1629              (progn
1630                (if (consp (%car sym))
1631                  (setq kkey (%caar sym) kvar (%cadar sym))
1632                  (progn
1633                    (setq kvar (%car sym))
1634                    (setq kkey (make-keyword kvar))))
1635                (setq kinit (if no-acode (%cadr sym) (nx1-form (%cadr sym))))
1636                (setq ksupp (%caddr sym))))
1637            (push (if (symbolp kvar)
1638                          (nx-new-structured-var pending kvar)
1639                          (nx-structured-lambda-form pending kvar no-acode))
1640                        keysyms)
1641            (push kkey keykeys)
1642            (push kinit keyinits)
1643            (push (if ksupp (nx-new-var pending ksupp)) keysupp)))
1644        (setq 
1645         keys
1646         (list
1647          kallowother
1648          (nreverse keysyms)
1649          (nreverse keysupp)
1650          (nreverse keyinits)
1651          (apply #'vector (nreverse keykeys))))))
1652    (let (auxvals auxvars)
1653      (dolist (pair (%cdr auxtail))
1654        (let ((auxvar (nx-pair-name pair))
1655              (auxval (nx-pair-initform pair)))
1656          (push (if no-acode auxval (nx1-form auxval)) auxvals)
1657          (push (nx-new-var pending auxvar) auxvars)))
1658      (values
1659       (nreverse req) 
1660       opt 
1661       rest 
1662       keys
1663       (list (nreverse auxvars) (nreverse auxvals))
1664       whole))))
1665
1666(defun nx-structured-lambda-form (pending l &optional no-acode)
1667  (multiple-value-bind (req opt rest keys auxen whole)
1668                       (nx-parse-structured-lambda-list pending l no-acode t)
1669    (list (%nx1-operator lambda-list) whole req opt rest keys auxen)))
1670
1671(defun nx1-form (form &optional (*nx-lexical-environment* *nx-lexical-environment*))
1672  (let* ((*nx-form-type* (if (and (consp form) (eq (car form) 'the))
1673                           (nx-target-type (cadr form))
1674                           t)))
1675    (nx1-typed-form form *nx-lexical-environment*)))
1676
1677(defun nx1-typed-form (original env)
1678  (with-program-error-handler
1679      (lambda (c)
1680        (let ((replacement (runtime-program-error-form c)))
1681          (nx-note-source-transformation original replacement)
1682          (nx1-transformed-form (nx-transform replacement env) env)))
1683    (multiple-value-bind (form changed source) (nx-transform original env)
1684      (declare (ignore changed))
1685      ;; Bind this for cases where the transformed form is an atom, so it doesn't remember the source it came from.
1686      (let ((*nx-current-note* (or source *nx-current-note*)))
1687        (nx1-transformed-form form env)))))
1688
1689(defun nx1-transformed-form (form env)
1690  (let* ((*nx-current-note* (or (nx-source-note form) *nx-current-note*))
1691         (*nx-current-code-note*  (and *nx-current-code-note*
1692                                       (or (nx-ensure-code-note form *nx-current-code-note*)
1693                                           (compiler-bug "No source note for ~s" form))))
1694         (acode (if (consp form)
1695                  (nx1-combination form env)
1696                  (let* ((symbolp (non-nil-symbol-p form))
1697                         (constant-value (unless symbolp form))
1698                         (constant-symbol-p nil))
1699                    (if symbolp 
1700                      (multiple-value-setq (constant-value constant-symbol-p) 
1701                        (nx-transform-defined-constant form env)))
1702                    (if (and symbolp (not constant-symbol-p))
1703                      (nx1-symbol form env)
1704                      (nx1-immediate (nx-unquote constant-value)))))))
1705    (unless (acode-note acode) ;; leave it with most specific note
1706      (cond (*nx-current-code-note*
1707             (setf (acode-note acode) *nx-current-code-note*))
1708            (*record-pc-mapping*
1709             (setf (acode-note acode) (nx-source-note form)))))
1710    acode))
1711
1712(defun nx1-prefer-areg (form env)
1713  (nx1-form form env))
1714
1715(defun nx1-target-fixnump (form)
1716  (when (typep form 'integer)
1717       (let* ((target (backend-target-arch *target-backend*)))
1718         (and
1719          (>= form (arch::target-most-negative-fixnum target))
1720          (<= form (arch::target-most-positive-fixnum target))))))
1721
1722
1723(defun nx1-immediate (form)
1724  (if (or (eq form t) (null form))
1725    (nx1-sysnode form)
1726    (make-acode 
1727     (if (nx1-target-fixnump form) 
1728       (%nx1-operator fixnum)
1729        (%nx1-operator immediate))   ; Screw: chars
1730     form)))
1731
1732(defun nx2-constant-form-value (form)
1733  (setq form (nx-untyped-form form))
1734  (and (or (nx-null form)
1735           (nx-t form)
1736           (and (acode-p form)
1737                (or (eq (acode-operator form) (%nx1-operator immediate))
1738                    (eq (acode-operator form) (%nx1-operator fixnum))
1739                    (eq (acode-operator form) (%nx1-operator simple-function)))))
1740       form))
1741
1742(defun nx-natural-constant-p (form)
1743  (setq form (nx-untyped-form form))
1744  (if (consp form)
1745    (let* ((val (if (or (eq (acode-operator form) (%nx1-operator fixnum))
1746                        (eq (acode-operator form) (%nx1-operator immediate)))
1747                  (cadr form))))
1748      (target-word-size-case
1749       (32 (and (typep val '(unsigned-byte 32)) val))
1750       (64 (and (typep val '(unsigned-byte 64)) val))))))
1751
1752(defun nx-u32-constant-p (form)
1753  (setq form (nx-untyped-form form))
1754  (if (consp form)
1755    (let* ((val (if (or (eq (acode-operator form) (%nx1-operator fixnum))
1756                        (eq (acode-operator form) (%nx1-operator immediate)))
1757                  (cadr form))))
1758      (and (typep val '(unsigned-byte 32)) val))))
1759
1760(defun nx-u31-constant-p (form)
1761  (setq form (nx-untyped-form form))
1762  (if (consp form)
1763    (let* ((val (if (or (eq (acode-operator form) (%nx1-operator fixnum))
1764                        (eq (acode-operator form) (%nx1-operator immediate)))
1765                  (cadr form))))
1766      (and (typep val '(unsigned-byte 31)) val))))
1767
1768
1769;;; Reference-count vcell, fcell refs.
1770(defun nx1-note-vcell-ref (sym)
1771  (let* ((there (assq sym *nx1-vcells*))
1772         (count (expt 4 *nx-loop-nesting-level*)))
1773    (if there
1774      (%rplacd there (%i+ (%cdr there) count))
1775      (push (cons sym count) *nx1-vcells*)))
1776  sym)
1777
1778(defun nx1-note-fcell-ref (sym)
1779  (let* ((there (assq sym *nx1-fcells*))
1780         (count (expt 4 *nx-loop-nesting-level*)))
1781    (if there
1782      (%rplacd there (%i+ (%cdr there) count))
1783      (push (cons sym count) *nx1-fcells*))
1784    sym))
1785
1786; Note that "simple lexical refs" may not be; that's the whole problem ...
1787(defun nx1-symbol (form &optional (env *nx-lexical-environment*))
1788  (let* ((type (nx-declared-type form))
1789         (form
1790          (multiple-value-bind (info inherited-p more)
1791                               (nx-lex-info form)
1792            (if (and info (neq info :special))
1793              (if (eq info :symbol-macro)
1794                (progn
1795                  (nx-set-var-bits more (%ilogior (%ilsl $vbitreffed 1) (nx-var-bits more)))
1796                  (if (eq type t)
1797                    (nx1-form inherited-p)
1798                    (nx1-form `(the ,(prog1 type (setq type t)) ,inherited-p))))
1799                (progn
1800                  (when (not inherited-p)
1801                    (nx-set-var-bits info (%ilogior2 (%ilsl $vbitreffed 1) (nx-var-bits info))))
1802                  (nx-adjust-ref-count info)
1803                  (make-acode (%nx1-operator lexical-reference) info)))
1804              (make-acode
1805               (if (nx1-check-special-ref form info)
1806                   (progn
1807                     (nx-record-xref-info :references form)
1808                     (if (nx-global-p form env)
1809                         (%nx1-operator global-ref)
1810                         (if (and (not (nx-force-boundp-checks form env))
1811                                  (or (nx-proclaimed-parameter-p form)
1812                                  (assq form *nx-compile-time-types*)
1813                                  (assq form *nx-proclaimed-types*)
1814                                  (nx-open-code-in-line env)))
1815                             (%nx1-operator bound-special-ref)
1816                             (%nx1-operator special-ref))))
1817                   (%nx1-operator free-reference))
1818               (nx1-note-vcell-ref form))))))
1819    (if (eq type t)
1820        form
1821      (make-acode (%nx1-operator typed-form) type form))))
1822
1823(defun nx1-check-special-ref (form auxinfo)
1824  (or (eq auxinfo :special) 
1825      (nx-proclaimed-special-p form)
1826      (let ((defenv (definition-environment *nx-lexical-environment*)))
1827        (unless (and defenv (eq (car (defenv.type defenv)) :execute) (boundp form))
1828          (nx1-whine :special form))
1829        nil)))
1830
1831
1832
1833(defun nx1-whine (about &rest forms)
1834  (push (make-condition (or (cdr (assq about *compiler-whining-conditions*)) 'compiler-warning)
1835                        :function-name (list *nx-cur-func-name*)
1836                        :source-note *nx-current-note*
1837                        :warning-type about
1838                        :args (or forms (list nil)))
1839        *nx-warnings*))
1840
1841(defun p2-whine (afunc about &rest forms)
1842  (let* ((warning (make-condition (or (cdr (assq about *compiler-whining-conditions*)) 'compiler-warning)
1843                                  :function-name (list (afunc-name afunc))
1844                                  :warning-type about
1845                                  :args (or forms (list nil)))))
1846    (push warning (afunc-warnings afunc))
1847    (do* ((p (afunc-parent afunc) (afunc-parent p)))
1848         ((null p) warning)
1849      (let* ((pname (afunc-name p)))
1850        (push pname (compiler-warning-function-name warning))
1851        (push warning (afunc-warnings p))))))
1852
1853(defun nx1-type-intersect (form type1 type2 &optional env)
1854  (declare (ignore env)) ; use it when deftype records info in env.  Fix this then ...
1855  (let* ((ctype1 (if (typep type1 'ctype) type1 (specifier-type type1)))
1856         (ctype2 (if (typep type2 'ctype) type2 (specifier-type type2)))
1857         (intersection (type-intersection ctype1 ctype2)))
1858    (if (eq intersection *empty-type*)
1859      (let ((type1 (if (typep type1 'ctype)
1860                     (type-specifier type1)
1861                     type1))
1862            (type2 (if (typep type2 'ctype)
1863                     (type-specifier type2)
1864                     type2)))
1865        (nx1-whine :type-conflict form type1 type2)))
1866    (type-specifier intersection)))
1867                 
1868
1869
1870(defun nx-declared-notinline-p (sym env)
1871  (setq sym (maybe-setf-function-name sym))
1872  (loop
1873    (when (listp env)
1874      (return (and (symbolp sym)
1875                   (proclaimed-notinline-p sym))))
1876    (dolist (decl (lexenv.fdecls env))
1877      (when (and (eq (car decl) sym)
1878                 (eq (cadr decl) 'inline))
1879         (return-from nx-declared-notinline-p (eq (cddr decl) 'notinline))))
1880    (setq env (lexenv.parent-env env))))
1881
1882
1883
1884(defun nx1-combination (form env)
1885  (destructuring-bind (sym &rest args)
1886                      form
1887    (if (symbolp sym)
1888      (let* ((*nx-sfname* sym) special)
1889        (if (and (setq special (gethash sym *nx1-alphatizers*))
1890                 (or (not (functionp (fboundp sym)))
1891                     (memq sym '(apply funcall ;; see bug #285
1892                                 %defun        ;; see bug #295
1893                                 ))
1894                     (< (safety-optimize-quantity env) 3))
1895                 ;(not (nx-lexical-finfo sym env))
1896                 (not (nx-declared-notinline-p sym *nx-lexical-environment*)))
1897          (funcall special form env) ; pass environment arg ...
1898          (progn           
1899            (nx1-typed-call sym args))))
1900      (if (lambda-expression-p sym)
1901        (nx1-lambda-bind (%cadr sym) args (%cddr sym))
1902      (nx-error "~S is not a symbol or lambda expression in the form ~S ." sym form)))))
1903
1904(defun nx1-treat-as-call (args)
1905  (nx1-typed-call (car args) (%cdr args)))
1906
1907(defun nx1-typed-call (sym args)
1908  (multiple-value-bind (type errors-p) (nx1-call-result-type sym args)
1909    (let ((form (nx1-call sym args nil nil errors-p)))
1910      (if (eq type t)
1911        form
1912        (make-acode (%nx1-operator typed-form) type form)))))
1913
1914(defvar *format-arg-functions* '((format . 1) (format-to-string . 1) (error . 0) (warn . 0)
1915                                 (y-or-n-p . 0) (yes-or-no-p . 0)
1916                                 (signal-simple-program-error . 0)
1917                                 (signal-simple-condition . 1)
1918                                 (signal-reader-error . 1)
1919                                 (%method-combination-error . 0)
1920                                 (%invalid-method-error . 1)
1921                                 (nx-compile-time-error . 0)
1922                                 (nx-error . 0)
1923                                 (compiler-bug . 0)))
1924
1925;;; Wimpy.
1926(defun nx1-call-result-type (sym &optional (args nil args-p) spread-p global-only)
1927  (let* ((env *nx-lexical-environment*)
1928         (global-def nil)
1929         (lexenv-def nil)
1930         (defenv-def nil)
1931         (somedef nil)
1932         (whined nil))
1933    (when (and sym 
1934               (symbolp sym)
1935               (not (find-ftype-decl sym env))
1936               (or global-only
1937                   (not (setq lexenv-def (nth-value 1 (nx-lexical-finfo sym)))))
1938               (null (setq defenv-def (retrieve-environment-function-info sym env)))
1939               (neq sym *nx-global-function-name*)
1940               (not (functionp (setq global-def (fboundp sym)))))
1941      (if args-p
1942        (nx1-whine :undefined-function sym args spread-p)
1943        (nx1-whine :undefined-function sym))
1944      (setq whined t))
1945    (when (and args-p
1946               (not spread-p)
1947               (setq somedef (unless lexenv-def (cdr (assq sym *format-arg-functions*))))
1948               (setq somedef (nthcdr somedef args))
1949               (stringp (car somedef)))
1950      (when (nx1-check-format-call (car somedef) (cdr somedef) env)
1951        (setq whined t)))
1952    (when (and args-p (setq somedef (or lexenv-def defenv-def (if (typep global-def 'function) global-def))))
1953      (multiple-value-bind (deftype reason)
1954          (nx1-check-call-args somedef args spread-p)
1955        (when deftype
1956          (nx1-whine deftype sym reason args spread-p)
1957          (setq whined t))))
1958    (values (nx-target-type *nx-form-type*) whined)))
1959
1960(defun find-ftype-decl (sym env)
1961  (setq sym (maybe-setf-function-name sym))
1962  (loop 
1963    (when (listp env)
1964      (return (and (symbolp sym)
1965                   (proclaimed-ftype sym))))
1966    (dolist (fdecl (lexenv.fdecls env))
1967      (declare (list fdecl))
1968      (when (and (eq (car fdecl) sym)
1969                 (eq (car (the list (cdr fdecl))) 'ftype))
1970        (return-from find-ftype-decl (cdr (the list (cdr fdecl))))))
1971    (setq env (lexenv.parent-env env))))
1972
1973(defun innermost-lfun-bits-keyvect (def)
1974  (declare (notinline innermost-lfun-bits-keyvect))
1975  (let* ((inner-def (closure-function (find-unencapsulated-definition def)))
1976         (bits (lfun-bits inner-def))
1977         (keys (lfun-keyvect inner-def)))
1978    (declare (fixnum bits))
1979    (when (and (eq (ash 1 $lfbits-gfn-bit)
1980                   (logand bits (logior (ash 1 $lfbits-gfn-bit)
1981                                        (ash 1 $lfbits-method-bit))))
1982               (logbitp $lfbits-keys-bit bits))
1983      (setq bits (logior (ash 1 $lfbits-aok-bit) bits)
1984            keys nil))
1985    (values bits keys)))
1986
1987
1988(defun nx1-check-call-args (def arglist spread-p)
1989  (let* ((deftype (if (functionp def) 
1990                    :global-mismatch
1991                    (if (istruct-typep def 'afunc)
1992                      :lexical-mismatch
1993                      :environment-mismatch)))
1994         (reason nil))
1995    (multiple-value-bind (bits keyvect)
1996                         (case deftype
1997                           (:global-mismatch (innermost-lfun-bits-keyvect def))
1998                           (:environment-mismatch
1999                              (values (def-info.lfbits (cdr def)) (def-info.keyvect (cdr def))))
2000                           (t (let* ((lambda-form (afunc-lambdaform def)))
2001                                (if (lambda-expression-p lambda-form)
2002                                  (encode-lambda-list (cadr lambda-form))))))
2003      (when bits
2004        (unless (typep bits 'fixnum) (error "Bug: Bad bits ~s!" bits))
2005        (let* ((nargs (length arglist))
2006               (minargs (if spread-p (1- nargs) nargs))
2007               (maxargs (if spread-p nil nargs))
2008               (required (ldb $lfbits-numreq bits))
2009               (max (if (logtest (logior (ash 1 $lfbits-rest-bit) (ash 1 $lfbits-restv-bit) (ash 1 $lfbits-keys-bit)) bits)
2010                      nil
2011                      (+ required (ldb $lfbits-numopt bits)))))
2012          ;; If the (apparent) number of args in the call doesn't
2013          ;; match the definition, complain.  If "spread-p" is true,
2014          ;; we can only be sure of the case when more than the
2015          ;; required number of args have been supplied.
2016          (if (or (if (and (not spread-p) (< minargs required))
2017                    (setq reason `(:toofew ,minargs ,required)))
2018                  (if (and max (or (> minargs max)) (if maxargs (> maxargs max)))
2019                    (setq reason (list :toomany (if (> minargs max) minargs maxargs) max)))
2020                  (setq reason (nx1-find-bogus-keywords arglist spread-p bits keyvect)))
2021            (values deftype reason)))))))
2022
2023(defun nx1-find-bogus-keywords (args spread-p bits keyvect)
2024  (declare (fixnum bits))
2025  (when (logbitp $lfbits-aok-bit bits)
2026    (setq keyvect nil))                 ; only check for even length tail
2027  (when (and (logbitp $lfbits-keys-bit bits) 
2028             (not spread-p))     ; Can't be sure, last argform may contain :allow-other-keys
2029    (do* ((key-values (nthcdr (+ (ldb $lfbits-numreq bits)  (ldb $lfbits-numopt bits)) args))
2030          (key-args key-values  (cddr key-args)))
2031         ((null key-args))
2032      (if (null (cdr key-args))
2033        (return (list :odd-keywords key-values))
2034        (when keyvect
2035          (let* ((keyword (%car key-args)))
2036            (unless (constantp keyword)
2037              (return nil))
2038            (unless (eq keyword :allow-other-keys)
2039              (unless (position (nx-unquote keyword) keyvect)               
2040                (return (list :unknown-keyword
2041                              (nx-unquote keyword)
2042                              (coerce keyvect 'list)))))))))))
2043
2044;;; we can save some space by going through subprims to call "builtin"
2045;;; functions for us.
2046(defun nx1-builtin-function-offset (name)
2047   (arch::builtin-function-name-offset name))
2048
2049(defun nx1-call-form (global-name afunc arglist spread-p  &optional (env *nx-lexical-environment*))
2050  (if afunc
2051    (make-acode (%nx1-operator lexical-function-call) afunc (nx1-arglist arglist (if spread-p 1 (backend-num-arg-regs *target-backend*))) spread-p)
2052    (let* ((builtin (unless (or spread-p
2053                                (eql 3 (safety-optimize-quantity env)))
2054                      (nx1-builtin-function-offset global-name))))
2055      (if (and builtin
2056               (let* ((bits (lfun-bits (fboundp global-name))))
2057                 (and bits (eql (logand $lfbits-args-mask bits)
2058                                (dpb (length arglist)
2059                                     $lfbits-numreq
2060                                     0)))))
2061        (make-acode (%nx1-operator builtin-call) 
2062                    (make-acode (%nx1-operator fixnum) builtin)
2063                    (nx1-arglist arglist))
2064        (make-acode (%nx1-operator call)
2065                     (if (symbolp global-name)
2066                       (nx1-immediate (nx1-note-fcell-ref global-name))
2067                       global-name)
2068                     (nx1-arglist arglist (if spread-p 1 (backend-num-arg-regs *target-backend*)))
2069                     spread-p)))))
2070 
2071;;; If "sym" is an expression (not a symbol which names a function),
2072;;; the caller has already alphatized it.
2073(defun nx1-call (sym args &optional spread-p global-only inhibit-inline)
2074  (nx1-verify-length args 0 nil)
2075  (let ((args-in-regs (if spread-p 1 (backend-num-arg-regs *target-backend*))))
2076    (if (nx-self-call-p sym global-only)
2077      ;; Should check for downward functions here as well.
2078      (multiple-value-bind (deftype reason)
2079                           (nx1-check-call-args *nx-current-function* args spread-p)
2080        (when deftype
2081          (nx1-whine deftype sym reason args spread-p))
2082        (make-acode (%nx1-operator self-call) (nx1-arglist args args-in-regs) spread-p))
2083      (multiple-value-bind (lambda-form containing-env token) (nx-inline-expansion sym *nx-lexical-environment* global-only)
2084        (or (and (not inhibit-inline)
2085                 (nx1-expand-inline-call lambda-form containing-env token args spread-p *nx-lexical-environment*))
2086            (multiple-value-bind (info afunc) (if (and  (symbolp sym) (not global-only)) (nx-lexical-finfo sym))
2087              (when (eq 'macro (car info))
2088                (nx-error "Can't call macro function ~s" sym))
2089              (nx-record-xref-info :direct-calls sym)
2090              (if (and afunc (%ilogbitp $fbitruntimedef (afunc-bits afunc)))
2091                (let ((sym (var-name (afunc-lfun afunc))))
2092                  (nx1-form 
2093                   (if spread-p
2094                     `(,(if (eql spread-p 0) 'applyv 'apply) ,sym ,args)
2095                     `(funcall ,sym ,@args))))
2096                (let* ((val (nx1-call-form sym afunc args spread-p)))
2097                    (when afunc
2098                      (let ((callers (afunc-callers afunc))
2099                            (self *nx-current-function*))
2100                        (unless (or (eq self afunc) (memq self callers))
2101                          (setf (afunc-callers afunc) (cons self callers)))))
2102                    (if (and (null afunc) (memq sym *nx-never-tail-call*))
2103                      (make-acode (%nx1-operator values) (list val))
2104                      val)))))))))
2105
2106(defun nx1-expand-inline-call (lambda-form env token args spread-p old-env)
2107  (if (and (or (null spread-p) (eq (length args) 1)))
2108    (if (and token (not (memq token *nx-inline-expansions*)))
2109      (with-program-error-handler (lambda (c) (declare (ignore c)) nil)
2110        (let* ((*nx-inline-expansions* (cons token *nx-inline-expansions*))
2111               (lambda-list (cadr lambda-form))
2112               (body (cddr lambda-form))
2113               (new-env (new-lexical-environment env)))
2114          (setf (lexenv.mdecls new-env)
2115                `((speed . ,(speed-optimize-quantity old-env))
2116                  (space . ,(space-optimize-quantity old-env))
2117                  (safety . ,(space-optimize-quantity old-env))
2118                  (compilation-speed . ,(compilation-speed-optimize-quantity old-env))
2119                  (debug . ,(debug-optimize-quantity old-env))))
2120          (if spread-p
2121            (nx1-destructure lambda-list (car args) nil nil body new-env)
2122            (nx1-lambda-bind lambda-list args body new-env)))))))
2123             
2124; note that regforms are reversed: arg_z is always in the car
2125(defun nx1-arglist (args &optional (nregargs (backend-num-arg-regs *target-backend*)))
2126  (declare (fixnum nregargs))
2127  (let* ((stkforms nil)
2128         (regforms nil)
2129         (nstkargs (%i- (length args) nregargs)))
2130    (declare (fixnum nstkargs))
2131      (list
2132       (dotimes (i nstkargs (nreverse stkforms))
2133         (declare (fixnum i))
2134         (push (nx1-form (%car args)) stkforms)
2135         (setq args (%cdr args)))
2136       (dolist (arg args regforms)
2137         (push (nx1-form arg) regforms)))))
2138
2139(defun nx1-formlist (args)
2140  (let* ((a nil))
2141    (dolist (arg args)
2142      (push (nx1-form arg) a))
2143    (nreverse a)))
2144
2145(defun nx1-verify-length (forms min max &aux (len (list-length forms)))
2146 (if (or (null len)
2147         (%i> min len)
2148         (and max (%i> len max)))
2149     (nx-error "Wrong number of args in form ~S." (cons *nx-sfname* forms))
2150     len))
2151
2152(defun nx-unquote (form)
2153  (if (nx-quoted-form-p form)
2154    (%cadr form)
2155    form))
2156
2157(defun nx-quoted-form-p (form &aux (f form))
2158 (and (consp form)
2159      (eq (pop form) 'quote)
2160      (or
2161       (and (consp form)
2162            (not (%cdr form)))
2163       (nx-error "Illegally quoted form ~S." f))))
2164
2165(defun nx-form-constant-p (form env)
2166  (declare (ignore env))
2167  (or (quoted-form-p form)
2168      (self-evaluating-p form)))
2169
2170(defun nx-form-constant-value (form env)
2171  (declare (ignore env))
2172  (declare (type (satisfies nx-form-constant-p) form))
2173  (if (consp form) (%cadr form) form))
2174
2175; Returns two values: expansion & win
2176; win is true if expansion is not EQ to form.
2177; This is a bootstrapping version.
2178; The real one is in "ccl:compiler;optimizers.lisp".
2179(unless (fboundp 'maybe-optimize-slot-accessor-form)
2180
2181(defun maybe-optimize-slot-accessor-form (form environment)
2182  (declare (ignore environment))
2183  (values form nil))
2184
2185)
2186
2187(defun nx-source-note (form &aux (source-notes *nx-source-note-map*))
2188  (when source-notes
2189    (when (or (consp form) (vectorp form) (pathnamep form))
2190      (let ((note (gethash form source-notes)))
2191        (unless (listp note) note)))))
2192
2193#-BOOTSTRAPPED
2194(when (= 2 (let ((bits (lfun-bits #'defstruct-ref-transform)))
2195             (+ (ldb $lfbits-numreq bits) (ldb $lfbits-numopt bits))))
2196  (let ((old #'defstruct-ref-transform))
2197    (fset 'defstruct-ref-transform (lambda (a b &optional env)
2198                                     (declare (ignore env))
2199                                     (funcall old a b)))))
2200
2201(defun nx-transform (form &optional (environment *nx-lexical-environment*) (source-note-map *nx-source-note-map*))
2202  (macrolet ((form-changed (form)
2203               `(progn
2204                  (unless source (setq source (gethash ,form source-note-map)))
2205                  (setq changed t))))
2206    (prog (sym transforms lexdefs changed enabled macro-function compiler-macro (source t))
2207       (when source-note-map
2208         (setq source (gethash form source-note-map)))
2209       (go START)
2210     LOOP
2211       (form-changed form)
2212       (when (and (consp form) 
2213                  (or (eq (%car form) 'the)
2214                      (and sym (eq (%car form) sym))))
2215         (go DONE))
2216     START
2217       (when (non-nil-symbol-p form)
2218         (multiple-value-bind (newform win) (nx-transform-symbol form environment)
2219           (unless win (go DONE))
2220           (setq form newform)
2221           (go LOOP)))
2222       (when (atom form) (go DONE))
2223       (unless (symbolp (setq sym (%car form)))
2224         (go DONE))
2225       #+no
2226       (when (eq sym 'the)
2227         (destructuring-bind (typespec thing) (cdr form)
2228           (if (constantp thing)
2229             (progn
2230               (setq form thing)
2231               (go LOOP))
2232             (multiple-value-bind (newform win) (nx-transform thing environment source-note-map)
2233               (when win
2234                 (form-changed newform)
2235                 (if (and (self-evaluating-p newform)
2236                          (typep newform typespec))
2237                   (setq form newform)
2238                   (setq form `(the ,typespec ,newform)))
2239                 (go DONE))))))
2240       (when (nx-quoted-form-p form)
2241         (when (self-evaluating-p (%cadr form))
2242           (setq form (%cadr form)))
2243         (go DONE))
2244       (when (setq lexdefs (nx-lexical-finfo sym environment))
2245         (if (eq 'function (%car lexdefs))
2246           (go DONE)))
2247       (setq transforms (setq compiler-macro (compiler-macro-function sym environment))
2248             macro-function (macro-function sym environment)
2249             enabled (nx-allow-transforms environment))
2250       (unless macro-function
2251         (let* ((win nil))
2252           (when (and enabled (functionp (fboundp sym)))
2253             (multiple-value-setq (form win) (nx-transform-arglist form environment source-note-map))
2254             (when win
2255               (form-changed form)))))
2256       (when (and enabled
2257                  (not (nx-declared-notinline-p sym environment)))
2258         (multiple-value-bind (value folded) (nx-constant-fold form environment)
2259           (when folded
2260             (setq form value)
2261             (form-changed form)
2262             (unless (and (consp form) (eq (car form) sym)) (go START))))
2263         (when compiler-macro
2264           (multiple-value-bind (newform win) (compiler-macroexpand-1 form environment)
2265             (when win
2266               (when (and (consp newform) (eq (car newform) sym) (functionp (fboundp sym)))
2267                 (setq sym nil))
2268               (setq form newform)
2269               (go LOOP))))
2270         (multiple-value-bind (newform win) (maybe-optimize-slot-accessor-form form environment)
2271           (when win
2272             (setq sym nil)
2273             (setq form newform)
2274             (go START)))
2275         (unless macro-function
2276           (when (setq transforms (or (environment-structref-info sym environment)
2277                                      (and (boundp '%structure-refs%)
2278                                           (gethash sym %structure-refs%))))
2279             (setq form (defstruct-ref-transform transforms (%cdr form) environment))
2280             (form-changed form)
2281             (go START))
2282           (when (setq transforms (assq sym *nx-synonyms*))
2283             (setq form (cons (%cdr transforms) (setq sym (%cdr form))))
2284             (go LOOP))))
2285       (when (and macro-function
2286                  (or lexdefs
2287                      (not (and (gethash sym *nx1-alphatizers*) (not (nx-declared-notinline-p sym environment))))))
2288         (nx-record-xref-info :macro-calls (function-name macro-function))
2289         (setq form (macroexpand-1 form environment))
2290         (form-changed form)
2291         (go START))
2292     DONE
2293       (if (eq source t)
2294         (setq source nil)
2295         (let ((this (nx-source-note form)))
2296           (if this
2297             (setq source this)
2298             (when source
2299               (unless (and (consp form)
2300                            (eq (%car form) 'the)
2301                            (eq source (gethash (caddr form) source-note-map)))
2302                 (when (or (consp form) (vectorp form) (pathnamep form))
2303                   (unless (or (eq form (%unbound-marker))
2304                               (eq form (%slot-unbound-marker)))
2305                     (setf (gethash form source-note-map) source))))))))
2306       ;; Return source for symbols, even though don't record it in hash table.
2307       (return (values form changed source)))))
2308
2309
2310; Transform all of the arguments to the function call form.
2311; If any of them won, return a new call form (with the same operator as the original), else return the original
2312; call form unchanged.
2313(defun nx-transform-arglist (callform env source-note-map)
2314  (let* ((any-wins nil)
2315         (transformed-call (cons (car callform) nil))
2316         (ptr transformed-call)
2317         (win nil))
2318    (declare (type cons ptr))
2319    (dolist (form (cdr callform) (if any-wins (values (copy-list transformed-call) t) (values callform nil)))
2320      (multiple-value-setq (form win) (nx-transform form env source-note-map))
2321      (rplacd ptr (setq ptr (cons form nil)))
2322      (if win (setq any-wins t)))))
2323
2324;This is needed by (at least) SETF.
2325(defun nxenv-local-function-p (name macro-env)
2326  (multiple-value-bind (type local-p) (function-information name macro-env)
2327    (and local-p (eq :function type))))
2328
2329           
2330;;; This guy has to return multiple values.  The arguments have
2331;;; already been transformed; if they're all constant (or quoted), try
2332;;; to evaluate the expression at compile-time.
2333(defun nx-constant-fold (original-call &optional (environment *nx-lexical-environment*) &aux 
2334                                       (fn (car original-call)) form mv foldable foldfn)
2335  (flet ((quotify (x) (if (self-evaluating-p x) x (list 'quote x))))
2336    (if (and (nx-allow-transforms environment)
2337             (let* ((bits (if (symbolp fn) (%symbol-bits fn) 0)))
2338               (declare (fixnum bits))
2339               (if (setq foldable (logbitp $sym_fbit_constant_fold bits))
2340                 (if (logbitp $sym_fbit_fold_subforms bits)
2341                   (setq foldfn 'fold-constant-subforms))
2342                 (setq foldable (assq fn *nx-can-constant-fold*)
2343                       foldfn (cdr foldable)))
2344               foldable))
2345      (if foldfn
2346        (funcall foldfn original-call environment)
2347        (progn
2348          (let ((args nil))
2349            (dolist (arg (cdr original-call) (setq args (nreverse args)))
2350              (if (quoted-form-p arg)
2351                (setq arg (%cadr arg))
2352                (unless (self-evaluating-p arg) (return-from nx-constant-fold (values original-call nil))))
2353              (push arg args))
2354            (if (nx1-check-call-args (fboundp fn) args nil)
2355              (return-from nx-constant-fold (values original-call nil))
2356              (setq form (multiple-value-list 
2357                             (handler-case (apply fn args)
2358                               (error (condition)
2359                                      (warn "Error: \"~A\" ~&signalled during compile-time evaluation of ~S ."
2360                                            condition original-call)
2361                                      (return-from nx-constant-fold
2362                                        (values `(locally (declare (notinline ,fn))
2363                                                  ,original-call)
2364                                                t))))))))
2365          (if form
2366            (if (null (%cdr form))
2367              (setq form (%car form))
2368              (setq mv (setq form (cons 'values (mapcar #'quotify form))))))
2369          (values (if mv form (quotify form)) T)))
2370      (values original-call nil))))
2371
2372(defun nx-transform-symbol (sym &optional (env *nx-lexical-environment*))
2373; Gak.  Can't call NX-LEX-INFO without establishing *nx-lexical-environment*.
2374; NX-LEX-INFO should take env arg!.
2375  (let* ((*nx-lexical-environment* env))
2376    (multiple-value-bind (expansion win) (macroexpand-1 sym env)
2377      (if win
2378        (let ((type (nx-declared-type sym))
2379              (var (nth-value 2 (nx-lex-info sym))))
2380          (unless (eq t type) (setq expansion `(the ,type ,expansion)))
2381          (if var (nx-set-var-bits var (%ilogior (%ilsl $vbitreffed 1) (nx-var-bits var)))))
2382        (progn
2383          (multiple-value-setq (expansion win)
2384            (nx-transform-defined-constant sym env))
2385          (if win (setq win (neq sym expansion)))))
2386      (values expansion win))))
2387
2388; if sym has a substitutable constant value in env (or globally), return
2389; (values <value> t), else (values nil nil)
2390(defun nx-transform-defined-constant (sym env)
2391  (let* ((defenv (definition-environment env))
2392         (val (if defenv (assq sym (defenv.constants defenv))))
2393         (constant-value-p val))
2394    (if val
2395      (setq val (%cdr val))
2396      (if (constant-symbol-p sym)
2397        (setq constant-value-p t val (%sym-global-value sym))))
2398    (if (and (neq val (%unbound-marker-8))
2399             constant-value-p 
2400             (nx-substititute-constant-value sym val env))
2401      (values (if (self-evaluating-p val) val (list 'quote val)) t)
2402      (values nil nil))))
2403
2404
2405(defun nx-var-bits (var)
2406  (do* ((var var bits)
2407        (bits (var-bits var) (var-bits var)))
2408       ((fixnump bits) bits)))
2409
2410(defun nx-set-var-bits (var newbits)
2411  (do* ((var var bits)
2412        (bits (var-bits var) (var-bits var)))
2413       ((fixnump bits) (setf (var-bits var) newbits))))
2414
2415(defun nx-adjust-ref-count (var)
2416  (let* ((bits (nx-var-bits var))
2417         (temp-p (%ilogbitp $vbittemporary bits))
2418         (by (if temp-p 1 (expt  4 *nx-loop-nesting-level*)))
2419         (new (%imin (%i+ (%ilogand2 $vrefmask bits) by) 255)))
2420    (setf (var-refs var) (+ (var-refs var) by))
2421    (nx-set-var-bits var (%ilogior (%ilogand (%ilognot $vrefmask) bits) new))
2422    new))
2423
2424;;; Treat (VALUES x . y) as X if it appears in a THE form
2425(defun nx-form-type (form &optional (env *nx-lexical-environment*))
2426  (if (nx-form-constant-p form env)
2427    (type-of (nx-form-constant-value form env))
2428    (if (and (consp form)          ; Kinda bogus now, but require-type
2429             (eq (%car form) 'require-type) ; should be special some day
2430             (nx-form-constant-p (caddr form) env))
2431      (nx-form-constant-value (%caddr form) env)
2432      (if (nx-trust-declarations env)
2433        (if (symbolp form)
2434          (nx-target-type (nx-declared-type form env))
2435          (if (consp form)
2436            (if (eq (%car form) 'the)
2437              (destructuring-bind (typespec val) (%cdr form)
2438                (declare (ignore val))
2439                (let* ((ctype (values-specifier-type typespec)))
2440                  (if (typep ctype 'values-ctype)
2441                    (let* ((req (values-ctype-required ctype)))
2442                      (if req
2443                        (nx-target-type (type-specifier (car req)))
2444                        '*))
2445                    (nx-target-type (type-specifier ctype)))))
2446              (if (eq (%car form) 'setq)
2447                (nx-declared-type (cadr form) env)
2448                (let* ((op (gethash (%car form) *nx1-operators*)))
2449                  (or (and op (cdr (assq op *nx-operator-result-types*)))
2450                      (and (not op)(cdr (assq (car form) *nx-operator-result-types-by-name*)))
2451                      (and (memq (car form) *numeric-ops*)
2452                           (grovel-numeric-form form env))
2453                      (and (memq (car form) *logical-ops*)
2454                           (grovel-logical-form form env))
2455                      ;; Sort of the right idea, but this should be done
2456                      ;; in a more general way.
2457                      (when (or (eq (car form) 'aref)
2458                                (eq (car form) 'uvref))
2459                        (let* ((atype (nx-form-type (cadr form) env))
2460                               (a-ctype (specifier-type atype)))
2461                          (when (array-ctype-p a-ctype)
2462                            (type-specifier (array-ctype-specialized-element-type
2463                                             a-ctype)))))
2464                      t))))
2465            t))
2466        t))))
2467
2468(defparameter *numeric-ops* '(+ -  / * +-2 --2 *-2 /-2))
2469
2470(defparameter *logical-ops* '(logxor-2 logior-2 logand-2  lognot logxor))
2471
2472(defun numeric-type-p (type &optional not-complex)
2473  (or (memq type '(fixnum integer double-float single-float float))
2474      (let ((ctype (specifier-type type)))
2475        (and (numeric-ctype-p ctype)
2476             (or (not not-complex)
2477                 (neq (numeric-ctype-complexp ctype) :complex))))))
2478
2479(defun grovel-numeric-form (form env)
2480  (let* ((op (car form))
2481         (args (cdr form)))
2482    (if (every #'(lambda (x) (nx-form-typep x 'float env)) args)
2483      (if (some #'(lambda (x) (nx-form-typep x 'double-float env)) args)
2484        'double-float
2485        'single-float)
2486      (if (every #'(lambda (x) (nx-form-typep x 'integer env)) args)
2487        (if (or (eq op '/) (eq op '/-2))
2488          t
2489          'integer)))))
2490
2491;; now e.g. logxor of 3 known fixnums is inline as is (logior a (logxor b c))
2492;; and (the fixnum (+ a (logxor b c)))
2493
2494(defun grovel-logical-form (form env)
2495  (when (nx-trust-declarations env)
2496    (let (;(op (car form))
2497          type)
2498      (dolist (arg (cdr form))
2499        (let ((it (nx-form-type arg env)))         
2500          (if (not (subtypep it 'fixnum))
2501            (return (setq type nil))
2502            (setq type 'fixnum))))
2503      type)))
2504
2505(defun nx-form-typep (arg type &optional (env *nx-lexical-environment*))
2506  (setq type (nx-target-type (type-expand type)))
2507  (if (nx-form-constant-p arg env)
2508    (typep (nx-form-constant-value arg env) type env)
2509    (subtypep (nx-form-type arg env) type env)))
2510
2511
2512(defun nx-binary-fixnum-op-p (form1 form2 env &optional ignore-result-type)
2513  (setq form1 (nx-transform form1 env)
2514        form2 (nx-transform form2 env))
2515  (and
2516   (target-word-size-case
2517    (32 (nx-form-typep form1 '(signed-byte 30) env))
2518    (64 (nx-form-typep form1 '(signed-byte 61) env)))
2519   (target-word-size-case
2520    (32 (nx-form-typep form2 '(signed-byte 30) env))
2521    (64 (nx-form-typep form2 '(signed-byte 61) env)))
2522   (or ignore-result-type
2523        (and (nx-trust-declarations env)
2524                (target-word-size-case
2525                 (32 (subtypep *nx-form-type* '(signed-byte 30)))
2526                 (64 (subtypep *nx-form-type* '(signed-byte 61))))))))
2527
2528
2529(defun nx-binary-natural-op-p (form1 form2 env &optional (ignore-result-type t))
2530  (and
2531   (target-word-size-case
2532    (32
2533     (and (nx-form-typep form1 '(unsigned-byte 32)  env)
2534          (nx-form-typep form2 '(unsigned-byte 32)  env)))
2535    (64
2536     (and (nx-form-typep form1 '(unsigned-byte 64)  env)
2537          (nx-form-typep form2 '(unsigned-byte 64)  env))))
2538   (or ignore-result-type
2539       (and (nx-trust-declarations env)
2540            (target-word-size-case
2541             (32 (subtypep *nx-form-type* '(unsigned-byte 32)))
2542             (64 (subtypep *nx-form-type* '(unsigned-byte 64))))))))
2543
2544   
2545
2546
2547(defun nx-binary-boole-op (whole env arg-1 arg-2 fixop intop naturalop)
2548  (let* ((use-fixop (nx-binary-fixnum-op-p arg-1 arg-2 env t))
2549         (use-naturalop (nx-binary-natural-op-p arg-1 arg-2 env)))
2550    (if (or use-fixop use-naturalop intop)
2551      (make-acode (if use-fixop fixop (if use-naturalop naturalop intop))
2552                  (nx1-form arg-1)
2553                  (nx1-form arg-2))
2554      (nx1-treat-as-call whole))))
2555
2556(defun nx-global-p (sym &optional (env *nx-lexical-environment*))
2557  (or 
2558   (logbitp $sym_vbit_global (the fixnum (%symbol-bits sym)))
2559   (let* ((defenv (definition-environment env)))
2560     (if defenv 
2561       (eq :global (%cdr (assq sym (defenv.specials defenv))))))))
2562 
2563(defun nx-need-var (sym &optional (check-bindable t))
2564  (if (and (nx-need-sym sym)
2565           (not (constantp sym))
2566           (let* ((defenv (definition-environment *nx-lexical-environment*)))
2567             (or (null defenv)
2568                 (not (assq sym (defenv.constants defenv)))))) ; check compile-time-constants, too
2569    (if (and check-bindable (nx-global-p sym))
2570      (nx-error "~S is declared static and can not be bound" sym)
2571      sym)
2572    (nx-error "Can't bind or assign to constant ~S." sym)))
2573
2574(defun nx-need-sym (sym)
2575  (if (symbolp sym)
2576    sym
2577    (nx-error "~S is not a symbol." sym)))
2578
2579(defun nx-need-function-name (name)
2580  (multiple-value-bind (valid nm) (valid-function-name-p name)
2581    (if valid nm (nx-error "Invalid function name ~S" name))))
2582
2583(defun nx-pair-name (form)
2584  (nx-need-sym (if (consp form) (%car form) form)))
2585
2586(defun nx-pair-initform (form)
2587  (if (atom form)
2588    nil
2589    (if (and (listp (%cdr form)) (null (%cddr form)))
2590      (%cadr form)
2591      (nx-error "Bad initialization form: ~S." form))))
2592
2593; some callers might assume that this guy errors out if it can't conjure up
2594; a fixnum.  I certainly did ...
2595(defun nx-get-fixnum (form &aux (trans (nx-transform form *nx-lexical-environment*)))
2596 (if (fixnump trans)
2597  trans
2598  form))
2599 
2600(defun nx1-func-name (gizmo)
2601  (and (consp gizmo)
2602       (or (eq (%car gizmo) 'function) (eq (%car gizmo) 'quote))
2603       (consp (%cdr gizmo))
2604       (null (%cddr gizmo))
2605       (nth-value 1 (valid-function-name-p (%cadr gizmo)))))
2606
2607; distinguish between program errors & incidental ones.
2608(defun nx-error (format-string &rest args)
2609  (error (make-condition 'compile-time-program-error 
2610                :context (nx-error-context)
2611                :format-control format-string
2612                :format-arguments args)))
2613
2614(defun nx-compile-time-error (format-string &rest args)
2615  (error (make-condition 'compile-time-program-error 
2616                :context (nx-error-context)
2617                :format-control format-string
2618                :format-arguments args)))
2619
2620; Should return information about file being compiled, nested functions, etc. ...
2621(defun nx-error-context ()
2622  (or *nx-cur-func-name* "an anonymous function"))
2623
2624(defparameter *warn-if-function-result-ignored*
2625  '(sort stable-sort delete delete-if delete-if-not remf nreverse
2626    nunion nset-intersection)
2627  "Names of functions whos result(s) should ordinarily be used, because of their side-effects or lack of them.")
Note: See TracBrowser for help on using the repository browser.