Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Annotation of /sml/trunk/src/compiler/Semant/pickle/pickmod-new.sml
ViewVC logotype

Annotation of /sml/trunk/src/compiler/Semant/pickle/pickmod-new.sml

Parent Directory Parent Directory | Revision Log Revision Log


Revision 1178 - (view) (download)

1 : monnier 427 (*
2 :     * The revised pickler using the new "generic" pickling facility.
3 :     *
4 : blume 587 * March 2000, Matthias Blume
5 : monnier 427 *)
6 :     signature PICKMOD = sig
7 :    
8 : blume 587 (* There are three possible reasons to run the pickler. Each form
9 :     * of context (see datatype context below) corresponds to one of them:
10 :     *
11 :     * 1. The initial pickle. This is done right after a new static
12 :     * environment has been constructed by the elaborator. The context
13 :     * is used to identify those identifiers (ModuleId.<xxx>Id) that
14 :     * correspond to stubs. Only the domain of the given map is relevant
15 :     * here, but since we (usually) need the full map right afterwards
16 :     * for unpickling, there is no gain in using a set.
17 :     *
18 :     * 2. Pickling a previously pickled-and-unpickled environment from
19 :     * which some parts may have been pruned. This is used to calculate
20 :     * a new hash value that is equal to the hash obtained from an initial
21 :     * pickle (1.) of the environment if it had been pruned earlier.
22 :     * (This is used by the compilation manager's cutoff recompilation
23 :     * system. Pickles obtained here are never unpickled.)
24 :     * No actual context is necessary because stubification info is
25 :     * fully embedded in the environment to be pickled. However, we
26 :     * must provide the original pid obtained from the first pickling
27 :     * because occurences of that pid have to be treated the same way
28 : blume 588 * their "not-yet-occurrences" had been treated in step 1.
29 : blume 587 *
30 :     * 3. A set of environments that have already gone through an initial
31 :     * pickling-and-unpickling is pickled as part of a stable library.
32 :     * The context is a sequence of maps together with information of
33 :     * how to get hold of the same map later during unpickling.
34 :     * (The full context of a stable library is a set of other stable
35 :     * libraries, but during unpickling we want to avoid unpickling
36 :     * all of these other libraries in full.) *)
37 :     datatype context =
38 :     INITIAL of ModuleId.tmap
39 :     | REHASH of PersStamps.persstamp
40 : blume 632 | LIBRARY of ((int * Symbol.symbol) option * ModuleId.tmap) list
41 : monnier 427
42 : blume 587 type map
43 :     val emptyMap : map
44 : monnier 427
45 : blume 587 val envPickler : (Access.lvar -> unit) ->
46 :     context ->
47 :     (map, StaticEnv.staticEnv) PickleUtil.pickler
48 : monnier 427
49 : blume 587 val pickleEnv : context ->
50 :     StaticEnv.staticEnv ->
51 :     { hash: PersStamps.persstamp,
52 :     pickle: Word8Vector.vector,
53 :     exportLvars: Access.lvar list,
54 : blume 1058 hasExports: bool }
55 : monnier 504
56 : blume 879 val pickleFLINT: FLINT.prog option -> { hash: PersStamps.persstamp,
57 :     pickle: Word8Vector.vector }
58 : monnier 427
59 : blume 902 val symenvPickler : (map, SymbolicEnv.env) PickleUtil.pickler
60 : monnier 427
61 :     val pickle2hash: Word8Vector.vector -> PersStamps.persstamp
62 :    
63 :     val dontPickle :
64 : blume 1058 { env: StaticEnv.staticEnv, count: int } ->
65 :     { newenv: StaticEnv.staticEnv, hash: PersStamps.persstamp,
66 :     exportLvars: Access.lvar list, hasExports: bool }
67 : monnier 427 end
68 :    
69 : monnier 475 local
70 :     functor MapFn = RedBlackMapFn
71 :     structure IntMap = IntRedBlackMap
72 :     in
73 :     structure PickMod :> PICKMOD = struct
74 : monnier 427
75 : blume 587 datatype context =
76 :     INITIAL of ModuleId.tmap
77 :     | REHASH of PersStamps.persstamp
78 : blume 632 | LIBRARY of ((int * Symbol.symbol) option * ModuleId.tmap) list
79 : blume 587
80 : monnier 427 (* to gather some statistics... *)
81 :     val addPickles = Stats.addStat (Stats.makeStat "Pickle Bytes")
82 :    
83 :     fun bug msg = ErrorMsg.impossible ("PickMod: " ^ msg)
84 :    
85 :     structure A = Access
86 :     structure DI = DebIndex
87 :     structure LK = LtyKernel
88 :     structure PT = PrimTyc
89 :     structure F = FLINT
90 :     structure T = Types
91 :     structure SP = SymPath
92 :     structure IP = InvPath
93 :     structure MI = ModuleId
94 :     structure II = InlInfo
95 :     structure V = VarCon
96 :     structure ED = EntPath.EvDict
97 :     structure PS = PersStamps
98 :     structure P = PrimOp
99 :     structure M = Modules
100 :     structure B = Bindings
101 :    
102 :     (** NOTE: the CRC functions really ought to work on Word8Vector.vectors **)
103 :     fun pickle2hash pickle =
104 :     PS.fromBytes
105 :     (Byte.stringToBytes
106 :     (CRC.toString
107 :     (CRC.fromString
108 :     (Byte.bytesToString pickle))))
109 :    
110 :     fun symCmp (a, b) =
111 :     if Symbol.symbolGt (a, b) then GREATER
112 :     else if Symbol.eq (a, b) then EQUAL else LESS
113 :    
114 : monnier 475 structure LTMap = MapFn
115 : monnier 427 (struct type ord_key = LK.lty val compare = LK.lt_cmp end)
116 : monnier 475 structure TCMap = MapFn
117 : monnier 427 (struct type ord_key = LK.tyc val compare = LK.tc_cmp end)
118 : monnier 475 structure TKMap = MapFn
119 : monnier 427 (struct type ord_key = LK.tkind val compare = LK.tk_cmp end)
120 : blume 587 structure DTMap = StampMap
121 :     structure MBMap = StampMap
122 : monnier 439
123 : monnier 427 structure PU = PickleUtil
124 :     structure PSymPid = PickleSymPid
125 :    
126 :     type map =
127 :     { lt: PU.id LTMap.map,
128 :     tc: PU.id TCMap.map,
129 :     tk: PU.id TKMap.map,
130 :     dt: PU.id DTMap.map,
131 :     mb: PU.id MBMap.map,
132 : blume 587 mi: PU.id MI.umap }
133 : monnier 427
134 :     val emptyMap = { lt = LTMap.empty, tc = TCMap.empty, tk = TKMap.empty,
135 : blume 587 dt = DTMap.empty, mb = MBMap.empty, mi = MI.emptyUmap }
136 : monnier 427
137 :     (* type info *)
138 :     val (NK, AO, CO, PO, CS, A, CR, LT, TC, TK,
139 :     V, C, E, FK, RK, ST, MI, EQP, TYCKIND, DTI,
140 :     DTF, TYCON, T, II, VAR, SD, SG, FSG, SP, EN,
141 :     STR, F, STE, TCE, STRE, FE, EE, ED, EEV, FX,
142 :     B, DCON, DICT, FPRIM, FUNDEC, TFUNDEC, DATACON, DTMEM, NRD,
143 : leunga 1174 OVERLD, FCTC, SEN, FEN, SPATH, IPATH, STRID, FCTID, CCI, CTYPE,
144 :     CCALL_TYPE) =
145 : monnier 427 (1, 2, 3, 4, 5, 6, 7, 8, 9, 10,
146 :     11, 12, 13, 14, 15, 16, 17, 18, 19, 20,
147 :     21, 22, 23, 24, 25, 26, 27, 28, 29, 30,
148 :     31, 32, 33, 34, 35, 36, 37, 38, 39, 40,
149 :     41, 42, 43, 44, 45, 46, 47, 48, 49,
150 : leunga 1174 50, 51, 52, 53, 54, 55, 56, 57, 58, 59, 60)
151 : monnier 427
152 :     (* this is a bit awful...
153 :     * (we really ought to have syntax for "functional update") *)
154 :     val LTs = { find = fn (m: map, x) => LTMap.find (#lt m, x),
155 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
156 :     { lt = LTMap.insert (lt, x, v),
157 :     tc = tc,
158 :     tk = tk,
159 :     dt = dt,
160 :     mb = mb,
161 :     mi = mi } }
162 :     val TCs = { find = fn (m: map, x) => TCMap.find (#tc m, x),
163 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
164 :     { lt = lt,
165 :     tc = TCMap.insert (tc, x, v),
166 :     tk = tk,
167 :     dt = dt,
168 :     mb = mb,
169 :     mi = mi } }
170 :     val TKs = { find = fn (m: map, x) => TKMap.find (#tk m, x),
171 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
172 :     { lt = lt,
173 :     tc = tc,
174 :     tk = TKMap.insert (tk, x, v),
175 :     dt = dt,
176 :     mb = mb,
177 :     mi = mi } }
178 :     fun DTs x = { find = fn (m: map, _) => DTMap.find (#dt m, x),
179 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
180 :     { lt = lt,
181 :     tc = tc,
182 :     tk = tk,
183 :     dt = DTMap.insert (dt, x, v),
184 :     mb = mb,
185 :     mi = mi } }
186 :     fun MBs x = { find = fn (m: map, _) => MBMap.find (#mb m, x),
187 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
188 :     { lt = lt,
189 :     tc = tc,
190 :     tk = tk,
191 :     dt = dt,
192 :     mb = MBMap.insert (mb, x, v),
193 :     mi = mi } }
194 : blume 587 fun TYCs id = { find = fn (m: map, _) => MI.uLookTyc (#mi m, id),
195 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
196 :     { lt = lt,
197 :     tc = tc,
198 :     tk = tk,
199 :     dt = dt,
200 :     mb = mb,
201 :     mi = MI.uInsertTyc (mi, id, v) } }
202 :     val SIGs = { find = fn (m: map, r) => MI.uLookSig (#mi m, MI.sigId r),
203 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, r, v) =>
204 :     { lt = lt,
205 :     tc = tc,
206 :     tk = tk,
207 :     dt = dt,
208 :     mb = mb,
209 :     mi = MI.uInsertSig (mi, MI.sigId r, v) } }
210 :     fun STRs i = { find = fn (m: map, _) => MI.uLookStr (#mi m, i),
211 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
212 :     { lt = lt,
213 :     tc = tc,
214 :     tk = tk,
215 :     dt = dt,
216 :     mb = mb,
217 :     mi = MI.uInsertStr (mi, i, v) } }
218 :     fun FCTs i = { find = fn (m: map, _) => MI.uLookFct (#mi m, i),
219 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
220 :     { lt = lt,
221 :     tc = tc,
222 :     tk = tk,
223 :     dt = dt,
224 :     mb = mb,
225 :     mi = MI.uInsertFct (mi, i, v) } }
226 :     val ENVs = { find = fn (m: map, r) => MI.uLookEnv (#mi m, MI.envId r),
227 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, r, v) =>
228 :     { lt = lt,
229 :     tc = tc,
230 :     tk = tk,
231 :     dt = dt,
232 :     mb = mb,
233 :     mi = MI.uInsertEnv (mi, MI.envId r, v) } }
234 : monnier 427
235 :     infix 3 $
236 :    
237 :     val int = PU.w_int
238 :     val int32 = PU.w_int32
239 :     val word = PU.w_word
240 :     val word32 = PU.w_word32
241 :     val string = PU.w_string
242 :     val share = PU.ah_share
243 :     val list = PU.w_list
244 :     val pair = PU.w_pair
245 :     val bool = PU.w_bool
246 :     val option = PU.w_option
247 :     val symbol = PSymPid.w_symbol
248 :     val pid = PSymPid.w_pid
249 :    
250 :     fun mkAlphaConvert () = let
251 : monnier 475 val m = ref IntMap.empty
252 : monnier 427 val cnt = ref 0
253 :     fun cvt i =
254 : monnier 475 case IntMap.find (!m, i) of
255 : monnier 427 SOME i' => i'
256 :     | NONE => let
257 :     val i' = !cnt
258 :     in
259 :     cnt := i' + 1;
260 : monnier 475 m := IntMap.insert (!m, i, i');
261 : monnier 427 i'
262 :     end
263 :     in
264 :     cvt
265 :     end
266 :    
267 :     fun numkind arg = let
268 :     val op $ = PU.$ NK
269 : blume 515 fun nk (P.INT i) = "A" $ [int i]
270 :     | nk (P.UINT i) = "B" $ [int i]
271 :     | nk (P.FLOAT i) = "C" $ [int i]
272 : monnier 427 in
273 :     nk arg
274 :     end
275 :    
276 :     fun arithop oper = let
277 : blume 515 val op $ = PU.$ AO
278 : monnier 427 fun arithopc P.+ = "\000"
279 :     | arithopc P.- = "\001"
280 :     | arithopc P.* = "\002"
281 :     | arithopc P./ = "\003"
282 :     | arithopc P.~ = "\004"
283 :     | arithopc P.ABS = "\005"
284 :     | arithopc P.LSHIFT = "\006"
285 :     | arithopc P.RSHIFT = "\007"
286 :     | arithopc P.RSHIFTL = "\008"
287 :     | arithopc P.ANDB = "\009"
288 :     | arithopc P.ORB = "\010"
289 :     | arithopc P.XORB = "\011"
290 :     | arithopc P.NOTB = "\012"
291 : george 717 | arithopc P.FSQRT = "\013"
292 :     | arithopc P.FSIN = "\014"
293 :     | arithopc P.FCOS = "\015"
294 :     | arithopc P.FTAN = "\016"
295 : monnier 427 in
296 : blume 515 arithopc oper $ []
297 : monnier 427 end
298 :    
299 :     fun cmpop oper = let
300 : blume 515 val op $ = PU.$ CO
301 : monnier 427 fun cmpopc P.> = "\000"
302 :     | cmpopc P.>= = "\001"
303 :     | cmpopc P.< = "\002"
304 :     | cmpopc P.<= = "\003"
305 :     | cmpopc P.LEU = "\004"
306 :     | cmpopc P.LTU = "\005"
307 :     | cmpopc P.GEU = "\006"
308 :     | cmpopc P.GTU = "\007"
309 :     | cmpopc P.EQL = "\008"
310 :     | cmpopc P.NEQ = "\009"
311 :     in
312 : blume 515 cmpopc oper $ []
313 : monnier 427 end
314 : blume 773
315 :     fun ctype t = let
316 :     val op $ = PU.$ CTYPE
317 :     fun ?n = String.str (Char.chr n)
318 :     fun %?n = ?n $ []
319 :     in
320 :     case t of
321 :     CTypes.C_void => %?0
322 :     | CTypes.C_float => %?1
323 :     | CTypes.C_double => %?2
324 :     | CTypes.C_long_double => %?3
325 :     | CTypes.C_unsigned CTypes.I_char => %?4
326 :     | CTypes.C_unsigned CTypes.I_short => %?5
327 :     | CTypes.C_unsigned CTypes.I_int => %?6
328 :     | CTypes.C_unsigned CTypes.I_long => %?7
329 :     | CTypes.C_unsigned CTypes.I_long_long => %?8
330 :     | CTypes.C_signed CTypes.I_char => %?9
331 :     | CTypes.C_signed CTypes.I_short => %?10
332 :     | CTypes.C_signed CTypes.I_int => %?11
333 :     | CTypes.C_signed CTypes.I_long => %?12
334 :     | CTypes.C_signed CTypes.I_long_long => %?13
335 :     | CTypes.C_PTR => %?14
336 :     | CTypes.C_ARRAY (t, i) => ?20 $ [ctype t, int i]
337 :     | CTypes.C_STRUCT l => ?21 $ [list ctype l]
338 :     end
339 :    
340 : leunga 1174 fun ccall_type t =
341 :     let val op $ = PU.$ CCALL_TYPE
342 :     in case t of
343 : blume 1178 P.CCI32 => "\000" $ []
344 :     | P.CCI64 => "\001" $ []
345 :     | P.CCR64 => "\002" $ []
346 :     | P.CCML => "\003" $ []
347 : leunga 1174 end
348 :    
349 : blume 773 fun ccall_info { c_proto = { conv, retTy, paramTys },
350 : leunga 1174 ml_args, ml_res_opt, reentrant } = let
351 :     val op $ = PU.$ CCI
352 : blume 773 in
353 :     "C" $ [string conv, ctype retTy, list ctype paramTys,
354 : leunga 1174 list ccall_type ml_args, option ccall_type ml_res_opt,
355 :     bool reentrant
356 :     ]
357 : blume 773 end
358 : monnier 427
359 :     fun primop p = let
360 :     val op $ = PU.$ PO
361 :     fun ?n = String.str (Char.chr n)
362 : blume 515 fun fromto tag (from, to) = ?tag $ [int from, int to]
363 :     fun %?n = ?n $ []
364 : monnier 427 in
365 :     case p of
366 :     P.ARITH { oper, overflow, kind } =>
367 : blume 515 ?100 $ [arithop oper, bool overflow, numkind kind]
368 :     | P.CMP { oper, kind } => ?101 $ [cmpop oper, numkind kind]
369 : monnier 427 | P.TEST x => fromto 102 x
370 :     | P.TESTU x => fromto 103 x
371 :     | P.TRUNC x => fromto 104 x
372 :     | P.EXTEND x => fromto 105 x
373 :     | P.COPY x => fromto 106 x
374 : blume 515 | P.INLLSHIFT kind => ?107 $ [numkind kind]
375 :     | P.INLRSHIFT kind => ?108 $ [numkind kind]
376 :     | P.INLRSHIFTL kind => ?109 $ [numkind kind]
377 : monnier 427 | P.ROUND { floor, fromkind, tokind } =>
378 : blume 515 ?110 $ [bool floor, numkind fromkind, numkind tokind]
379 : monnier 427 | P.REAL { fromkind, tokind } =>
380 : blume 515 ?111 $ [numkind fromkind, numkind tokind]
381 : monnier 427 | P.NUMSUBSCRIPT { kind, checked, immutable } =>
382 : blume 515 ?112 $ [numkind kind, bool checked, bool immutable]
383 : monnier 427 | P.NUMUPDATE { kind, checked } =>
384 : blume 515 ?113 $ [numkind kind, bool checked]
385 :     | P.INL_MONOARRAY kind => ?114 $ [numkind kind]
386 :     | P.INL_MONOVECTOR kind => ?115 $ [numkind kind]
387 : blume 772 | P.RAW_LOAD kind => ?116 $ [numkind kind]
388 :     | P.RAW_STORE kind => ?117 $ [numkind kind]
389 : blume 773 | P.RAW_CCALL (SOME i) => ?118 $ [ccall_info i]
390 : blume 1178 | P.RAW_RECORD { fblock } => ?119 $ [bool fblock]
391 : monnier 427
392 :     | P.MKETAG => %?0
393 :     | P.WRAP => %?1
394 :     | P.UNWRAP => %?2
395 :     | P.SUBSCRIPT => %?3
396 :     | P.SUBSCRIPTV => %?4
397 :     | P.INLSUBSCRIPT => %?5
398 :     | P.INLSUBSCRIPTV => %?6
399 :     | P.INLMKARRAY => %?7
400 :    
401 :     | P.PTREQL => %?8
402 :     | P.PTRNEQ => %?9
403 :     | P.POLYEQL => %?10
404 :     | P.POLYNEQ => %?11
405 :     | P.BOXED => %?12
406 :     | P.UNBOXED => %?13
407 :     | P.LENGTH => %?14
408 :     | P.OBJLENGTH => %?15
409 :     | P.CAST => %?16
410 :     | P.GETRUNVEC => %?17
411 :     | P.MARKEXN => %?18
412 :     | P.GETHDLR => %?19
413 :     | P.SETHDLR => %?20
414 :     | P.GETVAR => %?21
415 :     | P.SETVAR => %?22
416 :     | P.GETPSEUDO => %?23
417 :     | P.SETPSEUDO => %?24
418 :     | P.SETMARK => %?25
419 :     | P.DISPOSE => %?26
420 :     | P.MAKEREF => %?27
421 :     | P.CALLCC => %?28
422 :     | P.CAPTURE => %?29
423 :     | P.THROW => %?30
424 :     | P.DEREF => %?31
425 :     | P.ASSIGN => %?32
426 :     (* NOTE: P.UNBOXEDASSIGN is defined below *)
427 :     | P.UPDATE => %?33
428 :     | P.INLUPDATE => %?34
429 :     | P.BOXEDUPDATE => %?35
430 :     | P.UNBOXEDUPDATE => %?36
431 :    
432 :     | P.GETTAG => %?37
433 :     | P.MKSPECIAL => %?38
434 :     | P.SETSPECIAL => %?39
435 :     | P.GETSPECIAL => %?40
436 :     | P.USELVAR => %?41
437 :     | P.DEFLVAR => %?42
438 :     | P.INLDIV => %?43
439 :     | P.INLMOD => %?44
440 :     | P.INLREM => %?45
441 :     | P.INLMIN => %?46
442 :     | P.INLMAX => %?47
443 :     | P.INLABS => %?48
444 :     | P.INLNOT => %?49
445 :     | P.INLCOMPOSE => %?50
446 :     | P.INLBEFORE => %?51
447 :     | P.INL_ARRAY => %?52
448 :     | P.INL_VECTOR => %?53
449 :     | P.ISOLATE => %?54
450 :     | P.WCAST => %?55
451 :     | P.NEW_ARRAY0 => %?56
452 :     | P.GET_SEQ_DATA => %?57
453 :     | P.SUBSCRIPT_REC => %?58
454 :     | P.SUBSCRIPT_RAW64 => %?59
455 :     | P.UNBOXEDASSIGN => %?60
456 : blume 773 | P.RAW_CCALL NONE => %?61
457 : monnier 427 end
458 :    
459 :     fun consig arg = let
460 :     val op $ = PU.$ CS
461 : blume 515 fun cs (A.CSIG (i, j)) = "S" $ [int i, int j]
462 :     | cs A.CNIL = "N" $ []
463 : monnier 427 in
464 :     cs arg
465 :     end
466 :    
467 : monnier 504 fun mkAccess { lvar, isLocalPid } = let
468 : monnier 427 val op $ = PU.$ A
469 : blume 515 fun access (A.LVAR i) = "A" $ [lvar i]
470 :     | access (A.EXTERN p) = "B" $ [pid p]
471 : monnier 504 | access (A.PATH (a as A.EXTERN p, i)) =
472 :     (* isLocalPid always returns false for in the "normal pickler"
473 :     * case. It returns true in the "repickle" case for the
474 :     * pid that was the hash of the original whole pickle.
475 :     * Since alpha-conversion has already taken place if we find
476 :     * an EXTERN pid, we don't call "lvar" but "int". *)
477 : blume 515 if isLocalPid p then "A" $ [int i]
478 :     else "C" $ [access a, int i]
479 :     | access (A.PATH (a, i)) = "C" $ [access a, int i]
480 :     | access A.NO_ACCESS = "D" $ []
481 : monnier 427
482 :     val op $ = PU.$ CR
483 : blume 515 fun conrep A.UNTAGGED = "A" $ []
484 :     | conrep (A.TAGGED i) = "B" $ [int i]
485 :     | conrep A.TRANSPARENT = "C" $ []
486 :     | conrep (A.CONSTANT i) = "D" $ [int i]
487 :     | conrep A.REF = "E" $ []
488 :     | conrep (A.EXN a) = "F" $ [access a]
489 :     | conrep A.LISTCONS = "G" $ []
490 :     | conrep A.LISTNIL = "H" $ []
491 :     | conrep (A.SUSP NONE) = "I" $ []
492 :     | conrep (A.SUSP (SOME (a, b))) = "J" $ [access a, access b]
493 : monnier 427 in
494 :     { access = access, conrep = conrep }
495 :     end
496 :    
497 : blume 515 (* lambda-type stuff; some of it is used in both picklers *)
498 :     fun tkind x = let
499 :     val op $ = PU.$ TK
500 :     fun tk x =
501 :     case LK.tk_out x of
502 :     LK.TK_MONO => "A" $ []
503 :     | LK.TK_BOX => "B" $ []
504 :     | LK.TK_SEQ ks => "C" $ [list tkind ks]
505 :     | LK.TK_FUN (ks, kr) => "D" $ [list tkind ks, tkind kr]
506 :     in
507 :     share TKs tk x
508 :     end
509 :    
510 :     fun mkLty lvar = let
511 :     fun lty x = let
512 : monnier 489 val op $ = PU.$ LT
513 : blume 515 fun ltyI x =
514 :     case LK.lt_out x of
515 :     LK.LT_TYC tc => "A" $ [tyc tc]
516 :     | LK.LT_STR l => "B" $ [list lty l]
517 :     | LK.LT_FCT (ts1, ts2) => "C" $ [list lty ts1, list lty ts2]
518 :     | LK.LT_POLY (ks, ts) => "D" $ [list tkind ks, list lty ts]
519 :     | LK.LT_IND _ => bug "unexpected LT_IND in mkPickleLty"
520 :     | LK.LT_ENV _ => bug "unexpected LT_ENV in mkPickleLty"
521 :     | LK.LT_CONT _ => bug "unexpected LT_CONT in mkPickleLty"
522 : monnier 489 in
523 : blume 515 share LTs ltyI x
524 : monnier 489 end
525 : monnier 427
526 : blume 515 and tyc x = let
527 : monnier 489 val op $ = PU.$ TC
528 : blume 515 fun tycI x =
529 :     case LK.tc_out x of
530 :     LK.TC_VAR (db, i) => "A" $ [int (DI.di_toint db), int i]
531 :     | LK.TC_NVAR n => "B" $ [lvar n]
532 :     | LK.TC_PRIM t => "C" $ [int (PT.pt_toint t)]
533 :     | LK.TC_FN (ks, tc) => "D" $ [list tkind ks, tyc tc]
534 :     | LK.TC_APP (tc, l) => "E" $ [tyc tc, list tyc l]
535 :     | LK.TC_SEQ l => "F" $ [list tyc l]
536 :     | LK.TC_PROJ (tc, i) => "G" $ [tyc tc, int i]
537 :     | LK.TC_SUM l => "H" $ [list tyc l]
538 :     | LK.TC_FIX ((n, tc, ts), i) =>
539 :     "I" $ [int n, tyc tc, list tyc ts, int i]
540 :     | LK.TC_ABS tc => "J" $ [tyc tc]
541 :     | LK.TC_BOX tc => "K" $ [tyc tc]
542 :     | LK.TC_TUPLE (_, l) => "L" $ [list tyc l]
543 :     | LK.TC_ARROW (LK.FF_VAR (b1, b2), ts1, ts2) =>
544 :     "M" $ [bool b1, bool b2, list tyc ts1, list tyc ts2]
545 :     | LK.TC_ARROW (LK.FF_FIXED, ts1, ts2) =>
546 :     "N" $ [list tyc ts1, list tyc ts2]
547 :     | LK.TC_PARROW _ => bug "unexpected TC_PARREW in mkPickleLty"
548 :     | LK.TC_TOKEN (tk, t) => "O" $ [int (LK.token_int tk), tyc t]
549 :     | LK.TC_IND _ => bug "unexpected TC_IND in mkPickleLty"
550 :     | LK.TC_ENV _ => bug "unexpected TC_ENV in mkPickleLty"
551 :     | LK.TC_CONT _ => bug "unexpected TC_CONT in mkPickleLty"
552 : monnier 489 in
553 : blume 515 share TCs tycI x
554 : monnier 489 end
555 :     in
556 : blume 515 { tyc = tyc, lty = lty }
557 : monnier 427 end
558 :    
559 :     (* the FLINT pickler *)
560 :     fun flint flint_exp = let
561 :     val alphaConvert = mkAlphaConvert ()
562 :     val lvar = int o alphaConvert
563 : monnier 504 val { access, conrep } = mkAccess { lvar = lvar,
564 :     isLocalPid = fn _ => false }
565 : blume 515 val { lty, tyc } = mkLty lvar
566 :    
567 : monnier 427 val op $ = PU.$ V
568 : blume 515 fun value (F.VAR v) = "a" $ [lvar v]
569 :     | value (F.INT i) = "b" $ [int i]
570 :     | value (F.INT32 i32) = "c" $ [int32 i32]
571 :     | value (F.WORD w) = "d" $ [word w]
572 :     | value (F.WORD32 w32) = "e" $ [word32 w32]
573 :     | value (F.REAL s) = "f" $ [string s]
574 :     | value (F.STRING s) = "g" $ [string s]
575 : monnier 427
576 :     fun con arg = let
577 :     val op $ = PU.$ C
578 :     fun c (F.DATAcon (dc, ts, v), e) =
579 : blume 515 "1" $ [dcon (dc, ts), lvar v, lexp e]
580 :     | c (F.INTcon i, e) = "2" $ [int i, lexp e]
581 :     | c (F.INT32con i32, e) = "3" $ [int32 i32, lexp e]
582 :     | c (F.WORDcon w, e) = "4" $ [word w, lexp e]
583 :     | c (F.WORD32con w32, e) = "5" $ [word32 w32, lexp e]
584 :     | c (F.REALcon s, e) = "6" $ [string s, lexp e]
585 :     | c (F.STRINGcon s, e) = "7" $ [string s, lexp e]
586 :     | c (F.VLENcon i, e) = "8" $ [int i, lexp e]
587 : monnier 427 in
588 :     c arg
589 :     end
590 :    
591 :     and dcon ((s, cr, t), ts) = let
592 :     val op $ = PU.$ DCON
593 :     in
594 : blume 515 "x" $ [symbol s, conrep cr, lty t, list tyc ts]
595 : monnier 427 end
596 :    
597 :     and dict { default = v, table = tbls } = let
598 :     val op $ = PU.$ DICT
599 :     in
600 : blume 515 "y" $ [lvar v, list (pair (list tyc, lvar)) tbls]
601 : monnier 427 end
602 :    
603 :     and fprim (dtopt, p, t, ts) = let
604 :     val op $ = PU.$ FPRIM
605 :     in
606 : blume 515 "z" $ [option dict dtopt, primop p, lty t, list tyc ts]
607 : monnier 427 end
608 :    
609 :     and lexp arg = let
610 :     val op $ = PU.$ E
611 : blume 515 fun l (F.RET vs) = "j" $ [list value vs]
612 : monnier 427 | l (F.LET (vs, e1, e2)) =
613 : blume 515 "k" $ [list lvar vs, lexp e1, lexp e2]
614 :     | l (F.FIX (fdecs, e)) = "l" $ [list fundec fdecs, lexp e]
615 :     | l (F.APP (v, vs)) = "m" $ [value v, list value vs]
616 :     | l (F.TFN (tfdec, e)) = "n" $ [tfundec tfdec, lexp e]
617 :     | l (F.TAPP (v, ts)) = "o" $ [value v, list tyc ts]
618 : monnier 427 | l (F.SWITCH (v, crl, cel, eo)) =
619 : blume 515 "p" $ [value v, consig crl, list con cel, option lexp eo]
620 : monnier 427 | l (F.CON (dc, ts, u, v, e)) =
621 : blume 515 "q" $ [dcon (dc, ts), value u, lvar v, lexp e]
622 : monnier 427 | l (F.RECORD (rk, vl, v, e)) =
623 : blume 515 "r" $ [rkind rk, list value vl, lvar v, lexp e]
624 : monnier 427 | l (F.SELECT (u, i, v, e)) =
625 : blume 515 "s" $ [value u, int i, lvar v, lexp e]
626 :     | l (F.RAISE (u, ts)) = "t" $ [value u, list lty ts]
627 :     | l (F.HANDLE (e, u)) = "u" $ [lexp e, value u]
628 : monnier 427 | l (F.BRANCH (p, vs, e1, e2)) =
629 : blume 515 "v" $ [fprim p, list value vs, lexp e1, lexp e2]
630 : monnier 427 | l (F.PRIMOP (p, vs, v, e)) =
631 : blume 515 "w" $ [fprim p, list value vs, lvar v, lexp e]
632 : monnier 427 in
633 :     l arg
634 :     end
635 :    
636 :     and fundec (fk, v, vts, e) = let
637 :     val op $ = PU.$ FUNDEC
638 :     in
639 : blume 515 "a" $ [fkind fk, lvar v, list (pair (lvar, lty)) vts, lexp e]
640 : monnier 427 end
641 :    
642 : blume 515 and tfundec (_, v, tvks, e) = let
643 : monnier 427 val op $ = PU.$ TFUNDEC
644 :     in
645 : blume 515 "b" $ [lvar v, list (pair (lvar, tkind)) tvks, lexp e]
646 : monnier 427 end
647 :    
648 :     and fkind arg = let
649 :     val op $ = PU.$ FK
650 : blume 515 fun isAlways F.IH_ALWAYS = true
651 :     | isAlways _ = false
652 :     fun strip (x, y) = x
653 :     fun fk { cconv = F.CC_FCT, ... } = "2" $ []
654 :     | fk { isrec, cconv = F.CC_FUN fixed, known, inline } =
655 : monnier 427 case fixed of
656 :     LK.FF_VAR (b1, b2) =>
657 : blume 515 "3" $ [option (list lty) (Option.map strip isrec),
658 :     bool b1, bool b2, bool known,
659 :     bool (isAlways inline)]
660 : monnier 427 | LK.FF_FIXED =>
661 : blume 515 "4" $ [option (list lty) (Option.map strip isrec),
662 :     bool known, bool (isAlways inline)]
663 : monnier 427 in
664 :     fk arg
665 :     end
666 :    
667 :     and rkind arg = let
668 :     val op $ = PU.$ RK
669 : blume 515 fun rk (F.RK_VECTOR tc) = "5" $ [tyc tc]
670 :     | rk F.RK_STRUCT = "6" $ []
671 :     | rk (F.RK_TUPLE _) = "7" $ []
672 : monnier 427 in
673 :     rk arg
674 :     end
675 :     in
676 :     fundec flint_exp
677 :     end
678 :    
679 :     fun pickleFLINT fo = let
680 :     val pickle =
681 :     Byte.stringToBytes (PU.pickle emptyMap (option flint fo))
682 :     val hash = pickle2hash pickle
683 :     in
684 :     { pickle = pickle, hash = hash }
685 :     end
686 :    
687 :     fun symenvPickler sye =
688 :     list (pair (pid, flint)) (SymbolicEnv.listItemsi sye)
689 :    
690 : blume 587 (* the environment pickler *)
691 :     fun envPickler registerLvar context = let
692 :     val { tycStub, sigStub, strStub, fctStub, envStub,
693 :     isLocalPid, isLib } =
694 :     case context of
695 :     INITIAL tmap => let
696 :     fun stub (xId, freshX, lookX) r = let
697 :     val id = xId r
698 :     in
699 :     if freshX id then NONE
700 :     else if isSome (lookX (tmap, id)) then SOME (NONE, id)
701 :     else NONE
702 :     end
703 :     in
704 :     { tycStub = stub (MI.tycId, MI.freshTyc, MI.lookTyc),
705 :     sigStub = stub (MI.sigId, MI.freshSig, MI.lookSig),
706 :     strStub = stub (MI.strId, MI.freshStr, MI.lookStr),
707 :     fctStub = stub (MI.fctId, MI.freshFct, MI.lookFct),
708 :     envStub = stub (MI.envId, MI.freshEnv, MI.lookEnv),
709 :     isLocalPid = fn _ => false,
710 :     isLib = false }
711 :     end
712 :     | REHASH myPid => let
713 :     fun isLocalPid p = PersStamps.compare (p, myPid) = EQUAL
714 :     fun stub (idX, stubX, owner) r =
715 :     case stubX r of
716 :     NONE => bug "REHASH:no stubinfo"
717 :     | SOME stb =>
718 :     if isLocalPid (owner stb) then SOME (NONE, idX r)
719 :     else NONE
720 :     in
721 :     { tycStub = stub (MI.tycId, #stub, #owner),
722 :     sigStub = stub (MI.sigId, #stub, #owner),
723 :     strStub = stub (MI.strId, #stub o #rlzn, #owner),
724 :     fctStub = stub (MI.fctId, #stub o #rlzn, #owner),
725 :     envStub = stub (MI.envId, #stub, #owner),
726 :     isLocalPid = isLocalPid,
727 :     isLib = false }
728 :     end
729 :     | LIBRARY l => let
730 :     fun stub (idX, stubX, lookX, lib) r = let
731 :     fun get id = let
732 :     fun loop [] =
733 :     bug "LIBRARY:import info missing"
734 :     | loop ((lms, m) :: t) =
735 :     if isSome (lookX (m, id)) then lms else loop t
736 :     in
737 :     loop l
738 :     end
739 :     in
740 :     case stubX r of
741 :     NONE => bug "LIBRARY:no stubinfo"
742 :     | SOME stb => let
743 :     val id = idX r
744 :     in
745 :     if lib stb then SOME (get id, id) else NONE
746 :     end
747 :     end
748 :     in
749 :     { tycStub = stub (MI.tycId, #stub, MI.lookTyc, #lib),
750 :     sigStub = stub (MI.sigId, #stub, MI.lookSig, #lib),
751 :     strStub = stub (MI.strId, #stub o #rlzn,
752 :     MI.lookStr, #lib),
753 :     fctStub = stub (MI.fctId, #stub o #rlzn,
754 :     MI.lookFct, #lib),
755 :     envStub = stub (MI.envId, #stub, MI.lookEnv, #lib),
756 :     isLocalPid = fn _ => false,
757 :     isLib = true }
758 :     end
759 : monnier 427
760 : blume 587 (* Owner pids of stubs are pickled only in the case of libraries,
761 :     * otherwise they are ignored completely. *)
762 :     fun libPid x =
763 :     if isLib then
764 :     case x of
765 :     (NONE, _) => []
766 :     | (SOME stb, ownerOf) => [pid (ownerOf stb)]
767 :     else []
768 : monnier 427
769 : blume 632 fun libModSpec lms = option (pair (int, symbol)) lms
770 : monnier 427
771 : blume 587 val stampConverter = Stamps.newConverter ()
772 : monnier 427
773 : blume 587 fun stamp s = let
774 : monnier 427 val op $ = PU.$ ST
775 :     in
776 : blume 587 Stamps.Case stampConverter s
777 :     { fresh = fn i => "A" $ [int i],
778 : blume 742 global = fn { pid = p, cnt } => "B" $ [pid p, int cnt],
779 : blume 587 special = fn s => "C" $ [string s] }
780 : monnier 427 end
781 :    
782 : blume 587 val tycId = stamp
783 :     val sigId = stamp
784 :     fun strId { sign, rlzn } = let
785 :     val op $ = PU.$ STRID
786 :     in
787 :     "D" $ [stamp sign, stamp rlzn]
788 :     end
789 :     fun fctId { paramsig, bodysig, rlzn } = let
790 :     val op $ = PU.$ FCTID
791 :     in
792 :     "E" $ [stamp paramsig, stamp bodysig, stamp rlzn]
793 :     end
794 :     val envId = stamp
795 :    
796 : monnier 427 val entVar = stamp
797 :     val entPath = list entVar
798 :    
799 : blume 587 val anotherLvar =
800 :     let val lvcount = ref 0
801 :     in (fn v => let val j = !lvcount
802 :     in registerLvar v; lvcount := j + 1; j end)
803 :     end
804 : monnier 427
805 : monnier 504 val { access, conrep } = mkAccess { lvar = int o anotherLvar,
806 :     isLocalPid = isLocalPid }
807 : monnier 427
808 : blume 515 val op $ = PU.$ SPATH
809 :     fun spath (SP.SPATH p) = "s" $ [list symbol p]
810 :     val op $ = PU.$ IPATH
811 :     fun ipath (IP.IPATH p) = "i" $ [list symbol p]
812 : monnier 427
813 : blume 773 (* for debugging *)
814 :     fun showipath (IP.IPATH p) =
815 :     concat (map (fn s => Symbol.symbolToString s ^ ".") (rev p))
816 :    
817 : monnier 427 val label = symbol
818 :    
819 :     fun eqprop eqp = let
820 : blume 515 val op $ = PU.$ EQP
821 : monnier 427 fun eqc T.YES = "\000"
822 :     | eqc T.NO = "\001"
823 :     | eqc T.IND = "\002"
824 :     | eqc T.OBJ = "\003"
825 :     | eqc T.DATA = "\004"
826 :     | eqc T.ABS = "\005"
827 :     | eqc T.UNDEF = "\006"
828 :     in
829 : blume 515 eqc eqp $ []
830 : monnier 427 end
831 :    
832 :     fun datacon (T.DATACON { name, const, typ, rep, sign, lazyp }) = let
833 :     val op $ = PU.$ DATACON
834 :     in
835 : blume 515 "c" $ [symbol name, bool const, ty typ, conrep rep,
836 :     consig sign, bool lazyp]
837 : monnier 427 end
838 :    
839 :     and tyckind arg = let
840 :     val op $ = PU.$ TYCKIND
841 : blume 902 fun tk (T.PRIMITIVE pt) = "a" $ [int pt]
842 : monnier 427 | tk (T.DATATYPE { index, family, stamps, root,freetycs }) =
843 : blume 515 "b" $ [int index, option entVar root,
844 :     dtypeInfo (stamps, family, freetycs)]
845 :     | tk (T.ABSTRACT tyc) = "c" $ [tycon tyc]
846 :     | tk (T.FLEXTYC tps) = "d" $ [] (* "f" $ tycpath tps *)
847 : monnier 427 (*** I (Matthias) carried through this message from Zhong:
848 :     tycpath should never be pickled; the only way it can be
849 :     pickled is when pickling the domains of a mutually
850 :     recursive datatypes; right now the mutually recursive
851 :     datatypes are not assigned accurate domains ... (ZHONG)
852 :     the preceding code is just a temporary gross hack.
853 :     ***)
854 : blume 515 | tk T.FORMAL = "d" $ []
855 :     | tk T.TEMP = "e" $ []
856 : monnier 427 in
857 :     tk arg
858 :     end
859 :    
860 :     and dtypeInfo x = let
861 :     val op $ = PU.$ DTI
862 :     fun dti_raw (ss, family, freetycs) =
863 : blume 515 "a" $ [list stamp (Vector.foldr (op ::) [] ss),
864 :     dtFamily family, list tycon freetycs]
865 : monnier 427 in
866 :     share (DTs (Vector.sub (#1 x, 0))) dti_raw x
867 :     end
868 :    
869 :     and dtFamily x = let
870 :     val op $ = PU.$ DTF
871 : blume 902 fun dtf_raw { mkey, members, properties } =
872 : blume 515 "b" $ [stamp mkey,
873 :     list dtmember (Vector.foldr (op ::) [] members)]
874 : monnier 427 in
875 :     share (MBs (#mkey x)) dtf_raw x
876 :     end
877 :    
878 :     and dtmember { tycname, dcons, arity, eq = ref e, lazyp, sign } = let
879 :     val op $ = PU.$ DTMEM
880 :     in
881 : blume 515 "c" $ [symbol tycname, list nameRepDomain dcons, int arity,
882 :     eqprop e, bool lazyp, consig sign]
883 : monnier 427 end
884 :    
885 :     and nameRepDomain { name, rep, domain } = let
886 :     val op $ = PU.$ NRD
887 :     in
888 : blume 515 "d" $ [symbol name, conrep rep, option ty domain]
889 : monnier 427 end
890 :    
891 :     and tycon arg = let
892 :     val op $ = PU.$ TYCON
893 : blume 587 fun tc (tyc as T.GENtyc g) =
894 :     let fun gt_raw (g as { stamp = s, arity, eq = ref eq, kind,
895 :     path, stub }) =
896 :     case tycStub g of
897 :     SOME (l, i) => "A" $ [libModSpec l, tycId i]
898 :     | NONE => "B" $ ([stamp s, int arity, eqprop eq,
899 :     tyckind kind, ipath path]
900 :     @ libPid (stub, #owner))
901 : monnier 427 in
902 : blume 587 share (TYCs (MI.tycId g)) gt_raw g
903 : monnier 427 end
904 : blume 587 | tc (tyc as T.DEFtyc dt) = let
905 :     fun dt_raw { stamp = s, tyfun, strict, path } = let
906 : monnier 427 val T.TYFUN { arity, body } = tyfun
907 :     in
908 : blume 515 "C" $ [stamp s, int arity, ty body,
909 :     list bool strict, ipath path]
910 : monnier 427 end
911 :     in
912 : blume 587 share (TYCs (MI.tycId' tyc)) dt_raw dt
913 : monnier 427 end
914 :     | tc (T.PATHtyc { arity, entPath = ep, path }) =
915 : blume 515 "D" $ [int arity, entPath ep, ipath path]
916 :     | tc (T.RECORDtyc l) = "E" $ [list label l]
917 :     | tc (T.RECtyc i) = "F" $ [int i]
918 :     | tc (T.FREEtyc i) = "G" $ [int i]
919 :     | tc T.ERRORtyc = "H" $ []
920 : monnier 427 in
921 :     tc arg
922 :     end
923 :    
924 :     and ty arg = let
925 :     val op $ = PU.$ T
926 :     fun ty (T.VARty (ref (T.INSTANTIATED t))) = ty t
927 :     | ty (T.VARty (ref (T.OPEN _))) =
928 :     bug "uninstantiated VARty in pickmod"
929 : blume 515 | ty (T.CONty (c, l)) = "a" $ [tycon c, list ty l]
930 :     | ty (T.IBOUND i) = "b" $ [int i]
931 :     | ty T.WILDCARDty = "c" $ []
932 : monnier 427 | ty (T.POLYty { sign, tyfun = T.TYFUN { arity, body } }) =
933 : blume 515 "d" $ [list bool sign, int arity, ty body]
934 :     | ty T.UNDEFty = "e" $ []
935 : monnier 427 | ty _ = bug "unexpected type in pickmod-ty"
936 :     in
937 :     ty arg
938 :     end
939 :    
940 :     val op $ = PU.$ II
941 : blume 902 fun inl_info i =
942 :     II.match i { inl_prim = fn (p, t) => "A" $ [primop p, ty t],
943 :     inl_str = fn sl => "B" $ [list inl_info sl],
944 :     inl_no = fn () => "C" $ [] }
945 : monnier 427
946 :     val op $ = PU.$ VAR
947 :     fun var (V.VALvar { access = a, info, path, typ = ref t }) =
948 : blume 515 "1" $ [access a, inl_info info, spath path, ty t]
949 : monnier 427 | var (V.OVLDvar { name, options = ref p,
950 :     scheme = T.TYFUN { arity, body } }) =
951 : blume 515 "2" $ [symbol name, list overld p, int arity, ty body]
952 :     | var V.ERRORvar = "3" $ []
953 : monnier 427
954 :     and overld { indicator, variant } = let
955 :     val op $ = PU.$ OVERLD
956 :     in
957 : blume 515 "o" $ [ty indicator, var variant]
958 : monnier 427 end
959 :    
960 :     fun strDef arg = let
961 :     val op $ = PU.$ SD
962 : blume 515 fun sd (M.CONSTstrDef s) = "C" $ [Structure s]
963 :     | sd (M.VARstrDef (s, p)) = "V" $ [Signature s, entPath p]
964 : monnier 427 in
965 :     sd arg
966 :     end
967 :    
968 :     (*
969 :     * boundeps is not pickled right now, but it really should
970 :     * be pickled in the future.
971 :     *)
972 :     and Signature arg = let
973 :     val op $ = PU.$ SG
974 : blume 515 fun sg M.ERRORsig = "A" $ []
975 : blume 587 | sg (M.SIG s) =
976 :     (case sigStub s of
977 :     SOME (l, i) => "B" $ [libModSpec l, sigId i]
978 :     | NONE => let
979 :     fun sig_raw (s: M.sigrec) = let
980 :     val { stamp = sta, name, closed,
981 :     fctflag, symbols, elements,
982 : blume 902 properties,
983 :     (* boundeps = ref b, *)
984 :     (* lambdaty = _, *)
985 :     stub, typsharing, strsharing } = s
986 :     val b = ModulePropLists.sigBoundeps s
987 : blume 587 val b = NONE (* currently turned off *)
988 :     in
989 :     "C" $ ([stamp sta,
990 :     option symbol name, bool closed,
991 :     bool fctflag,
992 :     list symbol symbols,
993 :     list (pair (symbol, spec)) elements,
994 :     option (list (pair (entPath, tkind))) b,
995 :     list (list spath) typsharing,
996 :     list (list spath) strsharing]
997 :     @ libPid (stub, #owner))
998 :     end
999 :     in
1000 :     share SIGs sig_raw s
1001 :     end)
1002 : monnier 427 in
1003 :     sg arg
1004 :     end
1005 :    
1006 :     and fctSig arg = let
1007 :     val op $ = PU.$ FSG
1008 : blume 515 fun fsg M.ERRORfsig = "a" $ []
1009 : blume 587 | fsg (M.FSIG { kind, paramsig, paramvar, paramsym, bodysig }) =
1010 :     "c" $ [option symbol kind, Signature paramsig,
1011 :     entVar paramvar,
1012 :     option symbol paramsym,
1013 :     Signature bodysig]
1014 : monnier 427 in
1015 :     fsg arg
1016 :     end
1017 :    
1018 :     and spec arg = let
1019 :     val op $ = PU.$ SP
1020 :     fun sp (M.TYCspec { spec = t, entVar = v, repl, scope }) =
1021 : blume 515 "1" $ [tycon t, entVar v, bool repl, int scope]
1022 : monnier 427 | sp (M.STRspec { sign, slot, def, entVar = v }) =
1023 : blume 515 "2" $ [Signature sign, int slot,
1024 :     option (pair (strDef, int)) def, entVar v]
1025 : monnier 427 | sp (M.FCTspec { sign, slot, entVar = v }) =
1026 : blume 515 "3" $ [fctSig sign, int slot, entVar v]
1027 :     | sp (M.VALspec { spec = t, slot }) = "4" $ [ty t, int slot]
1028 : monnier 427 | sp (M.CONspec { spec = c, slot }) =
1029 : blume 515 "5" $ [datacon c, option int slot]
1030 : monnier 427 in
1031 :     sp arg
1032 :     end
1033 :    
1034 :     and entity arg = let
1035 :     val op $ = PU.$ EN
1036 : blume 515 fun en (M.TYCent t) = "A" $ [tycEntity t]
1037 :     | en (M.STRent t) = "B" $ [strEntity t]
1038 :     | en (M.FCTent t) = "C" $ [fctEntity t]
1039 :     | en M.ERRORent = "D" $ []
1040 : monnier 427 in
1041 :     en arg
1042 :     end
1043 :    
1044 :     and fctClosure (M.CLOSURE { param, body, env }) = let
1045 :     val op $ = PU.$ FCTC
1046 :     in
1047 : blume 515 "f" $ [entVar param, strExp body, entityEnv env]
1048 : monnier 427 end
1049 :    
1050 :     and Structure arg = let
1051 :     val op $ = PU.$ STR
1052 :     fun str (M.STRSIG { sign, entPath = p }) =
1053 : blume 515 "A" $ [Signature sign, entPath p]
1054 :     | str M.ERRORstr = "B" $ []
1055 : blume 587 | str (M.STR (s as { sign, rlzn, access = a, info })) =
1056 :     (case strStub s of
1057 :     (* stub represents just the strerec suspension! *)
1058 :     SOME (l, i) => "C" $ [Signature sign,
1059 :     libModSpec l,
1060 :     strId i,
1061 :     access a,
1062 :     inl_info info]
1063 :     | NONE => "D" $ [Signature sign,
1064 :     shStrEntity (MI.strId s) rlzn,
1065 :     access a, inl_info info])
1066 : monnier 427 in
1067 :     str arg
1068 :     end
1069 :    
1070 :     and Functor arg = let
1071 :     val op $ = PU.$ F
1072 : blume 515 fun fct M.ERRORfct = "E" $ []
1073 : blume 587 | fct (M.FCT (f as { sign, rlzn, access = a, info })) =
1074 :     (case fctStub f of
1075 :     SOME (l, i) => "F" $ [fctSig sign,
1076 :     libModSpec l,
1077 :     fctId i,
1078 :     access a,
1079 :     inl_info info]
1080 :     | NONE => "G" $ [fctSig sign,
1081 :     shFctEntity (MI.fctId f) rlzn,
1082 :     access a, inl_info info])
1083 : monnier 427 in
1084 :     fct arg
1085 :     end
1086 :    
1087 : blume 587 and (* stampExp (M.CONST s) = PU.$ STE ("a", [stamp s])
1088 :     | *) stampExp (M.GETSTAMP s) = PU.$ STE ("b", [strExp s])
1089 : blume 515 | stampExp M.NEW = "c" $ []
1090 : monnier 427
1091 : blume 515 and tycExp (M.CONSTtyc t) = PU.$ TCE ("d", [tycon t])
1092 :     | tycExp (M.FORMtyc t) = PU.$ TCE ("e", [tycon t])
1093 :     | tycExp (M.VARtyc s) = PU.$ TCE ("f", [entPath s])
1094 : monnier 427
1095 :     and strExp arg = let
1096 :     val op $ = PU.$ STRE
1097 : blume 515 fun stre (M.VARstr s) = "g" $ [entPath s]
1098 :     | stre (M.CONSTstr s) = "h" $ [strEntity s]
1099 : monnier 427 | stre (M.STRUCTURE { stamp = s, entDec }) =
1100 : blume 515 "i" $ [stampExp s, entityDec entDec]
1101 :     | stre (M.APPLY (f, s)) = "j" $ [fctExp f, strExp s]
1102 :     | stre (M.LETstr (e, s)) = "k" $ [entityDec e, strExp s]
1103 :     | stre (M.ABSstr (s, e)) = "l" $ [Signature s, strExp e]
1104 : monnier 427 | stre (M.CONSTRAINstr { boundvar, raw, coercion }) =
1105 : blume 515 "m" $ [entVar boundvar, strExp raw, strExp coercion]
1106 :     | stre (M.FORMstr fs) = "n" $ [fctSig fs]
1107 : monnier 427 in
1108 :     stre arg
1109 :     end
1110 :    
1111 :     and fctExp arg = let
1112 :     val op $ = PU.$ FE
1113 : blume 515 fun fe (M.VARfct s) = "o" $ [entPath s]
1114 :     | fe (M.CONSTfct e) = "p" $ [fctEntity e]
1115 : monnier 427 | fe (M.LAMBDA { param, body }) =
1116 : blume 515 "q" $ [entVar param, strExp body]
1117 : monnier 427 | fe (M.LAMBDA_TP { param, body, sign }) =
1118 : blume 515 "r" $ [entVar param, strExp body, fctSig sign]
1119 :     | fe (M.LETfct (e, f)) = "s" $ [entityDec e, fctExp f]
1120 : monnier 427 in
1121 :     fe arg
1122 :     end
1123 :    
1124 :     and entityExp arg = let
1125 :     val op $ = PU.$ EE
1126 : blume 515 fun ee (M.TYCexp t) = "t" $ [tycExp t]
1127 :     | ee (M.STRexp s) = "u" $ [strExp s]
1128 :     | ee (M.FCTexp f) = "v" $ [fctExp f]
1129 :     | ee M.ERRORexp = "w" $ []
1130 :     | ee M.DUMMYexp = "x" $ []
1131 : monnier 427 in
1132 :     ee arg
1133 :     end
1134 :    
1135 :     and entityDec arg = let
1136 :     val op $ = PU.$ ED
1137 : blume 515 fun ed (M.TYCdec (s, x)) = "A" $ [entVar s, tycExp x]
1138 :     | ed (M.STRdec (s, x, n)) = "B" $ [entVar s, strExp x, symbol n]
1139 :     | ed (M.FCTdec (s, x)) = "C" $ [entVar s, fctExp x]
1140 :     | ed (M.SEQdec e) = "D" $ [list entityDec e]
1141 :     | ed (M.LOCALdec (a, b)) = "E" $ [entityDec a, entityDec b]
1142 :     | ed M.ERRORdec = "F" $ []
1143 :     | ed M.EMPTYdec = "G" $ []
1144 : monnier 427 in
1145 :     ed arg
1146 :     end
1147 :    
1148 : blume 587 and entityEnv (M.MARKeenv m) =
1149 :     (case envStub m of
1150 :     SOME (l, i) => "D" $ [libModSpec l, envId i]
1151 :     | NONE => let
1152 :     fun mee_raw { stamp = s, env, stub } =
1153 :     "E" $ ([stamp s, entityEnv env]
1154 :     @ libPid (stub: M.stubinfo option, #owner))
1155 :     in
1156 :     share ENVs mee_raw m
1157 :     end)
1158 : monnier 427 | entityEnv (M.BINDeenv (d, r)) =
1159 : blume 515 PU.$ EEV ("A", [list (pair (entVar, entity)) (ED.listItemsi d),
1160 :     entityEnv r])
1161 :     | entityEnv M.NILeenv = "B" $ []
1162 :     | entityEnv M.ERReenv = "C" $ []
1163 : monnier 427
1164 : blume 902 and strEntity { stamp = s, entities, properties, rpath, stub } =
1165 : blume 587 let val op $ = PU.$ SEN
1166 :     in
1167 :     "s" $ ([stamp s, entityEnv entities, ipath rpath]
1168 :     @ libPid (stub: M.stubinfo option, #owner))
1169 :     end
1170 : monnier 427
1171 : blume 587 and shStrEntity id = share (STRs id) strEntity
1172 : monnier 427
1173 : blume 902 and fctEntity { stamp = s,
1174 :     closure, properties, tycpath, rpath, stub } =
1175 : blume 587 let val op $ = PU.$ FEN
1176 :     in
1177 :     "f" $ ([stamp s, fctClosure closure, ipath rpath]
1178 :     @ libPid (stub: M.stubinfo option, #owner))
1179 :     end
1180 :    
1181 :     and shFctEntity id = share (FCTs id) fctEntity
1182 :    
1183 : monnier 427 and tycEntity x = tycon x
1184 :    
1185 : blume 515 fun fixity Fixity.NONfix = "N" $ []
1186 :     | fixity (Fixity.INfix (i, j)) = PU.$ FX ("I", [int i, int j])
1187 : monnier 427
1188 :     val op $ = PU.$ B
1189 : blume 515 fun binding (B.VALbind x) = "1" $ [var x]
1190 :     | binding (B.CONbind x) = "2" $ [datacon x]
1191 :     | binding (B.TYCbind x) = "3" $ [tycon x]
1192 :     | binding (B.SIGbind x) = "4" $ [Signature x]
1193 :     | binding (B.STRbind x) = "5" $ [Structure x]
1194 :     | binding (B.FSGbind x) = "6" $ [fctSig x]
1195 :     | binding (B.FCTbind x) = "7" $ [Functor x]
1196 :     | binding (B.FIXbind x) = "8" $ [fixity x]
1197 : monnier 427
1198 :     fun env e = let
1199 : blume 902 val syms = ListMergeSort.uniqueSort symCmp (StaticEnv.symbols e)
1200 : blume 587 val pairs = map (fn s => (s, StaticEnv.look (e, s))) syms
1201 : monnier 427 in
1202 :     list (pair (symbol, binding)) pairs
1203 :     end
1204 :     in
1205 : blume 587 env
1206 : monnier 427 end
1207 :    
1208 : blume 587 fun pickleEnv context e = let
1209 :     val lvlist = ref []
1210 :     fun registerLvar v = lvlist := v :: !lvlist
1211 :     val pickler = envPickler registerLvar context
1212 :     val pickle = Byte.stringToBytes (PU.pickle emptyMap (pickler e))
1213 :     val exportLvars = rev (!lvlist)
1214 : monnier 427 val hash = pickle2hash pickle
1215 : blume 1058 val hasExports = not (List.null exportLvars)
1216 : monnier 427 in
1217 :     addPickles (Word8Vector.length pickle);
1218 :     { hash = hash, pickle = pickle, exportLvars = exportLvars,
1219 : blume 1058 hasExports = hasExports }
1220 : monnier 427 end
1221 :    
1222 :     (* the dummy environment pickler *)
1223 : blume 1058 fun dontPickle { env = senv, count } = let
1224 : monnier 427 val hash = let
1225 :     val toByte = Word8.fromLargeWord o Word32.toLargeWord
1226 :     val >> = Word32.>>
1227 :     infix >>
1228 :     val w = Word32.fromInt count
1229 :     in
1230 :     PS.fromBytes
1231 :     (Word8Vector.fromList
1232 :     [0w0,0w0,0w0,toByte(w >> 0w24),0w0,0w0,0w0,toByte(w >> 0w16),
1233 :     0w0,0w0,0w0,toByte(w >> 0w8),0w0,0w0,0w0,toByte(w)])
1234 :     end
1235 :     (* next line is an alternative to using Env.consolidate *)
1236 : blume 902 val syms = ListMergeSort.uniqueSort symCmp (StaticEnv.symbols senv)
1237 : monnier 427 fun newAccess i = A.PATH (A.EXTERN hash, i)
1238 :     fun mapbinding (sym, (i, env, lvars)) =
1239 : blume 587 case StaticEnv.look (senv, sym) of
1240 : monnier 427 B.VALbind (V.VALvar {access=a, info=z, path=p, typ= ref t }) =>
1241 : blume 587 (case a of
1242 :     A.LVAR k =>
1243 :     (i+1,
1244 :     StaticEnv.bind (sym,
1245 :     B.VALbind (V.VALvar
1246 :     { access = newAccess i,
1247 :     info = z, path = p,
1248 :     typ = ref t}),
1249 :     env),
1250 :     k :: lvars)
1251 :     | _ => bug ("dontPickle 1: " ^ A.prAcc a))
1252 :     | B.STRbind (M.STR { sign = s, rlzn = r, access = a, info =z }) =>
1253 :     (case a of
1254 :     A.LVAR k =>
1255 :     (i+1,
1256 :     StaticEnv.bind (sym,
1257 :     B.STRbind (M.STR
1258 :     { access = newAccess i,
1259 :     sign = s, rlzn = r,
1260 :     info = z }),
1261 :     env),
1262 :     k :: lvars)
1263 :     | _ => bug ("dontPickle 2" ^ A.prAcc a))
1264 : monnier 427 | B.FCTbind (M.FCT { sign = s, rlzn = r, access = a, info=z }) =>
1265 : blume 587 (case a of
1266 :     A.LVAR k =>
1267 :     (i+1,
1268 :     StaticEnv.bind (sym,
1269 :     B.FCTbind (M.FCT
1270 : monnier 427 { access = newAccess i,
1271 :     sign = s, rlzn = r,
1272 : blume 587 info = z }),
1273 :     env),
1274 :     k :: lvars)
1275 :     | _ => bug ("dontPickle 3" ^ A.prAcc a))
1276 : monnier 427 | B.CONbind (T.DATACON { name = n, const = c, typ = t, sign = s,
1277 :     lazyp= false, rep as (A.EXN a) }) => let
1278 :     val newrep = A.EXN (newAccess i)
1279 :     in
1280 :     case a of
1281 :     A.LVAR k =>
1282 : blume 587 (i+1,
1283 :     StaticEnv.bind (sym,
1284 :     B.CONbind (T.DATACON
1285 :     { rep = newrep,
1286 :     name = n,
1287 :     lazyp = false,
1288 :     const = c, typ = t,
1289 :     sign = s }),
1290 :     env),
1291 :     k :: lvars)
1292 : monnier 427 | _ => bug ("dontPickle 4" ^ A.prAcc a)
1293 :     end
1294 : blume 587 | binding => (i, StaticEnv.bind (sym, binding, env), lvars)
1295 : monnier 427 val (_,newenv,lvars) = foldl mapbinding (0, StaticEnv.empty, nil) syms
1296 : blume 1058 val hasExports = not (List.null lvars)
1297 : monnier 427 in
1298 : blume 1058 { newenv = newenv, hash = hash,
1299 :     exportLvars = rev lvars, hasExports = hasExports }
1300 : monnier 427 end
1301 : monnier 475 end
1302 : monnier 427 end
1303 : monnier 475

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0