Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Annotation of /sml/trunk/src/compiler/Semant/pickle/pickmod-new.sml
ViewVC logotype

Annotation of /sml/trunk/src/compiler/Semant/pickle/pickmod-new.sml

Parent Directory Parent Directory | Revision Log Revision Log


Revision 515 - (view) (download)

1 : monnier 427 (*
2 :     * The revised pickler using the new "generic" pickling facility.
3 :     *
4 :     * July 1999, Matthias Blume
5 :     *)
6 :     signature PICKMOD = sig
7 :    
8 :     datatype ckey = (* context key *)
9 :     PrimKey of string
10 :     | NodeKey of int * Symbol.symbol
11 :    
12 :     type 'a context =
13 :     { lookSTR: ModuleId.modId -> 'a,
14 :     lookSIG: ModuleId.modId -> 'a,
15 :     lookFCT: ModuleId.modId -> 'a,
16 :     lookFSIG: ModuleId.modId -> 'a,
17 :     lookTYC: ModuleId.modId -> 'a,
18 :     lookEENV: ModuleId.modId -> 'a }
19 :    
20 :     (* All we really need here is a "bool context", but passing the whole
21 :     * CMStaticEnv.staticEnv is more convenient (and backward-compatible). *)
22 :     val pickleEnv :
23 :     { context: CMStaticEnv.staticEnv, env: StaticEnv.staticEnv }
24 :     -> { hash: PersStamps.persstamp,
25 :     pickle: Word8Vector.vector,
26 :     exportLvars: Access.lvar list,
27 : monnier 504 exportPid: PersStamps.persstamp option }
28 : monnier 427
29 : monnier 504 (* Re-pickling is done for the purpose of getting the hash value
30 :     * of a "reduced" (filtered) version of another environment that
31 :     * has been pickled before. During re-pickling, the LOCAL->GLOBAL
32 :     * translation for stamps and the LVAR->EXTERN translation for
33 :     * accesses is undone so that the resulting hash value is the
34 :     * same that one would have gotten if the current environment
35 :     * was pickled using "pickleEnv". The context for repickling is
36 :     * specified using a set of module IDs instead of an entire
37 :     * context environment. The set will have to be obtained from the
38 :     * unpickling process of the original pickle. *)
39 :     val repickleEnvHash :
40 :     { context: ModuleId.Set.set,
41 :     env: StaticEnv.staticEnv,
42 :     orig_hash: PersStamps.persstamp } -> PersStamps.persstamp
43 :    
44 : monnier 427 val pickleFLINT:
45 :     CompBasic.flint option
46 :     -> { hash: PersStamps.persstamp,
47 :     pickle: Word8Vector.vector }
48 :    
49 :     (* The following is low-level interface so this pickler can be part
50 :     * of another, bigger, pickler. *)
51 :     type map
52 :     val emptyMap : map
53 :    
54 : monnier 504 type env'n'ctxt = { env: StaticEnv.staticEnv, ctxt: ModuleId.Set.set }
55 :    
56 : monnier 427 val envPickler :
57 : monnier 504 ckey option context -> (map, env'n'ctxt) PickleUtil.pickler
58 : monnier 427
59 :     val symenvPickler : (map, SymbolicEnv.symenv) PickleUtil.pickler
60 :    
61 :     val pickle2hash: Word8Vector.vector -> PersStamps.persstamp
62 :    
63 :     val dontPickle :
64 :     StaticEnv.staticEnv * int
65 :     -> StaticEnv.staticEnv * PersStamps.persstamp *
66 :     Access.lvar list * PersStamps.persstamp option
67 :     end
68 :    
69 : monnier 475 local
70 :     (* make those into red-black-maps once rb-maps work correcty. *)
71 :     functor MapFn = RedBlackMapFn
72 :     structure IntMap = IntRedBlackMap
73 :     in
74 :     structure PickMod :> PICKMOD = struct
75 : monnier 427
76 :     (* to gather some statistics... *)
77 :     val addPickles = Stats.addStat (Stats.makeStat "Pickle Bytes")
78 :    
79 :     fun bug msg = ErrorMsg.impossible ("PickMod: " ^ msg)
80 :    
81 :     structure A = Access
82 :     structure DI = DebIndex
83 :     structure LK = LtyKernel
84 :     structure PT = PrimTyc
85 :     structure F = FLINT
86 :     structure T = Types
87 :     structure SP = SymPath
88 :     structure IP = InvPath
89 :     structure MI = ModuleId
90 :     structure II = InlInfo
91 :     structure V = VarCon
92 :     structure ED = EntPath.EvDict
93 :     structure PS = PersStamps
94 :     structure P = PrimOp
95 :     structure M = Modules
96 :     structure B = Bindings
97 :    
98 :     (** NOTE: the CRC functions really ought to work on Word8Vector.vectors **)
99 :     fun pickle2hash pickle =
100 :     PS.fromBytes
101 :     (Byte.stringToBytes
102 :     (CRC.toString
103 :     (CRC.fromString
104 :     (Byte.bytesToString pickle))))
105 :    
106 :     fun symCmp (a, b) =
107 :     if Symbol.symbolGt (a, b) then GREATER
108 :     else if Symbol.eq (a, b) then EQUAL else LESS
109 :    
110 : monnier 475 structure LTMap = MapFn
111 : monnier 427 (struct type ord_key = LK.lty val compare = LK.lt_cmp end)
112 : monnier 475 structure TCMap = MapFn
113 : monnier 427 (struct type ord_key = LK.tyc val compare = LK.tc_cmp end)
114 : monnier 475 structure TKMap = MapFn
115 : monnier 427 (struct type ord_key = LK.tkind val compare = LK.tk_cmp end)
116 :     local
117 : monnier 475 structure StampMap = MapFn
118 : monnier 427 (struct type ord_key = Stamps.stamp val compare = Stamps.cmp end)
119 :     in
120 :     structure DTMap = StampMap
121 :     structure MBMap = StampMap
122 :     end
123 : monnier 439
124 :    
125 :     type pid = PS.persstamp
126 :     type mi = MI.modId * pid option
127 :    
128 :     fun mi_cmp ((mi, po), (mi', po')) = let
129 :     fun po_cmp (NONE, NONE) = EQUAL
130 :     | po_cmp (NONE, SOME _) = LESS
131 :     | po_cmp (SOME _, NONE) = GREATER
132 :     | po_cmp (SOME p, SOME p') = PS.compare (p, p')
133 :     in
134 :     case MI.cmp (mi, mi') of
135 :     EQUAL => po_cmp (po, po')
136 :     | unequal => unequal
137 :     end
138 :    
139 :     fun acc_pid (A.LVAR _) = NONE
140 :     | acc_pid (A.EXTERN p) = SOME p
141 :     | acc_pid (A.PATH (a, _)) = acc_pid a
142 :     | acc_pid A.NO_ACCESS = NONE
143 :    
144 : monnier 475 structure MIMap = MapFn
145 : monnier 439 (struct type ord_key = mi val compare = mi_cmp end)
146 : monnier 427
147 :     structure PU = PickleUtil
148 :     structure PSymPid = PickleSymPid
149 :    
150 :     type map =
151 :     { lt: PU.id LTMap.map,
152 :     tc: PU.id TCMap.map,
153 :     tk: PU.id TKMap.map,
154 :     dt: PU.id DTMap.map,
155 :     mb: PU.id MBMap.map,
156 :     mi: PU.id MIMap.map }
157 :    
158 :     val emptyMap = { lt = LTMap.empty, tc = TCMap.empty, tk = TKMap.empty,
159 :     dt = DTMap.empty, mb = MBMap.empty, mi = MIMap.empty }
160 :    
161 :     (* type info *)
162 :     val (NK, AO, CO, PO, CS, A, CR, LT, TC, TK,
163 :     V, C, E, FK, RK, ST, MI, EQP, TYCKIND, DTI,
164 :     DTF, TYCON, T, II, VAR, SD, SG, FSG, SP, EN,
165 :     STR, F, STE, TCE, STRE, FE, EE, ED, EEV, FX,
166 :     B, DCON, DICT, FPRIM, FUNDEC, TFUNDEC, DATACON, DTMEM, NRD,
167 : blume 515 OVERLD, FCTC, SEN, FEN, SPATH, IPATH) =
168 : monnier 427 (1, 2, 3, 4, 5, 6, 7, 8, 9, 10,
169 :     11, 12, 13, 14, 15, 16, 17, 18, 19, 20,
170 :     21, 22, 23, 24, 25, 26, 27, 28, 29, 30,
171 :     31, 32, 33, 34, 35, 36, 37, 38, 39, 40,
172 :     41, 42, 43, 44, 45, 46, 47, 48, 49,
173 : blume 515 50, 51, 52, 53, 54, 55)
174 : monnier 427
175 :     (* this is a bit awful...
176 :     * (we really ought to have syntax for "functional update") *)
177 :     val LTs = { find = fn (m: map, x) => LTMap.find (#lt m, x),
178 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
179 :     { lt = LTMap.insert (lt, x, v),
180 :     tc = tc,
181 :     tk = tk,
182 :     dt = dt,
183 :     mb = mb,
184 :     mi = mi } }
185 :     val TCs = { find = fn (m: map, x) => TCMap.find (#tc m, x),
186 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
187 :     { lt = lt,
188 :     tc = TCMap.insert (tc, x, v),
189 :     tk = tk,
190 :     dt = dt,
191 :     mb = mb,
192 :     mi = mi } }
193 :     val TKs = { find = fn (m: map, x) => TKMap.find (#tk m, x),
194 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, x, v) =>
195 :     { lt = lt,
196 :     tc = tc,
197 :     tk = TKMap.insert (tk, x, v),
198 :     dt = dt,
199 :     mb = mb,
200 :     mi = mi } }
201 :     fun DTs x = { find = fn (m: map, _) => DTMap.find (#dt m, x),
202 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
203 :     { lt = lt,
204 :     tc = tc,
205 :     tk = tk,
206 :     dt = DTMap.insert (dt, x, v),
207 :     mb = mb,
208 :     mi = mi } }
209 :     fun MBs x = { find = fn (m: map, _) => MBMap.find (#mb m, x),
210 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
211 :     { lt = lt,
212 :     tc = tc,
213 :     tk = tk,
214 :     dt = dt,
215 :     mb = MBMap.insert (mb, x, v),
216 :     mi = mi } }
217 :     fun MIs x = { find = fn (m: map, _) => MIMap.find (#mi m, x),
218 :     insert = fn ({ lt, tc, tk, dt, mb, mi }, _, v) =>
219 :     { lt = lt,
220 :     tc = tc,
221 :     tk = tk,
222 :     dt = dt,
223 :     mb = mb,
224 :     mi = MIMap.insert (mi, x, v) } }
225 :    
226 :     infix 3 $
227 :    
228 :     val int = PU.w_int
229 :     val int32 = PU.w_int32
230 :     val word = PU.w_word
231 :     val word32 = PU.w_word32
232 :     val string = PU.w_string
233 :     val share = PU.ah_share
234 :     val list = PU.w_list
235 :     val pair = PU.w_pair
236 :     val bool = PU.w_bool
237 :     val option = PU.w_option
238 :     val symbol = PSymPid.w_symbol
239 :     val pid = PSymPid.w_pid
240 :    
241 :     fun mkAlphaConvert () = let
242 : monnier 475 val m = ref IntMap.empty
243 : monnier 427 val cnt = ref 0
244 :     fun cvt i =
245 : monnier 475 case IntMap.find (!m, i) of
246 : monnier 427 SOME i' => i'
247 :     | NONE => let
248 :     val i' = !cnt
249 :     in
250 :     cnt := i' + 1;
251 : monnier 475 m := IntMap.insert (!m, i, i');
252 : monnier 427 i'
253 :     end
254 :     in
255 :     cvt
256 :     end
257 :    
258 :     fun numkind arg = let
259 :     val op $ = PU.$ NK
260 : blume 515 fun nk (P.INT i) = "A" $ [int i]
261 :     | nk (P.UINT i) = "B" $ [int i]
262 :     | nk (P.FLOAT i) = "C" $ [int i]
263 : monnier 427 in
264 :     nk arg
265 :     end
266 :    
267 :     fun arithop oper = let
268 : blume 515 val op $ = PU.$ AO
269 : monnier 427 fun arithopc P.+ = "\000"
270 :     | arithopc P.- = "\001"
271 :     | arithopc P.* = "\002"
272 :     | arithopc P./ = "\003"
273 :     | arithopc P.~ = "\004"
274 :     | arithopc P.ABS = "\005"
275 :     | arithopc P.LSHIFT = "\006"
276 :     | arithopc P.RSHIFT = "\007"
277 :     | arithopc P.RSHIFTL = "\008"
278 :     | arithopc P.ANDB = "\009"
279 :     | arithopc P.ORB = "\010"
280 :     | arithopc P.XORB = "\011"
281 :     | arithopc P.NOTB = "\012"
282 :     in
283 : blume 515 arithopc oper $ []
284 : monnier 427 end
285 :    
286 :     fun cmpop oper = let
287 : blume 515 val op $ = PU.$ CO
288 : monnier 427 fun cmpopc P.> = "\000"
289 :     | cmpopc P.>= = "\001"
290 :     | cmpopc P.< = "\002"
291 :     | cmpopc P.<= = "\003"
292 :     | cmpopc P.LEU = "\004"
293 :     | cmpopc P.LTU = "\005"
294 :     | cmpopc P.GEU = "\006"
295 :     | cmpopc P.GTU = "\007"
296 :     | cmpopc P.EQL = "\008"
297 :     | cmpopc P.NEQ = "\009"
298 :     in
299 : blume 515 cmpopc oper $ []
300 : monnier 427 end
301 :    
302 :     fun primop p = let
303 :     val op $ = PU.$ PO
304 :     fun ?n = String.str (Char.chr n)
305 : blume 515 fun fromto tag (from, to) = ?tag $ [int from, int to]
306 :     fun %?n = ?n $ []
307 : monnier 427 in
308 :     case p of
309 :     P.ARITH { oper, overflow, kind } =>
310 : blume 515 ?100 $ [arithop oper, bool overflow, numkind kind]
311 :     | P.CMP { oper, kind } => ?101 $ [cmpop oper, numkind kind]
312 : monnier 427 | P.TEST x => fromto 102 x
313 :     | P.TESTU x => fromto 103 x
314 :     | P.TRUNC x => fromto 104 x
315 :     | P.EXTEND x => fromto 105 x
316 :     | P.COPY x => fromto 106 x
317 : blume 515 | P.INLLSHIFT kind => ?107 $ [numkind kind]
318 :     | P.INLRSHIFT kind => ?108 $ [numkind kind]
319 :     | P.INLRSHIFTL kind => ?109 $ [numkind kind]
320 : monnier 427 | P.ROUND { floor, fromkind, tokind } =>
321 : blume 515 ?110 $ [bool floor, numkind fromkind, numkind tokind]
322 : monnier 427 | P.REAL { fromkind, tokind } =>
323 : blume 515 ?111 $ [numkind fromkind, numkind tokind]
324 : monnier 427 | P.NUMSUBSCRIPT { kind, checked, immutable } =>
325 : blume 515 ?112 $ [numkind kind, bool checked, bool immutable]
326 : monnier 427 | P.NUMUPDATE { kind, checked } =>
327 : blume 515 ?113 $ [numkind kind, bool checked]
328 :     | P.INL_MONOARRAY kind => ?114 $ [numkind kind]
329 :     | P.INL_MONOVECTOR kind => ?115 $ [numkind kind]
330 : monnier 427
331 :     | P.MKETAG => %?0
332 :     | P.WRAP => %?1
333 :     | P.UNWRAP => %?2
334 :     | P.SUBSCRIPT => %?3
335 :     | P.SUBSCRIPTV => %?4
336 :     | P.INLSUBSCRIPT => %?5
337 :     | P.INLSUBSCRIPTV => %?6
338 :     | P.INLMKARRAY => %?7
339 :    
340 :     | P.PTREQL => %?8
341 :     | P.PTRNEQ => %?9
342 :     | P.POLYEQL => %?10
343 :     | P.POLYNEQ => %?11
344 :     | P.BOXED => %?12
345 :     | P.UNBOXED => %?13
346 :     | P.LENGTH => %?14
347 :     | P.OBJLENGTH => %?15
348 :     | P.CAST => %?16
349 :     | P.GETRUNVEC => %?17
350 :     | P.MARKEXN => %?18
351 :     | P.GETHDLR => %?19
352 :     | P.SETHDLR => %?20
353 :     | P.GETVAR => %?21
354 :     | P.SETVAR => %?22
355 :     | P.GETPSEUDO => %?23
356 :     | P.SETPSEUDO => %?24
357 :     | P.SETMARK => %?25
358 :     | P.DISPOSE => %?26
359 :     | P.MAKEREF => %?27
360 :     | P.CALLCC => %?28
361 :     | P.CAPTURE => %?29
362 :     | P.THROW => %?30
363 :     | P.DEREF => %?31
364 :     | P.ASSIGN => %?32
365 :     (* NOTE: P.UNBOXEDASSIGN is defined below *)
366 :     | P.UPDATE => %?33
367 :     | P.INLUPDATE => %?34
368 :     | P.BOXEDUPDATE => %?35
369 :     | P.UNBOXEDUPDATE => %?36
370 :    
371 :     | P.GETTAG => %?37
372 :     | P.MKSPECIAL => %?38
373 :     | P.SETSPECIAL => %?39
374 :     | P.GETSPECIAL => %?40
375 :     | P.USELVAR => %?41
376 :     | P.DEFLVAR => %?42
377 :     | P.INLDIV => %?43
378 :     | P.INLMOD => %?44
379 :     | P.INLREM => %?45
380 :     | P.INLMIN => %?46
381 :     | P.INLMAX => %?47
382 :     | P.INLABS => %?48
383 :     | P.INLNOT => %?49
384 :     | P.INLCOMPOSE => %?50
385 :     | P.INLBEFORE => %?51
386 :     | P.INL_ARRAY => %?52
387 :     | P.INL_VECTOR => %?53
388 :     | P.ISOLATE => %?54
389 :     | P.WCAST => %?55
390 :     | P.NEW_ARRAY0 => %?56
391 :     | P.GET_SEQ_DATA => %?57
392 :     | P.SUBSCRIPT_REC => %?58
393 :     | P.SUBSCRIPT_RAW64 => %?59
394 :     | P.UNBOXEDASSIGN => %?60
395 :     end
396 :    
397 :     fun consig arg = let
398 :     val op $ = PU.$ CS
399 : blume 515 fun cs (A.CSIG (i, j)) = "S" $ [int i, int j]
400 :     | cs A.CNIL = "N" $ []
401 : monnier 427 in
402 :     cs arg
403 :     end
404 :    
405 : monnier 504 fun mkAccess { lvar, isLocalPid } = let
406 : monnier 427 val op $ = PU.$ A
407 : blume 515 fun access (A.LVAR i) = "A" $ [lvar i]
408 :     | access (A.EXTERN p) = "B" $ [pid p]
409 : monnier 504 | access (A.PATH (a as A.EXTERN p, i)) =
410 :     (* isLocalPid always returns false for in the "normal pickler"
411 :     * case. It returns true in the "repickle" case for the
412 :     * pid that was the hash of the original whole pickle.
413 :     * Since alpha-conversion has already taken place if we find
414 :     * an EXTERN pid, we don't call "lvar" but "int". *)
415 : blume 515 if isLocalPid p then "A" $ [int i]
416 :     else "C" $ [access a, int i]
417 :     | access (A.PATH (a, i)) = "C" $ [access a, int i]
418 :     | access A.NO_ACCESS = "D" $ []
419 : monnier 427
420 :     val op $ = PU.$ CR
421 : blume 515 fun conrep A.UNTAGGED = "A" $ []
422 :     | conrep (A.TAGGED i) = "B" $ [int i]
423 :     | conrep A.TRANSPARENT = "C" $ []
424 :     | conrep (A.CONSTANT i) = "D" $ [int i]
425 :     | conrep A.REF = "E" $ []
426 :     | conrep (A.EXN a) = "F" $ [access a]
427 :     | conrep A.LISTCONS = "G" $ []
428 :     | conrep A.LISTNIL = "H" $ []
429 :     | conrep (A.SUSP NONE) = "I" $ []
430 :     | conrep (A.SUSP (SOME (a, b))) = "J" $ [access a, access b]
431 : monnier 427 in
432 :     { access = access, conrep = conrep }
433 :     end
434 :    
435 : blume 515 (* lambda-type stuff; some of it is used in both picklers *)
436 :     fun tkind x = let
437 :     val op $ = PU.$ TK
438 :     fun tk x =
439 :     case LK.tk_out x of
440 :     LK.TK_MONO => "A" $ []
441 :     | LK.TK_BOX => "B" $ []
442 :     | LK.TK_SEQ ks => "C" $ [list tkind ks]
443 :     | LK.TK_FUN (ks, kr) => "D" $ [list tkind ks, tkind kr]
444 :     in
445 :     share TKs tk x
446 :     end
447 :    
448 :     fun mkLty lvar = let
449 :     fun lty x = let
450 : monnier 489 val op $ = PU.$ LT
451 : blume 515 fun ltyI x =
452 :     case LK.lt_out x of
453 :     LK.LT_TYC tc => "A" $ [tyc tc]
454 :     | LK.LT_STR l => "B" $ [list lty l]
455 :     | LK.LT_FCT (ts1, ts2) => "C" $ [list lty ts1, list lty ts2]
456 :     | LK.LT_POLY (ks, ts) => "D" $ [list tkind ks, list lty ts]
457 :     | LK.LT_IND _ => bug "unexpected LT_IND in mkPickleLty"
458 :     | LK.LT_ENV _ => bug "unexpected LT_ENV in mkPickleLty"
459 :     | LK.LT_CONT _ => bug "unexpected LT_CONT in mkPickleLty"
460 : monnier 489 in
461 : blume 515 share LTs ltyI x
462 : monnier 489 end
463 : monnier 427
464 : blume 515 and tyc x = let
465 : monnier 489 val op $ = PU.$ TC
466 : blume 515 fun tycI x =
467 :     case LK.tc_out x of
468 :     LK.TC_VAR (db, i) => "A" $ [int (DI.di_toint db), int i]
469 :     | LK.TC_NVAR n => "B" $ [lvar n]
470 :     | LK.TC_PRIM t => "C" $ [int (PT.pt_toint t)]
471 :     | LK.TC_FN (ks, tc) => "D" $ [list tkind ks, tyc tc]
472 :     | LK.TC_APP (tc, l) => "E" $ [tyc tc, list tyc l]
473 :     | LK.TC_SEQ l => "F" $ [list tyc l]
474 :     | LK.TC_PROJ (tc, i) => "G" $ [tyc tc, int i]
475 :     | LK.TC_SUM l => "H" $ [list tyc l]
476 :     | LK.TC_FIX ((n, tc, ts), i) =>
477 :     "I" $ [int n, tyc tc, list tyc ts, int i]
478 :     | LK.TC_ABS tc => "J" $ [tyc tc]
479 :     | LK.TC_BOX tc => "K" $ [tyc tc]
480 :     | LK.TC_TUPLE (_, l) => "L" $ [list tyc l]
481 :     | LK.TC_ARROW (LK.FF_VAR (b1, b2), ts1, ts2) =>
482 :     "M" $ [bool b1, bool b2, list tyc ts1, list tyc ts2]
483 :     | LK.TC_ARROW (LK.FF_FIXED, ts1, ts2) =>
484 :     "N" $ [list tyc ts1, list tyc ts2]
485 :     | LK.TC_PARROW _ => bug "unexpected TC_PARREW in mkPickleLty"
486 :     | LK.TC_TOKEN (tk, t) => "O" $ [int (LK.token_int tk), tyc t]
487 :     | LK.TC_IND _ => bug "unexpected TC_IND in mkPickleLty"
488 :     | LK.TC_ENV _ => bug "unexpected TC_ENV in mkPickleLty"
489 :     | LK.TC_CONT _ => bug "unexpected TC_CONT in mkPickleLty"
490 : monnier 489 in
491 : blume 515 share TCs tycI x
492 : monnier 489 end
493 :     in
494 : blume 515 { tyc = tyc, lty = lty }
495 : monnier 427 end
496 :    
497 :     (* the FLINT pickler *)
498 :     fun flint flint_exp = let
499 :     val alphaConvert = mkAlphaConvert ()
500 :     val lvar = int o alphaConvert
501 : monnier 504 val { access, conrep } = mkAccess { lvar = lvar,
502 :     isLocalPid = fn _ => false }
503 : blume 515 val { lty, tyc } = mkLty lvar
504 :    
505 : monnier 427 val op $ = PU.$ V
506 : blume 515 fun value (F.VAR v) = "a" $ [lvar v]
507 :     | value (F.INT i) = "b" $ [int i]
508 :     | value (F.INT32 i32) = "c" $ [int32 i32]
509 :     | value (F.WORD w) = "d" $ [word w]
510 :     | value (F.WORD32 w32) = "e" $ [word32 w32]
511 :     | value (F.REAL s) = "f" $ [string s]
512 :     | value (F.STRING s) = "g" $ [string s]
513 : monnier 427
514 :     fun con arg = let
515 :     val op $ = PU.$ C
516 :     fun c (F.DATAcon (dc, ts, v), e) =
517 : blume 515 "1" $ [dcon (dc, ts), lvar v, lexp e]
518 :     | c (F.INTcon i, e) = "2" $ [int i, lexp e]
519 :     | c (F.INT32con i32, e) = "3" $ [int32 i32, lexp e]
520 :     | c (F.WORDcon w, e) = "4" $ [word w, lexp e]
521 :     | c (F.WORD32con w32, e) = "5" $ [word32 w32, lexp e]
522 :     | c (F.REALcon s, e) = "6" $ [string s, lexp e]
523 :     | c (F.STRINGcon s, e) = "7" $ [string s, lexp e]
524 :     | c (F.VLENcon i, e) = "8" $ [int i, lexp e]
525 : monnier 427 in
526 :     c arg
527 :     end
528 :    
529 :     and dcon ((s, cr, t), ts) = let
530 :     val op $ = PU.$ DCON
531 :     in
532 : blume 515 "x" $ [symbol s, conrep cr, lty t, list tyc ts]
533 : monnier 427 end
534 :    
535 :     and dict { default = v, table = tbls } = let
536 :     val op $ = PU.$ DICT
537 :     in
538 : blume 515 "y" $ [lvar v, list (pair (list tyc, lvar)) tbls]
539 : monnier 427 end
540 :    
541 :     and fprim (dtopt, p, t, ts) = let
542 :     val op $ = PU.$ FPRIM
543 :     in
544 : blume 515 "z" $ [option dict dtopt, primop p, lty t, list tyc ts]
545 : monnier 427 end
546 :    
547 :     and lexp arg = let
548 :     val op $ = PU.$ E
549 : blume 515 fun l (F.RET vs) = "j" $ [list value vs]
550 : monnier 427 | l (F.LET (vs, e1, e2)) =
551 : blume 515 "k" $ [list lvar vs, lexp e1, lexp e2]
552 :     | l (F.FIX (fdecs, e)) = "l" $ [list fundec fdecs, lexp e]
553 :     | l (F.APP (v, vs)) = "m" $ [value v, list value vs]
554 :     | l (F.TFN (tfdec, e)) = "n" $ [tfundec tfdec, lexp e]
555 :     | l (F.TAPP (v, ts)) = "o" $ [value v, list tyc ts]
556 : monnier 427 | l (F.SWITCH (v, crl, cel, eo)) =
557 : blume 515 "p" $ [value v, consig crl, list con cel, option lexp eo]
558 : monnier 427 | l (F.CON (dc, ts, u, v, e)) =
559 : blume 515 "q" $ [dcon (dc, ts), value u, lvar v, lexp e]
560 : monnier 427 | l (F.RECORD (rk, vl, v, e)) =
561 : blume 515 "r" $ [rkind rk, list value vl, lvar v, lexp e]
562 : monnier 427 | l (F.SELECT (u, i, v, e)) =
563 : blume 515 "s" $ [value u, int i, lvar v, lexp e]
564 :     | l (F.RAISE (u, ts)) = "t" $ [value u, list lty ts]
565 :     | l (F.HANDLE (e, u)) = "u" $ [lexp e, value u]
566 : monnier 427 | l (F.BRANCH (p, vs, e1, e2)) =
567 : blume 515 "v" $ [fprim p, list value vs, lexp e1, lexp e2]
568 : monnier 427 | l (F.PRIMOP (p, vs, v, e)) =
569 : blume 515 "w" $ [fprim p, list value vs, lvar v, lexp e]
570 : monnier 427 in
571 :     l arg
572 :     end
573 :    
574 :     and fundec (fk, v, vts, e) = let
575 :     val op $ = PU.$ FUNDEC
576 :     in
577 : blume 515 "a" $ [fkind fk, lvar v, list (pair (lvar, lty)) vts, lexp e]
578 : monnier 427 end
579 :    
580 : blume 515 and tfundec (_, v, tvks, e) = let
581 : monnier 427 val op $ = PU.$ TFUNDEC
582 :     in
583 : blume 515 "b" $ [lvar v, list (pair (lvar, tkind)) tvks, lexp e]
584 : monnier 427 end
585 :    
586 :     and fkind arg = let
587 :     val op $ = PU.$ FK
588 : blume 515 fun isAlways F.IH_ALWAYS = true
589 :     | isAlways _ = false
590 :     fun strip (x, y) = x
591 :     fun fk { cconv = F.CC_FCT, ... } = "2" $ []
592 :     | fk { isrec, cconv = F.CC_FUN fixed, known, inline } =
593 : monnier 427 case fixed of
594 :     LK.FF_VAR (b1, b2) =>
595 : blume 515 "3" $ [option (list lty) (Option.map strip isrec),
596 :     bool b1, bool b2, bool known,
597 :     bool (isAlways inline)]
598 : monnier 427 | LK.FF_FIXED =>
599 : blume 515 "4" $ [option (list lty) (Option.map strip isrec),
600 :     bool known, bool (isAlways inline)]
601 : monnier 427 in
602 :     fk arg
603 :     end
604 :    
605 :     and rkind arg = let
606 :     val op $ = PU.$ RK
607 : blume 515 fun rk (F.RK_VECTOR tc) = "5" $ [tyc tc]
608 :     | rk F.RK_STRUCT = "6" $ []
609 :     | rk (F.RK_TUPLE _) = "7" $ []
610 : monnier 427 in
611 :     rk arg
612 :     end
613 :     in
614 :     fundec flint_exp
615 :     end
616 :    
617 :     fun pickleFLINT fo = let
618 :     val pickle =
619 :     Byte.stringToBytes (PU.pickle emptyMap (option flint fo))
620 :     val hash = pickle2hash pickle
621 :     in
622 :     { pickle = pickle, hash = hash }
623 :     end
624 :    
625 :     fun symenvPickler sye =
626 :     list (pair (pid, flint)) (SymbolicEnv.listItemsi sye)
627 :    
628 :     datatype ckey = (* context key *)
629 :     PrimKey of string
630 :     | NodeKey of int * Symbol.symbol
631 :    
632 :     type 'a context =
633 :     { lookSTR: ModuleId.modId -> 'a,
634 :     lookSIG: ModuleId.modId -> 'a,
635 :     lookFCT: ModuleId.modId -> 'a,
636 :     lookFSIG: ModuleId.modId -> 'a,
637 :     lookTYC: ModuleId.modId -> 'a,
638 :     lookEENV: ModuleId.modId -> 'a }
639 :    
640 :     datatype stubinfo =
641 :     NoStub
642 :     | SimpleStub
643 :     | PrimStub of string
644 :     | NodeStub of int * Symbol.symbol
645 :    
646 :     (* the environment pickler *)
647 : monnier 504 fun mkEnvPickler (context0: stubinfo context, isLocalPid) = let
648 : monnier 427
649 :     val { lookTYC, lookSIG, lookFSIG, lookSTR, lookFCT, lookEENV } =
650 :     context0
651 :    
652 :     val alphaConvert = mkAlphaConvert ()
653 :    
654 :     fun stamp (Stamps.STAMP { scope, count }) = let
655 :     val op $ = PU.$ ST
656 :     in
657 :     case scope of
658 : blume 515 Stamps.LOCAL => "A" $ [int (alphaConvert count)]
659 : monnier 504 | Stamps.GLOBAL p =>
660 : blume 515 if isLocalPid p then "A" $ [int count]
661 :     else "B" $ [pid p, int count]
662 :     | Stamps.SPECIAL s => "C" $ [string s, int count]
663 : monnier 427 end
664 :    
665 :     val entVar = stamp
666 :     val entPath = list entVar
667 :    
668 :     val op $ = PU.$ MI
669 : blume 515 fun modId (MI.STRid { rlzn, sign }) = "1" $ [stamp rlzn, stamp sign]
670 :     | modId (MI.SIGid s) = "2" $ [stamp s]
671 :     | modId (MI.FCTid { rlzn, sign }) = "3" $ [stamp rlzn, modId sign]
672 : monnier 427 | modId (MI.FSIGid { paramsig, bodysig }) =
673 : blume 515 "4" $ [stamp paramsig, stamp bodysig]
674 :     | modId (MI.TYCid a) = "5" $ [stamp a]
675 :     | modId (MI.EENVid s) = "6" $ [stamp s]
676 : monnier 427
677 :     val lvcount = ref 0
678 :     val lvlist = ref []
679 :    
680 :     fun anotherLvar v = let
681 :     val j = !lvcount
682 :     in
683 :     lvlist := v :: !lvlist;
684 :     lvcount := j + 1;
685 :     j
686 :     end
687 :    
688 : monnier 504 val { access, conrep } = mkAccess { lvar = int o anotherLvar,
689 :     isLocalPid = isLocalPid }
690 : monnier 427
691 : blume 515 val op $ = PU.$ SPATH
692 :     fun spath (SP.SPATH p) = "s" $ [list symbol p]
693 :     val op $ = PU.$ IPATH
694 :     fun ipath (IP.IPATH p) = "i" $ [list symbol p]
695 : monnier 427
696 :     val label = symbol
697 :    
698 :     fun eqprop eqp = let
699 : blume 515 val op $ = PU.$ EQP
700 : monnier 427 fun eqc T.YES = "\000"
701 :     | eqc T.NO = "\001"
702 :     | eqc T.IND = "\002"
703 :     | eqc T.OBJ = "\003"
704 :     | eqc T.DATA = "\004"
705 :     | eqc T.ABS = "\005"
706 :     | eqc T.UNDEF = "\006"
707 :     in
708 : blume 515 eqc eqp $ []
709 : monnier 427 end
710 :    
711 :     fun datacon (T.DATACON { name, const, typ, rep, sign, lazyp }) = let
712 :     val op $ = PU.$ DATACON
713 :     in
714 : blume 515 "c" $ [symbol name, bool const, ty typ, conrep rep,
715 :     consig sign, bool lazyp]
716 : monnier 427 end
717 :    
718 :     and tyckind arg = let
719 :     val op $ = PU.$ TYCKIND
720 : blume 515 fun tk (T.PRIMITIVE pt) = "a" $ [int (PT.pt_toint pt)]
721 : monnier 427 | tk (T.DATATYPE { index, family, stamps, root,freetycs }) =
722 : blume 515 "b" $ [int index, option entVar root,
723 :     dtypeInfo (stamps, family, freetycs)]
724 :     | tk (T.ABSTRACT tyc) = "c" $ [tycon tyc]
725 :     | tk (T.FLEXTYC tps) = "d" $ [] (* "f" $ tycpath tps *)
726 : monnier 427 (*** I (Matthias) carried through this message from Zhong:
727 :     tycpath should never be pickled; the only way it can be
728 :     pickled is when pickling the domains of a mutually
729 :     recursive datatypes; right now the mutually recursive
730 :     datatypes are not assigned accurate domains ... (ZHONG)
731 :     the preceding code is just a temporary gross hack.
732 :     ***)
733 : blume 515 | tk T.FORMAL = "d" $ []
734 :     | tk T.TEMP = "e" $ []
735 : monnier 427 in
736 :     tk arg
737 :     end
738 :    
739 :     and dtypeInfo x = let
740 :     val op $ = PU.$ DTI
741 :     fun dti_raw (ss, family, freetycs) =
742 : blume 515 "a" $ [list stamp (Vector.foldr (op ::) [] ss),
743 :     dtFamily family, list tycon freetycs]
744 : monnier 427 in
745 :     share (DTs (Vector.sub (#1 x, 0))) dti_raw x
746 :     end
747 :    
748 :     and dtFamily x = let
749 :     val op $ = PU.$ DTF
750 :     fun dtf_raw { mkey, members, lambdatyc } =
751 : blume 515 "b" $ [stamp mkey,
752 :     list dtmember (Vector.foldr (op ::) [] members)]
753 : monnier 427 in
754 :     share (MBs (#mkey x)) dtf_raw x
755 :     end
756 :    
757 :     and dtmember { tycname, dcons, arity, eq = ref e, lazyp, sign } = let
758 :     val op $ = PU.$ DTMEM
759 :     in
760 : blume 515 "c" $ [symbol tycname, list nameRepDomain dcons, int arity,
761 :     eqprop e, bool lazyp, consig sign]
762 : monnier 427 end
763 :    
764 :     and nameRepDomain { name, rep, domain } = let
765 :     val op $ = PU.$ NRD
766 :     in
767 : blume 515 "d" $ [symbol name, conrep rep, option ty domain]
768 : monnier 427 end
769 :    
770 :     and tycon arg = let
771 :     val op $ = PU.$ TYCON
772 :     fun tc (T.GENtyc x) =
773 :     let val id = MI.TYCid (#stamp x)
774 :     fun gt_raw { stamp = s, arity, eq = ref eq, kind, path } =
775 :     case lookTYC id of
776 : blume 515 SimpleStub => "A" $ [modId id]
777 :     | NoStub => "B" $ [stamp s, int arity, eqprop eq,
778 :     tyckind kind, ipath path]
779 :     | PrimStub s => "I" $ [string s, modId id]
780 : monnier 427 | NodeStub (i, s) =>
781 : blume 515 "J" $ [int i, symbol s, modId id]
782 : monnier 427 in
783 : monnier 439 share (MIs (id, NONE)) gt_raw x
784 : monnier 427 end
785 :     | tc (T.DEFtyc x) = let
786 :     fun dt_raw x = let
787 :     val { stamp = s, tyfun, strict, path } = x
788 :     val T.TYFUN { arity, body } = tyfun
789 :     in
790 : blume 515 "C" $ [stamp s, int arity, ty body,
791 :     list bool strict, ipath path]
792 : monnier 427 end
793 :     in
794 : monnier 439 share (MIs (MI.TYCid (#stamp x), NONE)) dt_raw x
795 : monnier 427 end
796 :     | tc (T.PATHtyc { arity, entPath = ep, path }) =
797 : blume 515 "D" $ [int arity, entPath ep, ipath path]
798 :     | tc (T.RECORDtyc l) = "E" $ [list label l]
799 :     | tc (T.RECtyc i) = "F" $ [int i]
800 :     | tc (T.FREEtyc i) = "G" $ [int i]
801 :     | tc T.ERRORtyc = "H" $ []
802 : monnier 427 in
803 :     tc arg
804 :     end
805 :    
806 :     and ty arg = let
807 :     val op $ = PU.$ T
808 :     fun ty (T.VARty (ref (T.INSTANTIATED t))) = ty t
809 :     | ty (T.VARty (ref (T.OPEN _))) =
810 :     bug "uninstantiated VARty in pickmod"
811 : blume 515 | ty (T.CONty (c, l)) = "a" $ [tycon c, list ty l]
812 :     | ty (T.IBOUND i) = "b" $ [int i]
813 :     | ty T.WILDCARDty = "c" $ []
814 : monnier 427 | ty (T.POLYty { sign, tyfun = T.TYFUN { arity, body } }) =
815 : blume 515 "d" $ [list bool sign, int arity, ty body]
816 :     | ty T.UNDEFty = "e" $ []
817 : monnier 427 | ty _ = bug "unexpected type in pickmod-ty"
818 :     in
819 :     ty arg
820 :     end
821 :    
822 :     val op $ = PU.$ II
823 : blume 515 fun inl_info (II.INL_PRIM (p, t)) = "A" $ [primop p, option ty t]
824 :     | inl_info (II.INL_STR sl) = "B" $ [list inl_info sl]
825 :     | inl_info II.INL_NO = "C" $ []
826 : monnier 427 | inl_info _ = bug "unexpected inl_info in pickmod"
827 :    
828 :     val op $ = PU.$ VAR
829 :     fun var (V.VALvar { access = a, info, path, typ = ref t }) =
830 : blume 515 "1" $ [access a, inl_info info, spath path, ty t]
831 : monnier 427 | var (V.OVLDvar { name, options = ref p,
832 :     scheme = T.TYFUN { arity, body } }) =
833 : blume 515 "2" $ [symbol name, list overld p, int arity, ty body]
834 :     | var V.ERRORvar = "3" $ []
835 : monnier 427
836 :     and overld { indicator, variant } = let
837 :     val op $ = PU.$ OVERLD
838 :     in
839 : blume 515 "o" $ [ty indicator, var variant]
840 : monnier 427 end
841 :    
842 :     fun fsigId (M.FSIG { paramsig = M.SIG { stamp = ps, ... },
843 :     bodysig = M.SIG { stamp = bs, ... },
844 :     ... }) =
845 :     MI.FSIGid { paramsig = ps, bodysig = bs }
846 :     | fsigId _ = bug "unexpected functor signature in fsigId"
847 :    
848 :     fun strDef arg = let
849 :     val op $ = PU.$ SD
850 : blume 515 fun sd (M.CONSTstrDef s) = "C" $ [Structure s]
851 :     | sd (M.VARstrDef (s, p)) = "V" $ [Signature s, entPath p]
852 : monnier 427 in
853 :     sd arg
854 :     end
855 :    
856 :     (*
857 :     * boundeps is not pickled right now, but it really should
858 :     * be pickled in the future.
859 :     *)
860 :     and Signature arg = let
861 :     val op $ = PU.$ SG
862 : blume 515 fun sg M.ERRORsig = "A" $ []
863 : monnier 427 | sg (M.SIG x) = let
864 :     val id = MI.SIGid (#stamp x)
865 :     fun sig_raw x = let
866 :     val { name, closed, fctflag, stamp = sta, symbols,
867 :     elements, boundeps = ref b, lambdaty = _,
868 :     typsharing, strsharing } = x
869 :     val b = NONE (* currently turned off *)
870 :     in
871 :     case lookSIG id of
872 : blume 515 SimpleStub => "B" $ [modId id]
873 : monnier 427 | NoStub =>
874 : blume 515 "C" $ [option symbol name, bool closed,
875 :     bool fctflag, stamp sta,
876 :     list symbol symbols,
877 :     list (pair (symbol, spec)) elements,
878 :     option (list (pair (entPath, tkind))) b,
879 :     list (list spath) typsharing,
880 :     list (list spath) strsharing]
881 :     | PrimStub s => "D" $ [string s, modId id]
882 : monnier 427 | NodeStub (i, s) =>
883 : blume 515 "E" $ [int i, symbol s, modId id]
884 : monnier 427 end
885 :     in
886 : monnier 439 share (MIs (id, NONE)) sig_raw x
887 : monnier 427 end
888 :     in
889 :     sg arg
890 :     end
891 :    
892 :     and fctSig arg = let
893 :     val op $ = PU.$ FSG
894 : blume 515 fun fsg M.ERRORfsig = "a" $ []
895 : monnier 427 | fsg (fs as M.FSIG x) = let
896 :     val id = fsigId fs
897 :     fun fsig_raw x = let
898 :     val { kind, paramsig, paramvar, paramsym, bodysig } = x
899 :     in
900 :     case lookFSIG id of
901 : blume 515 SimpleStub => "b" $ [modId id]
902 : monnier 427 | NoStub =>
903 : blume 515 "c" $ [option symbol kind, Signature paramsig,
904 :     entVar paramvar,
905 :     option symbol paramsym,
906 :     Signature bodysig]
907 :     | PrimStub s => "d" $ [string s, modId id]
908 : monnier 427 | NodeStub (i, s) =>
909 : blume 515 "e" $ [int i, symbol s, modId id]
910 : monnier 427 end
911 :     in
912 : monnier 439 share (MIs (id, NONE)) fsig_raw x
913 : monnier 427 end
914 :     in
915 :     fsg arg
916 :     end
917 :    
918 :     and spec arg = let
919 :     val op $ = PU.$ SP
920 :     fun sp (M.TYCspec { spec = t, entVar = v, repl, scope }) =
921 : blume 515 "1" $ [tycon t, entVar v, bool repl, int scope]
922 : monnier 427 | sp (M.STRspec { sign, slot, def, entVar = v }) =
923 : blume 515 "2" $ [Signature sign, int slot,
924 :     option (pair (strDef, int)) def, entVar v]
925 : monnier 427 | sp (M.FCTspec { sign, slot, entVar = v }) =
926 : blume 515 "3" $ [fctSig sign, int slot, entVar v]
927 :     | sp (M.VALspec { spec = t, slot }) = "4" $ [ty t, int slot]
928 : monnier 427 | sp (M.CONspec { spec = c, slot }) =
929 : blume 515 "5" $ [datacon c, option int slot]
930 : monnier 427 in
931 :     sp arg
932 :     end
933 :    
934 :     and entity arg = let
935 :     val op $ = PU.$ EN
936 : blume 515 fun en (M.TYCent t) = "A" $ [tycEntity t]
937 :     | en (M.STRent t) = "B" $ [strEntity t]
938 :     | en (M.FCTent t) = "C" $ [fctEntity t]
939 :     | en M.ERRORent = "D" $ []
940 : monnier 427 in
941 :     en arg
942 :     end
943 :    
944 :     and fctClosure (M.CLOSURE { param, body, env }) = let
945 :     val op $ = PU.$ FCTC
946 :     in
947 : blume 515 "f" $ [entVar param, strExp body, entityEnv env]
948 : monnier 427 end
949 :    
950 :     and Structure arg = let
951 :     val op $ = PU.$ STR
952 :     fun str (M.STRSIG { sign, entPath = p }) =
953 : blume 515 "A" $ [Signature sign, entPath p]
954 :     | str M.ERRORstr = "B" $ []
955 : monnier 427 | str (M.STR (x as { sign = M.SIG sign, ... })) = let
956 :     val id = MI.STRid { rlzn = #stamp (#rlzn x),
957 :     sign = #stamp sign }
958 :     fun s_raw { sign, rlzn, access = a, info } =
959 :     case lookSTR id of
960 : blume 515 SimpleStub => "C" $ [modId id, access a]
961 : monnier 427 | NoStub =>
962 : blume 515 "D" $ [Signature sign, strEntity rlzn,
963 :     access a, inl_info info]
964 :     | PrimStub s => "I" $ [string s, modId id]
965 : monnier 427 | NodeStub (i, s) =>
966 : blume 515 "J" $ [int i, symbol s, modId id, access a]
967 : monnier 427 in
968 : monnier 439 share (MIs (id, acc_pid (#access x))) s_raw x
969 : monnier 427 end
970 :     | str _ = bug "unexpected structure in pickmod"
971 :     in
972 :     str arg
973 :     end
974 :    
975 :     and Functor arg = let
976 :     val op $ = PU.$ F
977 : blume 515 fun fct M.ERRORfct = "E" $ []
978 : monnier 427 | fct (M.FCT x) = let
979 :     val id = MI.FCTid { rlzn = #stamp (#rlzn x),
980 :     sign = fsigId (#sign x) }
981 :     fun f_raw { sign, rlzn, access = a, info } =
982 :     case lookFCT id of
983 : blume 515 SimpleStub => "F" $ [modId id, access a]
984 : monnier 427 | NoStub =>
985 : blume 515 "G" $ [fctSig sign, fctEntity rlzn,
986 :     access a, inl_info info]
987 :     | PrimStub s => "H" $ [string s, modId id]
988 : monnier 427 | NodeStub (i, s) =>
989 : blume 515 "I" $ [int i, symbol s, modId id, access a]
990 : monnier 427 in
991 : monnier 439 share (MIs (id, acc_pid (#access x))) f_raw x
992 : monnier 427 end
993 :     in
994 :     fct arg
995 :     end
996 :    
997 : blume 515 and stampExp (M.CONST s) = PU.$ STE ("a", [stamp s])
998 :     | stampExp (M.GETSTAMP s) = PU.$ STE ("b", [strExp s])
999 :     | stampExp M.NEW = "c" $ []
1000 : monnier 427
1001 : blume 515 and tycExp (M.CONSTtyc t) = PU.$ TCE ("d", [tycon t])
1002 :     | tycExp (M.FORMtyc t) = PU.$ TCE ("e", [tycon t])
1003 :     | tycExp (M.VARtyc s) = PU.$ TCE ("f", [entPath s])
1004 : monnier 427
1005 :     and strExp arg = let
1006 :     val op $ = PU.$ STRE
1007 : blume 515 fun stre (M.VARstr s) = "g" $ [entPath s]
1008 :     | stre (M.CONSTstr s) = "h" $ [strEntity s]
1009 : monnier 427 | stre (M.STRUCTURE { stamp = s, entDec }) =
1010 : blume 515 "i" $ [stampExp s, entityDec entDec]
1011 :     | stre (M.APPLY (f, s)) = "j" $ [fctExp f, strExp s]
1012 :     | stre (M.LETstr (e, s)) = "k" $ [entityDec e, strExp s]
1013 :     | stre (M.ABSstr (s, e)) = "l" $ [Signature s, strExp e]
1014 : monnier 427 | stre (M.CONSTRAINstr { boundvar, raw, coercion }) =
1015 : blume 515 "m" $ [entVar boundvar, strExp raw, strExp coercion]
1016 :     | stre (M.FORMstr fs) = "n" $ [fctSig fs]
1017 : monnier 427 in
1018 :     stre arg
1019 :     end
1020 :    
1021 :     and fctExp arg = let
1022 :     val op $ = PU.$ FE
1023 : blume 515 fun fe (M.VARfct s) = "o" $ [entPath s]
1024 :     | fe (M.CONSTfct e) = "p" $ [fctEntity e]
1025 : monnier 427 | fe (M.LAMBDA { param, body }) =
1026 : blume 515 "q" $ [entVar param, strExp body]
1027 : monnier 427 | fe (M.LAMBDA_TP { param, body, sign }) =
1028 : blume 515 "r" $ [entVar param, strExp body, fctSig sign]
1029 :     | fe (M.LETfct (e, f)) = "s" $ [entityDec e, fctExp f]
1030 : monnier 427 in
1031 :     fe arg
1032 :     end
1033 :    
1034 :     and entityExp arg = let
1035 :     val op $ = PU.$ EE
1036 : blume 515 fun ee (M.TYCexp t) = "t" $ [tycExp t]
1037 :     | ee (M.STRexp s) = "u" $ [strExp s]
1038 :     | ee (M.FCTexp f) = "v" $ [fctExp f]
1039 :     | ee M.ERRORexp = "w" $ []
1040 :     | ee M.DUMMYexp = "x" $ []
1041 : monnier 427 in
1042 :     ee arg
1043 :     end
1044 :    
1045 :     and entityDec arg = let
1046 :     val op $ = PU.$ ED
1047 : blume 515 fun ed (M.TYCdec (s, x)) = "A" $ [entVar s, tycExp x]
1048 :     | ed (M.STRdec (s, x, n)) = "B" $ [entVar s, strExp x, symbol n]
1049 :     | ed (M.FCTdec (s, x)) = "C" $ [entVar s, fctExp x]
1050 :     | ed (M.SEQdec e) = "D" $ [list entityDec e]
1051 :     | ed (M.LOCALdec (a, b)) = "E" $ [entityDec a, entityDec b]
1052 :     | ed M.ERRORdec = "F" $ []
1053 :     | ed M.EMPTYdec = "G" $ []
1054 : monnier 427 in
1055 :     ed arg
1056 :     end
1057 :    
1058 :     and entityEnv (M.MARKeenv (s, r)) =
1059 :     let val op $ = PU.$ EEV
1060 :     val id = MI.EENVid s
1061 :     fun mee_raw (s, r) =
1062 :     case lookEENV id of
1063 : blume 515 SimpleStub => "D" $ [modId id]
1064 :     | NoStub => "E" $ [stamp s, entityEnv r]
1065 :     | PrimStub s => "F" $ [string s, modId id]
1066 :     | NodeStub (i, s) => "G" $ [int i, symbol s, modId id]
1067 : monnier 427 in
1068 : monnier 439 share (MIs (id, NONE)) mee_raw (s, r)
1069 : monnier 427 end
1070 :     | entityEnv (M.BINDeenv (d, r)) =
1071 : blume 515 PU.$ EEV ("A", [list (pair (entVar, entity)) (ED.listItemsi d),
1072 :     entityEnv r])
1073 :     | entityEnv M.NILeenv = "B" $ []
1074 :     | entityEnv M.ERReenv = "C" $ []
1075 : monnier 427
1076 :     and strEntity { stamp = s, entities, lambdaty = _, rpath } = let
1077 :     val op $ = PU.$ SEN
1078 :     in
1079 : blume 515 "s" $ [stamp s, entityEnv entities, ipath rpath]
1080 : monnier 427 end
1081 :    
1082 :     and fctEntity fe = let
1083 :     val op $ = PU.$ FEN
1084 :     val { stamp = s, closure, lambdaty = _, tycpath = _, rpath } = fe
1085 :     in
1086 : blume 515 "f" $ [stamp s, fctClosure closure, ipath rpath]
1087 : monnier 427 end
1088 :    
1089 :     and tycEntity x = tycon x
1090 :    
1091 : blume 515 fun fixity Fixity.NONfix = "N" $ []
1092 :     | fixity (Fixity.INfix (i, j)) = PU.$ FX ("I", [int i, int j])
1093 : monnier 427
1094 :     val op $ = PU.$ B
1095 : blume 515 fun binding (B.VALbind x) = "1" $ [var x]
1096 :     | binding (B.CONbind x) = "2" $ [datacon x]
1097 :     | binding (B.TYCbind x) = "3" $ [tycon x]
1098 :     | binding (B.SIGbind x) = "4" $ [Signature x]
1099 :     | binding (B.STRbind x) = "5" $ [Structure x]
1100 :     | binding (B.FSGbind x) = "6" $ [fctSig x]
1101 :     | binding (B.FCTbind x) = "7" $ [Functor x]
1102 :     | binding (B.FIXbind x) = "8" $ [fixity x]
1103 : monnier 427
1104 :     fun env e = let
1105 :     val syms = ListMergeSort.uniqueSort symCmp (Env.symbols e)
1106 :     val pairs = map (fn s => (s, Env.look (e, s))) syms
1107 :     in
1108 :     list (pair (symbol, binding)) pairs
1109 :     end
1110 : monnier 504
1111 :     fun env'n'ctxt { env = e, ctxt } =
1112 :     pair (env, list modId) (e, ModuleId.Set.listItems ctxt)
1113 : monnier 427 in
1114 : monnier 504 { pickler = env, pickler' = env'n'ctxt,
1115 :     exportLvarsGetter = fn () => rev (!lvlist) }
1116 : monnier 427 end
1117 :    
1118 :     fun pickleEnv { context, env } = let
1119 :     fun cvt lk i =
1120 :     case lk context i of
1121 :     SOME _ => SimpleStub
1122 :     | NONE => NoStub
1123 :    
1124 :     val c = { lookSTR = cvt CMStaticEnv.lookSTR,
1125 :     lookSIG = cvt CMStaticEnv.lookSIG,
1126 :     lookFCT = cvt CMStaticEnv.lookFCT,
1127 :     lookFSIG = cvt CMStaticEnv.lookFSIG,
1128 :     lookTYC = cvt CMStaticEnv.lookTYC,
1129 :     lookEENV = cvt CMStaticEnv.lookEENV }
1130 :    
1131 : monnier 504 val { pickler, exportLvarsGetter, ... } =
1132 :     mkEnvPickler (c, fn _ => false)
1133 : monnier 427 val pickle = Byte.stringToBytes (PU.pickle emptyMap (pickler env))
1134 :     val exportLvars = exportLvarsGetter ()
1135 :    
1136 :     val hash = pickle2hash pickle
1137 :    
1138 :     val exportPid =
1139 :     case exportLvars of
1140 :     [] => NONE
1141 :     | _ => SOME hash
1142 :     in
1143 :     addPickles (Word8Vector.length pickle);
1144 :     { hash = hash, pickle = pickle, exportLvars = exportLvars,
1145 :     exportPid = exportPid }
1146 :     end
1147 :    
1148 : monnier 504 fun repickleEnvHash { context, env, orig_hash } = let
1149 :     fun lk i =
1150 :     if ModuleId.Set.member (context, i) then SimpleStub else NoStub
1151 :     val c = { lookSTR = lk, lookSIG = lk, lookFCT = lk,
1152 :     lookFSIG = lk, lookTYC = lk, lookEENV = lk }
1153 :     fun isLocalPid p = PersStamps.compare (p, orig_hash) = EQUAL
1154 :     val { pickler, ... } = mkEnvPickler (c, isLocalPid)
1155 :     val pickle = Byte.stringToBytes (PU.pickle emptyMap (pickler env))
1156 :     in
1157 :     pickle2hash pickle
1158 :     end
1159 :    
1160 :     type env'n'ctxt = { env: StaticEnv.staticEnv, ctxt: ModuleId.Set.set }
1161 :    
1162 : monnier 427 fun envPickler context = let
1163 :     val { lookSTR, lookSIG, lookFCT, lookFSIG, lookTYC, lookEENV } =
1164 :     context
1165 :     fun cvt lk i =
1166 :     case lk i of
1167 :     SOME (PrimKey s) => PrimStub s
1168 :     | SOME (NodeKey (i, s)) => NodeStub (i, s)
1169 :     | NONE => NoStub
1170 :     val c = { lookSTR = cvt lookSTR,
1171 :     lookSIG = cvt lookSIG,
1172 :     lookFCT = cvt lookFCT,
1173 :     lookFSIG = cvt lookFSIG,
1174 :     lookTYC = cvt lookTYC,
1175 :     lookEENV = cvt lookEENV }
1176 : monnier 504 val { pickler', ... } = mkEnvPickler (c, fn _ => false)
1177 : monnier 427 in
1178 : monnier 504 pickler'
1179 : monnier 427 end
1180 :    
1181 :     (* the dummy environment pickler *)
1182 :     fun dontPickle (senv : StaticEnv.staticEnv, count) = let
1183 :     val hash = let
1184 :     val toByte = Word8.fromLargeWord o Word32.toLargeWord
1185 :     val >> = Word32.>>
1186 :     infix >>
1187 :     val w = Word32.fromInt count
1188 :     in
1189 :     PS.fromBytes
1190 :     (Word8Vector.fromList
1191 :     [0w0,0w0,0w0,toByte(w >> 0w24),0w0,0w0,0w0,toByte(w >> 0w16),
1192 :     0w0,0w0,0w0,toByte(w >> 0w8),0w0,0w0,0w0,toByte(w)])
1193 :     end
1194 :     (* next line is an alternative to using Env.consolidate *)
1195 :     val syms = ListMergeSort.uniqueSort symCmp (Env.symbols senv)
1196 :     fun newAccess i = A.PATH (A.EXTERN hash, i)
1197 :     fun mapbinding (sym, (i, env, lvars)) =
1198 :     case Env.look (senv, sym) of
1199 :     B.VALbind (V.VALvar {access=a, info=z, path=p, typ= ref t }) =>
1200 :     (case a of
1201 :     A.LVAR k =>
1202 :     (i+1,
1203 :     Env.bind (sym,
1204 :     B.VALbind (V.VALvar
1205 :     { access = newAccess i,
1206 :     info = z, path = p,
1207 :     typ = ref t}),
1208 :     env),
1209 :     k :: lvars)
1210 :     | _ => bug ("dontPickle 1: " ^ A.prAcc a))
1211 :     | B.STRbind (M.STR { sign = s, rlzn = r, access = a, info =z}) =>
1212 :     (case a of
1213 :     A.LVAR k =>
1214 :     (i+1,
1215 :     Env.bind (sym,
1216 :     B.STRbind (M.STR
1217 :     { access = newAccess i,
1218 :     sign = s, rlzn = r,
1219 :     info = z}),
1220 :     env),
1221 :     k :: lvars)
1222 :     | _ => bug ("dontPickle 2" ^ A.prAcc a))
1223 :     | B.FCTbind (M.FCT { sign = s, rlzn = r, access = a, info=z }) =>
1224 :     (case a of
1225 :     A.LVAR k =>
1226 :     (i+1,
1227 :     Env.bind (sym,
1228 :     B.FCTbind (M.FCT
1229 :     { access = newAccess i,
1230 :     sign = s, rlzn = r,
1231 :     info = z}),
1232 :     env),
1233 :     k :: lvars)
1234 :     | _ => bug ("dontPickle 3" ^ A.prAcc a))
1235 :     | B.CONbind (T.DATACON { name = n, const = c, typ = t, sign = s,
1236 :     lazyp= false, rep as (A.EXN a) }) => let
1237 :     val newrep = A.EXN (newAccess i)
1238 :     in
1239 :     case a of
1240 :     A.LVAR k =>
1241 :     (i+1,
1242 :     Env.bind (sym,
1243 :     B.CONbind (T.DATACON
1244 :     { rep = newrep, name = n,
1245 :     lazyp = false,
1246 :     const = c, typ = t,
1247 :     sign = s }),
1248 :     env),
1249 :     k :: lvars)
1250 :     | _ => bug ("dontPickle 4" ^ A.prAcc a)
1251 :     end
1252 :     | binding => (i, Env.bind (sym, binding, env), lvars)
1253 :     val (_,newenv,lvars) = foldl mapbinding (0, StaticEnv.empty, nil) syms
1254 :     val exportPid =
1255 :     case lvars of
1256 :     [] => NONE
1257 :     | _ => SOME hash
1258 :     in
1259 :     (newenv, hash, rev lvars, exportPid)
1260 :     end
1261 : monnier 475 end
1262 : monnier 427 end
1263 : monnier 475

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0