Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/stable/stabilize.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/stable/stabilize.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 306, Tue Jun 1 08:25:21 1999 UTC revision 391, Fri Jul 30 07:23:56 1999 UTC
# Line 1  Line 1 
1  structure Stablize = struct  (*
2     * Reading, generating, and writing stable groups.
3     *
4     * (C) 1999 Lucent Technologies, Bell Laboratories
5     *
6     * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7     *)
8    local
9      structure DG = DependencyGraph      structure DG = DependencyGraph
10      structure GG = GroupGraph      structure GG = GroupGraph
11      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
12        structure PP = PrettyPrint
13        structure SM = GenericVC.SourceMap
14        structure GP = GeneralParams
15        structure E = GenericVC.Environment
16        structure Pid = GenericVC.PersStamps
17    
18        type statenvgetter = GP.info -> DG.bnode -> E.staticEnv
19        type recomp = GP.info -> GG.group -> bool
20        type pid = Pid.persstamp
21    in
22    
23    signature STABILIZE = sig
24    
25        val loadStable :
26            GP.info * (SrcPath.t -> GG.group option) * bool ref ->
27            SrcPath.t -> GG.group option
28    
29        val stabilize :
30            GP.info -> { group: GG.group, anyerrors: bool ref } ->
31            GG.group option
32    end
33    
34      datatype item =  functor StabilizeFn (val bn2statenv : statenvgetter
35          SS of SymbolSet.set                       val transfer_state : SmlInfo.info * BinInfo.info -> unit
36        | S of Symbol.symbol                       val recomp : recomp) :> STABILIZE = struct
37        | SI of SmlInfo.info              (* only used during pickling *)  
38        | AP of AbsPath.t      structure PU = PickleUtil
39        | BI of BinInfo.info              (* only used during unpickling *)      structure UU = UnpickleUtil
40    
41      fun compare (S s, S s') = SymbolOrdKey.compare (s, s')      infix 3 $
42        | compare (S _, _) = GREATER      infixr 4 &
43        | compare (_, S _) = LESS      val op & = PU.&
44        | compare (SS s, SS s') = SymbolSet.compare (s, s')      val % = PU.%
45        | compare (SS _, _) = GREATER  
46        | compare (_, SS _) = LESS      (* type info *)
47        | compare (SI i, SI i') = SmlInfo.compare (i, i')      val (BN, SN, SBN, SS, SI, FSBN, IMPEXP, SHM) = (1, 2, 3, 4, 5, 6, 7, 8)
48        | compare (SI _, _) = GREATER  
49        | compare (_, SI _) = LESS      structure SSMap = BinaryMapFn
50        | compare (AP p, AP p') = AbsPath.compare (p, p')          (struct
51        | compare (AP _, _) = GREATER               type ord_key = SymbolSet.set
52        | compare (_, AP _) = LESS               val compare = SymbolSet.compare
       | compare (BI i, BI i') = BinInfo.compare (i, i')  
   
     structure Map =  
         BinaryMapFn (struct  
                          type ord_key = item  
                          val compare = compare  
53          end)          end)
54    
55      fun stabilize (g as GG.GROUP grec, binSizeOf, binCopy, gp) =      structure SNMap = BinaryMapFn
56          case #stableinfo grec of          (struct
57              GG.STABLE _ => g               type ord_key = DG.snode
58            | GG.NONSTABLE granted => let               fun compare (DG.SNODE n, DG.SNODE n') =
59                     SmlInfo.compare (#smlinfo n, #smlinfo n')
60            end)
61    
62        type 'a maps = { ss: 'a SSMap.map, sn: 'a SNMap.map }
63    
64        val initMap = { ss = SSMap.empty, sn = SNMap.empty }
65        val SSs = { find = fn (m: 'a maps, k) => SSMap.find (#ss m, k),
66                    insert = fn ({ ss, sn }, k, v) =>
67                                 { sn = sn, ss = SSMap.insert (ss, k, v) } }
68        val SNs = { find = fn (m: 'a maps, k) => SNMap.find (#sn m, k),
69                    insert = fn ({ ss, sn }, k, v) =>
70                                 { ss = ss, sn = SNMap.insert (sn, k, v) } }
71    
72        fun genStableInfoMap (exports, group) = let
73            (* find all the exported bnodes that are in the same group: *)
74            fun add (((_, DG.SB_BNODE (n as DG.BNODE b)), _), m) = let
75                val i = #bininfo b
76            in
77                if SrcPath.compare (BinInfo.group i, group) = EQUAL then
78                    IntBinaryMap.insert (m, BinInfo.offset i, n)
79                else m
80            end
81              | add (_, m) = m
82        in
83            SymbolMap.foldl add IntBinaryMap.empty exports
84        end
85    
86        fun stabilize gp { group = g as GG.GROUP grec, anyerrors } = let
87    
88            val primconf = #primconf (#param gp)
89            val policy = #fnpolicy (#param gp)
90    
91            val grouppath = #grouppath grec
92    
93            fun doit wrapped = let
94    
95                val _ =
96                    if StringSet.isEmpty wrapped then ()
97                    else
98                        Say.say ("$Stabilize: wrapping the following privileges:\n"
99                                 :: map (fn s => ("  " ^ s ^ "\n"))
100                                        (StringSet.listItems wrapped))
101    
102                val bname = SmlInfo.binname
103                val bsz = OS.FileSys.fileSize o bname
104    
105                fun cpb s i = let
106                    val N = 4096
107                    fun copy ins = let
108                        fun cp () =
109                            if BinIO.endOfStream ins then ()
110                            else (BinIO.output (s, BinIO.inputN (ins, N));
111                                  cp ())
112                    in
113                        cp ()
114                    end
115                in
116                    SafeIO.perform { openIt = fn () => BinIO.openIn (bname i),
117                                     closeIt = BinIO.closeIn,
118                                     work = copy,
119                                     cleanup = fn () => () }
120                end
121    
122                val grpSrcInfo = (#errcons gp, anyerrors)
123    
124                  val exports = #exports grec                  val exports = #exports grec
125                val required = StringSet.difference (#required grec, wrapped)
126                val sublibs = #sublibs grec
127    
128                  (* The format of a stable archive is the following:                  (* The format of a stable archive is the following:
129                   *  - It starts with the size s of the pickled dependency                   *  - It starts with the size s of the pickled dependency
# Line 49  Line 136 
136                   *    need no further adjustment.                   *    need no further adjustment.
137                   *  - Individual binfile contents (concatenated).                   *  - Individual binfile contents (concatenated).
138                   *)                   *)
                 val members = let  
                     fun sn (DG.SNODE { smlinfo, localimports = l, ... }, s) =  
                               if SmlInfoSet.member (s, smlinfo) then s  
                               else foldl sn (SmlInfoSet.add (s, smlinfo)) l  
                     fun impexp (((_, DG.SB_BNODE _), _), s) = s  
                       | impexp (((_, DG.SB_SNODE n), _), s) = sn (n, s)  
                 in  
                               SmlInfoSet.listItems  
                               (SymbolMap.foldl impexp SmlInfoSet.empty exports)  
                 end  
139    
140                  val offsetDict = let              (* Here we build a mapping that maps each BNODE to a number
141                      fun add (i, (d, n)) =               * representing the sub-library that it came from and a
142                          (SmlInfoMap.insert (d, i, n), n + binSizeOf i)               * representative symbol that can be used to find the BNODE
143                 * within the exports of that library *)
144                fun oneB i (sy, ((_, DG.SB_BNODE (DG.BNODE n)), _), m) =
145                    StableMap.insert (m, #bininfo n, (i, sy))
146                  | oneB i (_, _, m) = m
147                fun oneSL ((g as GG.GROUP { exports, ... }), (m, i)) =
148                    (SymbolMap.foldli (oneB i) m exports, i + 1)
149                val inverseMap = #1 (foldl oneSL (StableMap.empty, 0) sublibs)
150    
151                val members = ref []
152                val (registerOffset, getOffset) = let
153                    val dict = ref SmlInfoMap.empty
154                    val cur = ref 0
155                    fun reg (i, sz) = let
156                        val os = !cur
157                    in
158                        cur := os + sz;
159                        dict := SmlInfoMap.insert (!dict, i, os);
160                        members := i :: (!members);
161                        os
162                    end
163                    fun get i = valOf (SmlInfoMap.find (!dict, i))
164                in
165                    (reg, get)
166                end
167    
168                val int = PU.w_int
169                val symbol = PU.w_symbol
170                val share = PU.ah_share
171                val option = PU.w_option
172                val list = PU.w_list
173                val string = PU.w_string
174                val bool = PU.w_bool
175                val int = PU.w_int
176    
177                fun symbolset ss = let
178                    val op $ = PU.$ SS
179                    fun raw_ss ss = "s" $ list symbol (SymbolSet.listItems ss)
180                in
181                    share SSs raw_ss ss
182                end
183    
184                val filter = option symbolset
185    
186                fun shm (Sharing.SHARE true) = %SHM "a"
187                  | shm (Sharing.SHARE false) = %SHM "b"
188                  | shm Sharing.DONTSHARE = %SHM "c"
189    
190                fun si i = let
191                    (* FIXME: this is not a technical flaw, but perhaps one
192                     * that deserves fixing anyway:  If we only look at spec,
193                     * then we are losing information about sub-grouping
194                     * within libraries.  However, the spec in BinInfo.info
195                     * is only used for diagnostics and has no impact on the
196                     * operation of CM itself. *)
197                    val spec = SrcPath.specOf (SmlInfo.sourcepath i)
198                    val locs = SmlInfo.errorLocation gp i
199                    val offset = registerOffset (i, bsz i)
200                    val sh_mode = SmlInfo.sh_mode i
201                    val op $ = PU.$ SI
202                  in                  in
203                      #1 (foldl add (SmlInfoMap.empty, 0) members)                  "s" $ string spec & string locs & int offset & shm sh_mode
204                  end                  end
205    
206                  fun w_list w_item [] k m = "0" :: k m              fun primitive p =
207                    | w_list w_item [a] k m = "1" :: w_item a k m                  string (String.str (Primitive.toIdent primconf p))
                   | w_list w_item [a, b] k m = "2" :: w_item a (w_item b k) m  
                   | w_list w_item [a, b, c] k m =  
                     "3" :: w_item a (w_item b (w_item c k)) m  
                   | w_list w_item [a, b, c, d] k m =  
                     "4" :: w_item a (w_item b (w_item c (w_item d k))) m  
                   | w_list w_item (a :: b :: c :: d :: e :: r) k m =  
                     "5" :: w_item a (w_item b (w_item c (w_item d (w_item e  
                                                   (w_list w_item r k))))) m  
   
                 fun w_option w_item NONE k m = "n" :: k m  
                   | w_option w_item (SOME i) k m = "s" :: w_item i k m  
208    
209                  fun int_encode i = let              fun warn_relabs p abs = let
210                      (* this is the same mechanism that's also used in                  val relabs = if abs then "absolute" else "relative"
211                       * TopLevel/batch/binfile.sml (maybe we should share it) *)                  fun ppb pps =
212                      val n = Word32.fromInt i                      (PP.add_newline pps;
213                      val // = LargeWord.div                       PP.add_string pps (SrcPath.descr p);
214                      val %% = LargeWord.mod                       PP.add_newline pps;
215                      val !! = LargeWord.orb                       PP.add_string pps
216                      infix // %% !!      "(This means that in order to be able to use the result of stabilization";
217                      val toW8 = Word8.fromLargeWord                       PP.add_newline pps;
218                      fun r (0w0, l) = Word8Vector.fromList l                       PP.add_string pps "the library must be in the same ";
219                        | r (n, l) =                       PP.add_string pps relabs;
220                          r (n // 0w128, toW8 ((n %% 0w128) !! 0w128) :: l)                       PP.add_string pps " location as it is now.)";
221                         PP.add_newline pps)
222                  in                  in
223                      Byte.bytesToString (r (n // 0w128, [toW8 (n %% 0w128)]))                  EM.errorNoFile (#errcons gp, anyerrors) SM.nullRegion
224                        EM.WARN
225                        (concat [SrcPath.descr grouppath,
226                                 ": library referred to by ", relabs,
227                                 " pathname:"])
228                        ppb
229                  end                  end
230    
231                  fun w_int i k m = int_encode i :: k m              fun abspath p = let
232                    val pp = SrcPath.pickle (warn_relabs p) (p, grouppath)
                 fun w_share w C v k (i, m) =  
                     case Map.find (m, C v) of  
                         SOME i' => "o" :: w_int i' k (i, m)  
                       | NONE => "n" :: w v k (i + 1, Map.insert (m, C v, i))  
   
                 fun w_symbol_raw s k m = let  
                     val ns = case Symbol.nameSpace s of  
                         Symbol.SIGspace => "'"  
                       | Symbol.FCTspace => "("  
                       | Symbol.FSIGspace => ")"  
                       | Symbol.STRspace => ""  
                       | _ => GenericVC.ErrorMsg.impossible "stabilize:w_symbol"  
233                  in                  in
234                      ns :: Symbol.name s :: "." :: k m                  list string pp
235                  end                  end
236    
237                  val w_symbol = w_share w_symbol_raw S              val op $ = PU.$ BN
238                fun bn (DG.PNODE p) = "1" $ primitive p
239                  val w_ss = w_share (w_list w_symbol o SymbolSet.listItems) SS                | bn (DG.BNODE { bininfo = i, ... }) = let
240                        val (n, sy) = valOf (StableMap.find (inverseMap, i))
                 val w_filter = w_option w_ss  
   
                 fun w_string s k m = let  
                     fun esc #"\\" = "\\\\"  
                       | esc #"\"" = "\\\""  
                       | esc c = String.str c  
   
241                  in                  in
242                      String.translate esc s :: "\"" :: k m                      "2" $ int n & symbol sy
243                  end                  end
244    
245                  fun w_sharing NONE k m = "n" :: k m              fun sn n = let
246                    | w_sharing (SOME true) k m = "t" :: k m                  fun raw_sn (DG.SNODE n) =
247                    | w_sharing (SOME false) k m = "f" :: k m                      "a" $ si (#smlinfo n) & list sn (#localimports n) &
248                        list fsbn (#globalimports n)
                 fun w_si_raw i k = let  
                     val spec = AbsPath.spec (SmlInfo.sourcepath i)  
                     val locs = SmlInfo.errorLocation gp i  
                     val offset = valOf (SmlInfoMap.find (offsetDict, i))  
249                  in                  in
250                      w_string spec                  share SNs raw_sn n
                         (w_string locs  
                             (w_int offset  
                                  (w_sharing (SmlInfo.share i) k)))  
251                  end                  end
252    
253                  val w_si = w_share w_si_raw SI              and sbn x = let
254                    val op $ = PU.$ SBN
255                  fun w_primitive p k m = String.str (Primitive.toIdent p) :: k m              in
256                    case x of
257                        DG.SB_BNODE n => "a" $ bn n
258                      | DG.SB_SNODE n => "b" $ sn n
259                end
260    
261                  fun w_abspath_raw p k m =              and fsbn (f, n) = let
262                      w_list w_string (AbsPath.pickle p) k m                  val op $ = PU.$ FSBN
263                in
264                    "f" $ filter f & sbn n
265                end
266    
267                  val w_abspath = w_share w_abspath_raw AP              fun impexp (s, (n, _)) = let
268                    val op $ = PU.$ IMPEXP
269                in
270                    "i" $ symbol s & fsbn n
271                end
272    
273                  fun w_bn (DG.PNODE p) k m = "p" :: w_primitive p k m              fun w_exports e = list impexp (SymbolMap.listItemsi e)
                   | w_bn (DG.BNODE { bininfo = i, ... }) k m =  
                     "b" :: w_abspath (BinInfo.group i)  
                               (w_int (BinInfo.offset i) k) m  
274    
275                  fun w_sn (DG.SNODE n) k =              fun privileges p = list string (StringSet.listItems p)
                     w_si (#smlinfo n)  
                         (w_list w_sn (#localimports n)  
                               (w_list w_fsbn (#globalimports n) k))  
276    
277                  and w_sbn (DG.SB_BNODE n) k m = "b" :: w_bn n k m              fun group () = let
278                    | w_sbn (DG.SB_SNODE n) k m = "s" :: w_sn n k m                  fun sg (GG.GROUP { grouppath, ... }) = abspath grouppath
279                in
280                    (* Pickle the sublibs first because we need to already
281                     * have them back when we unpickle BNODEs. *)
282                    list sg sublibs & w_exports exports & privileges required
283                end
284    
285                  and w_fsbn (f, n) k = w_filter f (w_sbn n k)              val pickle = PU.pickle initMap (group ())
286                val sz = size pickle
287                val offset_adjustment = sz + 4
288    
289                  fun w_impexp (s, (n, _)) k = w_symbol s (w_fsbn n k)              fun mkStableGroup mksname = let
290                    val m = ref SmlInfoMap.empty
291                    fun sn (DG.SNODE (n as { smlinfo, ... })) =
292                        case SmlInfoMap.find (!m, smlinfo) of
293                            SOME n => n
294                          | NONE => let
295                                val li = map sn (#localimports n)
296                                val gi = map fsbn (#globalimports n)
297                                val sourcepath = SmlInfo.sourcepath smlinfo
298                                (* FIXME: see the comment near the other
299                                 * occurence of SrcPath.spec... *)
300                                val spec = SrcPath.specOf sourcepath
301                                val offset =
302                                    getOffset smlinfo + offset_adjustment
303                                val sh_mode = SmlInfo.sh_mode smlinfo
304                                val locs = SmlInfo.errorLocation gp smlinfo
305                                val error = EM.errorNoSource grpSrcInfo locs
306                                val i = BinInfo.new { group = grouppath,
307                                                      mkStablename = mksname,
308                                                      spec = spec,
309                                                      offset = offset,
310                                                      sh_mode = sh_mode,
311                                                      error = error }
312                                val n = DG.BNODE { bininfo = i,
313                                                   localimports = li,
314                                                   globalimports = gi }
315                            in
316                                transfer_state (smlinfo, i);
317                                m := SmlInfoMap.insert (!m, smlinfo, n);
318                                n
319                            end
320    
321                  fun w_exports e = w_list w_impexp (SymbolMap.listItemsi e)                  and sbn (DG.SB_SNODE n) = sn n
322                      | sbn (DG.SB_BNODE n) = n
323    
324                  fun w_bool true k m = "t" :: k m                  and fsbn (f, n) = (f, sbn n)
                   | w_bool false k m = "f" :: k m  
325    
326                  fun w_privileges p = w_list w_string (StringSet.listItems p)                  fun impexp ((f, n), e) = ((f, DG.SB_BNODE (sbn n)), e)
327    
328                  fun pickle_group (GG.GROUP g, granted) = let                  val exports = SymbolMap.map impexp (#exports grec)
329                      fun w_sg (GG.GROUP g) = w_abspath (#grouppath g)                  val simap = genStableInfoMap (exports, grouppath)
                     val req' = StringSet.difference (#required g, granted)  
                     fun k0 m = []  
                     val m0 = (0, Map.empty)  
                 in  
                     concat  
                        (w_exports (#exports g)  
                           (w_bool (#islib g)  
                               (w_privileges req'  
                                    (w_abspath (#grouppath g)  
                                          (w_list w_sg (#subgroups g) k0)))) m0)  
                 end  
                 val pickle = pickle_group (g, granted)  
                 val sz = size pickle  
330              in              in
331                  Dummy.f ()                  GG.GROUP { exports = exports,
332                               kind = GG.STABLELIB simap,
333                               required = required,
334                               grouppath = grouppath,
335                               sublibs = sublibs }
336              end              end
337    
338      fun g (getGroup, fsbn2env, knownStable, grpSrcInfo, group, s) = let              fun writeInt32 (s, i) = let
339                    val a = Word8Array.array (4, 0w0)
340          exception Format                  val _ = Pack32Big.update (a, 0, LargeWord.fromInt i)
341                in
342                    BinIO.output (s, Word8Array.extract (a, 0, NONE))
343                end
344                val memberlist = rev (!members)
345    
346                val gpath = #grouppath grec
347                fun mksname () = FilenamePolicy.mkStableName policy gpath
348                fun work outs =
349                    (Say.vsay ["[stabilizing ", SrcPath.descr gpath, "]\n"];
350                     writeInt32 (outs, sz);
351                     BinIO.output (outs, Byte.stringToBytes pickle);
352                     app (cpb outs) memberlist;
353                     mkStableGroup mksname)
354            in
355                SOME (SafeIO.perform { openIt = AutoDir.openBinOut o mksname,
356                                       closeIt = BinIO.closeOut,
357                                       work = work,
358                                       cleanup = fn () =>
359                                        (OS.FileSys.remove (mksname ())
360                                         handle _ => ()) })
361                handle exn => NONE
362            end
363        in
364            case #kind grec of
365                GG.STABLELIB _ => SOME g
366              | GG.NOLIB => EM.impossible "stabilize: no library"
367              | GG.LIB wrapped =>
368                    if not (recomp gp g) then
369                        (anyerrors := true; NONE)
370                    else let
371                        fun notStable (GG.GROUP { kind, ... }) =
372                            case kind of GG.STABLELIB _ => false | _ => true
373                    in
374                        case List.filter notStable (#sublibs grec) of
375                            [] => doit wrapped
376                          | l => let
377                                val grammar = case l of [_] => " is" | _ => "s are"
378                                fun ppb pps = let
379                                    fun loop [] = ()
380                                      | loop (GG.GROUP { grouppath, ... } :: t) =
381                                        (PP.add_string pps
382                                            (SrcPath.descr grouppath);
383                                         PP.add_newline pps;
384                                         loop t)
385                                in
386                                    PP.add_newline pps;
387                                    PP.add_string pps
388                                        (concat ["because the following sub-group",
389                                                 grammar, " not stable:"]);
390                                    PP.add_newline pps;
391                                    loop l
392                                end
393                                val errcons = #errcons gp
394                                val gdescr = SrcPath.descr (#grouppath grec)
395                            in
396                                EM.errorNoFile (errcons, anyerrors) SM.nullRegion
397                                   EM.COMPLAIN
398                                   (gdescr ^ " cannot be stabilized")
399                                   ppb;
400                                NONE
401                            end
402                    end
403        end
404    
405        fun loadStable (gp, getGroup, anyerrors) group = let
406    
407            val es2bs = GenericVC.CoerceEnv.es2bs
408            fun bn2env n =
409                Statenv2DAEnv.cvtMemo (fn () => es2bs (bn2statenv gp n))
410    
411            val errcons = #errcons gp
412            val grpSrcInfo = (errcons, anyerrors)
413            val gdescr = SrcPath.descr group
414            fun error l = EM.errorNoFile (errcons, anyerrors) SM.nullRegion
415                EM.COMPLAIN (concat ("(stable) " :: gdescr :: ": " :: l))
416                EM.nullErrorBody
417    
418            exception Format = UU.Format
419    
420            val pcmode = #pcmode (#param gp)
421            val policy = #fnpolicy (#param gp)
422            val primconf = #primconf (#param gp)
423            fun mksname () = FilenamePolicy.mkStableName policy group
424    
425            fun work s = let
426    
427                fun getGroup' p =
428                    case getGroup p of
429                        SOME g => g
430                      | NONE => (error ["unable to find ", SrcPath.descr p];
431                                 raise Format)
432    
433          (* for getting sharing right... *)          (* for getting sharing right... *)
434          val m = ref IntBinaryMap.empty          val m = ref IntBinaryMap.empty
435          val next = ref 0          val next = ref 0
436    
437          (* to build the stable info *)              val pset = ref PidSet.empty
         val simap = ref IntBinaryMap.empty  
438    
439          fun bytesIn n = let          fun bytesIn n = let
440              val bv = BinIO.inputN (s, n)              val bv = BinIO.inputN (s, n)
# Line 216  Line 444 
444          end          end
445    
446          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))
447          val pickle = bytesIn sz              val pickle = Byte.bytesToString (bytesIn sz)
448          val offset_adjustment = sz + 4          val offset_adjustment = sz + 4
449    
450          val rd = let              val session = UU.mkSession (UU.stringGetter pickle)
             val pos = ref 0  
             fun rd () = let  
                 val p = !pos  
             in  
                 pos := p + 1;  
                 Byte.byteToChar (Word8Vector.sub (pickle, p))  
                 handle _ => raise Format  
             end  
         in  
             rd  
         end  
451    
452          fun r_list r () =              fun list m r = UU.r_list session m r
453              case rd () of              fun option m r = UU.r_option session m r
454                  #"0" => []              val int = UU.r_int session
455                | #"1" => [r ()]              fun share m r = UU.share session m r
456                | #"2" => [r (), r ()]              fun nonshare r = UU.nonshare session r
457                | #"3" => [r (), r (), r ()]              val string = UU.r_string session
458                | #"4" => [r (), r (), r (), r ()]              val symbol = UU.r_symbol session
459                | #"5" => r () :: r () :: r () :: r () :: r () :: r_list r ()              val bool = UU.r_bool session
460                | _ => raise Format  
461                val stringListM = UU.mkMap ()
462          fun r_bool () =              val symbolListM = UU.mkMap ()
463              case rd () of              val stringListM = UU.mkMap ()
464                  #"t" => true              val ssM = UU.mkMap ()
465                | #"f" => false              val ssoM = UU.mkMap ()
466                | _ => raise Format              val boolOptionM = UU.mkMap ()
467                val siM = UU.mkMap ()
468                val sgListM = UU.mkMap ()
469                val snM = UU.mkMap ()
470                val snListM = UU.mkMap ()
471                val bnM = UU.mkMap ()
472                val sbnM = UU.mkMap ()
473                val fsbnM = UU.mkMap ()
474                val fsbnListM = UU.mkMap ()
475                val impexpM = UU.mkMap ()
476                val impexpListM = UU.mkMap ()
477    
478                val stringlist = list stringListM string
479    
480                fun abspath () =
481                    SrcPath.unpickle pcmode (stringlist (), group)
482                    handle SrcPath.Format => raise Format
483                         | SrcPath.BadAnchor a =>
484                           (error ["configuration anchor \"", a, "\" undefined"];
485                            raise Format)
486    
487                val symbollist = list symbolListM symbol
488    
489                fun symbolset () = let
490                    fun s #"s" = SymbolSet.addList (SymbolSet.empty, symbollist ())
491                      | s _ = raise Format
492                in
493                    share ssM s
494                end
495    
496                val filter = option ssoM symbolset
497    
498                fun primitive () =
499                    valOf (Primitive.fromIdent primconf
500                              (String.sub (string (), 0)))
501                    handle _ => raise Format
502    
503          fun r_option r_item () =              fun shm () = let
504              case rd () of                  fun s #"a" = Sharing.SHARE true
505                  #"n" => NONE                    | s #"b" = Sharing.SHARE false
506                | #"s" => SOME (r_item ())                    | s #"c" = Sharing.DONTSHARE
507                | _ => raise Format                    | s _ = raise Format
508                in
509                    nonshare s
510                end
511    
512          fun r_int () = let              fun si () = let
513              fun loop n = let                  fun s #"s" =
514                  val w8 = Byte.charToByte (rd ())                      let val spec = string ()
515                  val n' = n * 0w128 + Word8.toLargeWord (Word8.andb (w8, 0w127))                          val locs = string ()
516                            val offset = int () + offset_adjustment
517                            val sh_mode = shm ()
518                            val error = EM.errorNoSource grpSrcInfo locs
519              in              in
520                  if Word8.andb (w8, 0w128) = 0w0 then n' else loop n'                          BinInfo.new { group = group,
521                                          mkStablename = mksname,
522                                          error = error,
523                                          spec = spec,
524                                          offset = offset,
525                                          sh_mode = sh_mode }
526              end              end
527                      | s _ = raise Format
528          in          in
529              LargeWord.toIntX (loop 0w0)                  share siM s
530          end          end
531    
532          fun r_share r_raw C unC () =              fun sg () = getGroup' (abspath ())
533              case rd () of  
534                  #"o" => (case IntBinaryMap.find (!m, r_int ()) of              val sublibs = list sgListM sg ()
                              SOME x => unC x  
                            | NONE => raise Format)  
               | #"n" => let  
                     val i = !next  
                     val _ = next := i + 1  
                     val v = r_raw ()  
                 in  
                     m := IntBinaryMap.insert (!m, i, C v);  
                     v  
                 end  
               | _ => raise Format  
535    
536          fun r_string () = let              fun bn () = let
537              fun loop l =                  fun bn' #"1" = DG.PNODE (primitive ())
538                  case rd () of                    | bn' #"2" = let
539                      #"\"" => String.implode (rev l)                          val n = int ()
540                    | #"\\" => loop (rd () :: l)                          val sy = symbol ()
541                    | c => loop (c :: l)                          val GG.GROUP { exports = slexp, ... } =
542                                List.nth (sublibs, n) handle _ => raise Format
543          in          in
544              loop []                          case SymbolMap.find (slexp, sy) of
545                                SOME ((_, DG.SB_BNODE (n as DG.BNODE _)), _) => n
546                              | _ => raise Format
547          end          end
548                      | bn' _ = raise Format
         val r_abspath = let  
             fun r_abspath_raw () =  
                 case AbsPath.unpickle (r_list r_string ()) of  
                     SOME p => p  
                   | NONE => raise Format  
             fun unAP (AP x) = x  
               | unAP _ = raise Format  
549          in          in
550              r_share r_abspath_raw AP unAP                  share bnM bn'
551          end          end
552    
553          val r_symbol = let              (* this is the place where what used to be an
554              fun r_symbol_raw () = let               * SNODE changes to a BNODE! *)
555                  val (ns, first) =              fun sn () = let
556                      case rd () of                  fun sn' #"a" =
557                          #"`" => (Symbol.sigSymbol, rd ())                      DG.BNODE { bininfo = si (),
558                        | #"(" => (Symbol.fctSymbol, rd ())                                 localimports = snlist (),
559                        | #")" => (Symbol.fsigSymbol, rd ())                                 globalimports = fsbnlist () }
560                        | c => (Symbol.strSymbol, c)                    | sn' _ = raise Format
                 fun loop (#".", l) = String.implode (rev l)  
                   | loop (c, l) = loop (rd (), c :: l)  
561              in              in
562                  ns (loop (first, []))                  share snM sn'
563              end              end
564              fun unS (S x) = x  
565                | unS _ = raise Format              and snlist () = list snListM sn ()
566    
567                (* this one changes from farsbnode to plain farbnode *)
568                and sbn () = let
569                    fun sbn' #"a" = bn ()
570                      | sbn' #"b" = sn ()
571                      | sbn' _ = raise Format
572          in          in
573              r_share r_symbol_raw S unS                  share sbnM sbn'
574          end          end
575    
576          val r_ss = let              and fsbn () = let
577              fun r_ss_raw () =                  fun f #"f" = (filter (), sbn ())
578                  SymbolSet.addList (SymbolSet.empty, r_list r_symbol ())                    | f _ = raise Format
             fun unSS (SS s) = s  
               | unSS _ = raise Format  
579          in          in
580              r_share r_ss_raw SS unSS                  share fsbnM f
581          end          end
582    
583          val r_filter = r_option r_ss              and fsbnlist () = list fsbnListM fsbn ()
584    
585          fun r_primitive () =              fun impexp () = let
586              case Primitive.fromIdent (rd ()) of                  fun ie #"i" =
587                  NONE => raise Format                      let val sy = symbol ()
588                | SOME p => p                          val (f, n) = fsbn () (* really reads farbnodes! *)
589                            val e = bn2env n
590          fun r_sharing () =                          (* put a filter in front to avoid having the FCTENV
591              case rd () of                           * being queried needlessly (this avoids spurious
592                  #"n" => NONE                           * module loadings) *)
593                | #"t" => SOME true                          val e' = DAEnv.FILTER (SymbolSet.singleton sy, e)
               | #"f" => SOME false  
               | _ => raise Format  
   
         val r_si = let  
             fun r_si_raw () = let  
                 val spec = r_string ()  
                 val locs = r_string ()  
                 val offset = r_int () + offset_adjustment  
                 val share = r_sharing ()  
                 val error = EM.errorNoSource grpSrcInfo locs  
                 val i = BinInfo.new { group = group,  
                                       error = error,  
                                       spec = spec,  
                                       offset = offset,  
                                       share = share }  
594              in              in
595                  simap := IntBinaryMap.insert (!simap, offset, i);                          (* coerce to farsbnodes *)
596                  i                          (sy, ((f, DG.SB_BNODE n), e'))
597              end              end
598              fun unBI (BI i) = i                    | ie _ = raise Format
               | unBI _ = raise Format  
599          in          in
600              r_share r_si_raw BI unBI                  share impexpM ie
         end  
   
         fun r_bn () =  
             case rd () of  
                 #"p" => DG.PNODE (r_primitive ())  
               | #"b" =>  
                     (case AbsPathMap.find (knownStable, r_abspath ()) of  
                          NONE => raise Format  
                        | SOME im =>  
                              (case IntBinaryMap.find (im, r_int ()) of  
                                   NONE => raise Format  
                                 | SOME n => n))  
               | _ => raise Format  
   
         (* this is the place where what used to be an  
          * SNODE changes to a BNODE! *)  
         fun r_sn () =  
             DG.BNODE { bininfo = r_si (),  
                        localimports = r_list r_sn (),  
                        globalimports = r_list r_fsbn () }  
   
         (* this one changes from farsbnode to plain farbnode *)  
         and r_sbn () =  
             case rd () of  
                 #"b" => r_bn ()  
               | #"s" => r_sn ()  
               | _ => raise Format  
   
         and r_fsbn () = (r_filter (), r_sbn ())  
   
         fun r_impexp () = let  
             val sy = r_symbol ()  
             val (f, n) = r_fsbn ()      (* really reads farbnodes! *)  
             val e = fsbn2env n  
         in  
             (sy, ((f, DG.SB_BNODE n), e)) (* coerce to farsbnodes *)  
601          end          end
602    
603                val impexplist = list impexpListM impexp
604    
605          fun r_exports () =          fun r_exports () =
606              foldl SymbolMap.insert' SymbolMap.empty (r_list r_impexp ())                  foldl SymbolMap.insert' SymbolMap.empty (impexplist ())
607    
608          fun r_privileges () =              val stringlist = list stringListM string
609              StringSet.addList (StringSet.empty, r_list r_string ())  
610                fun privileges () =
611                    StringSet.addList (StringSet.empty, stringlist ())
612    
         fun unpickle_group () = let  
613              val exports = r_exports ()              val exports = r_exports ()
614              val islib = r_bool ()              val required = privileges ()
615              val required = r_privileges ()              val simap = genStableInfoMap (exports, group)
             val grouppath = r_abspath ()  
             val subgroups = r_list (getGroup o r_abspath) ()  
             fun add (((_, DG.SB_BNODE (DG.BNODE { bininfo, ... })), _), s) =  
                 IntBinarySet.add (s, BinInfo.offset bininfo)  
               | add (_, s) = s  
             val ens = SymbolMap.foldl add IntBinarySet.empty exports  
             fun isExported (os, _) = IntBinarySet.member (ens, os)  
             val final_simap = IntBinaryMap.filteri isExported (!simap)  
616          in          in
617              GG.GROUP { exports = exports,              GG.GROUP { exports = exports,
618                         islib = islib,                         kind = GG.STABLELIB simap,
619                         required = required,                         required = required,
620                         grouppath = grouppath,                         grouppath = group,
621                         subgroups = subgroups,                         sublibs = sublibs }
                        stableinfo = GG.STABLE final_simap }  
622          end          end
623      in      in
624          SOME (unpickle_group ()) handle Format => NONE          SOME (SafeIO.perform { openIt = BinIO.openIn o mksname,
625                                   closeIt = BinIO.closeIn,
626                                   work = work,
627                                   cleanup = fn () => () })
628            handle Format => NONE
629                 | IO.Io _ => NONE
630      end      end
631  end  end
632    
633    end (* local *)

Legend:
Removed from v.306  
changed lines
  Added in v.391

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0