Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/stable/stabilize.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/stable/stabilize.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 306, Tue Jun 1 08:25:21 1999 UTC revision 385, Thu Jul 22 05:23:25 1999 UTC
# Line 1  Line 1 
1  structure Stablize = struct  (*
2     * Reading, generating, and writing stable groups.
3     *
4     * (C) 1999 Lucent Technologies, Bell Laboratories
5     *
6     * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7     *)
8    local
9      structure DG = DependencyGraph      structure DG = DependencyGraph
10      structure GG = GroupGraph      structure GG = GroupGraph
11      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
12        structure PP = PrettyPrint
13        structure SM = GenericVC.SourceMap
14        structure GP = GeneralParams
15        structure E = GenericVC.Environment
16        structure Pid = GenericVC.PersStamps
17    
18        type statenvgetter = GP.info -> DG.bnode -> E.staticEnv
19        type recomp = GP.info -> GG.group -> bool
20        type pid = Pid.persstamp
21    in
22    
23    signature STABILIZE = sig
24    
25        val loadStable :
26            GP.info * (SrcPath.t -> GG.group option) * bool ref ->
27            SrcPath.t -> GG.group option
28    
29        val stabilize :
30            GP.info -> { group: GG.group, anyerrors: bool ref } ->
31            GG.group option
32    end
33    
34      datatype item =  functor StabilizeFn (val bn2statenv : statenvgetter
35          SS of SymbolSet.set                       val transfer_state : SmlInfo.info * BinInfo.info -> unit
36        | S of Symbol.symbol                       val recomp : recomp) :> STABILIZE = struct
37        | SI of SmlInfo.info              (* only used during pickling *)  
38        | AP of AbsPath.t      structure PU = PickleUtil
39        | BI of BinInfo.info              (* only used during unpickling *)      structure UU = UnpickleUtil
40    
41      fun compare (S s, S s') = SymbolOrdKey.compare (s, s')      infix 3 $
42        | compare (S _, _) = GREATER      infixr 4 &
43        | compare (_, S _) = LESS      val op & = PU.&
44        | compare (SS s, SS s') = SymbolSet.compare (s, s')      val % = PU.%
45        | compare (SS _, _) = GREATER  
46        | compare (_, SS _) = LESS      (* type info *)
47        | compare (SI i, SI i') = SmlInfo.compare (i, i')      val (BN, SN, SBN, SS, SI, FSBN, IMPEXP) = (1, 2, 3, 4, 5, 6, 7)
48        | compare (SI _, _) = GREATER  
49        | compare (_, SI _) = LESS      structure SSMap = BinaryMapFn
50        | compare (AP p, AP p') = AbsPath.compare (p, p')          (struct
51        | compare (AP _, _) = GREATER               type ord_key = SymbolSet.set
52        | compare (_, AP _) = LESS               val compare = SymbolSet.compare
       | compare (BI i, BI i') = BinInfo.compare (i, i')  
   
     structure Map =  
         BinaryMapFn (struct  
                          type ord_key = item  
                          val compare = compare  
53          end)          end)
54    
55      fun stabilize (g as GG.GROUP grec, binSizeOf, binCopy, gp) =      structure SNMap = BinaryMapFn
56          case #stableinfo grec of          (struct
57              GG.STABLE _ => g               type ord_key = DG.snode
58            | GG.NONSTABLE granted => let               fun compare (DG.SNODE n, DG.SNODE n') =
59                     SmlInfo.compare (#smlinfo n, #smlinfo n')
60            end)
61    
62        type 'a maps = { ss: 'a SSMap.map, sn: 'a SNMap.map }
63    
64        val initMap = { ss = SSMap.empty, sn = SNMap.empty }
65        val SSs = { find = fn (m: 'a maps, k) => SSMap.find (#ss m, k),
66                    insert = fn ({ ss, sn }, k, v) =>
67                                 { sn = sn, ss = SSMap.insert (ss, k, v) } }
68        val SNs = { find = fn (m: 'a maps, k) => SNMap.find (#sn m, k),
69                    insert = fn ({ ss, sn }, k, v) =>
70                                 { ss = ss, sn = SNMap.insert (sn, k, v) } }
71    
72        fun genStableInfoMap (exports, group) = let
73            (* find all the exported bnodes that are in the same group: *)
74            fun add (((_, DG.SB_BNODE (n as DG.BNODE b)), _), m) = let
75                val i = #bininfo b
76            in
77                if SrcPath.compare (BinInfo.group i, group) = EQUAL then
78                    IntBinaryMap.insert (m, BinInfo.offset i, n)
79                else m
80            end
81              | add (_, m) = m
82        in
83            SymbolMap.foldl add IntBinaryMap.empty exports
84        end
85    
86        fun stabilize gp { group = g as GG.GROUP grec, anyerrors } = let
87    
88            val primconf = #primconf (#param gp)
89            val policy = #fnpolicy (#param gp)
90    
91            val grouppath = #grouppath grec
92    
93            fun doit wrapped = let
94    
95                val _ =
96                    if StringSet.isEmpty wrapped then ()
97                    else
98                        Say.say ("$Stabilize: wrapping the following privileges:\n"
99                                 :: map (fn s => ("  " ^ s ^ "\n"))
100                                        (StringSet.listItems wrapped))
101    
102                val bname = SmlInfo.binname
103                val bsz = OS.FileSys.fileSize o bname
104    
105                fun cpb s i = let
106                    val N = 4096
107                    fun copy ins = let
108                        fun cp () =
109                            if BinIO.endOfStream ins then ()
110                            else (BinIO.output (s, BinIO.inputN (ins, N));
111                                  cp ())
112                    in
113                        cp ()
114                    end
115                in
116                    SafeIO.perform { openIt = fn () => BinIO.openIn (bname i),
117                                     closeIt = BinIO.closeIn,
118                                     work = copy,
119                                     cleanup = fn () => () }
120                end
121    
122                val grpSrcInfo = (#errcons gp, anyerrors)
123    
124                  val exports = #exports grec                  val exports = #exports grec
125                val required = StringSet.difference (#required grec, wrapped)
126                val sublibs = #sublibs grec
127    
128                  (* The format of a stable archive is the following:                  (* The format of a stable archive is the following:
129                   *  - It starts with the size s of the pickled dependency                   *  - It starts with the size s of the pickled dependency
# Line 49  Line 136 
136                   *    need no further adjustment.                   *    need no further adjustment.
137                   *  - Individual binfile contents (concatenated).                   *  - Individual binfile contents (concatenated).
138                   *)                   *)
                 val members = let  
                     fun sn (DG.SNODE { smlinfo, localimports = l, ... }, s) =  
                               if SmlInfoSet.member (s, smlinfo) then s  
                               else foldl sn (SmlInfoSet.add (s, smlinfo)) l  
                     fun impexp (((_, DG.SB_BNODE _), _), s) = s  
                       | impexp (((_, DG.SB_SNODE n), _), s) = sn (n, s)  
                 in  
                               SmlInfoSet.listItems  
                               (SymbolMap.foldl impexp SmlInfoSet.empty exports)  
                 end  
139    
140                  val offsetDict = let              (* Here we build a mapping that maps each BNODE to a number
141                      fun add (i, (d, n)) =               * representing the sub-library that it came from and a
142                          (SmlInfoMap.insert (d, i, n), n + binSizeOf i)               * representative symbol that can be used to find the BNODE
143                 * within the exports of that library *)
144                fun oneB i (sy, ((_, DG.SB_BNODE (DG.BNODE n)), _), m) =
145                    StableMap.insert (m, #bininfo n, (i, sy))
146                  | oneB i (_, _, m) = m
147                fun oneSL ((g as GG.GROUP { exports, ... }), (m, i)) =
148                    (SymbolMap.foldli (oneB i) m exports, i + 1)
149                val inverseMap = #1 (foldl oneSL (StableMap.empty, 0) sublibs)
150    
151                val members = ref []
152                val (registerOffset, getOffset) = let
153                    val dict = ref SmlInfoMap.empty
154                    val cur = ref 0
155                    fun reg (i, sz) = let
156                        val os = !cur
157                    in
158                        cur := os + sz;
159                        dict := SmlInfoMap.insert (!dict, i, os);
160                        members := i :: (!members);
161                        os
162                    end
163                    fun get i = valOf (SmlInfoMap.find (!dict, i))
164                in
165                    (reg, get)
166                end
167    
168                val int = PU.w_int
169                val symbol = PU.w_symbol
170                val share = PU.ah_share
171                val option = PU.w_option
172                val list = PU.w_list
173                val string = PU.w_string
174                val bool = PU.w_bool
175                val int = PU.w_int
176    
177                fun symbolset ss = let
178                    val op $ = PU.$ SS
179                    fun raw_ss ss = "s" $ list symbol (SymbolSet.listItems ss)
180                in
181                    share SSs raw_ss ss
182                end
183    
184                val filter = option symbolset
185    
186                val sh = option bool        (* sharing *)
187    
188                fun si i = let
189                    (* FIXME: this is not a technical flaw, but perhaps one
190                     * that deserves fixing anyway:  If we only look at spec,
191                     * then we are losing information about sub-grouping
192                     * within libraries.  However, the spec in BinInfo.info
193                     * is only used for diagnostics and has no impact on the
194                     * operation of CM itself. *)
195                    val spec = SrcPath.specOf (SmlInfo.sourcepath i)
196                    val locs = SmlInfo.errorLocation gp i
197                    val offset = registerOffset (i, bsz i)
198                    val share = SmlInfo.share i
199                    val op $ = PU.$ SI
200                  in                  in
201                      #1 (foldl add (SmlInfoMap.empty, 0) members)                  "s" $ string spec & string locs & int offset & sh share
202                  end                  end
203    
204                  fun w_list w_item [] k m = "0" :: k m              fun primitive p =
205                    | w_list w_item [a] k m = "1" :: w_item a k m                  string (String.str (Primitive.toIdent primconf p))
                   | w_list w_item [a, b] k m = "2" :: w_item a (w_item b k) m  
                   | w_list w_item [a, b, c] k m =  
                     "3" :: w_item a (w_item b (w_item c k)) m  
                   | w_list w_item [a, b, c, d] k m =  
                     "4" :: w_item a (w_item b (w_item c (w_item d k))) m  
                   | w_list w_item (a :: b :: c :: d :: e :: r) k m =  
                     "5" :: w_item a (w_item b (w_item c (w_item d (w_item e  
                                                   (w_list w_item r k))))) m  
206    
207                  fun w_option w_item NONE k m = "n" :: k m              fun warn_relabs p abs = let
208                    | w_option w_item (SOME i) k m = "s" :: w_item i k m                  val relabs = if abs then "absolute" else "relative"
209                    fun ppb pps =
210                  fun int_encode i = let                      (PP.add_newline pps;
211                      (* this is the same mechanism that's also used in                       PP.add_string pps (SrcPath.descr p);
212                       * TopLevel/batch/binfile.sml (maybe we should share it) *)                       PP.add_newline pps;
213                      val n = Word32.fromInt i                       PP.add_string pps
214                      val // = LargeWord.div      "(This means that in order to be able to use the result of stabilization";
215                      val %% = LargeWord.mod                       PP.add_newline pps;
216                      val !! = LargeWord.orb                       PP.add_string pps "the library must be in the same ";
217                      infix // %% !!                       PP.add_string pps relabs;
218                      val toW8 = Word8.fromLargeWord                       PP.add_string pps " location as it is now.)";
219                      fun r (0w0, l) = Word8Vector.fromList l                       PP.add_newline pps)
                       | r (n, l) =  
                         r (n // 0w128, toW8 ((n %% 0w128) !! 0w128) :: l)  
220                  in                  in
221                      Byte.bytesToString (r (n // 0w128, [toW8 (n %% 0w128)]))                  EM.errorNoFile (#errcons gp, anyerrors) SM.nullRegion
222                        EM.WARN
223                        (concat [SrcPath.descr grouppath,
224                                 ": library referred to by ", relabs,
225                                 " pathname:"])
226                        ppb
227                  end                  end
228    
229                  fun w_int i k m = int_encode i :: k m              fun abspath p = let
230                    val pp = SrcPath.pickle (warn_relabs p) (p, grouppath)
                 fun w_share w C v k (i, m) =  
                     case Map.find (m, C v) of  
                         SOME i' => "o" :: w_int i' k (i, m)  
                       | NONE => "n" :: w v k (i + 1, Map.insert (m, C v, i))  
   
                 fun w_symbol_raw s k m = let  
                     val ns = case Symbol.nameSpace s of  
                         Symbol.SIGspace => "'"  
                       | Symbol.FCTspace => "("  
                       | Symbol.FSIGspace => ")"  
                       | Symbol.STRspace => ""  
                       | _ => GenericVC.ErrorMsg.impossible "stabilize:w_symbol"  
231                  in                  in
232                      ns :: Symbol.name s :: "." :: k m                  list string pp
233                  end                  end
234    
235                  val w_symbol = w_share w_symbol_raw S              val op $ = PU.$ BN
236                fun bn (DG.PNODE p) = "1" $ primitive p
237                  val w_ss = w_share (w_list w_symbol o SymbolSet.listItems) SS                | bn (DG.BNODE { bininfo = i, ... }) = let
238                        val (n, sy) = valOf (StableMap.find (inverseMap, i))
                 val w_filter = w_option w_ss  
   
                 fun w_string s k m = let  
                     fun esc #"\\" = "\\\\"  
                       | esc #"\"" = "\\\""  
                       | esc c = String.str c  
   
239                  in                  in
240                      String.translate esc s :: "\"" :: k m                      "2" $ int n & symbol sy
241                  end                  end
242    
243                  fun w_sharing NONE k m = "n" :: k m              fun sn n = let
244                    | w_sharing (SOME true) k m = "t" :: k m                  fun raw_sn (DG.SNODE n) =
245                    | w_sharing (SOME false) k m = "f" :: k m                      "a" $ si (#smlinfo n) & list sn (#localimports n) &
246                        list fsbn (#globalimports n)
                 fun w_si_raw i k = let  
                     val spec = AbsPath.spec (SmlInfo.sourcepath i)  
                     val locs = SmlInfo.errorLocation gp i  
                     val offset = valOf (SmlInfoMap.find (offsetDict, i))  
247                  in                  in
248                      w_string spec                  share SNs raw_sn n
                         (w_string locs  
                             (w_int offset  
                                  (w_sharing (SmlInfo.share i) k)))  
249                  end                  end
250    
251                  val w_si = w_share w_si_raw SI              and sbn x = let
252                    val op $ = PU.$ SBN
253                  fun w_primitive p k m = String.str (Primitive.toIdent p) :: k m              in
254                    case x of
255                        DG.SB_BNODE n => "a" $ bn n
256                      | DG.SB_SNODE n => "b" $ sn n
257                end
258    
259                  fun w_abspath_raw p k m =              and fsbn (f, n) = let
260                      w_list w_string (AbsPath.pickle p) k m                  val op $ = PU.$ FSBN
261                in
262                    "f" $ filter f & sbn n
263                end
264    
265                  val w_abspath = w_share w_abspath_raw AP              fun impexp (s, (n, _)) = let
266                    val op $ = PU.$ IMPEXP
267                in
268                    "i" $ symbol s & fsbn n
269                end
270    
271                  fun w_bn (DG.PNODE p) k m = "p" :: w_primitive p k m              fun w_exports e = list impexp (SymbolMap.listItemsi e)
                   | w_bn (DG.BNODE { bininfo = i, ... }) k m =  
                     "b" :: w_abspath (BinInfo.group i)  
                               (w_int (BinInfo.offset i) k) m  
272    
273                  fun w_sn (DG.SNODE n) k =              fun privileges p = list string (StringSet.listItems p)
                     w_si (#smlinfo n)  
                         (w_list w_sn (#localimports n)  
                               (w_list w_fsbn (#globalimports n) k))  
274    
275                  and w_sbn (DG.SB_BNODE n) k m = "b" :: w_bn n k m              fun group () = let
276                    | w_sbn (DG.SB_SNODE n) k m = "s" :: w_sn n k m                  fun sg (GG.GROUP { grouppath, ... }) = abspath grouppath
277                in
278                    (* Pickle the sublibs first because we need to already
279                     * have them back when we unpickle BNODEs. *)
280                    list sg sublibs & w_exports exports & privileges required
281                end
282    
283                  and w_fsbn (f, n) k = w_filter f (w_sbn n k)              val pickle = PU.pickle initMap (group ())
284                val sz = size pickle
285                val offset_adjustment = sz + 4
286    
287                  fun w_impexp (s, (n, _)) k = w_symbol s (w_fsbn n k)              fun mkStableGroup mksname = let
288                    val m = ref SmlInfoMap.empty
289                    fun sn (DG.SNODE (n as { smlinfo, ... })) =
290                        case SmlInfoMap.find (!m, smlinfo) of
291                            SOME n => n
292                          | NONE => let
293                                val li = map sn (#localimports n)
294                                val gi = map fsbn (#globalimports n)
295                                val sourcepath = SmlInfo.sourcepath smlinfo
296                                (* FIXME: see the comment near the other
297                                 * occurence of SrcPath.spec... *)
298                                val spec = SrcPath.specOf sourcepath
299                                val offset =
300                                    getOffset smlinfo + offset_adjustment
301                                val share = SmlInfo.share smlinfo
302                                val locs = SmlInfo.errorLocation gp smlinfo
303                                val error = EM.errorNoSource grpSrcInfo locs
304                                val i = BinInfo.new { group = grouppath,
305                                                      mkStablename = mksname,
306                                                      spec = spec,
307                                                      offset = offset,
308                                                      share = share,
309                                                      error = error }
310                                val n = DG.BNODE { bininfo = i,
311                                                   localimports = li,
312                                                   globalimports = gi }
313                            in
314                                transfer_state (smlinfo, i);
315                                m := SmlInfoMap.insert (!m, smlinfo, n);
316                                n
317                            end
318    
319                  fun w_exports e = w_list w_impexp (SymbolMap.listItemsi e)                  and sbn (DG.SB_SNODE n) = sn n
320                      | sbn (DG.SB_BNODE n) = n
321    
322                  fun w_bool true k m = "t" :: k m                  and fsbn (f, n) = (f, sbn n)
                   | w_bool false k m = "f" :: k m  
323    
324                  fun w_privileges p = w_list w_string (StringSet.listItems p)                  fun impexp ((f, n), e) = ((f, DG.SB_BNODE (sbn n)), e)
325    
326                  fun pickle_group (GG.GROUP g, granted) = let                  val exports = SymbolMap.map impexp (#exports grec)
327                      fun w_sg (GG.GROUP g) = w_abspath (#grouppath g)                  val simap = genStableInfoMap (exports, grouppath)
                     val req' = StringSet.difference (#required g, granted)  
                     fun k0 m = []  
                     val m0 = (0, Map.empty)  
                 in  
                     concat  
                        (w_exports (#exports g)  
                           (w_bool (#islib g)  
                               (w_privileges req'  
                                    (w_abspath (#grouppath g)  
                                          (w_list w_sg (#subgroups g) k0)))) m0)  
                 end  
                 val pickle = pickle_group (g, granted)  
                 val sz = size pickle  
328              in              in
329                  Dummy.f ()                  GG.GROUP { exports = exports,
330                               kind = GG.STABLELIB simap,
331                               required = required,
332                               grouppath = grouppath,
333                               sublibs = sublibs }
334              end              end
335    
336      fun g (getGroup, fsbn2env, knownStable, grpSrcInfo, group, s) = let              fun writeInt32 (s, i) = let
337                    val a = Word8Array.array (4, 0w0)
338          exception Format                  val _ = Pack32Big.update (a, 0, LargeWord.fromInt i)
339                in
340                    BinIO.output (s, Word8Array.extract (a, 0, NONE))
341                end
342                val memberlist = rev (!members)
343    
344                val gpath = #grouppath grec
345                fun mksname () = FilenamePolicy.mkStableName policy gpath
346                fun work outs =
347                    (Say.vsay ["[stabilizing ", SrcPath.descr gpath, "]\n"];
348                     writeInt32 (outs, sz);
349                     BinIO.output (outs, Byte.stringToBytes pickle);
350                     app (cpb outs) memberlist;
351                     mkStableGroup mksname)
352            in
353                SOME (SafeIO.perform { openIt = AutoDir.openBinOut o mksname,
354                                       closeIt = BinIO.closeOut,
355                                       work = work,
356                                       cleanup = fn () =>
357                                        (OS.FileSys.remove (mksname ())
358                                         handle _ => ()) })
359                handle exn => NONE
360            end
361        in
362            case #kind grec of
363                GG.STABLELIB _ => SOME g
364              | GG.NOLIB => EM.impossible "stabilize: no library"
365              | GG.LIB wrapped =>
366                    if not (recomp gp g) then
367                        (anyerrors := true; NONE)
368                    else let
369                        fun notStable (GG.GROUP { kind, ... }) =
370                            case kind of GG.STABLELIB _ => false | _ => true
371                    in
372                        case List.filter notStable (#sublibs grec) of
373                            [] => doit wrapped
374                          | l => let
375                                val grammar = case l of [_] => " is" | _ => "s are"
376                                fun ppb pps = let
377                                    fun loop [] = ()
378                                      | loop (GG.GROUP { grouppath, ... } :: t) =
379                                        (PP.add_string pps
380                                            (SrcPath.descr grouppath);
381                                         PP.add_newline pps;
382                                         loop t)
383                                in
384                                    PP.add_newline pps;
385                                    PP.add_string pps
386                                        (concat ["because the following sub-group",
387                                                 grammar, " not stable:"]);
388                                    PP.add_newline pps;
389                                    loop l
390                                end
391                                val errcons = #errcons gp
392                                val gdescr = SrcPath.descr (#grouppath grec)
393                            in
394                                EM.errorNoFile (errcons, anyerrors) SM.nullRegion
395                                   EM.COMPLAIN
396                                   (gdescr ^ " cannot be stabilized")
397                                   ppb;
398                                NONE
399                            end
400                    end
401        end
402    
403        fun loadStable (gp, getGroup, anyerrors) group = let
404    
405            val es2bs = GenericVC.CoerceEnv.es2bs
406            fun bn2env n =
407                Statenv2DAEnv.cvtMemo (fn () => es2bs (bn2statenv gp n))
408    
409            val errcons = #errcons gp
410            val grpSrcInfo = (errcons, anyerrors)
411            val gdescr = SrcPath.descr group
412            fun error l = EM.errorNoFile (errcons, anyerrors) SM.nullRegion
413                EM.COMPLAIN (concat ("(stable) " :: gdescr :: ": " :: l))
414                EM.nullErrorBody
415    
416            exception Format = UU.Format
417    
418            val pcmode = #pcmode (#param gp)
419            val policy = #fnpolicy (#param gp)
420            val primconf = #primconf (#param gp)
421            fun mksname () = FilenamePolicy.mkStableName policy group
422    
423            fun work s = let
424    
425                fun getGroup' p =
426                    case getGroup p of
427                        SOME g => g
428                      | NONE => (error ["unable to find ", SrcPath.descr p];
429                                 raise Format)
430    
431          (* for getting sharing right... *)          (* for getting sharing right... *)
432          val m = ref IntBinaryMap.empty          val m = ref IntBinaryMap.empty
433          val next = ref 0          val next = ref 0
434    
435          (* to build the stable info *)              val pset = ref PidSet.empty
         val simap = ref IntBinaryMap.empty  
436    
437          fun bytesIn n = let          fun bytesIn n = let
438              val bv = BinIO.inputN (s, n)              val bv = BinIO.inputN (s, n)
# Line 216  Line 442 
442          end          end
443    
444          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))
445          val pickle = bytesIn sz              val pickle = Byte.bytesToString (bytesIn sz)
446          val offset_adjustment = sz + 4          val offset_adjustment = sz + 4
447    
448          val rd = let              val session = UU.mkSession (UU.stringReader pickle)
             val pos = ref 0  
             fun rd () = let  
                 val p = !pos  
             in  
                 pos := p + 1;  
                 Byte.byteToChar (Word8Vector.sub (pickle, p))  
                 handle _ => raise Format  
             end  
         in  
             rd  
         end  
449    
450          fun r_list r () =              fun list m r = UU.r_list session m r
451              case rd () of              fun option m r = UU.r_option session m r
452                  #"0" => []              val int = UU.r_int session
453                | #"1" => [r ()]              fun share m r = UU.share session m r
454                | #"2" => [r (), r ()]              val string = UU.r_string session
455                | #"3" => [r (), r (), r ()]              val symbol = UU.r_symbol session
456                | #"4" => [r (), r (), r (), r ()]              val bool = UU.r_bool session
457                | #"5" => r () :: r () :: r () :: r () :: r () :: r_list r ()  
458                | _ => raise Format              val stringListM = UU.mkMap ()
459                val symbolListM = UU.mkMap ()
460          fun r_bool () =              val stringListM = UU.mkMap ()
461              case rd () of              val ssM = UU.mkMap ()
462                  #"t" => true              val ssoM = UU.mkMap ()
463                | #"f" => false              val boolOptionM = UU.mkMap ()
464                | _ => raise Format              val siM = UU.mkMap ()
465                val sgListM = UU.mkMap ()
466                val snM = UU.mkMap ()
467                val snListM = UU.mkMap ()
468                val bnM = UU.mkMap ()
469                val sbnM = UU.mkMap ()
470                val fsbnM = UU.mkMap ()
471                val fsbnListM = UU.mkMap ()
472                val impexpM = UU.mkMap ()
473                val impexpListM = UU.mkMap ()
474    
475                val stringlist = list stringListM string
476    
477                fun abspath () =
478                    SrcPath.unpickle pcmode (stringlist (), group)
479                    handle SrcPath.Format => raise Format
480                         | SrcPath.BadAnchor a =>
481                           (error ["configuration anchor \"", a, "\" undefined"];
482                            raise Format)
483    
484                val symbollist = list symbolListM symbol
485    
486                fun symbolset () = let
487                    fun s #"s" = SymbolSet.addList (SymbolSet.empty, symbollist ())
488                      | s _ = raise Format
489                in
490                    share ssM s
491                end
492    
493                val filter = option ssoM symbolset
494    
495                fun primitive () =
496                    valOf (Primitive.fromIdent primconf
497                              (String.sub (string (), 0)))
498                    handle _ => raise Format
499    
500          fun r_option r_item () =              val sh = option boolOptionM bool
             case rd () of  
                 #"n" => NONE  
               | #"s" => SOME (r_item ())  
               | _ => raise Format  
501    
502          fun r_int () = let              fun si () = let
503              fun loop n = let                  fun s #"s" =
504                  val w8 = Byte.charToByte (rd ())                      let val spec = string ()
505                  val n' = n * 0w128 + Word8.toLargeWord (Word8.andb (w8, 0w127))                          val locs = string ()
506                            val offset = int () + offset_adjustment
507                            val share = sh ()
508                            val error = EM.errorNoSource grpSrcInfo locs
509              in              in
510                  if Word8.andb (w8, 0w128) = 0w0 then n' else loop n'                          BinInfo.new { group = group,
511                                          mkStablename = mksname,
512                                          error = error,
513                                          spec = spec,
514                                          offset = offset,
515                                          share = share }
516              end              end
517                      | s _ = raise Format
518          in          in
519              LargeWord.toIntX (loop 0w0)                  share siM s
520          end          end
521    
522          fun r_share r_raw C unC () =              fun sg () = getGroup' (abspath ())
523              case rd () of  
524                  #"o" => (case IntBinaryMap.find (!m, r_int ()) of              val sublibs = list sgListM sg ()
                              SOME x => unC x  
                            | NONE => raise Format)  
               | #"n" => let  
                     val i = !next  
                     val _ = next := i + 1  
                     val v = r_raw ()  
                 in  
                     m := IntBinaryMap.insert (!m, i, C v);  
                     v  
                 end  
               | _ => raise Format  
525    
526          fun r_string () = let              fun bn () = let
527              fun loop l =                  fun bn' #"1" = DG.PNODE (primitive ())
528                  case rd () of                    | bn' #"2" = let
529                      #"\"" => String.implode (rev l)                          val n = int ()
530                    | #"\\" => loop (rd () :: l)                          val sy = symbol ()
531                    | c => loop (c :: l)                          val GG.GROUP { exports = slexp, ... } =
532                                List.nth (sublibs, n) handle _ => raise Format
533          in          in
534              loop []                          case SymbolMap.find (slexp, sy) of
535                                SOME ((_, DG.SB_BNODE (n as DG.BNODE _)), _) => n
536                              | _ => raise Format
537          end          end
538                      | bn' _ = raise Format
         val r_abspath = let  
             fun r_abspath_raw () =  
                 case AbsPath.unpickle (r_list r_string ()) of  
                     SOME p => p  
                   | NONE => raise Format  
             fun unAP (AP x) = x  
               | unAP _ = raise Format  
539          in          in
540              r_share r_abspath_raw AP unAP                  share bnM bn'
541          end          end
542    
543          val r_symbol = let              (* this is the place where what used to be an
544              fun r_symbol_raw () = let               * SNODE changes to a BNODE! *)
545                  val (ns, first) =              fun sn () = let
546                      case rd () of                  fun sn' #"a" =
547                          #"`" => (Symbol.sigSymbol, rd ())                      DG.BNODE { bininfo = si (),
548                        | #"(" => (Symbol.fctSymbol, rd ())                                 localimports = snlist (),
549                        | #")" => (Symbol.fsigSymbol, rd ())                                 globalimports = fsbnlist () }
550                        | c => (Symbol.strSymbol, c)                    | sn' _ = raise Format
                 fun loop (#".", l) = String.implode (rev l)  
                   | loop (c, l) = loop (rd (), c :: l)  
551              in              in
552                  ns (loop (first, []))                  share snM sn'
553              end              end
554              fun unS (S x) = x  
555                | unS _ = raise Format              and snlist () = list snListM sn ()
556    
557                (* this one changes from farsbnode to plain farbnode *)
558                and sbn () = let
559                    fun sbn' #"a" = bn ()
560                      | sbn' #"b" = sn ()
561                      | sbn' _ = raise Format
562          in          in
563              r_share r_symbol_raw S unS                  share sbnM sbn'
564          end          end
565    
566          val r_ss = let              and fsbn () = let
567              fun r_ss_raw () =                  fun f #"f" = (filter (), sbn ())
568                  SymbolSet.addList (SymbolSet.empty, r_list r_symbol ())                    | f _ = raise Format
             fun unSS (SS s) = s  
               | unSS _ = raise Format  
569          in          in
570              r_share r_ss_raw SS unSS                  share fsbnM f
571          end          end
572    
573          val r_filter = r_option r_ss              and fsbnlist () = list fsbnListM fsbn ()
   
         fun r_primitive () =  
             case Primitive.fromIdent (rd ()) of  
                 NONE => raise Format  
               | SOME p => p  
574    
575          fun r_sharing () =              fun impexp () = let
576              case rd () of                  fun ie #"i" =
577                  #"n" => NONE                      let val sy = symbol ()
578                | #"t" => SOME true                          val (f, n) = fsbn () (* really reads farbnodes! *)
579                | #"f" => SOME false                          val e = bn2env n
580                | _ => raise Format                          (* put a filter in front to avoid having the FCTENV
581                             * being queried needlessly (this avoids spurious
582          val r_si = let                           * module loadings) *)
583              fun r_si_raw () = let                          val e' = DAEnv.FILTER (SymbolSet.singleton sy, e)
                 val spec = r_string ()  
                 val locs = r_string ()  
                 val offset = r_int () + offset_adjustment  
                 val share = r_sharing ()  
                 val error = EM.errorNoSource grpSrcInfo locs  
                 val i = BinInfo.new { group = group,  
                                       error = error,  
                                       spec = spec,  
                                       offset = offset,  
                                       share = share }  
584              in              in
585                  simap := IntBinaryMap.insert (!simap, offset, i);                          (* coerce to farsbnodes *)
586                  i                          (sy, ((f, DG.SB_BNODE n), e'))
587              end              end
588              fun unBI (BI i) = i                    | ie _ = raise Format
               | unBI _ = raise Format  
589          in          in
590              r_share r_si_raw BI unBI                  share impexpM ie
591          end          end
592    
593          fun r_bn () =              val impexplist = list impexpListM impexp
             case rd () of  
                 #"p" => DG.PNODE (r_primitive ())  
               | #"b" =>  
                     (case AbsPathMap.find (knownStable, r_abspath ()) of  
                          NONE => raise Format  
                        | SOME im =>  
                              (case IntBinaryMap.find (im, r_int ()) of  
                                   NONE => raise Format  
                                 | SOME n => n))  
               | _ => raise Format  
   
         (* this is the place where what used to be an  
          * SNODE changes to a BNODE! *)  
         fun r_sn () =  
             DG.BNODE { bininfo = r_si (),  
                        localimports = r_list r_sn (),  
                        globalimports = r_list r_fsbn () }  
   
         (* this one changes from farsbnode to plain farbnode *)  
         and r_sbn () =  
             case rd () of  
                 #"b" => r_bn ()  
               | #"s" => r_sn ()  
               | _ => raise Format  
   
         and r_fsbn () = (r_filter (), r_sbn ())  
   
         fun r_impexp () = let  
             val sy = r_symbol ()  
             val (f, n) = r_fsbn ()      (* really reads farbnodes! *)  
             val e = fsbn2env n  
         in  
             (sy, ((f, DG.SB_BNODE n), e)) (* coerce to farsbnodes *)  
         end  
594    
595          fun r_exports () =          fun r_exports () =
596              foldl SymbolMap.insert' SymbolMap.empty (r_list r_impexp ())                  foldl SymbolMap.insert' SymbolMap.empty (impexplist ())
597    
598          fun r_privileges () =              val stringlist = list stringListM string
599              StringSet.addList (StringSet.empty, r_list r_string ())  
600                fun privileges () =
601                    StringSet.addList (StringSet.empty, stringlist ())
602    
         fun unpickle_group () = let  
603              val exports = r_exports ()              val exports = r_exports ()
604              val islib = r_bool ()              val required = privileges ()
605              val required = r_privileges ()              val simap = genStableInfoMap (exports, group)
             val grouppath = r_abspath ()  
             val subgroups = r_list (getGroup o r_abspath) ()  
             fun add (((_, DG.SB_BNODE (DG.BNODE { bininfo, ... })), _), s) =  
                 IntBinarySet.add (s, BinInfo.offset bininfo)  
               | add (_, s) = s  
             val ens = SymbolMap.foldl add IntBinarySet.empty exports  
             fun isExported (os, _) = IntBinarySet.member (ens, os)  
             val final_simap = IntBinaryMap.filteri isExported (!simap)  
606          in          in
607              GG.GROUP { exports = exports,              GG.GROUP { exports = exports,
608                         islib = islib,                         kind = GG.STABLELIB simap,
609                         required = required,                         required = required,
610                         grouppath = grouppath,                         grouppath = group,
611                         subgroups = subgroups,                         sublibs = sublibs }
                        stableinfo = GG.STABLE final_simap }  
612          end          end
613      in      in
614          SOME (unpickle_group ()) handle Format => NONE          SOME (SafeIO.perform { openIt = BinIO.openIn o mksname,
615                                   closeIt = BinIO.closeIn,
616                                   work = work,
617                                   cleanup = fn () => () })
618            handle Format => NONE
619                 | IO.Io _ => NONE
620      end      end
621  end  end
622    
623    end (* local *)

Legend:
Removed from v.306  
changed lines
  Added in v.385

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0