Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/stable/stabilize.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/stable/stabilize.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 306, Tue Jun 1 08:25:21 1999 UTC revision 384, Wed Jul 21 08:54:00 1999 UTC
# Line 1  Line 1 
1  structure Stablize = struct  (*
2     * Reading, generating, and writing stable groups.
3     *
4     * (C) 1999 Lucent Technologies, Bell Laboratories
5     *
6     * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7     *)
8    local
9      structure DG = DependencyGraph      structure DG = DependencyGraph
10      structure GG = GroupGraph      structure GG = GroupGraph
11      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
12        structure PP = PrettyPrint
13      datatype item =      structure SM = GenericVC.SourceMap
14          SS of SymbolSet.set      structure GP = GeneralParams
15        | S of Symbol.symbol      structure E = GenericVC.Environment
16        | SI of SmlInfo.info              (* only used during pickling *)      structure Pid = GenericVC.PersStamps
17        | AP of AbsPath.t  
18        | BI of BinInfo.info              (* only used during unpickling *)      type statenvgetter = GP.info -> DG.bnode -> E.staticEnv
19        type recomp = GP.info -> GG.group -> bool
20      fun compare (S s, S s') = SymbolOrdKey.compare (s, s')      type pid = Pid.persstamp
21        | compare (S _, _) = GREATER  in
22        | compare (_, S _) = LESS  
23        | compare (SS s, SS s') = SymbolSet.compare (s, s')  signature STABILIZE = sig
24        | compare (SS _, _) = GREATER  
25        | compare (_, SS _) = LESS      val loadStable :
26        | compare (SI i, SI i') = SmlInfo.compare (i, i')          GP.info * (SrcPath.t -> GG.group option) * bool ref ->
27        | compare (SI _, _) = GREATER          SrcPath.t -> GG.group option
28        | compare (_, SI _) = LESS  
29        | compare (AP p, AP p') = AbsPath.compare (p, p')      val stabilize :
30        | compare (AP _, _) = GREATER          GP.info -> { group: GG.group, anyerrors: bool ref } ->
31        | compare (_, AP _) = LESS          GG.group option
32        | compare (BI i, BI i') = BinInfo.compare (i, i')  end
33    
34      structure Map =  functor StabilizeFn (val bn2statenv : statenvgetter
35          BinaryMapFn (struct                       val transfer_state : SmlInfo.info * BinInfo.info -> unit
36                           type ord_key = item                       val recomp : recomp) :> STABILIZE = struct
37                           val compare = compare  
38        structure PU = PickleUtil
39        structure UU = UnpickleUtil
40    
41        infix 3 $
42        infixr 4 &
43        val op & = PU.&
44        val % = PU.%
45    
46        datatype uitem =
47            USS of SymbolSet.set
48          | US of Symbol.symbol
49          | UBN of DG.bnode
50    
51        structure SNMap = BinaryMapFn
52            (struct
53                 type ord_key = DG.snode
54                 fun compare (DG.SNODE n, DG.SNODE n') =
55                     SmlInfo.compare (#smlinfo n, #smlinfo n')
56          end)          end)
57    
58      fun stabilize (g as GG.GROUP grec, binSizeOf, binCopy, gp) =      val initMap = SNMap.empty
59          case #stableinfo grec of      val SNs = { find = SNMap.find, insert = SNMap.insert }
60              GG.STABLE _ => g  
61            | GG.NONSTABLE granted => let      fun genStableInfoMap (exports, group) = let
62            (* find all the exported bnodes that are in the same group: *)
63            fun add (((_, DG.SB_BNODE (n as DG.BNODE b)), _), m) = let
64                val i = #bininfo b
65            in
66                if SrcPath.compare (BinInfo.group i, group) = EQUAL then
67                    IntBinaryMap.insert (m, BinInfo.offset i, n)
68                else m
69            end
70              | add (_, m) = m
71        in
72            SymbolMap.foldl add IntBinaryMap.empty exports
73        end
74    
75        fun stabilize gp { group = g as GG.GROUP grec, anyerrors } = let
76    
77            val primconf = #primconf (#param gp)
78            val policy = #fnpolicy (#param gp)
79    
80            val grouppath = #grouppath grec
81    
82            fun doit wrapped = let
83    
84                val _ =
85                    if StringSet.isEmpty wrapped then ()
86                    else
87                        Say.say ("$Stabilize: wrapping the following privileges:\n"
88                                 :: map (fn s => ("  " ^ s ^ "\n"))
89                                        (StringSet.listItems wrapped))
90    
91                val bname = SmlInfo.binname
92                val bsz = OS.FileSys.fileSize o bname
93    
94                fun cpb s i = let
95                    val N = 4096
96                    fun copy ins = let
97                        fun cp () =
98                            if BinIO.endOfStream ins then ()
99                            else (BinIO.output (s, BinIO.inputN (ins, N));
100                                  cp ())
101                    in
102                        cp ()
103                    end
104                in
105                    SafeIO.perform { openIt = fn () => BinIO.openIn (bname i),
106                                     closeIt = BinIO.closeIn,
107                                     work = copy,
108                                     cleanup = fn () => () }
109                end
110    
111                val grpSrcInfo = (#errcons gp, anyerrors)
112    
113                  val exports = #exports grec                  val exports = #exports grec
114                val required = StringSet.difference (#required grec, wrapped)
115                val sublibs = #sublibs grec
116    
117                  (* The format of a stable archive is the following:                  (* The format of a stable archive is the following:
118                   *  - It starts with the size s of the pickled dependency                   *  - It starts with the size s of the pickled dependency
# Line 49  Line 125 
125                   *    need no further adjustment.                   *    need no further adjustment.
126                   *  - Individual binfile contents (concatenated).                   *  - Individual binfile contents (concatenated).
127                   *)                   *)
                 val members = let  
                     fun sn (DG.SNODE { smlinfo, localimports = l, ... }, s) =  
                               if SmlInfoSet.member (s, smlinfo) then s  
                               else foldl sn (SmlInfoSet.add (s, smlinfo)) l  
                     fun impexp (((_, DG.SB_BNODE _), _), s) = s  
                       | impexp (((_, DG.SB_SNODE n), _), s) = sn (n, s)  
                 in  
                               SmlInfoSet.listItems  
                               (SymbolMap.foldl impexp SmlInfoSet.empty exports)  
                 end  
128    
129                  val offsetDict = let              (* Here we build a mapping that maps each BNODE to a number
130                      fun add (i, (d, n)) =               * representing the sub-library that it came from and a
131                          (SmlInfoMap.insert (d, i, n), n + binSizeOf i)               * representative symbol that can be used to find the BNODE
132                 * within the exports of that library *)
133                fun oneB i (sy, ((_, DG.SB_BNODE (DG.BNODE n)), _), m) =
134                    StableMap.insert (m, #bininfo n, (i, sy))
135                  | oneB i (_, _, m) = m
136                fun oneSL ((g as GG.GROUP { exports, ... }), (m, i)) =
137                    (SymbolMap.foldli (oneB i) m exports, i + 1)
138                val inverseMap = #1 (foldl oneSL (StableMap.empty, 0) sublibs)
139    
140                val members = ref []
141                val (registerOffset, getOffset) = let
142                    val dict = ref SmlInfoMap.empty
143                    val cur = ref 0
144                    fun reg (i, sz) = let
145                        val os = !cur
146                    in
147                        cur := os + sz;
148                        dict := SmlInfoMap.insert (!dict, i, os);
149                        members := i :: (!members);
150                        os
151                    end
152                    fun get i = valOf (SmlInfoMap.find (!dict, i))
153                in
154                    (reg, get)
155                end
156    
157                val int = PU.w_int
158                val symbol = PU.w_symbol
159                val share = PU.ah_share
160                val option = PU.w_option
161                val list = PU.w_list
162                val string = PU.w_string
163                val bool = PU.w_bool
164                val int = PU.w_int
165    
166                val symbolset = list symbol o SymbolSet.listItems
167    
168                val filter = option symbolset
169    
170                val sh = option bool        (* sharing *)
171    
172                fun si i = let
173                    (* FIXME: this is not a technical flaw, but perhaps one
174                     * that deserves fixing anyway:  If we only look at spec,
175                     * then we are losing information about sub-grouping
176                     * within libraries.  However, the spec in BinInfo.info
177                     * is only used for diagnostics and has no impact on the
178                     * operation of CM itself. *)
179                    val spec = SrcPath.specOf (SmlInfo.sourcepath i)
180                    val locs = SmlInfo.errorLocation gp i
181                    val offset = registerOffset (i, bsz i)
182                  in                  in
183                      #1 (foldl add (SmlInfoMap.empty, 0) members)                  string spec & string locs & int offset & sh (SmlInfo.share i)
184                  end                  end
185    
186                  fun w_list w_item [] k m = "0" :: k m              fun primitive p =
187                    | w_list w_item [a] k m = "1" :: w_item a k m                  string (String.str (Primitive.toIdent primconf p))
                   | w_list w_item [a, b] k m = "2" :: w_item a (w_item b k) m  
                   | w_list w_item [a, b, c] k m =  
                     "3" :: w_item a (w_item b (w_item c k)) m  
                   | w_list w_item [a, b, c, d] k m =  
                     "4" :: w_item a (w_item b (w_item c (w_item d k))) m  
                   | w_list w_item (a :: b :: c :: d :: e :: r) k m =  
                     "5" :: w_item a (w_item b (w_item c (w_item d (w_item e  
                                                   (w_list w_item r k))))) m  
188    
189                  fun w_option w_item NONE k m = "n" :: k m              fun warn_relabs p abs = let
190                    | w_option w_item (SOME i) k m = "s" :: w_item i k m                  val relabs = if abs then "absolute" else "relative"
191                    fun ppb pps =
192                  fun int_encode i = let                      (PP.add_newline pps;
193                      (* this is the same mechanism that's also used in                       PP.add_string pps (SrcPath.descr p);
194                       * TopLevel/batch/binfile.sml (maybe we should share it) *)                       PP.add_newline pps;
195                      val n = Word32.fromInt i                       PP.add_string pps
196                      val // = LargeWord.div      "(This means that in order to be able to use the result of stabilization";
197                      val %% = LargeWord.mod                       PP.add_newline pps;
198                      val !! = LargeWord.orb                       PP.add_string pps "the library must be in the same ";
199                      infix // %% !!                       PP.add_string pps relabs;
200                      val toW8 = Word8.fromLargeWord                       PP.add_string pps " location as it is now.)";
201                      fun r (0w0, l) = Word8Vector.fromList l                       PP.add_newline pps)
                       | r (n, l) =  
                         r (n // 0w128, toW8 ((n %% 0w128) !! 0w128) :: l)  
202                  in                  in
203                      Byte.bytesToString (r (n // 0w128, [toW8 (n %% 0w128)]))                  EM.errorNoFile (#errcons gp, anyerrors) SM.nullRegion
204                        EM.WARN
205                        (concat [SrcPath.descr grouppath,
206                                 ": library referred to by ", relabs,
207                                 " pathname:"])
208                        ppb
209                  end                  end
210    
211                  fun w_int i k m = int_encode i :: k m              fun abspath p = let
212                    val pp = SrcPath.pickle (warn_relabs p) (p, grouppath)
                 fun w_share w C v k (i, m) =  
                     case Map.find (m, C v) of  
                         SOME i' => "o" :: w_int i' k (i, m)  
                       | NONE => "n" :: w v k (i + 1, Map.insert (m, C v, i))  
   
                 fun w_symbol_raw s k m = let  
                     val ns = case Symbol.nameSpace s of  
                         Symbol.SIGspace => "'"  
                       | Symbol.FCTspace => "("  
                       | Symbol.FSIGspace => ")"  
                       | Symbol.STRspace => ""  
                       | _ => GenericVC.ErrorMsg.impossible "stabilize:w_symbol"  
213                  in                  in
214                      ns :: Symbol.name s :: "." :: k m                  list string pp
215                  end                  end
216    
217                  val w_symbol = w_share w_symbol_raw S              val BN = 1
218                val op $ = PU.$ BN
219                  val w_ss = w_share (w_list w_symbol o SymbolSet.listItems) SS              fun bn (DG.PNODE p) = "1" $ primitive p
220                  | bn (DG.BNODE { bininfo = i, ... }) = let
221                  val w_filter = w_option w_ss                      val (n, sy) = valOf (StableMap.find (inverseMap, i))
   
                 fun w_string s k m = let  
                     fun esc #"\\" = "\\\\"  
                       | esc #"\"" = "\\\""  
                       | esc c = String.str c  
   
222                  in                  in
223                      String.translate esc s :: "\"" :: k m                      "2" $ int n & symbol sy
224                  end                  end
225    
226                  fun w_sharing NONE k m = "n" :: k m              local
227                    | w_sharing (SOME true) k m = "t" :: k m                  val SN = 2
228                    | w_sharing (SOME false) k m = "f" :: k m                  val SBN = 3
229                in
230                  fun w_si_raw i k = let                  fun sn n = let
231                      val spec = AbsPath.spec (SmlInfo.sourcepath i)                      fun raw_sn (DG.SNODE n) =
232                      val locs = SmlInfo.errorLocation gp i                          "a" $ si (#smlinfo n) & list sn (#localimports n) &
233                      val offset = valOf (SmlInfoMap.find (offsetDict, i))                                list fsbn (#globalimports n)
234                  in                  in
235                      w_string spec                      share SNs raw_sn n
                         (w_string locs  
                             (w_int offset  
                                  (w_sharing (SmlInfo.share i) k)))  
236                  end                  end
237    
238                  val w_si = w_share w_si_raw SI                  and sbn x = let
239                        val op $ = PU.$ SBN
240                  fun w_primitive p k m = String.str (Primitive.toIdent p) :: k m                  in
241                        case x of
242                            DG.SB_BNODE n => "a" $ bn n
243                          | DG.SB_SNODE n => "b" $ sn n
244                    end
245    
246                  fun w_abspath_raw p k m =                  and fsbn (f, n) = filter f & sbn n
247                      w_list w_string (AbsPath.pickle p) k m              end
248    
249                  val w_abspath = w_share w_abspath_raw AP              fun impexp (s, (n, _)) = symbol s & fsbn n
250    
251                  fun w_bn (DG.PNODE p) k m = "p" :: w_primitive p k m              fun w_exports e = list impexp (SymbolMap.listItemsi e)
                   | w_bn (DG.BNODE { bininfo = i, ... }) k m =  
                     "b" :: w_abspath (BinInfo.group i)  
                               (w_int (BinInfo.offset i) k) m  
252    
253                  fun w_sn (DG.SNODE n) k =              fun privileges p = list string (StringSet.listItems p)
                     w_si (#smlinfo n)  
                         (w_list w_sn (#localimports n)  
                               (w_list w_fsbn (#globalimports n) k))  
254    
255                  and w_sbn (DG.SB_BNODE n) k m = "b" :: w_bn n k m              fun group () = let
256                    | w_sbn (DG.SB_SNODE n) k m = "s" :: w_sn n k m                  fun sg (GG.GROUP { grouppath, ... }) = abspath grouppath
257                in
258                    (* Pickle the sublibs first because we need to already
259                     * have them back when we unpickle BNODEs. *)
260                    list sg sublibs & w_exports exports & privileges required
261                end
262    
263                  and w_fsbn (f, n) k = w_filter f (w_sbn n k)              val pickle = PU.pickle initMap (group ())
264                val sz = size pickle
265                val offset_adjustment = sz + 4
266    
267                  fun w_impexp (s, (n, _)) k = w_symbol s (w_fsbn n k)              fun mkStableGroup mksname = let
268                    val m = ref SmlInfoMap.empty
269                    fun sn (DG.SNODE (n as { smlinfo, ... })) =
270                        case SmlInfoMap.find (!m, smlinfo) of
271                            SOME n => n
272                          | NONE => let
273                                val li = map sn (#localimports n)
274                                val gi = map fsbn (#globalimports n)
275                                val sourcepath = SmlInfo.sourcepath smlinfo
276                                (* FIXME: see the comment near the other
277                                 * occurence of SrcPath.spec... *)
278                                val spec = SrcPath.specOf sourcepath
279                                val offset =
280                                    getOffset smlinfo + offset_adjustment
281                                val share = SmlInfo.share smlinfo
282                                val locs = SmlInfo.errorLocation gp smlinfo
283                                val error = EM.errorNoSource grpSrcInfo locs
284                                val i = BinInfo.new { group = grouppath,
285                                                      mkStablename = mksname,
286                                                      spec = spec,
287                                                      offset = offset,
288                                                      share = share,
289                                                      error = error }
290                                val n = DG.BNODE { bininfo = i,
291                                                   localimports = li,
292                                                   globalimports = gi }
293                            in
294                                transfer_state (smlinfo, i);
295                                m := SmlInfoMap.insert (!m, smlinfo, n);
296                                n
297                            end
298    
299                  fun w_exports e = w_list w_impexp (SymbolMap.listItemsi e)                  and sbn (DG.SB_SNODE n) = sn n
300                      | sbn (DG.SB_BNODE n) = n
301    
302                  fun w_bool true k m = "t" :: k m                  and fsbn (f, n) = (f, sbn n)
                   | w_bool false k m = "f" :: k m  
303    
304                  fun w_privileges p = w_list w_string (StringSet.listItems p)                  fun impexp ((f, n), e) = ((f, DG.SB_BNODE (sbn n)), e)
305    
306                  fun pickle_group (GG.GROUP g, granted) = let                  val exports = SymbolMap.map impexp (#exports grec)
307                      fun w_sg (GG.GROUP g) = w_abspath (#grouppath g)                  val simap = genStableInfoMap (exports, grouppath)
                     val req' = StringSet.difference (#required g, granted)  
                     fun k0 m = []  
                     val m0 = (0, Map.empty)  
308                  in                  in
309                      concat                  GG.GROUP { exports = exports,
310                         (w_exports (#exports g)                             kind = GG.STABLELIB simap,
311                            (w_bool (#islib g)                             required = required,
312                                (w_privileges req'                             grouppath = grouppath,
313                                     (w_abspath (#grouppath g)                             sublibs = sublibs }
                                          (w_list w_sg (#subgroups g) k0)))) m0)  
                 end  
                 val pickle = pickle_group (g, granted)  
                 val sz = size pickle  
             in  
                 Dummy.f ()  
314              end              end
315    
316      fun g (getGroup, fsbn2env, knownStable, grpSrcInfo, group, s) = let              fun writeInt32 (s, i) = let
317                    val a = Word8Array.array (4, 0w0)
318          exception Format                  val _ = Pack32Big.update (a, 0, LargeWord.fromInt i)
319                in
320                    BinIO.output (s, Word8Array.extract (a, 0, NONE))
321                end
322                val memberlist = rev (!members)
323    
324                val gpath = #grouppath grec
325                fun mksname () = FilenamePolicy.mkStableName policy gpath
326                fun work outs =
327                    (Say.vsay ["[stabilizing ", SrcPath.descr gpath, "]\n"];
328                     writeInt32 (outs, sz);
329                     BinIO.output (outs, Byte.stringToBytes pickle);
330                     app (cpb outs) memberlist;
331                     mkStableGroup mksname)
332            in
333                SOME (SafeIO.perform { openIt = AutoDir.openBinOut o mksname,
334                                       closeIt = BinIO.closeOut,
335                                       work = work,
336                                       cleanup = fn () =>
337                                        (OS.FileSys.remove (mksname ())
338                                         handle _ => ()) })
339                handle exn => NONE
340            end
341        in
342            case #kind grec of
343                GG.STABLELIB _ => SOME g
344              | GG.NOLIB => EM.impossible "stabilize: no library"
345              | GG.LIB wrapped =>
346                    if not (recomp gp g) then
347                        (anyerrors := true; NONE)
348                    else let
349                        fun notStable (GG.GROUP { kind, ... }) =
350                            case kind of GG.STABLELIB _ => false | _ => true
351                    in
352                        case List.filter notStable (#sublibs grec) of
353                            [] => doit wrapped
354                          | l => let
355                                val grammar = case l of [_] => " is" | _ => "s are"
356                                fun ppb pps = let
357                                    fun loop [] = ()
358                                      | loop (GG.GROUP { grouppath, ... } :: t) =
359                                        (PP.add_string pps
360                                            (SrcPath.descr grouppath);
361                                         PP.add_newline pps;
362                                         loop t)
363                                in
364                                    PP.add_newline pps;
365                                    PP.add_string pps
366                                        (concat ["because the following sub-group",
367                                                 grammar, " not stable:"]);
368                                    PP.add_newline pps;
369                                    loop l
370                                end
371                                val errcons = #errcons gp
372                                val gdescr = SrcPath.descr (#grouppath grec)
373                            in
374                                EM.errorNoFile (errcons, anyerrors) SM.nullRegion
375                                   EM.COMPLAIN
376                                   (gdescr ^ " cannot be stabilized")
377                                   ppb;
378                                NONE
379                            end
380                    end
381        end
382    
383        fun loadStable (gp, getGroup, anyerrors) group = let
384    
385            val es2bs = GenericVC.CoerceEnv.es2bs
386            fun bn2env n =
387                Statenv2DAEnv.cvtMemo (fn () => es2bs (bn2statenv gp n))
388    
389            val errcons = #errcons gp
390            val grpSrcInfo = (errcons, anyerrors)
391            val gdescr = SrcPath.descr group
392            fun error l = EM.errorNoFile (errcons, anyerrors) SM.nullRegion
393                EM.COMPLAIN (concat ("(stable) " :: gdescr :: ": " :: l))
394                EM.nullErrorBody
395    
396            exception Format = UU.Format
397    
398            val pcmode = #pcmode (#param gp)
399            val policy = #fnpolicy (#param gp)
400            val primconf = #primconf (#param gp)
401            fun mksname () = FilenamePolicy.mkStableName policy group
402    
403            fun work s = let
404    
405                fun getGroup' p =
406                    case getGroup p of
407                        SOME g => g
408                      | NONE => (error ["unable to find ", SrcPath.descr p];
409                                 raise Format)
410    
411          (* for getting sharing right... *)          (* for getting sharing right... *)
412          val m = ref IntBinaryMap.empty          val m = ref IntBinaryMap.empty
413          val next = ref 0          val next = ref 0
414    
415          (* to build the stable info *)              val pset = ref PidSet.empty
         val simap = ref IntBinaryMap.empty  
416    
417          fun bytesIn n = let          fun bytesIn n = let
418              val bv = BinIO.inputN (s, n)              val bv = BinIO.inputN (s, n)
# Line 216  Line 422 
422          end          end
423    
424          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))          val sz = LargeWord.toIntX (Pack32Big.subVec (bytesIn 4, 0))
425          val pickle = bytesIn sz              val pickle = Byte.bytesToString (bytesIn sz)
426          val offset_adjustment = sz + 4          val offset_adjustment = sz + 4
427    
428          val rd = let              val session = UU.mkSession (UU.stringReader pickle)
             val pos = ref 0  
             fun rd () = let  
                 val p = !pos  
             in  
                 pos := p + 1;  
                 Byte.byteToChar (Word8Vector.sub (pickle, p))  
                 handle _ => raise Format  
             end  
         in  
             rd  
         end  
429    
430          fun r_list r () =              fun list m r = UU.r_list session m r
431              case rd () of              fun option m r = UU.r_option session m r
432                  #"0" => []              val int = UU.r_int session
433                | #"1" => [r ()]              fun share m r = UU.share session m r
434                | #"2" => [r (), r ()]              val string = UU.r_string session
435                | #"3" => [r (), r (), r ()]              val symbol = UU.r_symbol session
436                | #"4" => [r (), r (), r (), r ()]              val bool = UU.r_bool session
437                | #"5" => r () :: r () :: r () :: r () :: r () :: r_list r ()  
438                | _ => raise Format              val stringListM = UU.mkMap ()
439                val symbolListM = UU.mkMap ()
440          fun r_bool () =              val stringListM = UU.mkMap ()
441              case rd () of              val ssoM = UU.mkMap ()
442                  #"t" => true              val boolOptionM = UU.mkMap ()
443                | #"f" => false              val sgListM = UU.mkMap ()
444                | _ => raise Format              val snM = UU.mkMap ()
445                val snListM = UU.mkMap ()
446          fun r_option r_item () =              val bnM = UU.mkMap ()
447              case rd () of              val sbnM = UU.mkMap ()
448                  #"n" => NONE              val fsbnListM = UU.mkMap ()
449                | #"s" => SOME (r_item ())              val impexpListM = UU.mkMap ()
450                | _ => raise Format  
451                val stringlist = list stringListM string
452    
453                fun abspath () =
454                    SrcPath.unpickle pcmode (stringlist (), group)
455                    handle SrcPath.Format => raise Format
456                         | SrcPath.BadAnchor a =>
457                           (error ["configuration anchor \"", a, "\" undefined"];
458                            raise Format)
459    
460                val symbollist = list symbolListM symbol
461    
462                fun symbolset () =
463                    SymbolSet.addList (SymbolSet.empty, symbollist ())
464    
465                val filter = option ssoM symbolset
466    
467                fun primitive () =
468                    valOf (Primitive.fromIdent primconf
469                              (String.sub (string (), 0)))
470                    handle _ => raise Format
471    
472          fun r_int () = let              val sh = option boolOptionM bool
             fun loop n = let  
                 val w8 = Byte.charToByte (rd ())  
                 val n' = n * 0w128 + Word8.toLargeWord (Word8.andb (w8, 0w127))  
             in  
                 if Word8.andb (w8, 0w128) = 0w0 then n' else loop n'  
             end  
         in  
             LargeWord.toIntX (loop 0w0)  
         end  
473    
474          fun r_share r_raw C unC () =              fun si () = let
475              case rd () of                  val spec = string ()
476                  #"o" => (case IntBinaryMap.find (!m, r_int ()) of                  val locs = string ()
477                               SOME x => unC x                  val offset = int () + offset_adjustment
478                             | NONE => raise Format)                  val share = sh ()
479                | #"n" => let                  val error = EM.errorNoSource grpSrcInfo locs
                     val i = !next  
                     val _ = next := i + 1  
                     val v = r_raw ()  
480                  in                  in
481                      m := IntBinaryMap.insert (!m, i, C v);                  BinInfo.new { group = group,
482                      v                                mkStablename = mksname,
483                                  error = error,
484                                  spec = spec,
485                                  offset = offset,
486                                  share = share }
487                  end                  end
               | _ => raise Format  
488    
489          fun r_string () = let              fun sg () = getGroup' (abspath ())
             fun loop l =  
                 case rd () of  
                     #"\"" => String.implode (rev l)  
                   | #"\\" => loop (rd () :: l)  
                   | c => loop (c :: l)  
         in  
             loop []  
         end  
490    
491          val r_abspath = let              val sublibs = list sgListM sg ()
             fun r_abspath_raw () =  
                 case AbsPath.unpickle (r_list r_string ()) of  
                     SOME p => p  
                   | NONE => raise Format  
             fun unAP (AP x) = x  
               | unAP _ = raise Format  
         in  
             r_share r_abspath_raw AP unAP  
         end  
492    
493          val r_symbol = let              fun bn () = let
494              fun r_symbol_raw () = let                  fun bn' #"1" = DG.PNODE (primitive ())
495                  val (ns, first) =                    | bn' #"2" = let
496                      case rd () of                          val n = int ()
497                          #"`" => (Symbol.sigSymbol, rd ())                          val sy = symbol ()
498                        | #"(" => (Symbol.fctSymbol, rd ())                          val GG.GROUP { exports = slexp, ... } =
499                        | #")" => (Symbol.fsigSymbol, rd ())                              List.nth (sublibs, n) handle _ => raise Format
                       | c => (Symbol.strSymbol, c)  
                 fun loop (#".", l) = String.implode (rev l)  
                   | loop (c, l) = loop (rd (), c :: l)  
500              in              in
501                  ns (loop (first, []))                          case SymbolMap.find (slexp, sy) of
502                                SOME ((_, DG.SB_BNODE (n as DG.BNODE _)), _) => n
503                              | _ => raise Format
504              end              end
505              fun unS (S x) = x                    | bn' _ = raise Format
               | unS _ = raise Format  
506          in          in
507              r_share r_symbol_raw S unS                  share bnM bn'
508          end          end
509    
510          val r_ss = let              (* this is the place where what used to be an
511              fun r_ss_raw () =               * SNODE changes to a BNODE! *)
512                  SymbolSet.addList (SymbolSet.empty, r_list r_symbol ())              fun sn () = let
513              fun unSS (SS s) = s                  fun sn' #"a" =
514                | unSS _ = raise Format                      DG.BNODE { bininfo = si (),
515                                   localimports = snlist (),
516                                   globalimports = fsbnlist () }
517                      | sn' _ = raise Format
518          in          in
519              r_share r_ss_raw SS unSS                  share snM sn'
520          end          end
521    
522          val r_filter = r_option r_ss              and snlist () = list snListM sn ()
   
         fun r_primitive () =  
             case Primitive.fromIdent (rd ()) of  
                 NONE => raise Format  
               | SOME p => p  
523    
524          fun r_sharing () =              (* this one changes from farsbnode to plain farbnode *)
525              case rd () of              and sbn () = let
526                  #"n" => NONE                  fun sbn' #"a" = bn ()
527                | #"t" => SOME true                    | sbn' #"b" = sn ()
528                | #"f" => SOME false                    | sbn' _ = raise Format
               | _ => raise Format  
   
         val r_si = let  
             fun r_si_raw () = let  
                 val spec = r_string ()  
                 val locs = r_string ()  
                 val offset = r_int () + offset_adjustment  
                 val share = r_sharing ()  
                 val error = EM.errorNoSource grpSrcInfo locs  
                 val i = BinInfo.new { group = group,  
                                       error = error,  
                                       spec = spec,  
                                       offset = offset,  
                                       share = share }  
             in  
                 simap := IntBinaryMap.insert (!simap, offset, i);  
                 i  
             end  
             fun unBI (BI i) = i  
               | unBI _ = raise Format  
529          in          in
530              r_share r_si_raw BI unBI                  share sbnM sbn'
531          end          end
532    
533          fun r_bn () =              and fsbn () = (filter (), sbn ())
             case rd () of  
                 #"p" => DG.PNODE (r_primitive ())  
               | #"b" =>  
                     (case AbsPathMap.find (knownStable, r_abspath ()) of  
                          NONE => raise Format  
                        | SOME im =>  
                              (case IntBinaryMap.find (im, r_int ()) of  
                                   NONE => raise Format  
                                 | SOME n => n))  
               | _ => raise Format  
   
         (* this is the place where what used to be an  
          * SNODE changes to a BNODE! *)  
         fun r_sn () =  
             DG.BNODE { bininfo = r_si (),  
                        localimports = r_list r_sn (),  
                        globalimports = r_list r_fsbn () }  
   
         (* this one changes from farsbnode to plain farbnode *)  
         and r_sbn () =  
             case rd () of  
                 #"b" => r_bn ()  
               | #"s" => r_sn ()  
               | _ => raise Format  
534    
535          and r_fsbn () = (r_filter (), r_sbn ())              and fsbnlist () = list fsbnListM fsbn ()
536    
537          fun r_impexp () = let              fun impexp () = let
538              val sy = r_symbol ()                  val sy = symbol ()
539              val (f, n) = r_fsbn ()      (* really reads farbnodes! *)                  val (f, n) = fsbn ()    (* really reads farbnodes! *)
540              val e = fsbn2env n                  val e = bn2env n
541                    (* put a filter in front to avoid having the FCTENV being
542                     * queried needlessly (this avoids spurious module loadings) *)
543                    val e' = DAEnv.FILTER (SymbolSet.singleton sy, e)
544          in          in
545              (sy, ((f, DG.SB_BNODE n), e)) (* coerce to farsbnodes *)                  (sy, ((f, DG.SB_BNODE n), e')) (* coerce to farsbnodes *)
546          end          end
547    
548                val impexplist = list impexpListM impexp
549    
550          fun r_exports () =          fun r_exports () =
551              foldl SymbolMap.insert' SymbolMap.empty (r_list r_impexp ())                  foldl SymbolMap.insert' SymbolMap.empty (impexplist ())
552    
553          fun r_privileges () =              val stringlist = list stringListM string
554              StringSet.addList (StringSet.empty, r_list r_string ())  
555                fun privileges () =
556                    StringSet.addList (StringSet.empty, stringlist ())
557    
         fun unpickle_group () = let  
558              val exports = r_exports ()              val exports = r_exports ()
559              val islib = r_bool ()              val required = privileges ()
560              val required = r_privileges ()              val simap = genStableInfoMap (exports, group)
             val grouppath = r_abspath ()  
             val subgroups = r_list (getGroup o r_abspath) ()  
             fun add (((_, DG.SB_BNODE (DG.BNODE { bininfo, ... })), _), s) =  
                 IntBinarySet.add (s, BinInfo.offset bininfo)  
               | add (_, s) = s  
             val ens = SymbolMap.foldl add IntBinarySet.empty exports  
             fun isExported (os, _) = IntBinarySet.member (ens, os)  
             val final_simap = IntBinaryMap.filteri isExported (!simap)  
561          in          in
562              GG.GROUP { exports = exports,              GG.GROUP { exports = exports,
563                         islib = islib,                         kind = GG.STABLELIB simap,
564                         required = required,                         required = required,
565                         grouppath = grouppath,                         grouppath = group,
566                         subgroups = subgroups,                         sublibs = sublibs }
                        stableinfo = GG.STABLE final_simap }  
567          end          end
568      in      in
569          SOME (unpickle_group ()) handle Format => NONE          SOME (SafeIO.perform { openIt = BinIO.openIn o mksname,
570                                   closeIt = BinIO.closeIn,
571                                   work = work,
572                                   cleanup = fn () => () })
573            handle Format => NONE
574                 | IO.Io _ => NONE
575      end      end
576  end  end
577    
578    end (* local *)

Legend:
Removed from v.306  
changed lines
  Added in v.384

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0