Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/stable/stabilize.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/stable/stabilize.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 345, Sun Jun 20 11:55:26 1999 UTC revision 380, Fri Jul 9 05:22:18 1999 UTC
# Line 13  Line 13 
13      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
14      structure GP = GeneralParams      structure GP = GeneralParams
15      structure E = GenericVC.Environment      structure E = GenericVC.Environment
16        structure Pid = GenericVC.PersStamps
17    
18      type statenvgetter = GP.info -> DG.bnode -> E.staticEnv      type statenvgetter = GP.info -> DG.bnode -> E.staticEnv
19      type recomp = GP.info -> GG.group -> bool      type recomp = GP.info -> GG.group -> bool
20        type pid = Pid.persstamp
21  in  in
22    
23  signature STABILIZE = sig  signature STABILIZE = sig
24    
25      val loadStable :      val loadStable :
26          GP.info * (AbsPath.t -> GG.group option) * bool ref ->          GP.info * (SrcPath.t -> GG.group option) * bool ref ->
27          AbsPath.t -> GG.group option          SrcPath.t -> GG.group option
28    
29      val stabilize :      val stabilize :
30          GP.info -> { group: GG.group, anyerrors: bool ref } ->          GP.info -> { group: GG.group, anyerrors: bool ref } ->
# Line 30  Line 32 
32  end  end
33    
34  functor StabilizeFn (val bn2statenv : statenvgetter  functor StabilizeFn (val bn2statenv : statenvgetter
35                         val transfer_state : SmlInfo.info * BinInfo.info -> unit
36                       val recomp: recomp) :> STABILIZE = struct                       val recomp: recomp) :> STABILIZE = struct
37    
38      datatype pitem =      datatype pitem =
# Line 62  Line 65 
65          fun add (((_, DG.SB_BNODE (n as DG.BNODE b)), _), m) = let          fun add (((_, DG.SB_BNODE (n as DG.BNODE b)), _), m) = let
66              val i = #bininfo b              val i = #bininfo b
67          in          in
68              if AbsPath.compare (BinInfo.group i, group) = EQUAL then              if SrcPath.compare (BinInfo.group i, group) = EQUAL then
69                  IntBinaryMap.insert (m, BinInfo.offset i, n)                  IntBinaryMap.insert (m, BinInfo.offset i, n)
70              else m              else m
71          end          end
# Line 71  Line 74 
74          SymbolMap.foldl add IntBinaryMap.empty exports          SymbolMap.foldl add IntBinaryMap.empty exports
75      end      end
76    
     fun deleteFile n = OS.FileSys.remove n handle _ => ()  
   
77      fun stabilize gp { group = g as GG.GROUP grec, anyerrors } = let      fun stabilize gp { group = g as GG.GROUP grec, anyerrors } = let
78    
79          val primconf = #primconf (#param gp)          val primconf = #primconf (#param gp)
80          val policy = #fnpolicy (#param gp)          val policy = #fnpolicy (#param gp)
81    
82          val grouppath = #grouppath grec          val grouppath = #grouppath grec
         val groupdir = AbsPath.dir grouppath  
83    
84          fun doit granted = let          fun doit wrapped = let
85    
86              val _ =              val _ =
87                  if StringSet.isEmpty granted then ()                  if StringSet.isEmpty wrapped then ()
88                  else                  else
89                      Say.say ("$Stabilize: wrapping the following privileges:\n"                      Say.say ("$Stabilize: wrapping the following privileges:\n"
90                               :: map (fn s => ("  " ^ s ^ "\n"))                               :: map (fn s => ("  " ^ s ^ "\n"))
91                                      (StringSet.listItems granted))                                      (StringSet.listItems wrapped))
92    
93              val bname = AbsPath.name o SmlInfo.binpath              val bname = SmlInfo.binname
94              val bsz = OS.FileSys.fileSize o bname              val bsz = OS.FileSys.fileSize o bname
95    
96              fun cpb s i = let              fun cpb s i = let
97                    val N = 4096
98                  fun copy ins = let                  fun copy ins = let
99                      fun cp () =                      fun cp () =
100                          if BinIO.endOfStream ins then ()                          if BinIO.endOfStream ins then ()
101                          else (BinIO.output (s, BinIO.input ins); cp ())                          else (BinIO.output (s, BinIO.inputN (ins, N));
102                                  cp ())
103                  in                  in
104                      cp ()                      cp ()
105                  end                  end
# Line 111  Line 113 
113              val grpSrcInfo = (#errcons gp, anyerrors)              val grpSrcInfo = (#errcons gp, anyerrors)
114    
115              val exports = #exports grec              val exports = #exports grec
116              val islib = #islib grec              val required = StringSet.difference (#required grec, wrapped)
             val required = StringSet.difference (#required grec, granted)  
117              val sublibs = #sublibs grec              val sublibs = #sublibs grec
118    
119              (* The format of a stable archive is the following:              (* The format of a stable archive is the following:
# Line 134  Line 135 
135              fun oneB i (sy, ((_, DG.SB_BNODE (DG.BNODE n)), _), m) =              fun oneB i (sy, ((_, DG.SB_BNODE (DG.BNODE n)), _), m) =
136                  StableMap.insert (m, #bininfo n, (i, sy))                  StableMap.insert (m, #bininfo n, (i, sy))
137                | oneB i (_, _, m) = m                | oneB i (_, _, m) = m
138              fun oneSL ((_, g as GG.GROUP { exports, ... }), (m, i)) =              fun oneSL ((g as GG.GROUP { exports, ... }), (m, i)) =
139                  (SymbolMap.foldli (oneB i) m exports, i + 1)                  (SymbolMap.foldli (oneB i) m exports, i + 1)
140              val inverseMap = #1 (foldl oneSL (StableMap.empty, 0) sublibs)              val inverseMap = #1 (foldl oneSL (StableMap.empty, 0) sublibs)
141    
# Line 231  Line 232 
232                   * within libraries.  However, the spec in BinInfo.info                   * within libraries.  However, the spec in BinInfo.info
233                   * is only used for diagnostics and has no impact on the                   * is only used for diagnostics and has no impact on the
234                   * operation of CM itself. *)                   * operation of CM itself. *)
235                  val spec = AbsPath.spec (SmlInfo.sourcepath i)                  val spec = SrcPath.specOf (SmlInfo.sourcepath i)
236                  val locs = SmlInfo.errorLocation gp i                  val locs = SmlInfo.errorLocation gp i
237                  val offset = registerOffset (i, bsz i)                  val offset = registerOffset (i, bsz i)
238              in              in
# Line 248  Line 249 
249                  val relabs = if abs then "absolute" else "relative"                  val relabs = if abs then "absolute" else "relative"
250                  fun ppb pps =                  fun ppb pps =
251                      (PP.add_newline pps;                      (PP.add_newline pps;
252                       PP.add_string pps (AbsPath.name p);                       PP.add_string pps (SrcPath.descr p);
253                       PP.add_newline pps;                       PP.add_newline pps;
254                       PP.add_string pps                       PP.add_string pps
255      "(This means that in order to be able to use the result of stabilization";      "(This means that in order to be able to use the result of stabilization";
# Line 260  Line 261 
261              in              in
262                  EM.errorNoFile (#errcons gp, anyerrors) SM.nullRegion                  EM.errorNoFile (#errcons gp, anyerrors) SM.nullRegion
263                      EM.WARN                      EM.WARN
264                      (concat [AbsPath.name grouppath,                      (concat [SrcPath.descr grouppath,
265                               ": library referred to by ", relabs,                               ": library referred to by ", relabs,
266                               " pathname:"])                               " pathname:"])
267                      ppb                      ppb
268              end              end
269    
270              fun w_abspath p k m =              fun w_abspath p k m =
271                  w_list w_string (AbsPath.pickle (warn_relabs p) (p, groupdir))                  w_list w_string (SrcPath.pickle (warn_relabs p) (p, grouppath))
272                                  k m                                  k m
273    
274              fun w_bn (DG.PNODE p) k m = "p" :: w_primitive p k m              fun w_bn (DG.PNODE p) k m = "p" :: w_primitive p k m
# Line 277  Line 278 
278                      "b" :: w_int n (w_symbol sy k) m                      "b" :: w_int n (w_symbol sy k) m
279                  end                  end
280    
281                fun w_bool true k m = "t" :: k m
282                  | w_bool false k m = "f" :: k m
283    
284              fun w_sn_raw (DG.SNODE n) k =              fun w_sn_raw (DG.SNODE n) k =
285                  w_si (#smlinfo n)                  w_si (#smlinfo n)
286                       (w_list w_sn (#localimports n)                       (w_list w_sn (#localimports n)
# Line 293  Line 297 
297    
298              fun w_exports e = w_list w_impexp (SymbolMap.listItemsi e)              fun w_exports e = w_list w_impexp (SymbolMap.listItemsi e)
299    
             fun w_bool true k m = "t" :: k m  
               | w_bool false k m = "f" :: k m  
   
300              fun w_privileges p = w_list w_string (StringSet.listItems p)              fun w_privileges p = w_list w_string (StringSet.listItems p)
301    
302              fun pickle_group () = let              fun pickle_group () = let
303                  fun w_sg (p, _) = w_abspath p                  fun w_sg (GG.GROUP { grouppath, ... }) = w_abspath grouppath
304                  fun k0 m = []                  fun k0 m = []
305                  val m0 = (0, Map.empty)                  val m0 = (0, Map.empty)
306              in              in
# Line 307  Line 308 
308                   * have them back when we unpickle BNODEs. *)                   * have them back when we unpickle BNODEs. *)
309                  concat (w_list w_sg sublibs                  concat (w_list w_sg sublibs
310                              (w_exports exports                              (w_exports exports
311                                  (w_bool islib                                   (w_privileges required k0)) m0)
                                     (w_privileges required k0))) m0)  
312              end              end
313    
314              val pickle = pickle_group ()              val pickle = pickle_group ()
315              val sz = size pickle              val sz = size pickle
316              val offset_adjustment = sz + 4              val offset_adjustment = sz + 4
317    
318              fun mkStableGroup spath = let              fun mkStableGroup mksname = let
319                  val m = ref SmlInfoMap.empty                  val m = ref SmlInfoMap.empty
320                  fun sn (DG.SNODE (n as { smlinfo, ... })) =                  fun sn (DG.SNODE (n as { smlinfo, ... })) =
321                      case SmlInfoMap.find (!m, smlinfo) of                      case SmlInfoMap.find (!m, smlinfo) of
# Line 325  Line 325 
325                              val gi = map fsbn (#globalimports n)                              val gi = map fsbn (#globalimports n)
326                              val sourcepath = SmlInfo.sourcepath smlinfo                              val sourcepath = SmlInfo.sourcepath smlinfo
327                              (* FIXME: see the comment near the other                              (* FIXME: see the comment near the other
328                               * occurence of AbsPath.spec... *)                               * occurence of SrcPath.spec... *)
329                              val spec = AbsPath.spec sourcepath                              val spec = SrcPath.specOf sourcepath
330                              val offset =                              val offset =
331                                  getOffset smlinfo + offset_adjustment                                  getOffset smlinfo + offset_adjustment
332                              val share = SmlInfo.share smlinfo                              val share = SmlInfo.share smlinfo
333                              val locs = SmlInfo.errorLocation gp smlinfo                              val locs = SmlInfo.errorLocation gp smlinfo
334                              val error = EM.errorNoSource grpSrcInfo locs                              val error = EM.errorNoSource grpSrcInfo locs
335                              val i = BinInfo.new { group = grouppath,                              val i = BinInfo.new { group = grouppath,
336                                                    stablepath = spath,                                                    mkStablename = mksname,
337                                                    spec = spec,                                                    spec = spec,
338                                                    offset = offset,                                                    offset = offset,
339                                                    share = share,                                                    share = share,
# Line 342  Line 342 
342                                                 localimports = li,                                                 localimports = li,
343                                                 globalimports = gi }                                                 globalimports = gi }
344                          in                          in
345                                transfer_state (smlinfo, i);
346                              m := SmlInfoMap.insert (!m, smlinfo, n);                              m := SmlInfoMap.insert (!m, smlinfo, n);
347                              n                              n
348                          end                          end
# Line 357  Line 358 
358                  val simap = genStableInfoMap (exports, grouppath)                  val simap = genStableInfoMap (exports, grouppath)
359              in              in
360                  GG.GROUP { exports = exports,                  GG.GROUP { exports = exports,
361                             islib = islib,                             kind = GG.STABLELIB simap,
362                             required = required,                             required = required,
363                             grouppath = grouppath,                             grouppath = grouppath,
364                             sublibs = sublibs,                             sublibs = sublibs }
                            stableinfo = GG.STABLE simap }  
365              end              end
366    
367              fun writeInt32 (s, i) = let              fun writeInt32 (s, i) = let
# Line 373  Line 373 
373              val memberlist = rev (!members)              val memberlist = rev (!members)
374    
375              val gpath = #grouppath grec              val gpath = #grouppath grec
376              val spath = FilenamePolicy.mkStablePath policy gpath              fun mksname () = FilenamePolicy.mkStableName policy gpath
             fun delete () = deleteFile (AbsPath.name spath)  
377              fun work outs =              fun work outs =
378                  (Say.vsay ["[stabilizing ", AbsPath.name gpath, "]\n"];                  (Say.vsay ["[stabilizing ", SrcPath.descr gpath, "]\n"];
379                   writeInt32 (outs, sz);                   writeInt32 (outs, sz);
380                   BinIO.output (outs, Byte.stringToBytes pickle);                   BinIO.output (outs, Byte.stringToBytes pickle);
381                   app (cpb outs) memberlist;                   app (cpb outs) memberlist;
382                   mkStableGroup spath)                   mkStableGroup mksname)
383          in          in
384              SOME (SafeIO.perform { openIt = fn () => AbsPath.openBinOut spath,              SOME (SafeIO.perform { openIt = AutoDir.openBinOut o mksname,
385                                     closeIt = BinIO.closeOut,                                     closeIt = BinIO.closeOut,
386                                     work = work,                                     work = work,
387                                     cleanup = delete })                                     cleanup = fn () =>
388                                        (OS.FileSys.remove (mksname ())
389                                         handle _ => ()) })
390              handle exn => NONE              handle exn => NONE
391          end          end
392      in      in
393          case #stableinfo grec of          case #kind grec of
394              GG.STABLE _ => SOME g              GG.STABLELIB _ => SOME g
395            | GG.NONSTABLE granted =>            | GG.NOLIB => EM.impossible "stabilize: no library"
396              | GG.LIB wrapped =>
397                  if not (recomp gp g) then                  if not (recomp gp g) then
398                      (anyerrors := true; NONE)                      (anyerrors := true; NONE)
399                  else let                  else let
400                      fun notStable (_, GG.GROUP { stableinfo, ... }) =                      fun notStable (GG.GROUP { kind, ... }) =
401                          case stableinfo of                          case kind of GG.STABLELIB _ => false | _ => true
                             GG.STABLE _ => false  
                           | GG.NONSTABLE _ => true  
402                  in                  in
403                      case List.filter notStable (#sublibs grec) of                      case List.filter notStable (#sublibs grec) of
404                          [] => doit granted                          [] => doit wrapped
405                        | l => let                        | l => let
406                              val grammar = case l of [_] => " is" | _ => "s are"                              val grammar = case l of [_] => " is" | _ => "s are"
407                              fun ppb pps = let                              fun ppb pps = let
408                                  fun loop [] = ()                                  fun loop [] = ()
409                                    | loop ((p, GG.GROUP { grouppath, ... })                                    | loop (GG.GROUP { grouppath, ... } :: t) =
                                           :: t) =  
410                                      (PP.add_string pps                                      (PP.add_string pps
411                                          (AbsPath.name grouppath);                                          (SrcPath.descr grouppath);
                                      PP.add_string pps " (";  
                                      PP.add_string pps (AbsPath.name p);  
                                      PP.add_string pps ")";  
412                                       PP.add_newline pps;                                       PP.add_newline pps;
413                                       loop t)                                       loop t)
414                              in                              in
# Line 424  Line 420 
420                                  loop l                                  loop l
421                              end                              end
422                              val errcons = #errcons gp                              val errcons = #errcons gp
423                              val gname = AbsPath.name (#grouppath grec)                              val gdescr = SrcPath.descr (#grouppath grec)
424                          in                          in
425                              EM.errorNoFile (errcons, anyerrors) SM.nullRegion                              EM.errorNoFile (errcons, anyerrors) SM.nullRegion
426                                 EM.COMPLAIN                                 EM.COMPLAIN
427                                 (gname ^ " cannot be stabilized")                                 (gdescr ^ " cannot be stabilized")
428                                 ppb;                                 ppb;
429                              NONE                              NONE
430                          end                          end
# Line 437  Line 433 
433    
434      fun loadStable (gp, getGroup, anyerrors) group = let      fun loadStable (gp, getGroup, anyerrors) group = let
435    
436          val groupdir = AbsPath.dir group          val es2bs = GenericVC.CoerceEnv.es2bs
437          fun bn2env n = Statenv2DAEnv.cvtMemo (fn () => bn2statenv gp n)          fun bn2env n =
438                Statenv2DAEnv.cvtMemo (fn () => es2bs (bn2statenv gp n))
439    
440          val errcons = #errcons gp          val errcons = #errcons gp
441          val grpSrcInfo = (errcons, anyerrors)          val grpSrcInfo = (errcons, anyerrors)
442          val gname = AbsPath.name group          val gdescr = SrcPath.descr group
443          fun error l = EM.errorNoFile (errcons, anyerrors) SM.nullRegion          fun error l = EM.errorNoFile (errcons, anyerrors) SM.nullRegion
444              EM.COMPLAIN (concat (gname :: ": " :: l)) EM.nullErrorBody              EM.COMPLAIN (concat ("(stable) " :: gdescr :: ": " :: l))
445                EM.nullErrorBody
446    
447          exception Format          exception Format
448    
449          val pcmode = #pcmode (#param gp)          val pcmode = #pcmode (#param gp)
450          val policy = #fnpolicy (#param gp)          val policy = #fnpolicy (#param gp)
451          val primconf = #primconf (#param gp)          val primconf = #primconf (#param gp)
452          val spath = FilenamePolicy.mkStablePath policy group          fun mksname () = FilenamePolicy.mkStableName policy group
         val _ = Say.vsay ["[checking stable ", gname, "]\n"]  
453    
454          fun work s = let          fun work s = let
455    
456              fun getGroup' p =              fun getGroup' p =
457                  case getGroup p of                  case getGroup p of
458                      SOME g => g                      SOME g => g
459                    | NONE => (error ["unable to find ", AbsPath.name p];                    | NONE => (error ["unable to find ", SrcPath.descr p];
460                               raise Format)                               raise Format)
461    
462              (* for getting sharing right... *)              (* for getting sharing right... *)
463              val m = ref IntBinaryMap.empty              val m = ref IntBinaryMap.empty
464              val next = ref 0              val next = ref 0
465    
466                val pset = ref PidSet.empty
467    
468              fun bytesIn n = let              fun bytesIn n = let
469                  val bv = BinIO.inputN (s, n)                  val bv = BinIO.inputN (s, n)
470              in              in
# Line 550  Line 549 
549              end              end
550    
551              fun r_abspath () =              fun r_abspath () =
552                  case AbsPath.unpickle pcmode (r_list r_string (), groupdir) of                  SrcPath.unpickle pcmode (r_list r_string (), group)
553                      SOME p => p                  handle SrcPath.Format => raise Format
554                    | NONE => raise Format                       | SrcPath.BadAnchor a =>
555                           (error ["configuration anchor \"", a, "\" undefined"];
556                            raise Format)
557    
558    
559              val r_symbol = let              val r_symbol = let
560                  fun r_symbol_raw () = let                  fun r_symbol_raw () = let
561                      val (ns, first) =                      val (ns, first) =
562                          case rd () of                          case rd () of
563                              #"`" => (Symbol.sigSymbol, rd ())                              #"'" => (Symbol.sigSymbol, rd ())
564                            | #"(" => (Symbol.fctSymbol, rd ())                            | #"(" => (Symbol.fctSymbol, rd ())
565                            | #")" => (Symbol.fsigSymbol, rd ())                            | #")" => (Symbol.fsigSymbol, rd ())
566                            | c => (Symbol.strSymbol, c)                            | c => (Symbol.strSymbol, c)
# Line 604  Line 606 
606                  val error = EM.errorNoSource grpSrcInfo locs                  val error = EM.errorNoSource grpSrcInfo locs
607              in              in
608                  BinInfo.new { group = group,                  BinInfo.new { group = group,
609                                stablepath = spath,                                mkStablename = mksname,
610                                error = error,                                error = error,
611                                spec = spec,                                spec = spec,
612                                offset = offset,                                offset = offset,
613                                share = share }                                share = share }
614              end              end
615    
616              fun r_sg () = let              fun r_sg () = getGroup' (r_abspath ())
                 val p = r_abspath ()  
             in  
                 (p, getGroup' p)  
             end  
617    
618              val sublibs = r_list r_sg ()              val sublibs = r_list r_sg ()
619    
# Line 625  Line 623 
623                    | #"b" => let                    | #"b" => let
624                          val n = r_int ()                          val n = r_int ()
625                          val sy = r_symbol ()                          val sy = r_symbol ()
626                          val (_, GG.GROUP { exports = slexp, ... }) =                          val GG.GROUP { exports = slexp, ... } =
627                              List.nth (sublibs, n) handle _ => raise Format                              List.nth (sublibs, n) handle _ => raise Format
628                      in                      in
629                          case SymbolMap.find (slexp, sy) of                          case SymbolMap.find (slexp, sy) of
# Line 671  Line 669 
669                  StringSet.addList (StringSet.empty, r_list r_string ())                  StringSet.addList (StringSet.empty, r_list r_string ())
670    
671              val exports = r_exports ()              val exports = r_exports ()
             val islib = r_bool ()  
672              val required = r_privileges ()              val required = r_privileges ()
673              val simap = genStableInfoMap (exports, group)              val simap = genStableInfoMap (exports, group)
674          in          in
675              GG.GROUP { exports = exports,              GG.GROUP { exports = exports,
676                         islib = islib,                         kind = GG.STABLELIB simap,
677                         required = required,                         required = required,
678                         grouppath = group,                         grouppath = group,
679                         sublibs = sublibs,                         sublibs = sublibs }
                        stableinfo = GG.STABLE simap }  
680          end          end
681      in      in
682          SOME (SafeIO.perform { openIt = fn () => AbsPath.openBinIn spath,          SOME (SafeIO.perform { openIt = BinIO.openIn o mksname,
683                                 closeIt = BinIO.closeIn,                                 closeIt = BinIO.closeIn,
684                                 work = work,                                 work = work,
685                                 cleanup = fn () => () })                                 cleanup = fn () => () })
686          handle Format => NONE          handle Format => NONE
687                 | IO.Io _ => NONE
688      end      end
689  end  end
690    

Legend:
Removed from v.345  
changed lines
  Added in v.380

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0