Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 493, Mon Nov 29 07:13:22 1999 UTC revision 578, Tue Mar 14 05:16:29 2000 UTC
# Line 6  Line 6 
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature PARSE = sig  signature PARSE = sig
9      val parse :      val parse : { load_plugin: SrcPath.context -> string -> bool,
10          GroupReg.groupreg option ->                    gr: GroupReg.groupreg,
11          GeneralParams.param -> bool option ->                    param: GeneralParams.param,
12          SrcPath.t -> (CMSemant.group * GeneralParams.info) option                    stabflag: bool option,
13                      group: SrcPath.t,
14                      init_group: CMSemant.group,
15                      paranoid: bool }
16            -> (CMSemant.group * GeneralParams.info) option
17      val reset : unit -> unit      val reset : unit -> unit
18      val listLibs : unit -> SrcPath.t list      val listLibs : unit -> SrcPath.t list
19        val dropPickles : unit -> unit
20      val dismissLib : SrcPath.t -> unit      val dismissLib : SrcPath.t -> unit
21  end  end
22    
23  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map
24                     val evictStale : unit -> unit
25                   structure Stabilize: STABILIZE) :> PARSE = struct                   structure Stabilize: STABILIZE) :> PARSE = struct
26    
27        structure VerifyStable = VerStabFn (structure Stabilize = Stabilize)
28    
29      val lookAhead = 30      val lookAhead = 30
30    
31      structure S = GenericVC.Source      structure S = GenericVC.Source
32      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
33      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
34      structure GG = GroupGraph      structure GG = GroupGraph
35        structure DG = DependencyGraph
36    
37      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
38      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 36  Line 45 
45      val sgc = ref (SrcPathMap.empty: CMSemant.group SrcPathMap.map)      val sgc = ref (SrcPathMap.empty: CMSemant.group SrcPathMap.map)
46      fun reset () = sgc := SrcPathMap.empty      fun reset () = sgc := SrcPathMap.empty
47    
48        fun majorGC () = SMLofNJ.Internals.GC.doGC 7
49    
50        fun cachedStable (p, ig as GG.GROUP { grouppath, ... }) =
51            if SrcPath.compare (p, grouppath) = EQUAL then SOME ig
52            else SrcPathMap.find (!sgc, p)
53    
54        (* When an entry A vanishes from the stable cache (this only happens in
55         * paranoid mode), then all the other ones that refer to A must
56         * vasish, too.  They might still be valid themselves, but if they
57         * had been unpickled before A became invalid they will point to
58         * invalid data.  By removing them from the cache we force them to
59         * be re-read and re-unpickled.  This restores sanity. *)
60        fun delCachedStable (p, GG.GROUP { grouppath = igp, ... }) = let
61            val changed = ref true
62            fun canStay (GG.GROUP { sublibs, ... }) = let
63                fun goodSublib (p, GG.GROUP { kind = GG.STABLELIB _, ... }) =
64                    SrcPath.compare (p, igp) = EQUAL orelse
65                    SrcPathMap.inDomain (!sgc, p)
66                  | goodSublib _ = true
67                val cs = List.all goodSublib sublibs
68            in
69                if cs then () else changed := true;
70                cs
71            end
72    
73        in
74            (sgc := #1 (SrcPathMap.remove (!sgc, p)))
75                 handle LibBase.NotFound => ();
76            while !changed do
77                 (changed := false; sgc := SrcPathMap.filter canStay (!sgc))
78        end
79    
80      fun listLibs () = map #1 (SrcPathMap.listItemsi (!sgc))      fun listLibs () = map #1 (SrcPathMap.listItemsi (!sgc))
81    
82        fun dropPickles () = let
83            fun drop (GG.GROUP { kind = GG.STABLELIB dropper, ... }) = dropper ()
84              | drop _ = ()
85        in
86            SrcPathMap.app drop (!sgc)
87        end
88    
89      fun dismissLib l =      fun dismissLib l =
90          (sgc := #1 (SrcPathMap.remove (!sgc, l)))          (sgc := #1 (SrcPathMap.remove (!sgc, l)))
91          handle LibBase.NotFound => ()          handle LibBase.NotFound => ()
92    
93      fun parse gropt param stabflag group = let      fun parse args = let
94            val { load_plugin, gr, param, stabflag, group,
95                  init_group, paranoid } = args
96    
97            val GroupGraph.GROUP { grouppath = init_gname, ... } = init_group
98    
99          val stabthis = isSome stabflag          val stabthis = isSome stabflag
100          val staball = stabflag = SOME true          val staball = stabflag = SOME true
101    
102          val groupreg =          val groupreg = gr
             case gropt of  
                 SOME r => r  
               | NONE => GroupReg.new ()  
103          val errcons = EM.defaultConsumer ()          val errcons = EM.defaultConsumer ()
104          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
105    
106          (* The "group cache" -- we store "group options";  having          (* The "group cache" -- we store "group options";  having
107           * NONE registered for a group means that a previous attempt           * NONE registered for a group means that a previous attempt
108           * to parse it had failed. *)           * to parse it had failed.
109          val gc = ref (SrcPathMap.empty: CMSemant.group option SrcPathMap.map)           * This registry is primed with the "init" group because it is
110             * "special" and cannot be parsed directly. *)
111            val gc = ref (SrcPathMap.singleton (init_gname, SOME init_group))
112    
113            val em = ref StableMap.empty
114    
115            fun update_em (GG.GROUP ns_g, GG.GROUP s_g) = let
116                val s_e = #exports s_g
117                fun add (sy, ((_ , DG.SB_SNODE (DG.SNODE sn)), _)) =
118                    (case SymbolMap.find (s_e, sy) of
119                         SOME ((_, DG.SB_BNODE (DG.BNODE bn, _)), _) =>
120                             em := StableMap.insert (!em, #bininfo bn, #smlinfo sn)
121                       | _ => ())
122                  | add _ = ()
123            in SymbolMap.appi add (#exports ns_g)
124            end
125    
126            fun registerNewStable (p, g) =
127                (sgc := SrcPathMap.insert (!sgc, p, g);
128                 SrcPathSet.app (SmlInfo.cleanGroup true) (Reachable.groupsOf g);
129                 evictStale ();
130                 (gc := #1 (SrcPathMap.remove (!gc, p));
131                  (* ... and for good measure, do a major GC... *)
132                  majorGC ())
133                 handle LibBase.NotFound => ())
134    
135          fun hasCycle (group, groupstack) = let          fun hasCycle (group, groupstack) = let
136              (* checking for cycles among groups and printing them nicely *)              (* checking for cycles among groups and printing them nicely *)
# Line 128  Line 201 
201                      case go of                      case go of
202                          NONE => NONE                          NONE => NONE
203                        | SOME g =>                        | SOME g =>
204                              (sgc := SrcPathMap.insert (!sgc, gpath, g);                              (registerNewStable (gpath, g);
205                               Say.vsay ["[library ", SrcPath.descr gpath,                               Say.vsay ["[library ", SrcPath.descr gpath,
206                                         " is stable]\n"];                                         " is stable]\n"];
                              SrcPathSet.app SmlInfo.cleanGroup  
                                             (Reachable.groupsOf g);  
207                               SOME g)                               SOME g)
208                  end                  end
209              in              in
210                  case findCycle (stablestack, []) of                  case findCycle (stablestack, []) of
211                      NONE => (case SrcPathMap.find (!sgc, gpath) of                      NONE => (case cachedStable (gpath, init_group) of
212                                   SOME g => SOME g                                   SOME g => SOME g
213                                 | NONE => load ())                                 | NONE => load ())
214                    | SOME cyc => (report cyc; NONE)                    | SOME cyc => (report cyc; NONE)
215              end              end
216    
217                fun stabilize NONE = NONE
218                  | stabilize (SOME g) =
219                    (case g of
220                         GG.GROUP { kind = GG.LIB _, ... } => let
221                             val go = Stabilize.stabilize ginfo
222                                 { group = g, anyerrors = pErrFlag }
223          in          in
224              case getStable [] group of                           case go of
225                  SOME g => SOME g                               NONE => NONE
226                | NONE =>                             | SOME g' =>
227                      (case SrcPathMap.find (!gc, group) of                                   (registerNewStable (group, g'); SOME g')
228                         end
229                       | _ => SOME g)
230            in
231                case SrcPathMap.find (!gc, group) of
232                           SOME gopt => gopt                           SOME gopt => gopt
233                         | NONE => let                         | NONE => let
234                               val pres =                      fun try_s () = getStable [] group
235                                   parse' (group, groupstack, pErrFlag,                      fun try_n () = parse' (group, groupstack, pErrFlag, curlib)
236                                           stabthis, curlib)                      fun reg gopt =
237                           in                          (gc := SrcPathMap.insert (!gc, group, gopt); gopt)
238                               gc := SrcPathMap.insert (!gc, group, pres);                      fun proc_n gopt =
239                               pres                          reg (if stabthis then stabilize gopt
240                           end)                               else (SmlInfo.cleanGroup false group; gopt))
241          end                  in
242                        if paranoid then
243          and parse' (group, groupstack, pErrFlag, stabthis, curlib) = let                          case try_n () of
244                                NONE => reg NONE
245              (* We stabilize libraries only because a stable library will                            | SOME g => let
246               * encompass the contents of its sub-groups                                  val gopt' =
247               * (but not sub-libraries!). *)                                      if VerifyStable.verify ginfo (!em) g then
248              fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g                                          reg (case try_s () of
249                | stabilize g =                                                   NONE => SOME g
250                  Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }                                                 | SOME g' => SOME g')
251                                        else (delCachedStable (group, init_group);
252                                              proc_n (SOME g))
253                                in
254                                    case gopt' of
255                                        NONE => NONE
256                                      | SOME g' => (update_em (g, g'); SOME g')
257                                end
258                        else case try_s () of
259                            SOME g => reg (SOME g)
260                          | NONE => proc_n (try_n ())
261                    end
262            end
263    
264            (* Parse' is used when we are sure that we don't want to load
265             * a stable library. *)
266            and parse' (group, groupstack, pErrFlag, curlib) = let
267    
268              (* normal processing -- used when there is no cycle to report *)              (* normal processing -- used when there is no cycle to report *)
269              fun normal_processing () = let              fun normal_processing () = let
# Line 210  Line 308 
308                           CMSemant.emptyGroup group)                           CMSemant.emptyGroup group)
309    
310                      fun doMember ({ name, mkpath }, p1, p2, c) =                      fun doMember ({ name, mkpath }, p1, p2, c) =
311                          CMSemant.member (ginfo, recParse (p1, p2))                          CMSemant.member (ginfo, recParse (p1, p2), load_plugin)
312                            { name = name, mkpath = mkpath,                            { name = name, mkpath = mkpath,
313                              class = c, group = (group, (p1, p2)),                              class = c, group = (group, (p1, p2)),
314                              context = context }                              context = context }
# Line 308  Line 406 
406                          CMParse.parse (lookAhead, tokenStream,                          CMParse.parse (lookAhead, tokenStream,
407                                         fn (s,p1,p2) => error (p1, p2) s,                                         fn (s,p1,p2) => error (p1, p2) s,
408                                         (group, context, obsolete, error,                                         (group, context, obsolete, error,
409                                          doMember, curlib, ginfo))                                          doMember, curlib, ginfo, init_group))
410                  in                  in
411                      if !(#anyErrors source) then NONE                      if !(#anyErrors source) then NONE
412                      else SOME parseResult                      else SOME parseResult
413                  end                  end
414                  fun openIt () = TextIO.openIn (SrcPath.osstring group)                  fun openIt () = TextIO.openIn (SrcPath.osstring group)
415                  val pro =              in
416                      SafeIO.perform { openIt = openIt,                      SafeIO.perform { openIt = openIt,
417                                       closeIt = TextIO.closeIn,                                       closeIt = TextIO.closeIn,
418                                       work = work,                                       work = work,
419                                       cleanup = fn _ => () }                                       cleanup = fn _ => () }
             in  
                 case pro of  
                     NONE => NONE  
                   | SOME pr =>  
                         (SmlInfo.cleanGroup group;  
                          if stabthis then stabilize pr  
                          else SOME pr)  
420              end              end
421              handle LrParser.ParseError => NONE              handle LrParser.ParseError => NONE
422          in          in

Legend:
Removed from v.493  
changed lines
  Added in v.578

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0