Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 364, Fri Jul 2 07:33:12 1999 UTC revision 537, Fri Feb 18 17:20:16 2000 UTC
# Line 6  Line 6 
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature PARSE = sig  signature PARSE = sig
9      val parse :      val parse : { load_plugin: string -> bool,
10          GroupReg.groupreg option ->                    gr: GroupReg.groupreg,
11          GeneralParams.param -> bool option ->                    param: GeneralParams.param,
12          SrcPath.t -> (CMSemant.group * GeneralParams.info) option                    stabflag: bool option,
13                      group: SrcPath.t,
14                      init_group: CMSemant.group,
15                      paranoid: bool }
16            -> (CMSemant.group * GeneralParams.info) option
17        val reset : unit -> unit
18        val listLibs : unit -> SrcPath.t list
19        val dropPickles : unit -> unit
20        val dismissLib : SrcPath.t -> unit
21  end  end
22    
23  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map
24                     val evictStale : unit -> unit
25                   structure Stabilize: STABILIZE) :> PARSE = struct                   structure Stabilize: STABILIZE) :> PARSE = struct
26    
27      val lookAhead = 30      val lookAhead = 30
# Line 29  Line 38 
38                       structure Lex = CMLex                       structure Lex = CMLex
39                       structure LrParser = LrParser)                       structure LrParser = LrParser)
40    
41      fun parse gropt param stabflag group = let      (* the "stable group cache" *)
42        val sgc = ref (SrcPathMap.empty: CMSemant.group SrcPathMap.map)
43        fun reset () = sgc := SrcPathMap.empty
44    
45          val _ = SrcPath.revalidateCwd ()      fun registerNewStable (p, g) =
46            (sgc := SrcPathMap.insert (!sgc, p, g);
47             SrcPathSet.app (SmlInfo.cleanGroup true) (Reachable.groupsOf g);
48             evictStale ())
49        fun cachedStable (p, ig as GG.GROUP { grouppath, ... }) =
50            if SrcPath.compare (p, grouppath) = EQUAL then SOME ig
51            else SrcPathMap.find (!sgc, p)
52    
53        fun listLibs () = map #1 (SrcPathMap.listItemsi (!sgc))
54    
55        fun dropPickles () = let
56            fun drop (GG.GROUP { kind = GG.STABLELIB dropper, ... }) = dropper ()
57              | drop _ = ()
58        in
59            SrcPathMap.app drop (!sgc)
60        end
61    
62        fun dismissLib l =
63            (sgc := #1 (SrcPathMap.remove (!sgc, l)))
64            handle LibBase.NotFound => ()
65    
66        fun parse args = let
67            val { load_plugin, gr, param, stabflag, group, init_group, paranoid } =
68                args
69    
70            val GroupGraph.GROUP { grouppath = init_gname, ... } = init_group
71    
72          val stabthis = isSome stabflag          val stabthis = isSome stabflag
73          val staball = stabflag = SOME true          val staball = stabflag = SOME true
74    
75          val groupreg =          val groupreg = gr
             case gropt of  
                 SOME r => r  
               | NONE => GroupReg.new ()  
76          val errcons = EM.defaultConsumer ()          val errcons = EM.defaultConsumer ()
77          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
78    
79          (* The "group cache" -- we store "group options";  having          (* The "group cache" -- we store "group options";  having
80           * NONE registered for a group means that a previous attempt           * NONE registered for a group means that a previous attempt
81           * to parse it had failed. *)           * to parse it had failed.
82          val gc = ref (SrcPathMap.empty: CMSemant.group option SrcPathMap.map)           * This registry is primed with the "init" group because it is
83             * "special" and cannot be parsed directly. *)
84            val gc = ref (SrcPathMap.singleton (init_gname, SOME init_group))
85    
86          fun mparse (group, groupstack, pErrFlag, stabthis) =          fun hasCycle (group, groupstack) = let
             case SrcPathMap.find (!gc, group) of  
                 SOME g => g  
               | NONE => let  
                     val g = parse' (group, groupstack, pErrFlag, stabthis)  
                 in  
                     gc := SrcPathMap.insert (!gc, group, g);  
                     g  
                 end  
   
         and parse' (group, groupstack, pErrFlag, stabthis) = let  
87              (* checking for cycles among groups and printing them nicely *)              (* checking for cycles among groups and printing them nicely *)
88              fun findCycle ([], _) = []              fun findCycle ([], _) = []
89                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
# Line 70  Line 95 
95                        | loop (g0, (g, (s, p1, p2)) :: t) = let                        | loop (g0, (g, (s, p1, p2)) :: t) = let
96                              val s = EM.matchErrorString s (p1, p2)                              val s = EM.matchErrorString s (p1, p2)
97                          in                          in
98                                PrettyPrint.add_newline pps;
99                              PrettyPrint.add_string pps s;                              PrettyPrint.add_string pps s;
100                              PrettyPrint.add_string pps ": importing ";                              PrettyPrint.add_string pps ": importing ";
101                              PrettyPrint.add_string pps (SrcPath.specOf g0);                              PrettyPrint.add_string pps (SrcPath.specOf g0);
                             PrettyPrint.add_newline pps;  
102                              loop (g, t)                              loop (g, t)
103                          end                          end
104                  in                  in
                     PrettyPrint.add_newline pps;  
105                      loop (g, hist)                      loop (g, hist)
106                  end                  end
107              in              in
# Line 86  Line 110 
110                              SrcPath.specOf group)                              SrcPath.specOf group)
111                             pphist                             pphist
112              end              end
113            in
114                case findCycle (groupstack, []) of
115                    h :: t => (report (h, t); true)
116                  | [] => false
117            end
118    
119            fun mparse (group, groupstack, pErrFlag, stabthis, curlib) = let
120                fun getStable stablestack gpath = let
121                    (* This is a separate "findCycle" routine that detects
122                     * cycles among stable libraries.  These cycles should
123                     * never occur unless someone purposefully renames
124                     * stable library files in a bad way. *)
125                    fun findCycle ([], _) = NONE
126                      | findCycle (h :: t, cyc) =
127                        if SrcPath.compare (h, gpath) = EQUAL then SOME (h :: cyc)
128                        else findCycle (t, h :: cyc)
129                    fun report cyc = let
130                        fun pphist pps = let
131                            fun loop [] = ()
132                              | loop (h :: t) =
133                                (PrettyPrint.add_newline pps;
134                                 PrettyPrint.add_string pps (SrcPath.descr h);
135                                 loop t)
136                        in
137                            loop (rev cyc)
138                        end
139                    in
140                        EM.errorNoFile (errcons, pErrFlag) SM.nullRegion
141                          EM.COMPLAIN
142                          ("stable libraries form a cycle with " ^
143                           SrcPath.descr gpath)
144                          pphist
145                    end
146                    fun load () = let
147                        val go = Stabilize.loadStable ginfo
148                            { getGroup = getStable (gpath :: stablestack),
149                              anyerrors = pErrFlag }
150                            gpath
151                    in
152                        case go of
153                            NONE => NONE
154                          | SOME g =>
155                                (registerNewStable (gpath, g);
156                                 Say.vsay ["[library ", SrcPath.descr gpath,
157                                           " is stable]\n"];
158                                 SOME g)
159                    end
160                in
161                    case findCycle (stablestack, []) of
162                        NONE => (case cachedStable (gpath, init_group) of
163                                     SOME g => SOME g
164                                   | NONE => load ())
165                      | SOME cyc => (report cyc; NONE)
166                end
167    
168                fun stabilize NONE = NONE
169                  | stabilize (SOME g) =
170                    (case g of
171                         GG.GROUP { kind = GG.LIB _, ... } => let
172                             val go = Stabilize.stabilize ginfo
173                                 { group = g, anyerrors = pErrFlag }
174                         in
175                             case go of
176                                 NONE => NONE
177                               | SOME g => (registerNewStable (group, g); SOME g)
178                         end
179                       | _ => SOME g)
180            in
181                case SrcPathMap.find (!gc, group) of
182                    SOME gopt => gopt
183                  | NONE => let
184                        fun try_s () = getStable [] group
185                        fun try_n () = parse' (group, groupstack, pErrFlag, curlib)
186                        fun reg gopt =
187                            (gc := SrcPathMap.insert (!gc, group, gopt); gopt)
188                        fun proc_n gopt =
189                            reg (if stabthis then stabilize gopt
190                                 else (SmlInfo.cleanGroup false group; gopt))
191                    in
192                        if paranoid then
193                            case try_n () of
194                                NONE => reg NONE
195                              | SOME g =>
196                                    if VerifyStable.verify ginfo g then
197                                        reg (case try_s () of
198                                                 NONE => SOME g
199                                               | SOME g' => SOME g')
200                                    else proc_n (SOME g)
201                        else case try_s () of
202                            SOME g => reg (SOME g)
203                          | NONE => proc_n (try_n ())
204                    end
205            end
206    
207              fun getStable gpath = let          (* Parse' is used when we are sure that we don't want to load
208                  (* To make a cycle involving existing stable groups,           * a stable library. *)
209                   * one must use aliases.  The cycle will be detected          and parse' (group, groupstack, pErrFlag, curlib) = let
                  * amoung those aliases... (?? - hopefully) *)  
                 fun getStableSG p =  
                     mparse (p, groupstack, pErrFlag, staball)  
             in  
                 Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath  
             end  
   
             (* We stabilize libraries only because a stable library will  
              * encompass the contents of its sub-groups  
              * (but not sub-libraries!). *)  
             fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g  
               | stabilize g =  
                 Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }  
210    
211              (* normal processing -- used when there is no cycle to report *)              (* normal processing -- used when there is no cycle to report *)
212              fun normal_processing () = let              fun normal_processing () = let
213                    val _ = Say.vsay ["[scanning ", SrcPath.descr group, "]\n"]
214    
215                  val context = SrcPath.sameDirContext group                  val context = SrcPath.sameDirContext group
216    
217                  fun work stream = let                  fun work stream = let
# Line 121  Line 227 
227                       * data structures. *)                       * data structures. *)
228                      fun error r m =                      fun error r m =
229                          EM.error source r EM.COMPLAIN m EM.nullErrorBody                          EM.error source r EM.COMPLAIN m EM.nullErrorBody
230                        fun obsolete r =
231                            if #get StdConfig.warn_obsolete () then
232                                EM.error source r EM.WARN
233                                  "old-style operator (obsolete)" EM.nullErrorBody
234                            else ()
235    
236                      (* recParse returns a group (not an option).                      (* recParse returns a group (not an option).
237                       * This function is used to parse aliases and sub-groups.                       * This function is used to parse sub-groups.
238                       * Errors are propagated by explicitly setting the                       * Errors are propagated by explicitly setting the
239                       * "anyErrors" flag of the parent group. *)                       * "anyErrors" flag of the parent group. *)
240                      fun recParse (p1, p2) p = let                      fun recParse (p1, p2) curlib p = let
241                          val groupstack' =                          val gs' = (group, (source, p1, p2)) :: groupstack
                             (group, (source, p1, p2)) :: groupstack  
242                          val myErrorFlag = #anyErrors source                          val myErrorFlag = #anyErrors source
243                      in                      in
244                          case mparse (p, groupstack', myErrorFlag, staball) of                          case mparse (p, gs', myErrorFlag, staball, curlib) of
245                              NONE => (myErrorFlag := true;                              NONE => (myErrorFlag := true;
246                                       CMSemant.emptyGroup group)                                       CMSemant.emptyGroup group)
247                            | SOME res => res                            | SOME res => res
# Line 140  Line 250 
250                          (error (p1, p2) (General.exnMessage exn);                          (error (p1, p2) (General.exnMessage exn);
251                           CMSemant.emptyGroup group)                           CMSemant.emptyGroup group)
252    
253                      fun doMember (p, p1, p2, c) =                      fun doMember ({ name, mkpath }, p1, p2, c) =
254                          CMSemant.member (ginfo, recParse (p1, p2))                          CMSemant.member (ginfo, recParse (p1, p2), load_plugin)
255                                   { sourcepath = p, class = c,                            { name = name, mkpath = mkpath,
256                                     group = (group, (p1, p2)) }                              class = c, group = (group, (p1, p2)),
257                                context = context }
258    
259                      (* Build the argument for the lexer; the lexer's local                      (* Build the argument for the lexer; the lexer's local
260                       * state is encapsulated here to make sure the parser                       * state is encapsulated here to make sure the parser
# Line 225  Line 336 
336                            getS = getS,                            getS = getS,
337                            handleEof = handleEof,                            handleEof = handleEof,
338                            newline = newline,                            newline = newline,
339                              obsolete = obsolete,
340                            error = error,                            error = error,
341                            sync = sync}                            sync = sync}
342                      end                      end
# Line 236  Line 348 
348                      val (parseResult, _) =                      val (parseResult, _) =
349                          CMParse.parse (lookAhead, tokenStream,                          CMParse.parse (lookAhead, tokenStream,
350                                         fn (s,p1,p2) => error (p1, p2) s,                                         fn (s,p1,p2) => error (p1, p2) s,
351                                         (group, context, error, recParse,                                         (group, context, obsolete, error,
352                                          doMember, ginfo))                                          doMember, curlib, ginfo, init_group))
353                  in                  in
354                      if !(#anyErrors source) then NONE                      if !(#anyErrors source) then NONE
355                      else SOME parseResult                      else SOME parseResult
356                  end                  end
357                  fun openIt () = TextIO.openIn (SrcPath.osstring group)                  fun openIt () = TextIO.openIn (SrcPath.osstring group)
358                  val pro =              in
359                      SafeIO.perform { openIt = openIt,                      SafeIO.perform { openIt = openIt,
360                                       closeIt = TextIO.closeIn,                                       closeIt = TextIO.closeIn,
361                                       work = work,                                       work = work,
362                                       cleanup = fn () => () }                                   cleanup = fn _ => () }
             in  
                 case pro of  
                     NONE => NONE  
                   | SOME pr =>  
                         if stabthis then stabilize pr  
                         else SOME pr  
363              end              end
364              handle LrParser.ParseError => NONE              handle LrParser.ParseError => NONE
365          in          in
366              case findCycle (groupstack, []) of              if hasCycle (group, groupstack) then NONE
367                  h :: t => (report (h, t); NONE)              else normal_processing ()
               | [] =>  
                     (case getStable group of  
                          NONE =>  
                              (Say.vsay ["[scanning ", SrcPath.descr group,  
                                         "]\n"];  
                               normal_processing ())  
                        | SOME g =>  
                              (Say.vsay ["[library ", SrcPath.descr group,  
                                         " is stable]\n"];  
                               SOME g))  
368          end          end
369      in      in
370          case mparse (group, [], ref false, stabthis) of          SmlInfo.newGeneration ();
371            case mparse (group, [], ref false, stabthis, NONE) of
372              NONE => NONE              NONE => NONE
373            | SOME g =>            | SOME g => SOME (g, ginfo)
                 if CheckSharing.check (g, ginfo) then  
                     let  
                         val reach1 = Reachable.reachable g  
                         val reach2 = Reachable.reachable' (pending ())  
                         val reach = SrcPathSet.union (reach1, reach2)  
                     in  
                         SmlInfo.forgetAllBut reach;  
                         SOME (g, ginfo)  
                     end  
                 else NONE  
374      end      end
375  end  end

Legend:
Removed from v.364  
changed lines
  Added in v.537

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0