Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 297, Thu May 27 08:29:19 1999 UTC revision 367, Sat Jul 3 04:59:01 1999 UTC
# Line 5  Line 5 
5   *   *
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature CMPARSE = sig  signature PARSE = sig
9      val parse : Primitive.configuration -> AbsPath.t -> CMSemant.group option      val parse :
10            GroupReg.groupreg option ->
11            GeneralParams.param -> bool option ->
12            SrcPath.t -> (CMSemant.group * GeneralParams.info) option
13        val reset : unit -> unit
14  end  end
15    
16  structure CMParse :> CMPARSE = struct  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map
17                     structure Stabilize: STABILIZE) :> PARSE = struct
18    
19      val lookAhead = 30      val lookAhead = 30
20    
21      structure S = GenericVC.Source      structure S = GenericVC.Source
22      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
23      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
24      structure P = GenericVC.Control.Print      structure GG = GroupGraph
25    
26      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
27      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 25  Line 30 
30                       structure Lex = CMLex                       structure Lex = CMLex
31                       structure LrParser = LrParser)                       structure LrParser = LrParser)
32    
33      fun parse primconf group = let      (* the "stable group cache" *)
34        val sgc = ref (SrcPathMap.empty: CMSemant.group SrcPathMap.map)
35          val groupreg = GroupReg.new ()      fun reset () = sgc := SrcPathMap.empty
36          val fnpolicy = FilenamePolicy.default  
37          val params = { groupreg = groupreg,      fun parse gropt param stabflag group = let
38                         fnpolicy = fnpolicy,  
39                         primconf = primconf,          val stabthis = isSome stabflag
40                         keep_going = false }          val staball = stabflag = SOME true
41    
42          val gc = ref AbsPathMap.empty   (* the "group cache" *)          val groupreg =
43                case gropt of
44          fun mparse (group, groupstack) =                  SOME r => r
45              case AbsPathMap.find (!gc, group) of                | NONE => GroupReg.new ()
46                  SOME g => g          val errcons = EM.defaultConsumer ()
47            val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
48    
49            (* The "group cache" -- we store "group options";  having
50             * NONE registered for a group means that a previous attempt
51             * to parse it had failed. *)
52            val gc = ref (SrcPathMap.empty: CMSemant.group option SrcPathMap.map)
53    
54            fun mparse (group, groupstack, pErrFlag, stabthis, curlib) =
55                case SrcPathMap.find (!sgc, group) of
56                    SOME g => SOME g
57                  | NONE =>
58                        (case SrcPathMap.find (!gc, group) of
59                             SOME gopt => gopt
60                | NONE => let                | NONE => let
61                      val g = parse' (group, groupstack)                               fun cache_nonstable gopt =
62                  in                                   (gc := SrcPathMap.insert (!gc, group, gopt);
63                      gc := AbsPathMap.insert (!gc, group, g);                                    gopt)
64                      g                               fun cache_stable g =
65                  end                                   (sgc := SrcPathMap.insert (!sgc, group, g);
66                                      SOME g)
67                                 fun isStable (GG.GROUP { kind, ... }) =
68                                     case kind of
69                                         GG.STABLELIB _ => true
70                                       | _ => false
71                                 val pres =
72                                     parse' (group, groupstack, pErrFlag,
73                                             stabthis, curlib)
74                             in
75                                 case pres of
76                                     NONE => cache_nonstable NONE
77                                   | SOME g =>
78                                         if isStable g then cache_stable g
79                                         else cache_nonstable (SOME g)
80                             end)
81    
82          and parse' (group, groupstack) = let          and parse' (group, groupstack, pErrFlag, stabthis, curlib) = let
83              (* checking for cycles among groups and printing them nicely *)              (* checking for cycles among groups and printing them nicely *)
84              fun findCycle ([], _) = []              fun findCycle ([], _) = []
85                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
86                  if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)                  if SrcPath.compare (g, group) = EQUAL then rev (h :: cyc)
87                  else findCycle (t, h :: cyc)                  else findCycle (t, h :: cyc)
88              fun report ((g, (s, p1, p2)), hist) = let              fun report ((g, (s, p1, p2)), hist) = let
89                  fun pphist pps = let                  fun pphist pps = let
# Line 60  Line 93 
93                          in                          in
94                              PrettyPrint.add_string pps s;                              PrettyPrint.add_string pps s;
95                              PrettyPrint.add_string pps ": importing ";                              PrettyPrint.add_string pps ": importing ";
96                              PrettyPrint.add_string pps (AbsPath.spec g0);                              PrettyPrint.add_string pps (SrcPath.specOf g0);
97                              PrettyPrint.add_newline pps;                              PrettyPrint.add_newline pps;
98                              loop (g, t)                              loop (g, t)
99                          end                          end
# Line 71  Line 104 
104              in              in
105                  EM.error s (p1, p2) EM.COMPLAIN                  EM.error s (p1, p2) EM.COMPLAIN
106                             ("group hierarchy forms a cycle with " ^                             ("group hierarchy forms a cycle with " ^
107                              AbsPath.spec group)                              SrcPath.specOf group)
108                             pphist                             pphist
109              end              end
110    
111                fun getStable gpath = let
112                    (* To make a cycle involving existing stable groups,
113                     * one must use aliases.  The cycle will be detected
114                     * amoung those aliases... (?? - hopefully) *)
115                    fun getStableSG p =
116                        mparse (p, groupstack, pErrFlag, staball, SOME gpath)
117                in
118                    Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath
119                end
120    
121                (* We stabilize libraries only because a stable library will
122                 * encompass the contents of its sub-groups
123                 * (but not sub-libraries!). *)
124                fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g
125                  | stabilize g =
126                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
127    
128              (* normal processing -- used when there is no cycle to report *)              (* normal processing -- used when there is no cycle to report *)
129              fun normal_processing () = let              fun normal_processing () = let
130                  val currentDir = AbsPath.dir group                  val context = SrcPath.sameDirContext group
131                  val context = AbsPath.relativeContext (AbsPath.dir group)  
132                  val filename = AbsPath.name group                  fun work stream = let
133                  val _ = Say.vsay (concat ["[scanning ", filename, "]\n"])                      val source =
134                  val stream = TextIO.openIn filename                          S.newSource (SrcPath.osstring group,
135                  val errcons = { linewidth = !P.linewidth,                                       1, stream, false, errcons)
                                 flush = P.flush,  
                                 consumer = P.say }  
                 val source = S.newSource (filename, 1, stream, false, errcons)  
136                  val sourceMap = #sourceMap source                  val sourceMap = #sourceMap source
137                  val _ = GroupReg.register groupreg (group, source)                  val _ = GroupReg.register groupreg (group, source)
138    
# Line 100  Line 147 
147                   * This function is used to parse aliases and sub-groups.                   * This function is used to parse aliases and sub-groups.
148                   * Errors are propagated by explicitly setting the                   * Errors are propagated by explicitly setting the
149                   * "anyErrors" flag of the parent group. *)                   * "anyErrors" flag of the parent group. *)
150                  fun recParse (p1, p2) p = let                      fun recParse (p1, p2) curlib p = let
151                      val groupstack' = (group, (source, p1, p2)) :: groupstack                          val gs' = (group, (source, p1, p2)) :: groupstack
152                            val myErrorFlag = #anyErrors source
153                  in                  in
154                      case mparse (p, groupstack') of                          case mparse (p, gs', myErrorFlag, staball, curlib) of
155                          NONE => (#anyErrors source := true;                              NONE => (myErrorFlag := true;
156                                   CMSemant.emptyGroup group)                                   CMSemant.emptyGroup group)
157                        | SOME res => res                        | SOME res => res
158                  end                  end
# Line 113  Line 161 
161                       CMSemant.emptyGroup group)                       CMSemant.emptyGroup group)
162    
163                  fun doMember (p, p1, p2, c) =                  fun doMember (p, p1, p2, c) =
164                      CMSemant.member (params, recParse (p1, p2))                          CMSemant.member (ginfo, recParse (p1, p2))
165                                      { sourcepath = p, class = c,                                      { sourcepath = p, class = c,
166                                        group = (group, (p1, p2)) }                                        group = (group, (p1, p2)) }
167    
168                        (* Build the argument for the lexer; the lexer's local
169                         * state is encapsulated here to make sure the parser
170                         * is re-entrant. *)
171                  val lexarg = let                  val lexarg = let
172                      (* local state *)                      (* local state *)
173                      val depth = ref 0                      val depth = ref 0
# Line 133  Line 184 
184                      end                      end
185                      (* handling strings *)                      (* handling strings *)
186                      fun newS pos =                      fun newS pos =
187                          (instring := true; curstring := []; startpos := pos)                              (instring := true;
188                                 curstring := [];
189                                 startpos := pos)
190                      fun addS c = curstring := c :: !curstring                      fun addS c = curstring := c :: !curstring
191                      fun addSC (s, offs) =                      fun addSC (s, offs) =
192                          addS (chr (ord (String.sub (s, 2)) - offs))                          addS (chr (ord (String.sub (s, 2)) - offs))
# Line 164  Line 217 
217                      end                      end
218                      (* handling line breaks *)                      (* handling line breaks *)
219                      fun newline pos = SM.newline sourceMap pos                      fun newline pos = SM.newline sourceMap pos
220                            (* handling #line directives *)
221                            fun sync (p, t) = let
222                                fun sep c = c = #"#" orelse Char.isSpace c
223                                fun cvt s = getOpt (Int.fromString s, 0)
224                                fun r (line, col, file) = SM.resynch sourceMap
225                                    (p, { fileName = file,
226                                          line = line, column = col })
227                            in
228                                case String.tokens sep t of
229                                    [_, line] =>
230                                        r (cvt line, NONE, NONE)
231                                  | [_, line, file] =>
232                                        r (cvt line, NONE, SOME file)
233                                  | [_, line, col, file] =>
234                                        r (cvt line, SOME (cvt col), SOME file)
235                                  | _ => error (p, p + size t)
236                                        "illegal #line directive"
237                            end
238                  in                  in
239                      { enterC = enterC,                      { enterC = enterC,
240                        leaveC = leaveC,                        leaveC = leaveC,
# Line 174  Line 245 
245                        getS = getS,                        getS = getS,
246                        handleEof = handleEof,                        handleEof = handleEof,
247                        newline = newline,                        newline = newline,
248                        error = error }                            error = error,
249                              sync = sync}
250                  end                  end
251    
252                  fun inputc k = TextIO.input stream                  fun inputc k = TextIO.input stream
# Line 185  Line 257 
257                      CMParse.parse (lookAhead, tokenStream,                      CMParse.parse (lookAhead, tokenStream,
258                                     fn (s,p1,p2) => error (p1, p2) s,                                     fn (s,p1,p2) => error (p1, p2) s,
259                                     (group, context, error, recParse,                                     (group, context, error, recParse,
260                                      doMember, params))                                          doMember, curlib, ginfo))
261              in              in
                 TextIO.closeIn stream;  
262                  if !(#anyErrors source) then NONE                  if !(#anyErrors source) then NONE
263                  else SOME parseResult                  else SOME parseResult
264              end              end
265                    fun openIt () = TextIO.openIn (SrcPath.osstring group)
266                    val pro =
267                        SafeIO.perform { openIt = openIt,
268                                         closeIt = TextIO.closeIn,
269                                         work = work,
270                                         cleanup = fn () => () }
271                in
272                    case pro of
273                        NONE => NONE
274                      | SOME pr =>
275                            if stabthis then stabilize pr
276                            else SOME pr
277                end
278              handle LrParser.ParseError => NONE              handle LrParser.ParseError => NONE
279          in          in
280              case findCycle (groupstack, []) of              case findCycle (groupstack, []) of
281                  h :: t => (report (h, t); NONE)                  h :: t => (report (h, t); NONE)
282                | [] => normal_processing ()                | [] =>
283          end                      (case getStable group of
284                             NONE =>
285                                 (Say.vsay ["[scanning ", SrcPath.descr group,
286                                            "]\n"];
287                                  normal_processing ())
288                           | SOME g =>
289                                 (Say.vsay ["[library ", SrcPath.descr group,
290                                            " is stable]\n"];
291                                  SOME g))
292            end
293        in
294            case mparse (group, [], ref false, stabthis, NONE) of
295                NONE => NONE
296              | SOME g =>
297                    if CheckSharing.check (g, ginfo) then
298                        let
299                            val reach1 = Reachable.reachable g
300                            val reach2 = Reachable.reachable' (pending ())
301                            val reach = SrcPathSet.union (reach1, reach2)
302      in      in
303          mparse (group, [])                          SmlInfo.forgetAllBut reach;
304                            SOME (g, ginfo)
305                        end
306                    else NONE
307      end      end
308  end  end

Legend:
Removed from v.297  
changed lines
  Added in v.367

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0