Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 277, Mon May 17 09:13:26 1999 UTC revision 361, Wed Jun 30 06:44:04 1999 UTC
# Line 5  Line 5 
5   *   *
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature CMPARSE = sig  signature PARSE = sig
9      val parse : AbsPath.t -> CMSemant.group option      val parse :
10            GroupReg.groupreg option ->
11            GeneralParams.param -> bool option ->
12            SrcPath.t -> (CMSemant.group * GeneralParams.info) option
13  end  end
14    
15  structure CMParse :> CMPARSE = struct  functor ParseFn (structure Stabilize: STABILIZE) :> PARSE = struct
16    
17      val lookAhead = 30      val lookAhead = 30
18    
19      structure S = GenericVC.Source      structure S = GenericVC.Source
20      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
21      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
22      structure P = GenericVC.Control.Print      structure GG = GroupGraph
23    
24      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
25      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 25  Line 28 
28                       structure Lex = CMLex                       structure Lex = CMLex
29                       structure LrParser = LrParser)                       structure LrParser = LrParser)
30    
31      fun parse' (group, groupstack) = let      fun parse gropt param stabflag group = let
32    
33          val currentDir = AbsPath.dir group          val _ = SrcPath.revalidateCwd ()
         val context = AbsPath.relativeContext (AbsPath.dir group)  
         val filename = AbsPath.name group  
         val _ = Say.vsay (concat ["[scanning ", filename, "]\n"])  
         val stream = TextIO.openIn filename  
         val errcons =  
             { linewidth = !P.linewidth, flush = P.flush, consumer = P.say }  
         val source = S.newSource (filename, 1, stream, false, errcons)  
         val sourceMap = #sourceMap source  
         fun error' region m b = EM.error source region EM.COMPLAIN m b  
         fun error region m = error' region m EM.nullErrorBody  
34    
35          (* recParse returns a group (not an option)          val stabthis = isSome stabflag
36           * and re-raises LrParser.ParseError.          val staball = stabflag = SOME true
          * This exception will be handled by the surrounding  
          * call to parse.  
          * This function is used to parse aliases and sub-groups. *)  
         fun recParse (p1, p2) p =  
             case parse' (p, (group, (source, p1, p2)) :: groupstack) of  
                 NONE => (#anyErrors source := true; CMSemant.emptyGroup)  
               | SOME res => res  
37    
38          fun doMember (p, p1, p2, c, e) =          val groupreg =
39              CMSemant.member (recParse (p1, p2))              case gropt of
40                              { sourcepath = p,                  SOME r => r
41                                group = group,                | NONE => GroupReg.new ()
42                                class = c,          val errcons = EM.defaultConsumer ()
43                                error = e }          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
44    
45            (* The "group cache" -- we store "group options";  having
46             * NONE registered for a group means that a previous attempt
47             * to parse it had failed. *)
48            val gc = ref (SrcPathMap.empty: CMSemant.group option SrcPathMap.map)
49    
50            fun mparse (group, groupstack, pErrFlag, stabthis) =
51                case SrcPathMap.find (!gc, group) of
52                    SOME g => g
53                  | NONE => let
54                        val g = parse' (group, groupstack, pErrFlag, stabthis)
55                    in
56                        gc := SrcPathMap.insert (!gc, group, g);
57                        g
58                    end
59    
60            and parse' (group, groupstack, pErrFlag, stabthis) = let
61          (* checking for cycles among groups and printing them nicely *)          (* checking for cycles among groups and printing them nicely *)
         val _ = let  
62              fun findCycle ([], _) = []              fun findCycle ([], _) = []
63                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
64                  if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)                  if SrcPath.compare (g, group) = EQUAL then rev (h :: cyc)
65                  else findCycle (t, h :: cyc)                  else findCycle (t, h :: cyc)
66              fun report ((g, (s, p1, p2)), hist) = let              fun report ((g, (s, p1, p2)), hist) = let
67                  fun pphist pps = let                  fun pphist pps = let
# Line 69  Line 70 
70                              val s = EM.matchErrorString s (p1, p2)                              val s = EM.matchErrorString s (p1, p2)
71                          in                          in
72                              PrettyPrint.add_string pps s;                              PrettyPrint.add_string pps s;
73                              PrettyPrint.add_string pps ": ";                              PrettyPrint.add_string pps ": importing ";
74                              PrettyPrint.add_string pps (AbsPath.spec g0);                              PrettyPrint.add_string pps (SrcPath.specOf g0);
75                              PrettyPrint.add_newline pps;                              PrettyPrint.add_newline pps;
76                              loop (g, t)                              loop (g, t)
77                          end                          end
# Line 80  Line 81 
81                  end                  end
82              in              in
83                  EM.error s (p1, p2) EM.COMPLAIN                  EM.error s (p1, p2) EM.COMPLAIN
84                     ("group hierarchy forms a cycle with " ^ AbsPath.spec group)                             ("group hierarchy forms a cycle with " ^
85                     pphist;                              SrcPath.specOf group)
86                  raise LrParser.ParseError                             pphist
87              end              end
88    
89                fun getStable gpath = let
90                    (* To make a cycle involving existing stable groups,
91                     * one must use aliases.  The cycle will be detected
92                     * amoung those aliases... (?? - hopefully) *)
93                    fun getStableSG p =
94                        mparse (p, groupstack, pErrFlag, staball)
95          in          in
96              case findCycle (groupstack, []) of                  Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath
                 [] => ()  
               | h :: t => report (h, t)  
97          end          end
98    
99                (* We stabilize libraries only because a stable library will
100                 * encompass the contents of its sub-groups
101                 * (but not sub-libraries!). *)
102                fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g
103                  | stabilize g =
104                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
105    
106                (* normal processing -- used when there is no cycle to report *)
107                fun normal_processing () = let
108                    val context = SrcPath.sameDirContext group
109                    val _ = Say.vsay ["[scanning ", SrcPath.descr group, "]\n"]
110    
111                    fun work stream = let
112                        val source =
113                            S.newSource (SrcPath.osstring group,
114                                         1, stream, false, errcons)
115                        val sourceMap = #sourceMap source
116                        val _ = GroupReg.register groupreg (group, source)
117    
118                        (* We can hard-wire the source into this
119                         * error function because the function is only for
120                         * immediate use and doesn't get stored into persistent
121                         * data structures. *)
122                        fun error r m =
123                            EM.error source r EM.COMPLAIN m EM.nullErrorBody
124    
125                        (* recParse returns a group (not an option).
126                         * This function is used to parse aliases and sub-groups.
127                         * Errors are propagated by explicitly setting the
128                         * "anyErrors" flag of the parent group. *)
129                        fun recParse (p1, p2) p = let
130                            val groupstack' =
131                                (group, (source, p1, p2)) :: groupstack
132                            val myErrorFlag = #anyErrors source
133                        in
134                            case mparse (p, groupstack', myErrorFlag, staball) of
135                                NONE => (myErrorFlag := true;
136                                         CMSemant.emptyGroup group)
137                              | SOME res => res
138                        end
139                        handle exn as IO.Io _ =>
140                            (error (p1, p2) (General.exnMessage exn);
141                             CMSemant.emptyGroup group)
142    
143                        fun doMember (p, p1, p2, c) =
144                            CMSemant.member (ginfo, recParse (p1, p2))
145                                     { sourcepath = p, class = c,
146                                       group = (group, (p1, p2)) }
147    
148                        (* Build the argument for the lexer; the lexer's local
149                         * state is encapsulated here to make sure the parser
150                         * is re-entrant. *)
151          val lexarg = let          val lexarg = let
152              (* local state *)              (* local state *)
153              val depth = ref 0              val depth = ref 0
154              val curstring = ref []              val curstring = ref []
155              val startpos = ref 0              val startpos = ref 0
156              val instring = ref NONE                          val instring = ref false
157              (* handling comments *)              (* handling comments *)
158              fun enterC () = depth := !depth + 1              fun enterC () = depth := !depth + 1
159              fun leaveC () = let val d = !depth - 1 in depth := d; d = 0 end                          fun leaveC () = let
160                                val d = !depth - 1
161                            in
162                                depth := d;
163                                d = 0
164                            end
165              (* handling strings *)              (* handling strings *)
166              fun newS (pos, kind) =                          fun newS pos =
167                  (instring := SOME kind;                              (instring := true;
168                   curstring := [];                   curstring := [];
169                   startpos := pos)                   startpos := pos)
170              fun addS c = curstring := c :: !curstring              fun addS c = curstring := c :: !curstring
171              fun addSC (s, offs) = addS (chr (ord (String.sub (s, 2)) - offs))                          fun addSC (s, offs) =
172                                addS (chr (ord (String.sub (s, 2)) - offs))
173              fun addSN (s, pos) = let              fun addSN (s, pos) = let
174                  val ns = substring (s, 1, 3)                  val ns = substring (s, 1, 3)
175                  val n = Int.fromString ns                  val n = Int.fromString ns
# Line 116  Line 180 
180                        ("illegal decimal char spec: " ^ ns)                        ("illegal decimal char spec: " ^ ns)
181              end              end
182              fun getS (pos, tok) =              fun getS (pos, tok) =
183                  (instring := NONE;                              (instring := false;
184                   tok (implode (rev (!curstring)), !startpos, pos))                   tok (implode (rev (!curstring)), !startpos, pos))
185              (* handling EOF *)              (* handling EOF *)
186              fun handleEof () = let              fun handleEof () = let
187                  val pos = SM.lastChange sourceMap                  val pos = SM.lastChange sourceMap
188              in              in
189                  if !depth > 0 then                  if !depth > 0 then
                     error (pos, pos) "unexpected end of input in comment"  
                 else if isSome (!instring) then  
190                      error (pos, pos)                      error (pos, pos)
191                       ("unexpected end of input in " ^ valOf (!instring))                                         "unexpected end of input in comment"
192                                else if !instring then
193                                    error (pos, pos)
194                                           "unexpected end of input in string"
195                  else ();                  else ();
196                  pos                  pos
197              end              end
198              (* handling line breaks *)              (* handling line breaks *)
199              fun newline pos = SM.newline sourceMap pos              fun newline pos = SM.newline sourceMap pos
200                            (* handling #line directives *)
201                            fun sync (p, t) = let
202                                fun sep c = c = #"#" orelse Char.isSpace c
203                                fun cvt s = getOpt (Int.fromString s, 0)
204                                fun r (line, col, file) = SM.resynch sourceMap
205                                    (p, { fileName = file,
206                                          line = line, column = col })
207                            in
208                                case String.tokens sep t of
209                                    [_, line] =>
210                                        r (cvt line, NONE, NONE)
211                                  | [_, line, file] =>
212                                        r (cvt line, NONE, SOME file)
213                                  | [_, line, col, file] =>
214                                        r (cvt line, SOME (cvt col), SOME file)
215                                  | _ => error (p, p + size t)
216                                        "illegal #line directive"
217                            end
218          in          in
219              { enterC = enterC,              { enterC = enterC,
220                leaveC = leaveC,                leaveC = leaveC,
# Line 142  Line 225 
225                getS = getS,                getS = getS,
226                handleEof = handleEof,                handleEof = handleEof,
227                newline = newline,                newline = newline,
228                error = error }                            error = error,
229                              sync = sync}
230          end          end
231    
232          fun inputc k =                      fun inputc k = TextIO.input stream
             TextIO.input stream  
233    
234          val lexer = CMLex.makeLexer inputc lexarg          val lexer = CMLex.makeLexer inputc lexarg
235          val tokenStream = LrParser.Stream.streamify lexer          val tokenStream = LrParser.Stream.streamify lexer
236          val (parseResult, _) =          val (parseResult, _) =
237              CMParse.parse (lookAhead, tokenStream,              CMParse.parse (lookAhead, tokenStream,
238                             fn (s,p1,p2) => error (p1, p2) s,                             fn (s,p1,p2) => error (p1, p2) s,
239                             (context, error', error, recParse, doMember))                                         (group, context, error, recParse,
240                                            doMember, ginfo))
241      in      in
         TextIO.closeIn stream;  
242          if !(#anyErrors source) then NONE          if !(#anyErrors source) then NONE
243          else SOME parseResult          else SOME parseResult
244      end      end
245                    val pro =
246                        SafeIO.perform { openIt =
247                                            fn () => SrcPath.openTextIn group,
248                                         closeIt = TextIO.closeIn,
249                                         work = work,
250                                         cleanup = fn () => () }
251                in
252                    case pro of
253                        NONE => NONE
254                      | SOME pr =>
255                            if stabthis then stabilize pr
256                            else SOME pr
257                end
258      handle LrParser.ParseError => NONE      handle LrParser.ParseError => NONE
259           | Cycle => NONE          in
260                case findCycle (groupstack, []) of
261      fun parse group = parse' (group, [])                  h :: t => (report (h, t); NONE)
262                  | [] =>
263                        (case getStable group of
264                             NONE => normal_processing ()
265                           | SOME g => SOME g)
266            end
267        in
268            case mparse (group, [], ref false, stabthis) of
269                NONE => NONE
270              | SOME g =>
271                    if CheckSharing.check (g, ginfo) then
272                        (SmlInfo.forgetAllBut (Reachable.reachable g);
273                         SOME (g, ginfo))
274                    else NONE
275        end
276  end  end

Legend:
Removed from v.277  
changed lines
  Added in v.361

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0