Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 275, Sat May 15 09:54:52 1999 UTC revision 330, Sat Jun 12 07:45:52 1999 UTC
# Line 5  Line 5 
5   *   *
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature CMPARSE = sig  signature PARSE = sig
9      val parse : AbsPath.t -> CMSemant.group option      val parse :
10            GeneralParams.param -> bool option ->
11            AbsPath.t -> (CMSemant.group * GeneralParams.info) option
12  end  end
13    
14  structure CMParse :> CMPARSE = struct  functor ParseFn (structure Stabilize: STABILIZE) :> PARSE = struct
15    
16      val lookAhead = 30      val lookAhead = 30
17    
18      structure S = GenericVC.Source      structure S = GenericVC.Source
19      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
20      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
     structure P = GenericVC.Control.Print  
21    
22      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
23      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 25  Line 26 
26                       structure Lex = CMLex                       structure Lex = CMLex
27                       structure LrParser = LrParser)                       structure LrParser = LrParser)
28    
29      fun parse' (group, groupstack) = let      fun parse param stabflag group = let
30    
31          val currentDir = AbsPath.dir group          val stabthis = isSome stabflag
32          val context = AbsPath.relativeContext (AbsPath.dir group)          val staball = stabflag = SOME true
         val filename = AbsPath.name group  
         val _ = Say.vsay (concat ["[scanning ", filename, "]\n"])  
         val stream = TextIO.openIn filename  
         val errcons =  
             { linewidth = !P.linewidth, flush = P.flush, consumer = P.say }  
         val source = S.newSource (filename, 1, stream, false, errcons)  
         val sourceMap = #sourceMap source  
         fun error region m =  
             EM.error source region EM.COMPLAIN m EM.nullErrorBody  
33    
34          (* recParse returns a group (not an option)          val groupreg = GroupReg.new ()
35           * and re-raises LrParser.ParseError.          val errcons = EM.defaultConsumer ()
36           * This exception will be handled by the surrounding          val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
37           * call to parse.  
38           * This function is used to parse aliases and sub-groups. *)          (* The "group cache" -- we store "group options";  having
39          fun recParse (p1, p2) p =           * NONE registered for a group means that a previous attempt
40              case parse' (p, (group, (source, p1, p2)) :: groupstack) of           * to parse it had failed. *)
41                  NONE => (#anyErrors source := true; CMSemant.emptyGroup)          val gc = ref (AbsPathMap.empty: CMSemant.group option AbsPathMap.map)
               | SOME res => res  
42    
43          fun doMember (p, p1, p2, c, e) =          fun mparse (group, groupstack, pErrFlag, stabthis) =
44              CMSemant.member (recParse (p1, p2)) { sourcepath = p,              case AbsPathMap.find (!gc, group) of
45                                                    group = group,                  SOME g => g
46                                                    class = c,                | NONE => let
47                                                    error = e }                      val g = parse' (group, groupstack, pErrFlag, stabthis)
48                    in
49                        gc := AbsPathMap.insert (!gc, group, g);
50                        g
51                    end
52    
53            and parse' (group, groupstack, pErrFlag, stabthis) = let
54          (* checking for cycles among groups and printing them nicely *)          (* checking for cycles among groups and printing them nicely *)
         val _ = let  
55              fun findCycle ([], _) = []              fun findCycle ([], _) = []
56                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
57                  if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)                  if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)
# Line 68  Line 63 
63                              val s = EM.matchErrorString s (p1, p2)                              val s = EM.matchErrorString s (p1, p2)
64                          in                          in
65                              PrettyPrint.add_string pps s;                              PrettyPrint.add_string pps s;
66                              PrettyPrint.add_string pps ": ";                              PrettyPrint.add_string pps ": importing ";
67                              PrettyPrint.add_string pps (AbsPath.spec g0);                              PrettyPrint.add_string pps (AbsPath.spec g0);
68                              PrettyPrint.add_newline pps;                              PrettyPrint.add_newline pps;
69                              loop (g, t)                              loop (g, t)
# Line 79  Line 74 
74                  end                  end
75              in              in
76                  EM.error s (p1, p2) EM.COMPLAIN                  EM.error s (p1, p2) EM.COMPLAIN
77                     ("group hierarchy forms a cycle with " ^ AbsPath.spec group)                             ("group hierarchy forms a cycle with " ^
78                     pphist;                              AbsPath.spec group)
79                  raise LrParser.ParseError                             pphist
80              end              end
81    
82                fun getStable gpath = let
83                    (* To make a cycle involving existing stable groups,
84                     * one must use aliases.  The cycle will be detected
85                     * amoung those aliases... (?? - hopefully) *)
86                    fun getStableSG p =
87                        mparse (p, groupstack, pErrFlag, staball)
88          in          in
89              case findCycle (groupstack, []) of                  Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath
                 [] => ()  
               | h :: t => report (h, t)  
90          end          end
91    
92                fun stabilize g =
93                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
94    
95                (* normal processing -- used when there is no cycle to report *)
96                fun normal_processing () = let
97                    val context = AbsPath.relativeContext (AbsPath.dir group)
98                    val filename = AbsPath.name group
99                    val _ = Say.vsay ["[scanning ", filename, "]\n"]
100                    val stream = AbsPath.openTextIn group
101                    val source = S.newSource (filename, 1, stream, false, errcons)
102                    val sourceMap = #sourceMap source
103                    val _ = GroupReg.register groupreg (group, source)
104    
105                    (* We can hard-wire the source into this
106                     * error function because the function is only for
107                     * immediate use and doesn't get stored into persistent
108                     * data structures. *)
109                    fun error r m =
110                        EM.error source r EM.COMPLAIN m EM.nullErrorBody
111    
112                    (* recParse returns a group (not an option).
113                     * This function is used to parse aliases and sub-groups.
114                     * Errors are propagated by explicitly setting the
115                     * "anyErrors" flag of the parent group. *)
116                    fun recParse (p1, p2) p = let
117                        val groupstack' = (group, (source, p1, p2)) :: groupstack
118                        val myErrorFlag = #anyErrors source
119                    in
120                        case mparse (p, groupstack', myErrorFlag, staball) of
121                            NONE => (myErrorFlag := true;
122                                     CMSemant.emptyGroup group)
123                          | SOME res => res
124                    end
125                    handle exn as IO.Io _ =>
126                        (error (p1, p2) (General.exnMessage exn);
127                         CMSemant.emptyGroup group)
128    
129                    fun doMember (p, p1, p2, c) =
130                        CMSemant.member (ginfo, recParse (p1, p2))
131                                        { sourcepath = p, class = c,
132                                          group = (group, (p1, p2)) }
133    
134                    (* Build the argument for the lexer; the lexer's local
135                     * state is encapsulated here to make sure the parser
136                     * is re-entrant. *)
137          val lexarg = let          val lexarg = let
138              (* local state *)              (* local state *)
139              val depth = ref 0              val depth = ref 0
140              val curstring = ref []              val curstring = ref []
141              val startpos = ref 0              val startpos = ref 0
142              val instring = ref NONE                      val instring = ref false
143              (* handling comments *)              (* handling comments *)
144              fun enterC () = depth := !depth + 1              fun enterC () = depth := !depth + 1
145              fun leaveC () = let val d = !depth - 1 in depth := d; d = 0 end                      fun leaveC () = let
146                            val d = !depth - 1
147                        in
148                            depth := d;
149                            d = 0
150                        end
151              (* handling strings *)              (* handling strings *)
152              fun newS (pos, kind) =                      fun newS pos =
153                  (instring := SOME kind;                          (instring := true; curstring := []; startpos := pos)
                  curstring := [];  
                  startpos := pos)  
154              fun addS c = curstring := c :: !curstring              fun addS c = curstring := c :: !curstring
155              fun addSC (s, offs) = addS (chr (ord (String.sub (s, 2)) - offs))                      fun addSC (s, offs) =
156                            addS (chr (ord (String.sub (s, 2)) - offs))
157              fun addSN (s, pos) = let              fun addSN (s, pos) = let
158                  val ns = substring (s, 1, 3)                  val ns = substring (s, 1, 3)
159                  val n = Int.fromString ns                  val n = Int.fromString ns
# Line 115  Line 164 
164                        ("illegal decimal char spec: " ^ ns)                        ("illegal decimal char spec: " ^ ns)
165              end              end
166              fun getS (pos, tok) =              fun getS (pos, tok) =
167                  (instring := NONE;                          (instring := false;
168                   tok (implode (rev (!curstring)), !startpos, pos))                   tok (implode (rev (!curstring)), !startpos, pos))
169              (* handling EOF *)              (* handling EOF *)
170              fun handleEof () = let              fun handleEof () = let
171                  val pos = SM.lastChange sourceMap                  val pos = SM.lastChange sourceMap
172              in              in
173                  if !depth > 0 then                  if !depth > 0 then
                     error (pos, pos) "unexpected end of input in comment"  
                 else if isSome (!instring) then  
174                      error (pos, pos)                      error (pos, pos)
175                       ("unexpected end of input in " ^ valOf (!instring))                                    "unexpected end of input in comment"
176                            else if !instring then
177                                error (pos, pos)
178                                      "unexpected end of input in string"
179                  else ();                  else ();
180                  pos                  pos
181              end              end
182              (* handling line breaks *)              (* handling line breaks *)
183              fun newline pos = SM.newline sourceMap pos              fun newline pos = SM.newline sourceMap pos
184                        (* handling #line directives *)
185                        fun sync (p, t) = let
186                            fun sep c = c = #"#" orelse Char.isSpace c
187                            fun cvt s = getOpt (Int.fromString s, 0)
188                            fun r (line, col, file) = SM.resynch sourceMap
189                                (p, { fileName = file, line = line, column = col })
190                        in
191                            case String.tokens sep t of
192                                [_, line] =>
193                                    r (cvt line, NONE, NONE)
194                              | [_, line, file] =>
195                                    r (cvt line, NONE, SOME file)
196                              | [_, line, col, file] =>
197                                    r (cvt line, SOME (cvt col), SOME file)
198                              | _ => error (p, p + size t)
199                                    "illegal #line directive"
200                        end
201          in          in
202              { enterC = enterC,              { enterC = enterC,
203                leaveC = leaveC,                leaveC = leaveC,
# Line 141  Line 208 
208                getS = getS,                getS = getS,
209                handleEof = handleEof,                handleEof = handleEof,
210                newline = newline,                newline = newline,
211                error = error }                        error = error,
212                          sync = sync}
213          end          end
214    
215          fun inputc k =                  fun inputc k = TextIO.input stream
             TextIO.input stream  
216    
217          val lexer = CMLex.makeLexer inputc lexarg          val lexer = CMLex.makeLexer inputc lexarg
218          val tokenStream = LrParser.Stream.streamify lexer          val tokenStream = LrParser.Stream.streamify lexer
219          val (parseResult, _) =          val (parseResult, _) =
220              CMParse.parse (lookAhead, tokenStream,              CMParse.parse (lookAhead, tokenStream,
221                             fn (s,p1,p2) => error (p1, p2) s,                             fn (s,p1,p2) => error (p1, p2) s,
222                             (context, error, recParse, doMember))                                     (group, context, error, recParse,
223                                        doMember, ginfo))
224      in      in
225          TextIO.closeIn stream;          TextIO.closeIn stream;
226          if !(#anyErrors source) then NONE          if !(#anyErrors source) then NONE
227                    else if stabthis then stabilize parseResult
228          else SOME parseResult          else SOME parseResult
229      end      end
230      handle LrParser.ParseError => NONE      handle LrParser.ParseError => NONE
231           | Cycle => NONE          in
232                case findCycle (groupstack, []) of
233      fun parse group = parse' (group, [])                  h :: t => (report (h, t); NONE)
234                  | [] =>
235                        (case getStable group of
236                             NONE => normal_processing ()
237                           | SOME g => SOME g)
238            end
239        in
240            case mparse (group, [], ref false, stabthis) of
241                NONE => NONE
242              | SOME g =>
243                    if CheckSharing.check (g, ginfo) then
244                        (SmlInfo.forgetAllBut (Reachable.reachable g);
245                         SOME (g, ginfo))
246                    else NONE
247        end
248  end  end

Legend:
Removed from v.275  
changed lines
  Added in v.330

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0