Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 268, Mon May 10 07:00:02 1999 UTC revision 329, Fri Jun 11 09:53:10 1999 UTC
# Line 1  Line 1 
1  signature CMPARSE = sig  (*
2      val parse : AbsPath.t -> CMSemant.group option   * Parser for CM description files.
3     *
4     * (C) 1999 Lucent Technologies, Bell Laboratories
5     *
6     * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7     *)
8    signature PARSE = sig
9        val parse :
10            GeneralParams.param -> bool option ->
11            AbsPath.t -> (CMSemant.group * GeneralParams.info) option
12  end  end
13    
14  structure CMParse :> CMPARSE = struct  functor ParseFn (structure Stabilize: STABILIZE) :> PARSE = struct
15    
16      val lookAhead = 30      val lookAhead = 30
17    
18      structure S = GenericVC.Source      structure S = GenericVC.Source
19      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
20      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
     structure P = GenericVC.Control.Print  
21    
22      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
23      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 18  Line 26 
26                       structure Lex = CMLex                       structure Lex = CMLex
27                       structure LrParser = LrParser)                       structure LrParser = LrParser)
28    
29      fun parse filename = let      fun parse param stabflag group = let
30          val currentDir = AbsPath.dir filename  
31          val filename = AbsPath.name filename          val stabthis = isSome stabflag
32          val stream = TextIO.openIn filename          val staball = stabflag = SOME true
33          val errcons =  
34              { linewidth = !P.linewidth, flush = P.flush, consumer = P.say }          val groupreg = GroupReg.new ()
35            val errcons = EM.defaultConsumer ()
36            val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
37    
38            (* The "group cache" -- we store "group options";  having
39             * NONE registered for a group means that a previous attempt
40             * to parse it had failed. *)
41            val gc = ref (AbsPathMap.empty: CMSemant.group option AbsPathMap.map)
42    
43            fun mparse (group, groupstack, pErrFlag, stabthis) =
44                case AbsPathMap.find (!gc, group) of
45                    SOME g => g
46                  | NONE => let
47                        val g = parse' (group, groupstack, pErrFlag, stabthis)
48                    in
49                        gc := AbsPathMap.insert (!gc, group, g);
50                        g
51                    end
52    
53            and parse' (group, groupstack, pErrFlag, stabthis) = let
54                (* checking for cycles among groups and printing them nicely *)
55                fun findCycle ([], _) = []
56                  | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
57                    if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)
58                    else findCycle (t, h :: cyc)
59                fun report ((g, (s, p1, p2)), hist) = let
60                    fun pphist pps = let
61                        fun loop (_, []) = ()
62                          | loop (g0, (g, (s, p1, p2)) :: t) = let
63                                val s = EM.matchErrorString s (p1, p2)
64                            in
65                                PrettyPrint.add_string pps s;
66                                PrettyPrint.add_string pps ": importing ";
67                                PrettyPrint.add_string pps (AbsPath.spec g0);
68                                PrettyPrint.add_newline pps;
69                                loop (g, t)
70                            end
71                    in
72                        PrettyPrint.add_newline pps;
73                        loop (g, hist)
74                    end
75                in
76                    EM.error s (p1, p2) EM.COMPLAIN
77                               ("group hierarchy forms a cycle with " ^
78                                AbsPath.spec group)
79                               pphist
80                end
81    
82                fun getStable gpath = let
83                    val loadStable =
84                        Stabilize.loadStable (ginfo, getStable, pErrFlag)
85                in
86                    case AbsPathMap.find (!gc, gpath) of
87                        SOME (x as SOME _) => x
88                      | SOME NONE => NONE
89                      | NONE =>
90                            (case loadStable gpath of
91                                 NONE => NONE
92                               | x as SOME _ =>
93                                     (gc := AbsPathMap.insert (!gc, gpath, x);
94                                      x))
95                end
96    
97                fun stabilize g =
98                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
99    
100                (* normal processing -- used when there is no cycle to report *)
101                fun normal_processing () = let
102                    val context = AbsPath.relativeContext (AbsPath.dir group)
103                    val filename = AbsPath.name group
104                    val _ = Say.vsay ["[scanning ", filename, "]\n"]
105                    val stream = AbsPath.openTextIn group
106          val source = S.newSource (filename, 1, stream, false, errcons)          val source = S.newSource (filename, 1, stream, false, errcons)
107          val sourceMap = #sourceMap source          val sourceMap = #sourceMap source
108          fun error region m =                  val _ = GroupReg.register groupreg (group, source)
             EM.error source region EM.COMPLAIN m EM.nullErrorBody  
109    
110                    (* We can hard-wire the source into this
111                     * error function because the function is only for
112                     * immediate use and doesn't get stored into persistent
113                     * data structures. *)
114                    fun error r m =
115                        EM.error source r EM.COMPLAIN m EM.nullErrorBody
116    
117                    (* recParse returns a group (not an option).
118                     * This function is used to parse aliases and sub-groups.
119                     * Errors are propagated by explicitly setting the
120                     * "anyErrors" flag of the parent group. *)
121                    fun recParse (p1, p2) p = let
122                        val groupstack' = (group, (source, p1, p2)) :: groupstack
123                        val myErrorFlag = #anyErrors source
124                    in
125                        case mparse (p, groupstack', myErrorFlag, staball) of
126                            NONE => (myErrorFlag := true;
127                                     CMSemant.emptyGroup group)
128                          | SOME res => res
129                    end
130                    handle exn as IO.Io _ =>
131                        (error (p1, p2) (General.exnMessage exn);
132                         CMSemant.emptyGroup group)
133    
134                    fun doMember (p, p1, p2, c) =
135                        CMSemant.member (ginfo, recParse (p1, p2))
136                                        { sourcepath = p, class = c,
137                                          group = (group, (p1, p2)) }
138    
139                    (* Build the argument for the lexer; the lexer's local
140                     * state is encapsulated here to make sure the parser
141                     * is re-entrant. *)
142          val lexarg = let          val lexarg = let
143              (* local state *)              (* local state *)
144              val depth = ref 0              val depth = ref 0
145              val curstring = ref []              val curstring = ref []
146              val startpos = ref 0              val startpos = ref 0
147              val instring = ref NONE                      val instring = ref false
148              (* handling comments *)              (* handling comments *)
149              fun enterC () = depth := !depth + 1              fun enterC () = depth := !depth + 1
150              fun leaveC () = let val d = !depth - 1 in depth := d; d = 0 end                      fun leaveC () = let
151                            val d = !depth - 1
152                        in
153                            depth := d;
154                            d = 0
155                        end
156              (* handling strings *)              (* handling strings *)
157              fun newS (pos, kind) =                      fun newS pos =
158                  (instring := SOME kind;                          (instring := true; curstring := []; startpos := pos)
                  curstring := [];  
                  startpos := pos)  
159              fun addS c = curstring := c :: !curstring              fun addS c = curstring := c :: !curstring
160              fun addSC (s, offs) = addS (chr (ord (String.sub (s, 2)) - offs))                      fun addSC (s, offs) =
161                            addS (chr (ord (String.sub (s, 2)) - offs))
162              fun addSN (s, pos) = let              fun addSN (s, pos) = let
163                  val ns = substring (s, 1, 3)                  val ns = substring (s, 1, 3)
164                  val n = Int.fromString ns                  val n = Int.fromString ns
# Line 55  Line 169 
169                        ("illegal decimal char spec: " ^ ns)                        ("illegal decimal char spec: " ^ ns)
170              end              end
171              fun getS (pos, tok) =              fun getS (pos, tok) =
172                  (instring := NONE;                          (instring := false;
173                   tok (implode (rev (!curstring)), !startpos, pos))                   tok (implode (rev (!curstring)), !startpos, pos))
174              (* handling EOF *)              (* handling EOF *)
175              fun handleEof () = let              fun handleEof () = let
176                  val pos = SM.lastChange sourceMap                  val pos = SM.lastChange sourceMap
177              in              in
178                  if !depth > 0 then                  if !depth > 0 then
                     error (pos, pos) "unexpected end of input in comment"  
                 else if isSome (!instring) then  
179                      error (pos, pos)                      error (pos, pos)
180                       ("unexpected end of input in " ^ valOf (!instring))                                    "unexpected end of input in comment"
181                            else if !instring then
182                                error (pos, pos)
183                                      "unexpected end of input in string"
184                  else ();                  else ();
185                  pos                  pos
186              end              end
187              (* handling line breaks *)              (* handling line breaks *)
188              fun newline pos = SM.newline sourceMap pos              fun newline pos = SM.newline sourceMap pos
189                        (* handling #line directives *)
190                        fun sync (p, t) = let
191                            fun sep c = c = #"#" orelse Char.isSpace c
192                            fun cvt s = getOpt (Int.fromString s, 0)
193                            fun r (line, col, file) = SM.resynch sourceMap
194                                (p, { fileName = file, line = line, column = col })
195                        in
196                            case String.tokens sep t of
197                                [_, line] =>
198                                    r (cvt line, NONE, NONE)
199                              | [_, line, file] =>
200                                    r (cvt line, NONE, SOME file)
201                              | [_, line, col, file] =>
202                                    r (cvt line, SOME (cvt col), SOME file)
203                              | _ => error (p, p + size t)
204                                    "illegal #line directive"
205                        end
206          in          in
207              { enterC = enterC,              { enterC = enterC,
208                leaveC = leaveC,                leaveC = leaveC,
# Line 81  Line 213 
213                getS = getS,                getS = getS,
214                handleEof = handleEof,                handleEof = handleEof,
215                newline = newline,                newline = newline,
216                error = error }                        error = error,
217                          sync = sync}
218          end          end
219    
220          fun inputc k =                  fun inputc k = TextIO.input stream
             TextIO.input stream  
221    
222          val lexer = CMLex.makeLexer inputc lexarg          val lexer = CMLex.makeLexer inputc lexarg
223          val tokenStream = LrParser.Stream.streamify lexer          val tokenStream = LrParser.Stream.streamify lexer
224          val (parseResult, _) =          val (parseResult, _) =
225              CMParse.parse (lookAhead, tokenStream,              CMParse.parse (lookAhead, tokenStream,
226                             fn (s,p1,p2) => error (p1, p2) s,                             fn (s,p1,p2) => error (p1, p2) s,
227                             (currentDir, error))                                     (group, context, error, recParse,
228                                        doMember, ginfo))
229      in      in
230          TextIO.closeIn stream;          TextIO.closeIn stream;
231          SOME parseResult                  if !(#anyErrors source) then NONE
232      end handle LrParser.ParseError => NONE                  else if stabthis then stabilize parseResult
233                    else SOME parseResult
234                end
235                handle LrParser.ParseError => NONE
236            in
237                case findCycle (groupstack, []) of
238                    h :: t => (report (h, t); NONE)
239                  | [] =>
240                        (case getStable group of
241                             NONE => normal_processing ()
242                           | SOME g => SOME g)
243            end
244        in
245            case mparse (group, [], ref false, stabthis) of
246                NONE => NONE
247              | SOME g =>
248                    if CheckSharing.check (g, ginfo) then
249                        (SmlInfo.forgetAllBut (Reachable.reachable g);
250                         SOME (g, ginfo))
251                    else NONE
252        end
253  end  end

Legend:
Removed from v.268  
changed lines
  Added in v.329

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0