Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 268, Mon May 10 07:00:02 1999 UTC revision 353, Thu Jun 24 09:43:28 1999 UTC
# Line 1  Line 1 
1  signature CMPARSE = sig  (*
2      val parse : AbsPath.t -> CMSemant.group option   * Parser for CM description files.
3     *
4     * (C) 1999 Lucent Technologies, Bell Laboratories
5     *
6     * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7     *)
8    signature PARSE = sig
9        val parse :
10            GeneralParams.param -> bool option ->
11            AbsPath.t -> (CMSemant.group * GeneralParams.info) option
12  end  end
13    
14  structure CMParse :> CMPARSE = struct  functor ParseFn (structure Stabilize: STABILIZE) :> PARSE = struct
15    
16      val lookAhead = 30      val lookAhead = 30
17    
18      structure S = GenericVC.Source      structure S = GenericVC.Source
19      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
20      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
21      structure P = GenericVC.Control.Print      structure GG = GroupGraph
22    
23      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
24      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 18  Line 27 
27                       structure Lex = CMLex                       structure Lex = CMLex
28                       structure LrParser = LrParser)                       structure LrParser = LrParser)
29    
30      fun parse filename = let      fun parse param stabflag group = let
31          val currentDir = AbsPath.dir filename  
32          val filename = AbsPath.name filename          val stabthis = isSome stabflag
33          val stream = TextIO.openIn filename          val staball = stabflag = SOME true
34          val errcons =  
35              { linewidth = !P.linewidth, flush = P.flush, consumer = P.say }          val groupreg = GroupReg.new ()
36          val source = S.newSource (filename, 1, stream, false, errcons)          val errcons = EM.defaultConsumer ()
37            val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
38    
39            (* The "group cache" -- we store "group options";  having
40             * NONE registered for a group means that a previous attempt
41             * to parse it had failed. *)
42            val gc = ref (AbsPathMap.empty: CMSemant.group option AbsPathMap.map)
43    
44            fun mparse (group, groupstack, pErrFlag, stabthis) =
45                case AbsPathMap.find (!gc, group) of
46                    SOME g => g
47                  | NONE => let
48                        val g = parse' (group, groupstack, pErrFlag, stabthis)
49                    in
50                        gc := AbsPathMap.insert (!gc, group, g);
51                        g
52                    end
53    
54            and parse' (group, groupstack, pErrFlag, stabthis) = let
55                (* checking for cycles among groups and printing them nicely *)
56                fun findCycle ([], _) = []
57                  | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
58                    if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)
59                    else findCycle (t, h :: cyc)
60                fun report ((g, (s, p1, p2)), hist) = let
61                    fun pphist pps = let
62                        fun loop (_, []) = ()
63                          | loop (g0, (g, (s, p1, p2)) :: t) = let
64                                val s = EM.matchErrorString s (p1, p2)
65                            in
66                                PrettyPrint.add_string pps s;
67                                PrettyPrint.add_string pps ": importing ";
68                                PrettyPrint.add_string pps (AbsPath.specOf g0);
69                                PrettyPrint.add_newline pps;
70                                loop (g, t)
71                            end
72                    in
73                        PrettyPrint.add_newline pps;
74                        loop (g, hist)
75                    end
76                in
77                    EM.error s (p1, p2) EM.COMPLAIN
78                               ("group hierarchy forms a cycle with " ^
79                                AbsPath.specOf group)
80                               pphist
81                end
82    
83                fun getStable gpath = let
84                    (* To make a cycle involving existing stable groups,
85                     * one must use aliases.  The cycle will be detected
86                     * amoung those aliases... (?? - hopefully) *)
87                    fun getStableSG p =
88                        mparse (p, groupstack, pErrFlag, staball)
89                in
90                    Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath
91                end
92    
93                (* We stabilize libraries only because a stable library will
94                 * encompass the contents of its sub-groups
95                 * (but not sub-libraries!). *)
96                fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g
97                  | stabilize g =
98                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
99    
100                (* normal processing -- used when there is no cycle to report *)
101                fun normal_processing () = let
102                    val context = AbsPath.sameDirContext group
103                    val filename = AbsPath.name group
104                    val _ = Say.vsay ["[scanning ", filename, "]\n"]
105    
106                    fun work stream = let
107                        val source =
108                            S.newSource (filename, 1, stream, false, errcons)
109          val sourceMap = #sourceMap source          val sourceMap = #sourceMap source
110          fun error region m =                      val _ = GroupReg.register groupreg (group, source)
111              EM.error source region EM.COMPLAIN m EM.nullErrorBody  
112                        (* We can hard-wire the source into this
113                         * error function because the function is only for
114                         * immediate use and doesn't get stored into persistent
115                         * data structures. *)
116                        fun error r m =
117                            EM.error source r EM.COMPLAIN m EM.nullErrorBody
118    
119                        (* recParse returns a group (not an option).
120                         * This function is used to parse aliases and sub-groups.
121                         * Errors are propagated by explicitly setting the
122                         * "anyErrors" flag of the parent group. *)
123                        fun recParse (p1, p2) p = let
124                            val groupstack' =
125                                (group, (source, p1, p2)) :: groupstack
126                            val myErrorFlag = #anyErrors source
127                        in
128                            case mparse (p, groupstack', myErrorFlag, staball) of
129                                NONE => (myErrorFlag := true;
130                                         CMSemant.emptyGroup group)
131                              | SOME res => res
132                        end
133                        handle exn as IO.Io _ =>
134                            (error (p1, p2) (General.exnMessage exn);
135                             CMSemant.emptyGroup group)
136    
137                        fun doMember (p, p1, p2, c) =
138                            CMSemant.member (ginfo, recParse (p1, p2))
139                                     { sourcepath = p, class = c,
140                                       group = (group, (p1, p2)) }
141    
142                        (* Build the argument for the lexer; the lexer's local
143                         * state is encapsulated here to make sure the parser
144                         * is re-entrant. *)
145          val lexarg = let          val lexarg = let
146              (* local state *)              (* local state *)
147              val depth = ref 0              val depth = ref 0
148              val curstring = ref []              val curstring = ref []
149              val startpos = ref 0              val startpos = ref 0
150              val instring = ref NONE                          val instring = ref false
151              (* handling comments *)              (* handling comments *)
152              fun enterC () = depth := !depth + 1              fun enterC () = depth := !depth + 1
153              fun leaveC () = let val d = !depth - 1 in depth := d; d = 0 end                          fun leaveC () = let
154                                val d = !depth - 1
155                            in
156                                depth := d;
157                                d = 0
158                            end
159              (* handling strings *)              (* handling strings *)
160              fun newS (pos, kind) =                          fun newS pos =
161                  (instring := SOME kind;                              (instring := true;
162                   curstring := [];                   curstring := [];
163                   startpos := pos)                   startpos := pos)
164              fun addS c = curstring := c :: !curstring              fun addS c = curstring := c :: !curstring
165              fun addSC (s, offs) = addS (chr (ord (String.sub (s, 2)) - offs))                          fun addSC (s, offs) =
166                                addS (chr (ord (String.sub (s, 2)) - offs))
167              fun addSN (s, pos) = let              fun addSN (s, pos) = let
168                  val ns = substring (s, 1, 3)                  val ns = substring (s, 1, 3)
169                  val n = Int.fromString ns                  val n = Int.fromString ns
# Line 55  Line 174 
174                        ("illegal decimal char spec: " ^ ns)                        ("illegal decimal char spec: " ^ ns)
175              end              end
176              fun getS (pos, tok) =              fun getS (pos, tok) =
177                  (instring := NONE;                              (instring := false;
178                   tok (implode (rev (!curstring)), !startpos, pos))                   tok (implode (rev (!curstring)), !startpos, pos))
179              (* handling EOF *)              (* handling EOF *)
180              fun handleEof () = let              fun handleEof () = let
181                  val pos = SM.lastChange sourceMap                  val pos = SM.lastChange sourceMap
182              in              in
183                  if !depth > 0 then                  if !depth > 0 then
                     error (pos, pos) "unexpected end of input in comment"  
                 else if isSome (!instring) then  
184                      error (pos, pos)                      error (pos, pos)
185                       ("unexpected end of input in " ^ valOf (!instring))                                         "unexpected end of input in comment"
186                                else if !instring then
187                                    error (pos, pos)
188                                           "unexpected end of input in string"
189                  else ();                  else ();
190                  pos                  pos
191              end              end
192              (* handling line breaks *)              (* handling line breaks *)
193              fun newline pos = SM.newline sourceMap pos              fun newline pos = SM.newline sourceMap pos
194                            (* handling #line directives *)
195                            fun sync (p, t) = let
196                                fun sep c = c = #"#" orelse Char.isSpace c
197                                fun cvt s = getOpt (Int.fromString s, 0)
198                                fun r (line, col, file) = SM.resynch sourceMap
199                                    (p, { fileName = file,
200                                          line = line, column = col })
201                            in
202                                case String.tokens sep t of
203                                    [_, line] =>
204                                        r (cvt line, NONE, NONE)
205                                  | [_, line, file] =>
206                                        r (cvt line, NONE, SOME file)
207                                  | [_, line, col, file] =>
208                                        r (cvt line, SOME (cvt col), SOME file)
209                                  | _ => error (p, p + size t)
210                                        "illegal #line directive"
211                            end
212          in          in
213              { enterC = enterC,              { enterC = enterC,
214                leaveC = leaveC,                leaveC = leaveC,
# Line 81  Line 219 
219                getS = getS,                getS = getS,
220                handleEof = handleEof,                handleEof = handleEof,
221                newline = newline,                newline = newline,
222                error = error }                            error = error,
223                              sync = sync}
224          end          end
225    
226          fun inputc k =                      fun inputc k = TextIO.input stream
             TextIO.input stream  
227    
228          val lexer = CMLex.makeLexer inputc lexarg          val lexer = CMLex.makeLexer inputc lexarg
229          val tokenStream = LrParser.Stream.streamify lexer          val tokenStream = LrParser.Stream.streamify lexer
230          val (parseResult, _) =          val (parseResult, _) =
231              CMParse.parse (lookAhead, tokenStream,              CMParse.parse (lookAhead, tokenStream,
232                             fn (s,p1,p2) => error (p1, p2) s,                             fn (s,p1,p2) => error (p1, p2) s,
233                             (currentDir, error))                                         (group, context, error, recParse,
234                                            doMember, ginfo))
235      in      in
236          TextIO.closeIn stream;                      if !(#anyErrors source) then NONE
237          SOME parseResult                      else SOME parseResult
238      end handle LrParser.ParseError => NONE                  end
239                    val pro =
240                        SafeIO.perform { openIt =
241                                            fn () => AbsPath.openTextIn group,
242                                         closeIt = TextIO.closeIn,
243                                         work = work,
244                                         cleanup = fn () => () }
245                in
246                    case pro of
247                        NONE => NONE
248                      | SOME pr =>
249                            if stabthis then stabilize pr
250                            else SOME pr
251                end
252                handle LrParser.ParseError => NONE
253            in
254                case findCycle (groupstack, []) of
255                    h :: t => (report (h, t); NONE)
256                  | [] =>
257                        (case getStable group of
258                             NONE => normal_processing ()
259                           | SOME g => SOME g)
260            end
261        in
262            case mparse (group, [], ref false, stabthis) of
263                NONE => NONE
264              | SOME g =>
265                    if CheckSharing.check (g, ginfo) then
266                        (SmlInfo.forgetAllBut (Reachable.reachable g);
267                         SOME (g, ginfo))
268                    else NONE
269        end
270  end  end

Legend:
Removed from v.268  
changed lines
  Added in v.353

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0