Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /sml/trunk/src/cm/parse/parse.sml
ViewVC logotype

Diff of /sml/trunk/src/cm/parse/parse.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 295, Wed May 26 09:20:25 1999 UTC revision 364, Fri Jul 2 07:33:12 1999 UTC
# Line 5  Line 5 
5   *   *
6   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)   * Author: Matthias Blume (blume@kurims.kyoto-u.ac.jp)
7   *)   *)
8  signature CMPARSE = sig  signature PARSE = sig
9      val parse : Primitive.configuration -> AbsPath.t -> CMSemant.group option      val parse :
10            GroupReg.groupreg option ->
11            GeneralParams.param -> bool option ->
12            SrcPath.t -> (CMSemant.group * GeneralParams.info) option
13  end  end
14    
15  structure CMParse :> CMPARSE = struct  functor ParseFn (val pending : unit -> DependencyGraph.impexp SymbolMap.map
16                     structure Stabilize: STABILIZE) :> PARSE = struct
17    
18      val lookAhead = 30      val lookAhead = 30
19    
20      structure S = GenericVC.Source      structure S = GenericVC.Source
21      structure EM = GenericVC.ErrorMsg      structure EM = GenericVC.ErrorMsg
22      structure SM = GenericVC.SourceMap      structure SM = GenericVC.SourceMap
23      structure P = GenericVC.Control.Print      structure GG = GroupGraph
24    
25      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)      structure CMLrVals = CMLrValsFun (structure Token = LrParser.Token)
26      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)      structure CMLex = CMLexFun (structure Tokens = CMLrVals.Tokens)
# Line 25  Line 29 
29                       structure Lex = CMLex                       structure Lex = CMLex
30                       structure LrParser = LrParser)                       structure LrParser = LrParser)
31    
32      (* The error function must look for the source using the GroupReg      fun parse gropt param stabflag group = let
      * group register because the source must not be hard-wired into it  
      * (via closure creation).  The reason for this is that the error  
      * function will get cached in SmlInfo.info but the source will change  
      * when one re-runs the analysis. *)  
   
     fun parse primconf group = let  
   
         val groupreg = GroupReg.new ()  
         val fnpolicy = FilenamePolicy.default  
         val params = { groupreg = groupreg,  
                        fnpolicy = fnpolicy,  
                        primconf = primconf,  
                        keep_going = false }  
33    
34          val gc = ref AbsPathMap.empty   (* the "group cache" *)          val _ = SrcPath.revalidateCwd ()
35    
36          fun mparse (group, groupstack) =          val stabthis = isSome stabflag
37              case AbsPathMap.find (!gc, group) of          val staball = stabflag = SOME true
38    
39            val groupreg =
40                case gropt of
41                    SOME r => r
42                  | NONE => GroupReg.new ()
43            val errcons = EM.defaultConsumer ()
44            val ginfo = { param = param, groupreg = groupreg, errcons = errcons }
45    
46            (* The "group cache" -- we store "group options";  having
47             * NONE registered for a group means that a previous attempt
48             * to parse it had failed. *)
49            val gc = ref (SrcPathMap.empty: CMSemant.group option SrcPathMap.map)
50    
51            fun mparse (group, groupstack, pErrFlag, stabthis) =
52                case SrcPathMap.find (!gc, group) of
53                  SOME g => g                  SOME g => g
54                | NONE => let                | NONE => let
55                      val g = parse' (group, groupstack)                      val g = parse' (group, groupstack, pErrFlag, stabthis)
56                  in                  in
57                      gc := AbsPathMap.insert (!gc, group, g);                      gc := SrcPathMap.insert (!gc, group, g);
58                      g                      g
59                  end                  end
60    
61          and parse' (group, groupstack) = let          and parse' (group, groupstack, pErrFlag, stabthis) = let
62              (* checking for cycles among groups and printing them nicely *)              (* checking for cycles among groups and printing them nicely *)
63              fun findCycle ([], _) = []              fun findCycle ([], _) = []
64                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =                | findCycle ((h as (g, (s, p1, p2))) :: t, cyc) =
65                  if AbsPath.compare (g, group) = EQUAL then rev (h :: cyc)                  if SrcPath.compare (g, group) = EQUAL then rev (h :: cyc)
66                  else findCycle (t, h :: cyc)                  else findCycle (t, h :: cyc)
67              fun report ((g, (s, p1, p2)), hist) = let              fun report ((g, (s, p1, p2)), hist) = let
68                  fun pphist pps = let                  fun pphist pps = let
# Line 66  Line 72 
72                          in                          in
73                              PrettyPrint.add_string pps s;                              PrettyPrint.add_string pps s;
74                              PrettyPrint.add_string pps ": importing ";                              PrettyPrint.add_string pps ": importing ";
75                              PrettyPrint.add_string pps (AbsPath.spec g0);                              PrettyPrint.add_string pps (SrcPath.specOf g0);
76                              PrettyPrint.add_newline pps;                              PrettyPrint.add_newline pps;
77                              loop (g, t)                              loop (g, t)
78                          end                          end
# Line 77  Line 83 
83              in              in
84                  EM.error s (p1, p2) EM.COMPLAIN                  EM.error s (p1, p2) EM.COMPLAIN
85                             ("group hierarchy forms a cycle with " ^                             ("group hierarchy forms a cycle with " ^
86                              AbsPath.spec group)                              SrcPath.specOf group)
87                             pphist                             pphist
88              end              end
89    
90                fun getStable gpath = let
91                    (* To make a cycle involving existing stable groups,
92                     * one must use aliases.  The cycle will be detected
93                     * amoung those aliases... (?? - hopefully) *)
94                    fun getStableSG p =
95                        mparse (p, groupstack, pErrFlag, staball)
96                in
97                    Stabilize.loadStable (ginfo, getStableSG, pErrFlag) gpath
98                end
99    
100                (* We stabilize libraries only because a stable library will
101                 * encompass the contents of its sub-groups
102                 * (but not sub-libraries!). *)
103                fun stabilize (g as GG.GROUP { kind = GG.NOLIB, ... }) = SOME g
104                  | stabilize g =
105                    Stabilize.stabilize ginfo { group = g, anyerrors = pErrFlag }
106    
107              (* normal processing -- used when there is no cycle to report *)              (* normal processing -- used when there is no cycle to report *)
108              fun normal_processing () = let              fun normal_processing () = let
109                  val currentDir = AbsPath.dir group                  val context = SrcPath.sameDirContext group
110                  val context = AbsPath.relativeContext (AbsPath.dir group)  
111                  val filename = AbsPath.name group                  fun work stream = let
112                  val _ = Say.vsay (concat ["[scanning ", filename, "]\n"])                      val source =
113                  val stream = TextIO.openIn filename                          S.newSource (SrcPath.osstring group,
114                  val errcons = { linewidth = !P.linewidth,                                       1, stream, false, errcons)
                                 flush = P.flush,  
                                 consumer = P.say }  
                 val source = S.newSource (filename, 1, stream, false, errcons)  
115                  val sourceMap = #sourceMap source                  val sourceMap = #sourceMap source
116                  val _ = GroupReg.register groupreg (group, source)                  val _ = GroupReg.register groupreg (group, source)
117                  fun error' region sev m b = let  
118                      val src = GroupReg.lookup groupreg group                      (* We can hard-wire the source into this
119                  in                       * error function because the function is only for
120                      EM.error src region sev m b                       * immediate use and doesn't get stored into persistent
121                  end                       * data structures. *)
122                  fun error region m =                      fun error r m =
123                      error' region EM.COMPLAIN m EM.nullErrorBody                          EM.error source r EM.COMPLAIN m EM.nullErrorBody
124    
125                  (* recParse returns a group (not an option).                  (* recParse returns a group (not an option).
126                   * This function is used to parse aliases and sub-groups.                   * This function is used to parse aliases and sub-groups.
127                   * Errors are propagated by explicitly setting the                   * Errors are propagated by explicitly setting the
128                   * "anyErrors" flag of the parent group. *)                   * "anyErrors" flag of the parent group. *)
129                  fun recParse (p1, p2) p = let                  fun recParse (p1, p2) p = let
130                      val groupstack' = (group, (source, p1, p2)) :: groupstack                          val groupstack' =
131                                (group, (source, p1, p2)) :: groupstack
132                            val myErrorFlag = #anyErrors source
133                  in                  in
134                      case mparse (p, groupstack') of                          case mparse (p, groupstack', myErrorFlag, staball) of
135                          NONE => (#anyErrors source := true;                              NONE => (myErrorFlag := true;
136                                   CMSemant.emptyGroup group)                                   CMSemant.emptyGroup group)
137                        | SOME res => res                        | SOME res => res
138                  end                  end
# Line 118  Line 140 
140                      (error (p1, p2) (General.exnMessage exn);                      (error (p1, p2) (General.exnMessage exn);
141                       CMSemant.emptyGroup group)                       CMSemant.emptyGroup group)
142    
143                  fun doMember (p, p1, p2, c, e) =                      fun doMember (p, p1, p2, c) =
144                      CMSemant.member (params, recParse (p1, p2))                          CMSemant.member (ginfo, recParse (p1, p2))
145                                      { sourcepath = p, group = group,                                   { sourcepath = p, class = c,
146                                        class = c, error = e }                                     group = (group, (p1, p2)) }
147    
148                        (* Build the argument for the lexer; the lexer's local
149                         * state is encapsulated here to make sure the parser
150                         * is re-entrant. *)
151                  val lexarg = let                  val lexarg = let
152                      (* local state *)                      (* local state *)
153                      val depth = ref 0                      val depth = ref 0
# Line 139  Line 164 
164                      end                      end
165                      (* handling strings *)                      (* handling strings *)
166                      fun newS pos =                      fun newS pos =
167                          (instring := true; curstring := []; startpos := pos)                              (instring := true;
168                                 curstring := [];
169                                 startpos := pos)
170                      fun addS c = curstring := c :: !curstring                      fun addS c = curstring := c :: !curstring
171                      fun addSC (s, offs) =                      fun addSC (s, offs) =
172                          addS (chr (ord (String.sub (s, 2)) - offs))                          addS (chr (ord (String.sub (s, 2)) - offs))
# Line 170  Line 197 
197                      end                      end
198                      (* handling line breaks *)                      (* handling line breaks *)
199                      fun newline pos = SM.newline sourceMap pos                      fun newline pos = SM.newline sourceMap pos
200                            (* handling #line directives *)
201                            fun sync (p, t) = let
202                                fun sep c = c = #"#" orelse Char.isSpace c
203                                fun cvt s = getOpt (Int.fromString s, 0)
204                                fun r (line, col, file) = SM.resynch sourceMap
205                                    (p, { fileName = file,
206                                          line = line, column = col })
207                            in
208                                case String.tokens sep t of
209                                    [_, line] =>
210                                        r (cvt line, NONE, NONE)
211                                  | [_, line, file] =>
212                                        r (cvt line, NONE, SOME file)
213                                  | [_, line, col, file] =>
214                                        r (cvt line, SOME (cvt col), SOME file)
215                                  | _ => error (p, p + size t)
216                                        "illegal #line directive"
217                            end
218                  in                  in
219                      { enterC = enterC,                      { enterC = enterC,
220                        leaveC = leaveC,                        leaveC = leaveC,
# Line 180  Line 225 
225                        getS = getS,                        getS = getS,
226                        handleEof = handleEof,                        handleEof = handleEof,
227                        newline = newline,                        newline = newline,
228                        error = error }                            error = error,
229                              sync = sync}
230                  end                  end
231    
232                  fun inputc k = TextIO.input stream                  fun inputc k = TextIO.input stream
# Line 190  Line 236 
236                  val (parseResult, _) =                  val (parseResult, _) =
237                      CMParse.parse (lookAhead, tokenStream,                      CMParse.parse (lookAhead, tokenStream,
238                                     fn (s,p1,p2) => error (p1, p2) s,                                     fn (s,p1,p2) => error (p1, p2) s,
239                                     (group, context, error', error, recParse,                                         (group, context, error, recParse,
240                                      doMember))                                          doMember, ginfo))
241              in              in
                 TextIO.closeIn stream;  
242                  if !(#anyErrors source) then NONE                  if !(#anyErrors source) then NONE
243                  else SOME parseResult                  else SOME parseResult
244              end              end
245                    fun openIt () = TextIO.openIn (SrcPath.osstring group)
246                    val pro =
247                        SafeIO.perform { openIt = openIt,
248                                         closeIt = TextIO.closeIn,
249                                         work = work,
250                                         cleanup = fn () => () }
251                in
252                    case pro of
253                        NONE => NONE
254                      | SOME pr =>
255                            if stabthis then stabilize pr
256                            else SOME pr
257                end
258              handle LrParser.ParseError => NONE              handle LrParser.ParseError => NONE
259          in          in
260              case findCycle (groupstack, []) of              case findCycle (groupstack, []) of
261                  h :: t => (report (h, t); NONE)                  h :: t => (report (h, t); NONE)
262                | [] => normal_processing ()                | [] =>
263          end                      (case getStable group of
264                             NONE =>
265                                 (Say.vsay ["[scanning ", SrcPath.descr group,
266                                            "]\n"];
267                                  normal_processing ())
268                           | SOME g =>
269                                 (Say.vsay ["[library ", SrcPath.descr group,
270                                            " is stable]\n"];
271                                  SOME g))
272            end
273        in
274            case mparse (group, [], ref false, stabthis) of
275                NONE => NONE
276              | SOME g =>
277                    if CheckSharing.check (g, ginfo) then
278                        let
279                            val reach1 = Reachable.reachable g
280                            val reach2 = Reachable.reachable' (pending ())
281                            val reach = SrcPathSet.union (reach1, reach2)
282      in      in
283          mparse (group, [])                          SmlInfo.forgetAllBut reach;
284                            SOME (g, ginfo)
285                        end
286                    else NONE
287      end      end
288  end  end

Legend:
Removed from v.295  
changed lines
  Added in v.364

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0