Home My Page Projects Code Snippets Project Openings SML/NJ
Summary Activity Forums Tracker Lists Tasks Docs Surveys News SCM Files

SCM Repository

[smlnj] Diff of /ml-lex/trunk/lexgen.sml
ViewVC logotype

Diff of /ml-lex/trunk/lexgen.sml

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

sml/branches/SMLNJ/src/ml-lex/lexgen.sml revision 418, Fri Sep 3 23:51:27 1999 UTC sml/trunk/src/ml-lex/lexgen.sml revision 919, Tue Aug 28 18:00:10 2001 UTC
# Line 45  Line 45 
45                  and characters.                  and characters.
46          02/08/95 (jhr) Modified to use new List module interface.          02/08/95 (jhr) Modified to use new List module interface.
47          05/18/95 (jhr) changed Vector.vector to Vector.fromList          05/18/95 (jhr) changed Vector.vector to Vector.fromList
48  *  
  * $Log: lexgen.sml,v $  
  * Revision 1.1.1.1  1998/04/08 18:40:10  george  
  * Version 110.5  
  *  
49   * Revision 1.9  1998/01/06 19:23:53  appel   * Revision 1.9  1998/01/06 19:23:53  appel
50   *   added %posarg feature to permit position-within-file to be passed   *   added %posarg feature to permit position-within-file to be passed
51   *   as a parameter to makeLexer   *   as a parameter to makeLexer
# Line 72  Line 68 
68  # Revision 1.3  1997/10/04  03:52:13  dbm  # Revision 1.3  1997/10/04  03:52:13  dbm
69  #   Fix to remove output file if ml-lex fails.  #   Fix to remove output file if ml-lex fails.
70  #  #
 # Revision 1.2  1997/05/06  01:12:38  george  
 # *** empty log message ***  
 #  
  * Revision 1.2  1996/02/26  15:02:27  george  
  *    print no longer overloaded.  
  *    use of makestring has been removed and replaced with Int.toString ..  
  *    use of IO replaced with TextIO  
  *  
  * Revision 1.1.1.1  1996/01/31  16:01:15  george  
  * Version 109  
  *  
71   *)   *)
72    
73  (* Subject: lookahead in sml-lex  (* Subject: lookahead in sml-lex
# Line 619  Line 604 
604          in NextTok := makeTok()          in NextTok := makeTok()
605          end          end
606          | 2 => NextTok :=          | 2 => NextTok :=
607               (case skipws()                 (case skipws() of
608                   of #"(" => let                    #"(" =>
609                          fun GetAct (lpct,x) = (case getch(!LexBuf)                    let
610                                 of #"(" => GetAct (lpct+1, #"("::x)                      fun loop_to_end (backslash, x) =
611                                  | #")" => if lpct = 0 then (implode (rev x))                        let
612                                                        else GetAct(lpct-1, #")"::x)                          val c    = getch (! LexBuf)
613                                  | y => GetAct(lpct,y::x)                          val notb = not backslash
614                                (* end case *))                          val nstr = c :: x
615                          in ACTION (GetAct (0,nil))                        in
616                            case c of
617                              #"\"" => if notb then nstr
618                                       else loop_to_end (false, nstr)
619                            | _ => loop_to_end (c = #"\\" andalso notb, nstr)
620                          end
621                        fun GetAct (lpct, x) =
622                          let
623                            val c    = getch (! LexBuf)
624                            val nstr = c :: x
625                          in
626                            case c of
627                              #"\"" => GetAct (lpct, loop_to_end (false, nstr))
628                            | #"(" => GetAct (lpct + 1, nstr)
629                            | #")" => if lpct = 0 then implode (rev x)
630                                      else GetAct(lpct - 1, nstr)
631                            | _ => GetAct(lpct, nstr)
632                          end
633                      in
634                        ACTION (GetAct (0,nil))
635                          end                          end
636                   | #";" => SEMI                   | #";" => SEMI
637                   | c => (prSynErr ("invalid character " ^ String.str c)))                   | c => (prSynErr ("invalid character " ^ String.str c)))
# Line 912  Line 916 
916    
917           fun GetEndLeaf t =           fun GetEndLeaf t =
918             let fun f ((tl,el)::r) = if (tl=t) then el else f r             let fun f ((tl,el)::r) = if (tl=t) then el else f r
919                     | f _ = raise Match
920             in f tcpairs             in f tcpairs
921             end             end
922           fun GetTrConLeaves s =           fun GetTrConLeaves s =
# Line 987  Line 992 
992    
993              val _ = say "val s = map f (rev (tl (rev s))) \n"              val _ = say "val s = map f (rev (tl (rev s))) \n"
994              val _ = say "exception LexHackingError \n"              val _ = say "exception LexHackingError \n"
995              val _ = say "fun look ((j,x)::r, i) = if i = j then x else look(r, i) \n"              val _ = say "fun look ((j,x)::r, i: int) = if i = j then x else look(r, i) \n"
996              val _ = say "  | look ([], i) = raise LexHackingError\n"              val _ = say "  | look ([], i) = raise LexHackingError\n"
997    
998          val _ = say "fun g {fin=x, trans=i} = {fin=x, trans=look(s,i)} \n"          val _ = say "fun g {fin=x, trans=i} = {fin=x, trans=look(s,i)} \n"
999           in res           in res
1000          end          end
1001    
1002            fun makeTable args = let
1003                fun makeOne (a, b) = let
1004                    fun item (N i) = ("N", i)
1005                      | item (T i) = ("T", i)
1006                      | item (D i) = ("D", i)
1007                    fun makeItem x = let
1008                        val (t, n) = item x
1009                    in
1010                        app say ["(", t, " ", Int.toString n, ")"]
1011                    end
1012                    fun makeItems [] = ()
1013                      | makeItems [x] = makeItem x
1014                      | makeItems (hd :: tl) =
1015                        (makeItem hd; say ","; makeItems tl)
1016                in
1017                    say "{fin = [";
1018                    makeItems b;
1019                    app say ["], trans = ", a, "}"]
1020                end
1021                fun mt ([], []) = ()
1022                  | mt ([a], [b]) = makeOne (a, b)
1023                  | mt (a :: a', b :: b') =
1024                    (makeOne (a, b); say ",\n"; mt (a', b'))
1025                  | mt _ = raise Match
1026            in
1027                mt args
1028            end
1029    
1030    (*
1031          fun makeTable(nil,nil) = ()          fun makeTable(nil,nil) = ()
1032            | makeTable(a::a',b::b') =            | makeTable(a::a',b::b') =
1033               let fun makeItems nil = ()               let fun makeItems nil = ()
# Line 1014  Line 1048 
1048                    then ()                    then ()
1049                    else (say ",\n"; makeTable(a',b')))                    else (say ",\n"; makeTable(a',b')))
1050                end                end
1051    *)
1052    
1053          fun msg x = TextIO.output(TextIO.stdOut, x)          fun msg x = TextIO.output(TextIO.stdOut, x)
1054    

Legend:
Removed from v.418  
changed lines
  Added in v.919

root@smlnj-gforge.cs.uchicago.edu
ViewVC Help
Powered by ViewVC 1.0.0