Enum Tok 

pub enum Tok {
    Ident(String),
    Str(String),
    Num(String),
    Eval(String),
    Comment(String),
    LBrace,
    RBrace,
    LBracket,
    RBracket,
    LParen,
    RParen,
    Comma,
    Eq,
    Newline,
    Eof,
}

Variants

Ident(String)

Str(String)

文字列リテラル。引用符を除いた中身。

Num(String)

Eval(String)

eval(...) の中身を生のまま保持する。

Comment(String)

行コメント。parse では捨てられる。ハイライトのために保持する。

LBrace

RBrace

LBracket

RBracket

LParen

RParen

Comma

Eq

Newline

Eof

Implementations

impl Tok

pub fn describe(&self) -> String

Trait Implementations

impl Clone for Tok

fn clone(&self) -> Tok

Returns a duplicate of the value.

fn clone_from(&mut self, source: &Self)

Performs copy-assignment from source.

impl Debug for Tok

fn fmt(&self, f: &mut Formatter<'_>) -> Result

Formats the value using the given formatter.

impl Eq for Tok

impl PartialEq for Tok

fn eq(&self, other: &Tok) -> bool

Equality operator ==.

fn ne(&self, other: &Rhs) -> bool

Inequality operator !=.

impl StructuralPartialEq for Tok