Ejemplos de ESJ\Earley\Tokenizer Token en PHP

Ejemplo n.º 1

Archivo: Leaf.php Proyecto: estelsmith/earley-parser

 public function __toString()
 {
     $header = 'leaf';
     $value = $this->value->getValue();
     if ($value === chr(0)) {
         $value = '%EOF';
         $header = 'eof_' . $header;
     }
     return sprintf('%s -> %s', $header, $value);
 }

Ejemplo n.º 2

Archivo: TokenReference.php Proyecto: estelsmith/earley-parser

 /**
  * @param Token $token
  * @return bool
  */
 public function matchesToken(Token $token)
 {
     return $token->getDefinition()->getName() === $this->tokenName;
 }