Lines Matching full:tokenizer
2417 function sc_Reader(tokenizer) {
2418 this.tokenizer = tokenizer;
2431 var token = tokenizer.peekToken();
2438 tokenizer.readToken(); // consume token
2448 tokenizer.readToken(); // consume token
2450 var par = tokenizer.readToken();
2470 var token = tokenizer.peekToken();
2473 tokenizer.readToken();
2495 var tokenizer = this.tokenizer;
2497 var token = tokenizer.readToken();
