Erhalte Tokens von einem JavaScript-Code

Question

Ich möchte einen einfachen Internpreter in JavaScript/Node schreiben. Ich habe ein Hindernis, wenn es darum geht Token zu generieren.

var code = 'if (a > 2 && b<4) c = 10;'; 

code.match(/\W+/g) 
// [" (", " > ", " && ", "<", ") ", ";"] 

code.match(/\w+/g) 
// ["if", "a", "2", "b", "4", "elo"] 

Wie gezeigt, W+ lässt mich Sonderzeichen erhalten und w+ lässt mich Worte bekommen. Ich frage mich, wie diejenigen, die in einer Reihe, so etwas wie unten zu bekommen:

// ["if", "(", "a", ">", "2", "&&", "b", "<", "4", ")", "c", "=", "10", ";"] 

Answer 1

Wie gezeigt, W + läßt mich Sonderzeichen erhalten und w + läßt mich Worte bekommen. Ich frage mich, wie diejenigen, die in einer Reihe zu bekommen, so etwas wie unten:

einfach versuchen, diese

code.match(/\w+|\W+/g) 

gibt Ausgang als

["if", " (", "a", " > ", "2", " && ", "b", "<", "4", ") ", "c", " = ", "10", ";"] 

Und dies wird die Token als auch

trimmen

var tokens = code.match(/\w+|\W+/g).map(function(value){return value.trim()});