Merge branch 'master' into cmd-casl

[YACASL2.git] / src / token.c

diff --git a/src/token.c b/src/token.c
index fcb1aeb..96ddcaa 100644 (file)
--- a/src/token.c
+++ b/src/token.c
@@ -10,14 +10,14 @@ OPD *opdtok(const char *str)
     bool quoting = false;
 
     opd->opdc = 0;
-    if(str == NULL || strlen(str) == 0) {
+    if(str == NULL) {
         return opd;
     }
     p = q = strdup(str);
     do {
         /* オペランド数が多すぎる場合はエラー */
         if(opd->opdc >= OPDSIZE) {
-            setcerr(117, NULL);    /* operand is too many */
+            setcerr(117, str);    /* operand is too many */
             break;
         }
         /* 先頭が「=」の場合の処理 */
@@ -29,6 +29,11 @@ OPD *opdtok(const char *str)
             quoting = !quoting;
         }
         if(quoting == true) {
+            /* 閉じ「'」がないまま文字列が終了した場合 */
+            if(*q == '\0') {
+                setcerr(123, str);    /* illegal string */
+                break;
+            }
             q++;
         } else {
             sepp = q + strcspn(q, ", ");
@@ -38,7 +43,7 @@ OPD *opdtok(const char *str)
                 setcerr(121, NULL);    /* cannot get operand token */
                 break;
             }
-            if(strlen(p) > OPDSIZE + 2) {
+            if(strlen(p) > OPDSIZE + 2) {    /* OPDSIZE + 「'」2文字分 */
                 setcerr(118, p);    /* operand length is too long */
                 break;
             }
@@ -52,19 +57,28 @@ OPD *opdtok(const char *str)
 /* 空白またはタブで区切られた1行から、トークンを取得 */
 CMDLINE *linetok(const char *line)
 {
-    char *tokens, *p, *q, *sepp;
+    char *tokens, *p, *sepp;
+    bool quoting = false;
     CMDLINE *cmdl = malloc(sizeof(CMDLINE));
+
     if(line == NULL || strlen(line) == 0) {
         return NULL;
     }
-    tokens = p = strdup(line);
+    tokens = strdup(line);
     /* コメントを削除 */
-    if((q = strchr(tokens, ';')) != NULL) {
-        *q = '\0';
+    for(p = tokens; *p != '\0'; p++) {
+        /* 「'」で囲まれた文字列の処理。「''」は無視 */
+        if(*p == '\'' && *(p+1) != '\'' && !(p > tokens && *(p-1) == '\'')) {
+            quoting = !quoting;
+        } else if(quoting == false && *p == ';') {
+            *p = '\0';
+            break;
+        }
     }
-    if(*p == '\0') {
+    if(*tokens == '\0') {
         return NULL;
     }
+    p = tokens;
     /* 行の先頭が空白またはタブの場合、ラベルは空 */
     if((sepp = p + strcspn(p, " \t\n")) == p){
         cmdl->label = NULL;