X-Git-Url: http://j8takagi.net/cgi-bin/gitweb.cgi?p=YACASL2.git;a=blobdiff_plain;f=src%2Ftoken.c;h=b6d971c854fecc378dee9a4c0c4bd20600576200;hp=02e304dd896a66019a40a020c91d6e3a79b89cb2;hb=065d340f994652a9759c496b4c024e1f9a3a6783;hpb=555c5e8b851becc08ba661a9cb19f617d5a00c12 diff --git a/src/token.c b/src/token.c index 02e304d..b6d971c 100644 --- a/src/token.c +++ b/src/token.c @@ -1,133 +1,185 @@ -#include "casl2.h" +#include +#include +#include "cerr.h" +#include "cmem.h" #include "assemble.h" -/* 「,」区切りの文字列から、オペランドのトークンを取得 */ +/** + * @brief 「,」区切りの文字列から、オペランドのトークンを取得 + * + * @return オペランドのトークン + * + * @param *str 「,」区切りの文字列 + */ +OPD *opdtok(const char *str); + +/** + * @brief 行トークン取得のエラー定義 + */ +CERR cerr_linetok[] = { + { 104, "label length is too long" }, + { 105, "no command in the line" }, +}; + +/** + * @brief オペランドトークン取得のエラー定義 + */ +static CERR cerr_opdtok[] = { + { 117, "operand too many in DC" }, + { 118, "operand length too long" }, + { 121, "cannot get operand token" }, + { 123, "unclosed quote" }, +}; + OPD *opdtok(const char *str) { OPD *opd = malloc_chk(sizeof(OPD), "opd"); - char *p, *q, *r, *sepp; /* pは文字列全体の先頭位置、qはトークンの先頭位置、rは文字の位置 */ - int sepc = ',', rcnt = 0; + char *tok, *p; + char sepc = ','; + int i = 0, cnt_quote = 0; bool quoting = false; opd->opdc = 0; - if(str == NULL) { + if(str == NULL || !str[0]) { return opd; } - p = q = r = strdup_chk(str, "opdtopk.p"); + tok = p = strdup_chk(str, "opdtok.p"); do { /* オペランド数が多すぎる場合はエラー */ if(opd->opdc >= OPDSIZE) { - setcerr(117, NULL); /* operand is too many */ + setcerr(117, ""); /* operand is too many */ break; } - /* 先頭が「=」の場合 */ - if(*r == '=') { - r++; + /* 先頭が等号(=)の場合 */ + if(p[i] == '=') { + i++; } /* 「'」の場合 */ - if(*r == '\'') { - /* 「''」以外の場合はquote値を反転 */ - if(*(r+1) != '\'' && !(q < r && *(r-1) == '\'')) { + if(p[i] == '\'') { + /* 「''」以外の場合はquote値を反転する */ + if(p[i+1] != '\'' && (i == 0 || p[i-1] != '\'')) { quoting = !quoting; } - /* 文字列の長さを数える。「'」の場合は数えない */ - if(*(r+1) != '\'') { - rcnt++; + /* 「'」をカウントする。「''」の場合は1をカウント */ + if(p[i+1] != '\'') { + cnt_quote++; } } if(quoting == true) { - /* 閉じ「'」がないまま文字列が終了した場合 */ - if(*r == '\0') { + /* 「'」で開いたまま文字列が終了した場合 */ + if(!p[i]) { setcerr(123, str); /* unclosed quote */ break; } - r++; + i++; } else { - sepp = r + strcspn(r, ", "); - sepc = *sepp; - *sepp = '\0'; - if(*q == '\0') { - setcerr(121, NULL); /* cannot get operand token */ + i += strcspn(p + i, ", "); + sepc = p[i]; + p[i] = '\0'; + if(!p[0]) { + setcerr(121, ""); /* cannot get operand token */ break; } - if(strlen(q) - rcnt > OPDSIZE) { - setcerr(118, NULL); /* operand length is too long */ + if(strlen(p) - cnt_quote > OPDSIZE) { + setcerr(118, ""); /* operand length too long */ break; } - opd->opdv[(++opd->opdc)-1] = strdup_chk(q, "opd.opdv[]"); - q = r = sepp + 1; - rcnt = 0; + opd->opdv[(++opd->opdc)-1] = strdup_chk(p, "opd.opdv[]"); + p += i + 1; + i = cnt_quote = 0; } } while(sepc == ','); - free_chk(p, "opdtok.p"); + FREE(tok); return opd; } -/* 空白またはタブで区切られた1行から、トークンを取得 */ +/* assemble.hで定義された関数群 */ +void addcerrlist_tok() +{ + addcerrlist(ARRAYSIZE(cerr_linetok), cerr_linetok); + addcerrlist(ARRAYSIZE(cerr_opdtok), cerr_opdtok); +} + CMDLINE *linetok(const char *line) { - char *tokens, *p, *sepp; + char *tok = NULL, *p = NULL, *lbl = NULL; + int i; bool quoting = false; - CMDLINE *cmdl = malloc_chk(sizeof(CMDLINE), "cmdl"); + CMDLINE *cmdl = NULL; - if(line == NULL || strlen(line) == 0) { + if(!line[0] || line[0] == '\n') { return NULL; } - tokens = strdup_chk(line, "tokens"); + tok = p = strdup_chk(line, "tok"); /* コメントを削除 */ - for(p = tokens; *p != '\0'; p++) { - /* 「'」で囲まれた文字列の処理。「''」は無視 */ - if(*p == '\'' && *(p+1) != '\'' && !(p > tokens && *(p-1) == '\'')) { + for(i = 0; p[i]; i++) { + /* 「'」で囲まれた文字列の場合。「''」は無視 */ + if(p[i] == '\'' && p[i+1] != '\'' && (i == 0 || p[i-1] != '\'')) { quoting = !quoting; - } else if(quoting == false && *p == ';') { - *p = '\0'; + /* 「'」で囲まれた文字列でない場合、文字列末尾の「;」以降を削除 */ + } else if(quoting == false && p[i] == ';') { + p[i] = '\0'; break; } } - if(*tokens == '\0') { - return NULL; + /* 文字列末尾の改行と空白を削除 */ + i = strlen(p) - 1; + while(i > 0 && (p[i] == '\n' || p[i] == ' ' || p[i] == '\t')) { + p[i--] = '\0'; + } + /* 空行の場合、終了 */ + if(!p[0] || p[0] == '\n') { + goto linetokfin; } - p = tokens; + cmdl = malloc_chk(sizeof(CMDLINE), "cmdl"); + + /* ラベルの取得 */ /* 行の先頭が空白またはタブの場合、ラベルは空 */ - if((sepp = p + strcspn(p, " \t\n")) == p){ - cmdl->label = NULL; - } else { /* ラベルを取得 */ - *sepp = '\0'; + if((i = strcspn(p, " \t\n")) == 0) { + lbl = strdup_chk("", "linetok.lbl"); + } else { + lbl = strndup_chk(p, i, "linetok.lbl"); /* 文字列が長すぎる場合はエラー */ - if(strlen(p) > LABELSIZE) { - setcerr(104, p); /* label length is too long */ + if(i > LABELSIZE) { + setcerr(104, lbl); /* label length is too long */ + FREE(lbl); + goto linetokfin; } - cmdl->label = strdup_chk(p, "cmdl.label"); - p = sepp + 1; + /* 文字列先頭をラベルの次の文字に移動 */ + p += i; } - while(*p == ' ' || *p == '\t') { - p++; + cmdl->label = lbl; + + /* 命令の取得 */ + /* 文字列先頭の、ラベルと命令の間の空白を削除 */ + for(i = 0; p[i] == ' ' || p[i] == '\t'; i++) { + ; } - /* 命令がない場合、終了 */ - if(*p == '\n' || *p == '\0') { - /* ラベルが定義されていて命令がない場合はエラー */ - if(cmdl->label != NULL) { - setcerr(105, NULL); /* no command in the line */ + p += i; + /* 命令がない場合は、終了 */ + if(!p[0]) { + if(cmdl->label) { /* ラベルが定義されていて命令がない場合はエラー */ + setcerr(105, ""); /* no command in the line */ } - return NULL; + FREE(cmdl->label); + FREE(cmdl); + goto linetokfin; } - /* 命令を取得 */ - sepp = p + strcspn(p, " \t\n"); - *sepp = '\0'; - cmdl->cmd = strdup_chk(p, "cmdl.cmd"); - p = sepp + 1; - while(*p == ' ' || *p == '\t') { - p++; - } - /* オペランドを取得 */ - cmdl->opd = malloc_chk(sizeof(OPD), "cmdl.opd"); - /* 改行かタブまでの文字列を取得。 - 「'」で囲まれた文字列に含まれる場合があるため、空白は無視 */ - if((sepp = p + strcspn(p, "\t\n")) > p) { - *sepp = '\0'; - cmdl->opd = opdtok(p); - } else { - cmdl->opd->opdc = 0; + /* 命令取得の実行 */ + i = strcspn(p, " \t"); + cmdl->cmd = strndup_chk(p, i, "cmdl.cmd"); + + /* オペランドの取得 */ + /* 文字列の先頭を命令の次の文字に移動 */ + p += i + 1; + /* 文字列先頭の、命令とオペランドの間の空白を削除 */ + for(i = 0; p[i] == ' ' || p[i] == '\t'; i++) { + ; } + p += i; + /* オペランド取得の実行 */ + cmdl->opd = opdtok(p); +linetokfin: + FREE(tok); return cmdl; }