C - 澄清 strtok 中的分隔符

Question

我正在尝试分解一个包含管道 (|) 和 OR 符号 (||) 的 shell 命令，这些命令用 strtok 表示为数组中的字符，除了，OR 命令也可以是旁边的两个管道彼此。具体来说，我需要知道何时使用 |、;、&& 或 ||出现在命令中。

有没有一种方法可以在 strtok 中指定一个定界符的结束位置和另一个定界符的开始位置，因为我知道通常定界符是一个字符长，您只需将它们全部列出，中间没有空格或任何内容。

哦，换行符是有效的分隔符吗？还是 strtok 只做空格？

Answer 1

从你的最后一个问题开始:是的，strtok 可以毫无问题地使用换行符作为分隔符。

不幸的是，您的第一个问题的答案并不是那么肯定。 strtok 将所有定界符视为相等，并且不区分单个定界符和任意数量的连续定界符。换句话说，如果你给 |&; 作为分隔符，它将把 ||||||||| 或 &&&或 &|&|; 完全相同。

我会更进一步:我会冒险并声明 strtok 根本不适合将 shell 命令分解成组成部分的事实 - 我'我很确定没有办法将它用于将产生可用结果的这项工作。

特别是，您没有任何只是充当定界符的东西。出于您的目的，&、| 和 || 是它们自己的标记。在提供给 shell 的字符串中，您不必像 strtok “认为”它们那样有资格作为定界符的任何。

strtok 面向由分隔符分隔的标记，分隔符什么都不是 除了分隔符。当 strtok 读取标记时，它们之间的分隔符将被完全忽略(并且就此而言被销毁)。对于 shell，像 a|b 这样的字符串实际上是三个标记——您需要 a、| 和 b —— 它们之间没有任何 strtok 可以安全地覆盖和/或忽略的东西 —— 但这是 strtok 工作方式的要求。为了向您提供第一个 a，它会用 '\0' 覆盖下一个字符(在本例中为 |)。然后它无法恢复该管道来告诉您下一个标记应该是什么。

我认为您可能需要一个贪婪分词器，即构建最长的可作为分词的字符字符串，并在遇到不能成为当前分词一部分的字符时停止的分词器。当您请求下一个标记时，它从前一个标记结束后的第一个字符开始，没有(必然)跳过/忽略任何内容(当然，如果它遇到像空白一样没有被引用的东西不知何故，它可能会跳过它)。