检查文件中是否存在多个字符串或正则表达式

10 浏览
0 Comments

检查文件中是否存在多个字符串或正则表达式

我想要检查我所有的字符串是否存在于一个文本文件中。它们可以存在于同一行或不同行，并且部分匹配也是可以的。像这样：

...
string1
...
string2
...
string3
...
string1 string2
...
string1 string2 string3
...
string3 string1 string2
...
string2 string3
...等等

在上面的例子中，我们可以在字符串的位置使用正则表达式。

例如，以下代码检查我的任何一个字符串是否存在于文件中：

if grep -EFq "string1|string2|string3" file; then
  # 至少有一个匹配
fi

如何检查它们是否全部存在？由于我们只关心所有匹配的存在与否，所以一旦所有字符串都匹配，我们应该停止读取文件。

是否有可能在不多次调用grep（当输入文件很大或者需要匹配大量字符串时不可扩展）或使用awk或python这样的工具的情况下完成？同时，是否有一个可以轻松扩展到正则表达式的字符串的解决方案？

0

3 答案

0 Comments

在这段内容中，出现了一个关于如何在文件中检查多个字符串或正则表达式是否存在的问题。下面是问题出现的原因和解决方法：

原因：

- 需要在文件中查找多个字符串或正则表达式是否存在。

- 希望能够限制匹配的文件必须同时满足所有的字符串或正则表达式。

解决方法：

- 使用git grep命令来进行搜索，命令语法为：git grep --all-match --no-index -l -e string1 -e string2 -e string3 file。

- 可以使用--and、--or和--not等布尔表达式来组合多个模式。

- 可以使用--threads参数指定使用的grep工作线程数量。

- 可以使用-q/--quiet/--silent参数来禁止输出匹配的行，并在有匹配时退出状态为0。

- 可以使用-G/--basic-regexp、-F/--fixed-strings、-E/--extended-regexp、-P/--perl-regexp、-f file等参数来更改模式类型。

根据这个的问题，使用git grep命令可以快速、简单、清晰地解决在文件中检查多个字符串或正则表达式是否存在的问题。这个命令可以根据需要进行参数配置，同时还可以使用布尔表达式来组合多个模式进行搜索。

0
0 Comments

问题的出现原因：

在处理文件时，有时候需要检查文件中是否存在多个特定的字符串或正则表达式。这可能是为了验证文件是否符合特定的要求，或者为了从文件中提取特定的信息。然而，通常的文本处理工具如grep和awk并不直接提供这样的功能，因此需要使用一些技巧来实现这个功能。

解决方法：

在给出的内容中，提供了两种解决方法。第一种方法是使用gnu-awk脚本，该脚本将文件中的每一行拆分成单词，并与给定的字符串或正则表达式进行匹配。如果所有的字符串或正则表达式都存在于文件中，则脚本会退出，并返回一个成功的状态码。否则，脚本会继续处理文件的下一行。可以使用awk命令来执行这个脚本，并根据返回的状态码来判断是否所有的字符串或正则表达式都存在于文件中。

第二种方法是使用gnu grep命令，利用其PCRE选项。通过使用多个前瞻断言来断言文件中存在所有的字符串。这样，grep命令会读取整个文件，并检查文件中是否存在所有的字符串。需要注意的是，为了使点号（.）能够匹配多行内容，必须在正则表达式中使用(?s)或DOTALL模式。grep命令还可以使用-z选项，将输入和输出数据视为以ASCII NUL字符（零字节）而不是换行符终止的行序列。这样，grep命令就可以将整个文件读取为一个字符串，方便进行匹配。

无论使用哪种方法，都可以判断文件中是否存在所有的字符串或正则表达式。这些解决方法都不受这些字符串在文件中出现的顺序的影响，只要所有的字符串都存在于文件中即可。因此，可以根据实际需要选择使用awk脚本还是grep命令来实现检查文件中是否存在多个字符串或正则表达式的功能。

0
0 Comments

在上述内容中，提到了使用Awk工具来检查文件中是否存在多个字符串或正则表达式。原因是Awk是由发明grep、shell等工具的人发明的，用于进行通用文本处理工作，因此没有理由避免使用它。

下面提供了一些解决方法和选项：

1. 使用GNU awk的一行命令来检查字符串是否存在：

awk 'NR==FNR{a[$0];next} {for(s in a) if(!index($0,s)) exit 1}' strings RS='^$' file

2. 如果要检查多个字符串是否存在，可以使用以下命令：

awk -v strings='string1 string2 string3' '
BEGIN {
    numStrings = split(strings,tmp)
    for (i in tmp) strs[tmp[i]]
}
numStrings == 0 { exit }
{
    for (str in strs) {
        if ( index($0,str) ) {
            delete strs[str]
            numStrings--
        }
    }
}
END { exit (numStrings ? 1 : 0) }
' file

3. 如果要检查正则表达式而不是字符串，可以使用以下命令：

awk -v RS='^$' 'END{exit !(/regexp1/ && /regexp2/ && /regexp3/)}' file

4. 另外，如果文件太大无法全部加载到内存中，可以使用以下命令：

awk '
NR==FNR { strings[$0]; numStrings=NR; next }
numStrings == 0 { exit }
{
    for (string in strings) {
        if ( index($0,string) ) {
            delete strings[string]
            numStrings--
        }
    }
}
END { exit (numStrings ? 1 : 0) }
' file_of_strings file_to_be_searched

总结起来，使用Awk工具可以方便地检查文件中是否存在指定的字符串或正则表达式。根据具体需求，选择合适的命令行选项即可实现相应的功能。

0