如何从另一个文件中的一个文件中查找单词？

Posted 2021-05-06

在一个文本文件中，我有150个单词。我有另一个文本文件，大约有100,000行。

如何检查属于第一个文件的每个单词是否在第二个文件中？

我想过使用grep，但我找不到如何用它来阅读原文中的每个单词。

有没有办法用awk做到这一点？或另一种解决方案

我试过这个shell脚本，但它几乎匹配每一行：

#!/usr/bin/env sh
cat words.txt | while read line; do  
    if grep -F "$FILENAME" text.txt
    then
        echo "Se encontró $line"
    fi
done

我发现的另一种方式是：

fgrep -w -o -f "words.txt" "text.txt"

答案

你可以使用fgrep -f：

fgrep -f "first-file" "second-file"

或者匹配完整的单词：

fgrep -w -f "first-file" "second-file"

更新：根据评论：

awk 'FNR==NR{a[$1];next} ($1 in a){delete a[$1]; print $1}' file1 file2

另一答案

使用像这样的grep：

grep -f firstfile secondfile

第二种选择

感谢Ed Morton指出文件“reserved”中的单词被视为模式。如果这是一个问题 - 它可能是也可能不是 - OP可以使用不使用模式的这样的东西：

档案“保留”

cat
dog
fox

并提交“文本”

The cat jumped over the lazy
fox but didn't land on the
moon at all.
However it did land on the dog!!!

awk脚本是这样的：

awk 'BEGIN{i=0}FNR==NR{res[i++]=$1;next}{for(j=0;j<i;j++)if(index($0,res[j]))print $0}' reserved text

输出：

The cat jumped over the lazy
fox but didn't land on the
However it did land on the dog!!!

第三种选择

或者，它可以很简单地完成，但在bash中更慢：

while read r; do grep $r secondfile; done < firstfile