在bash脚本中查找包含所有关键字的行

Posted 2021-03-27

从本质上讲，我想要的行为类似于：

cat file | grep -i keyword1 | grep -i keyword2 | grep -i keyword3

如何使用带有可变长度关键字参数列表的bash脚本来执行此操作？该脚本应对包含所有关键字的行进行不区分大小写的匹配。

答案

将此用作脚本

#! /bin/bash
awk -v IGNORECASE=1 -f <(
  P=; for k; do [ -z "$P" ] && P="/$k/" || P="$P&&/$k/"; done
  echo "$P{print}"
)

并将其作为

script.sh keyword1 keyword2 keyword3 < file

另一答案

我不知道这是否有效，我认为这很难看，也可能有一些效用，但是：

#!/bin/bash

unset keywords matchlist
keywords=("$@")

for kw in "${keywords[@]}"; do
matchlist="$matchlist /$kw/ &&"
done

matchlist="${matchlist% &&}"

# awk "$matchlist { print; }" < <(tr '[:upper:]' '[:lower:]' <file)
awk "$matchlist { print; }" file

是的，它需要一些关于特殊字符和东西的强大功能。这只是为了展示这个想法。

另一答案

尝试一下：

shopt -s nocasematch
keywords="keyword1|keyword2|keyword3"
while read line; do [[ $line =~ $keywords ]] && echo $line; done < file

编辑：

这是一个测试所有关键字的版本，而不仅仅是：

keywords=(keyword1 keyword2 keyword3)    # or keywords=("$@")
qty=${#keywords[@]}
while read line
do
    count=0
    for keyword in "${keywords[@]}"
    do
        [[ "$line" =~ $keyword ]] && (( count++ ))
    done
    if (( count == qty ))
    then
        echo $line
    fi
 done < textlines

另一答案

用grep找到了一种方法。

KEYWORDS=$@
MATCH_EXPR="cat file"
for keyword in ${KEYWORDS};
do
  MATCH_EXPR="${MATCH_EXPR} | grep -i ${keyword}"
done
eval ${MATCH_EXPR}

另一答案

你可以使用bash 4.0 ++

shopt -s nocasematch
while read -r line
do
    case "$line" in 
        *keyword1*) f=1;;&
        *keyword2*) g=1;;&
        *keyword3*) 
            [ "$f" -eq 1 ] && [ "$g" -eq 1 ] && echo $line;;
    esac
done < "file"
shopt -u nocasematch

或gawk

gawk '/keyword/&&/keyword2/&&/keyword3/' file

另一答案

我会用Perl做的。

要查找包含至少其中一个的所有行：

perl -ne'print if /(keyword1|keyword2|keyword3)/i' file

要查找包含所有行的所有行：

perl -ne'print if /keyword1/i && /keyword2/i && /keyword3/i' file

另一答案

这是一个名为search.sh的脚本，它将在文件或文件夹中搜索指定的所有关键字：

#!/bin/bash
if [ $# -lt 2 ]; then
    echo "[-] $0 file_to_search/folder_to_search keyword1 keyword2 keyword3 ..."
    exit
fi
all_args="$@"
i=0
results=""  # this will store the cumulative results from each keyword search
for arg in $all_args; do
    if [ $i -eq 0 ]; then
        # first argument is the file/folder to search
        file_to_search="$arg"
        i=$(($i + 1))
    elif [ $i -eq 1 ]; then
        # search the file/folder with first keyword (first search)
        results=`grep --color=always -r -n -i "$arg" "$file_to_search"`
        i=$(($i + 1))
    else
        # now keep searching the results from first search for other keywords
        results=`echo "$results" | grep --color=always -i "$arg"`
        i=$(($i + 1))
    fi
done
echo "$results"

上面脚本的示例调用将在'tools.txt'文件中搜索'python'和'jira'关键字：

./search.sh tools.txt python jira