Bash 引用换行符导致heredoc 消耗第一个换行符
Posted
技术标签:
【中文标题】Bash 引用换行符导致heredoc 消耗第一个换行符【英文标题】：Bash quoted new-lines cause heredoc to consume first new-line 【发布时间】：2022-01-11 04:12:37 【问题描述】：如何重现
将以下示例复制到终端会话中；
gawk '
print $0;
' <<'EOF'
first
second
third
EOF
按<Enter>，然后按<Arrow-Up>
[user@host ~]$ gawk ' print $0; ' <<'EOF'first second third EOF
注意' <<'EOF'first 位，第一个新行被消耗。
将以下示例复制到终端会话中；
gawk ' print $0; ' <<'EOF'
forth
fifth
sixth
EOF
按<Enter>，然后按<Arrow-Up>
[user@host ~]$ gawk ' print $0; ' <<'EOF' forth fifth sixth EOF
注意' <<'EOF' 位，第一个新行不被消耗。
问题
如何让 Bash 正确附加到历史记录？
我花了几个小时在网上搜索其他有此问题的人，但没有 运气，这是一个已知的错误吗？
设备统计
bash --version
5.1.8(1)-release (x86_64-pc-linux-gnu)
echo "$TERM"
xterm-256color
uname -ro
5.13.19-2-MANJARO GNU/Linux
配置文件
~/.profile
export QT_QPA_PLATFORMTHEME="qt5ct"
export EDITOR=/usr/bin/nano
export GTK2_RC_FILES="$HOME/.gtkrc-2.0"
. "$HOME/.cargo/env"
export PATH="$HOME/.npm-global/bin:$PATH"
~/.bashrc
#
# ~/.bashrc
#
[[ $- != *i* ]] && return
colors()
local fgc bgc vals seq0
printf "Color escapes are %s\n" '\e[$value;...;$valuem'
printf "Values 30..37 are \e[33mforeground colors\e[m\n"
printf "Values 40..47 are \e[43mbackground colors\e[m\n"
printf "Value 1 gives a \e[1mbold-faced look\e[m\n\n"
# foreground colors
for fgc in 30..37; do
# background colors
for bgc in 40..47; do
fgc=$fgc#37 # white
bgc=$bgc#40 # black
vals="$fgc:+$fgc;$bgc"
vals=$vals%%;
seq0="$vals:+\e[$valsm"
printf " %-9s" "$seq0:-(default)"
printf " $seq0TEXT\e[m"
printf " \e[$vals:+$vals+$vals;1mBOLD\e[m"
done
echo; echo
done
[ -r /usr/share/bash-completion/bash_completion ] && . /usr/share/bash-completion/bash_completion
# Change the window title of X terminals
case $TERM in
xterm*|rxvt*|Eterm*|aterm|kterm|gnome*|interix|konsole*)
PROMPT_COMMAND='echo -ne "\033]0;$USER@$HOSTNAME%%.*:$PWD/#$HOME/\~\007"'
;;
screen*)
PROMPT_COMMAND='echo -ne "\033_$USER@$HOSTNAME%%.*:$PWD/#$HOME/\~\033\\"'
;;
esac
use_color=true
# Set colorful PS1 only on colorful terminals.
# dircolors --print-database uses its own built-in database
# instead of using /etc/DIR_COLORS. Try to use the external file
# first to take advantage of user additions. Use internal bash
# globbing instead of external grep binary.
safe_term=$TERM//[^[:alnum:]]/? # sanitize TERM
match_lhs=""
[[ -f ~/.dir_colors ]] && match_lhs="$match_lhs$(<~/.dir_colors)"
[[ -f /etc/DIR_COLORS ]] && match_lhs="$match_lhs$(</etc/DIR_COLORS)"
[[ -z $match_lhs ]] \
&& type -P dircolors >/dev/null \
&& match_lhs=$(dircolors --print-database)
[[ $'\n'$match_lhs == *$'\n'"TERM "$safe_term* ]] && use_color=true
if $use_color ; then
# Enable colors for ls, etc. Prefer ~/.dir_colors #64489
if type -P dircolors >/dev/null ; then
if [[ -f ~/.dir_colors ]] ; then
eval $(dircolors -b ~/.dir_colors)
elif [[ -f /etc/DIR_COLORS ]] ; then
eval $(dircolors -b /etc/DIR_COLORS)
fi
fi
if [[ $EUID == 0 ]] ; then
PS1='\[\033[01;31m\][\h\[\033[01;36m\] \W\[\033[01;31m\]]\$\[\033[00m\] '
else
PS1='\[\033[01;32m\][\u@\h\[\033[01;37m\] \W\[\033[01;32m\]]\$\[\033[00m\] '
fi
alias ls='ls --color=auto'
alias grep='grep --colour=auto'
alias egrep='egrep --colour=auto'
alias fgrep='fgrep --colour=auto'
else
if [[ $EUID == 0 ]] ; then
# show root@ when we don't have colors
PS1='\u@\h \W \$ '
else
PS1='\u@\h \w \$ '
fi
fi
unset use_color safe_term match_lhs sh
alias cp="cp -i" # confirm before overwriting something
alias df='df -h' # human-readable sizes
alias free='free -m' # show sizes in MB
alias np='nano -w PKGBUILD'
alias more=less
xhost +local:root > /dev/null 2>&1
# Bash won't get SIGWINCH if another process is in the foreground.
# Enable checkwinsize so that bash will check the terminal size when
# it regains control. #65623
# http://cnswww.cns.cwru.edu/~chet/bash/FAQ (E11)
shopt -s checkwinsize
shopt -s expand_aliases
# Enable history appending instead of overwriting. #139609
shopt -s histappend
#
# # ex - archive extractor
# # usage: ex <file>
ex ()
if [ -f $1 ] ; then
case $1 in
*.tar.bz2) tar xjf $1 ;;
*.tar.gz) tar xzf $1 ;;
*.bz2) bunzip2 $1 ;;
*.rar) unrar x $1 ;;
*.gz) gunzip $1 ;;
*.tar) tar xf $1 ;;
*.tbz2) tar xjf $1 ;;
*.tgz) tar xzf $1 ;;
*.zip) unzip $1 ;;
*.Z) uncompress $1;;
*.7z) 7z x $1 ;;
*) echo "'$1' cannot be extracted via ex()" ;;
esac
else
echo "'$1' is not a valid file"
fi
. "$HOME/.cargo/env"
##
# Disable auto-escaping of path variables via tab-completion
# shopt -u progcomp
shopt -s direxpand
##
# Set editor for <C-x> <C-e> keyboard-shortcut
export EDITOR="$(which vim)"
##
# Find globally installed NPM scripts
export PATH="$PATH:$HOME/.npm/bin"
if [[ -d "$HOME/.config/bashrc.d" ]]; then
for _p in "$HOME/.config/bashrc.d/"*.bashrc; do
[[ -x "$_p" ]] &&
source "$_p"
done
fi
注意事项
我已经在其他设备上测试了示例命令，例如 Raspberry Pi （运行他们基于 Debian 的 Raspian），并且引用 new 没有问题 导致heredoc换行符被消耗的行。所以我相当有信心 我的 Manjaro（KDE 风格）配置出了点问题。
我还检查了设备之间shopt 选项的差异，以及
没有找到任何东西，例如。
diff <(ssh rpi source '$HOME/.bashrc'; shopt -p) <(shopt -p)
#> No diff output
...因此，我们当然欢迎您提出其他要比较的建议！
据我所知，写信给history 时有一些错误，因为；
[user@host ~]$ history 2 | head -n -1 #> 512 gawk ' #> print $0; #> ' <<'EOF'first #> second #> third #> EOF
并且当会话关闭时，类似于流动的历史记录被保存；
[user@host ~]$ history 7 | head -n -1 #> 487 gawk ' #> 488 print $0; #> 489 ' <<'EOF'first #> 490 second #> 491 third #> 492 EOF
根据@konsolebox 的建议，我已将此报告为Bug Bash 邮件 列表。如果找到任何解决方案，我会尽力在此处更新此 OP。
【问题讨论】：
无法重现，但我觉得要求您提供一个重现该行为的示例与要求您提供解决方案是一样的 :) 对不起。 疯狂的好奇心......在运行有问题的gawk 调用后，history | tail 是否显示' <<'EOF'first 或' <<'EOF'\nfirst？否则，我无法复制
@chepner → 嘿，是的，我也无法在 Debian 派生发行版上重现它；似乎是 Arch/Manjaro 的东西。 @markp-fuso → 我已经用history 输出更新了“Notes”部分，这是 <<'EOF'first 的情况，ei。没有\n 字符...感谢你们俩的帮助！
【参考方案1】：
如何让 Bash 正确附加到历史记录？
它看起来像是 5.1 中的一个合法错误（用 5.1 和 5.1.12 测试）所以答案是除非它得到修复，否则你不能。考虑向 bug-bash@gnu.org 发送错误报告。该问题不会在 5.0 中重现。
附：如果有人想知道我是如何测试它的，我使用 Gentoo 并使用我制作的 ebuild 安装了多个版本的 bash。见https://github.com/konsolebox/overlay/tree/master/app-shells。
【讨论】：
感谢您确认这可能是一个错误！...而不是我个人造成的错误。我已经按照建议完成了，一旦找到，我将使用 Bug-Bash 线程的链接更新 OP。以上是关于Bash 引用换行符导致heredoc 消耗第一个换行符的主要内容，如果未能解决你的问题，请参考以下文章