Windows和Linux的不同換行符導致腳本執行異常

問題描述

有一個配置文件 config:

KAFKA_HOME=/home/wy/dev/kafka_2.13-2.6.0
BOOTSTRAP_SERVER=127.0.0.1:9092

另有一個使用該配置文件的腳本 list-topics.sh:

#!/bin/bash
. config

"$KAFKA_HOME"/bin/kafka-topics.sh --bootstrap-server "$BOOTSTRAP_SERVER" --list

我使用虛擬機Ubuntu掛載Windows分區,執行在Windows環境下編寫的腳本,提示:

wy@ship:/mnt/hgfs/D/projects/kafka-mate/scripts$ ./list-topics.sh 
/bin/kafka-topics.sh: No such file or directory13-2.6.0

解決

找了好久的原因,最終注意到config文件的換行符編碼爲CRLF

三種換行符(line separator):

  • Windows:CRLF(\r\n)
  • Unix and macOSLinux:LF(\n)
  • CLassic Mac OS:CR(\r),少見

改爲LF後,腳本運行正常。我用的IDEA,在右下角更改:

image.png

vim狀態欄的[noeol] [dos]是什麼意思?

當config的line separator問CRLF時,vim打開Windows分區上的文件時,狀態欄顯示[noeol][dos]

image.png

當config的line separator問LF時,vim打開Windows分區上的文件時,狀態欄顯示[noeol]

image.png

noeol:no end of line。

如果是Linux分區上的文件,且line separator爲LF時,狀態欄不會額外顯示。

以下內容來自:Vim 編輯器底端 [noeol], [dos] 的含義 - Trekshot - 博客園 (cnblogs.com)

有時使用 Vim 打開一個文件會在窗口底部發現 [noeol], [dos] 提示信息:

"hello-dos.txt" [noeol][dos] 2L, 10C                          1,1           All

這兩個符號有何含義?

直觀上理解,'noeol' 就是 'no end-of-line', 即“沒有行末結束符”, Linux 下的文本編輯器(如 Vim)會在每一行 (包括最後一行)末尾添加一個換行符。比如我們在 Debian 下新建一個名爲 'hello-unix.txt' 的文本文件,內容如下:

Hello
Unix

那麼,使用cat -A hello-unix.txt命令可以看到這些換行符:

ts@TS:~/www/document$ cat -A hello-unix.txt
Hello$
Unix$
ts@TS:~/www/document$

從中可以清楚地看到每行末尾的 '$' 字符,這就是 Linux 下的“行末結束符”。

下面我們再在 Windows 下創建一個名爲 'hello-dos.txt' 記事本文件,內容如下:

Hello
DOS

在 Debian 下查看此文件的換行符信息:

ts@TS:~/www/document$ cat -A hello-dos.txt
Hello^M$
DOSts@TS:~/www/document$

同樣是兩行,每行一個單詞,Windows 和 Linux 下的換行符有兩個明顯不同:

  1. Windows 下的換行符比 Linux 下的多了個 ^M
  2. 最後一行行末沒有換行符;

這兩個不同之處也正是 [dos], [noeol] 兩個 Flag 信息出現的原因。 Windows 下文本文件每行的換行符爲“回車+換行”(CRLF,^M$), 而 Linux 下則僅爲 “換行” (LF, $). Vim 發現文本中含有 ^M$換行字符判定爲 Windows 下創建的 文件,用 [dos] Flag 提示;Vim 沒有在最後一行發現換行符,判定此文件不是在 Linux 下創建/編輯,用 [noeol] Flag 提示用戶。

如何消除 [noeol] Flag?

只需在 Debian 下將該文件重新保存即可,還是上面的 hello-dos.txt 文件,打開它, 不做任何修改直接 :wq保存退出,再查看換行符:

ts@TS:~/www/document$ cat -A hello-dos.txt
Hello^M$
DOS^M$
ts@TS:~/www/document$

換行符已經追加上去,這裏要注意的是追加的是 Windows 下的換行符(回車+換行) ^M$, 而不是 Linux 下的換行符(換行)$, 因爲 Vim 已經發現此文件是在 Windows 下創建的([dos] Flag),儘管是在 Linux 下編輯,Vim 也會按照文件創建時所在的操作系統下的換行規則添加換行符。

如何消除 [dos] Flag?

有兩種簡單的方法:

  1. Linux 下提供有兩個命令用來進行 Windows 和 Unix 文件的轉化:dos2unix unix2dos;
  2. 在 Debian 下使用 touch template.txt 創建一個模板,在 Windows 下創建的任 何文本文件都以此模板爲基礎;

Reference

Vim 編輯器底端 [noeol], [dos] 的含義 - Trekshot - 博客園 (cnblogs.com)


本文同步發佈於:

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章