> For the complete documentation index, see [llms.txt](https://liuyujie0136.gitbook.io/sci-tech-notes/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://liuyujie0136.gitbook.io/sci-tech-notes/linux/linux-tips.md).
# Linux使用技巧
* [Linux使用技巧](#linux使用技巧)
* [Docker](#docker)
* [Docker从入门到实践](#docker从入门到实践)
* [Win10家庭版用WSL2运行Docker Desktop，将数据从C盘迁移到其他目录](#win10家庭版用wsl2运行docker-desktop将数据从c盘迁移到其他目录)
* [Docker创建共享文件夹](#docker创建共享文件夹)
* [鳥哥的Linux私房菜](#鳥哥的linux私房菜)
* [Linux常用命令](#linux常用命令)
* [Linux特殊符号](#linux特殊符号)
* [三十分钟学会AWK](#三十分钟学会awk)
* [三十分钟学会SED](#三十分钟学会sed)
* [Learn Vim Progressively](#learn-vim-progressively)
* [Linux查看系统基本信息](#linux查看系统基本信息)
* [Bash和Sh的区别](#bash和sh的区别)
* [利用.bashrc个性化配制bash环境](#利用bashrc个性化配制bash环境)
* [利用.vimrc个性化配置vim](#利用vimrc个性化配置vim)
* [Bash下使用`rsync`和`crontab`备份文件](#bash下使用rsync和crontab备份文件)
* [Linux中for循环的几个常用写法](#linux中for循环的几个常用写法)
* [Linux下将文件夹命名为今天的日期的方法](#linux下将文件夹命名为今天的日期的方法)
* [Linux下使ls命令只显示目录的方法](#linux下使ls命令只显示目录的方法)
* [Linux下替换`^M`字符方法](#linux下替换m字符方法)
* [附：Windows下使用git时保证为`LF`格式](#附windows下使用git时保证为lf格式)
* [Linux下将多行文件合并为一行](#linux下将多行文件合并为一行)
* [Linux中cut命令](#linux中cut命令)
* [Ubuntu镜像使用帮助](#ubuntu镜像使用帮助)
* [Ubuntu下使用apt install XX(or sudo apt install XX)报错Unable to locate package](#ubuntu下使用apt-install-xxor-sudo-apt-install-xx报错unable-to-locate-package)
* [Linux管理员修改普通用户密码](#linux管理员修改普通用户密码)
* [Linux下使用`sudo`命令出现not in the sudoers file](#linux下使用sudo命令出现not-in-the-sudoers-file)
* [Linux下安装Miniconda](#linux下安装miniconda)
* [WSL更改登录用户](#wsl更改登录用户)
* [WSL中Vim字体改变的解决方案](#wsl中vim字体改变的解决方案)
* [Linux字符串变量操作](#linux字符串变量操作)
* [截取](#截取)
* [删除与替换](#删除与替换)
* [变量声明](#变量声明)
* [Linux下`nohup`命令](#linux下nohup命令)
* [耗时很长的程序忘加nohup就运行了怎么办](#耗时很长的程序忘加nohup就运行了怎么办)
* [awk基本操作符、内置函数与变量](#awk基本操作符内置函数与变量)
* [awk操作符的优先级](#awk操作符的优先级)
* [awk内置函数](#awk内置函数)
* [awk内置变量](#awk内置变量)
* [awk同时处理多个文件](#awk同时处理多个文件)
* [Linux下文件批量重命名](#linux下文件批量重命名)
* [`mv`命令](#mv命令)
* [`rename`命令](#rename命令)
* [Bash中括号及`expr`的用法](#bash中括号及expr的用法)
* [小括号`()`](#小括号)
* [中括号`[]`](#中括号)
* [大括号`{}`](#大括号)
* [示例](#示例)
* [expr用法](#expr用法)
* [Linux下按Tab补全命令时忽略大小写](#linux下按tab补全命令时忽略大小写)
* [Linux `tar` 命令](#linux-tar-命令)
* [语法](#语法)
* [参数](#参数)
* [示例](#示例-1)
* [Bash脚本传递参数](#bash脚本传递参数)
* [位置参数](#位置参数)
* [参数名匹配](#参数名匹配)
* [Linux `echo` 不换行输出的两种方式](#linux-echo-不换行输出的两种方式)
* [Linux下批量中止多个进程](#linux下批量中止多个进程)
* [Linux下`split`命令将一个大文件按行拆分成小文件](#linux下split命令将一个大文件按行拆分成小文件)
* [sed正则表达式匹配，各种括号的转义和不转义](#sed正则表达式匹配各种括号的转义和不转义)
* [Sed正则表达式详细介绍](#sed正则表达式详细介绍)
* [行开始 `^`](#行开始-)
* [行尾 `$`](#行尾-)
* [单个字符 `.`](#单个字符-)
* [匹配字符集合 `[]`](#匹配字符集合-)
* [不匹配字符集 `[^]`](#不匹配字符集-)
* [字符范围 `[-]`](#字符范围--)
* [零到一次出现 `\?`](#零到一次出现)
* [一次或多次出现 `\+`](#一次或多次出现-)
* [零或多次出现 `*`](#零或多次出现-)
* [n个重复 `\{n\}`](#n个重复-n)
* [最少出现n个 `\{n,\}`](#最少出现n个-n)
* [m到n次出现 `\{m, n\}`](#m到n次出现-m-n)
* [或 `\|` `\(\|\)`](#或--)
* [awk中的回溯引用 (back references)](#awk中的回溯引用-back-references)
* [Linux两个文件求交集、并集、差集](#linux两个文件求交集并集差集)
* [定义](#定义)
* [方法一：`sort`+`uniq`](#方法一sortuniq)
* [方法二：`comm`，用于比较两个已排过序的文件](#方法二comm用于比较两个已排过序的文件)
* [方法三：`grep`](#方法三grep)
* [方法四：`awk`](#方法四awk)
* [`perl` `sed` `awk` `grep` 等对正则表达式的支持的差别](#perl-sed-awk-grep-等对正则表达式的支持的差别)
* [使用Xshell登录Linux子系统 (WSL)](#使用xshell登录linux子系统-wsl)
* [WSL重启方法](#wsl重启方法)
* [conda 创建/删除环境](#conda-创建删除环境)
* [消除WSL中`ls`时Windows文件夹背光的方法](#消除wsl中ls时windows文件夹背光的方法)
* [产生原因](#产生原因)
* [解决方法](#解决方法)
* [不显示配色](#不显示配色)
* [对于777的文件夹不显示背景色](#对于777的文件夹不显示背景色)
* [附加材料](#附加材料)
* [附：`LS_COLORS`的妙用](#附ls_colors的妙用)
* [URL Encoding](#url-encoding)
* [awk中`printf`的用法](#awk中printf的用法)
* [`printf`使用的转义字符](#printf使用的转义字符)
* [`printf`的修饰符](#printf的修饰符)
* [`printf`的格式说明符](#printf的格式说明符)
* [Shell管道 (pipe, `|`) 注意事项](#shell管道-pipe--注意事项)
* [我的wait为什么不能用](#我的wait为什么不能用)
* [Shell变量while循环内改变无法传递到循环外](#shell变量while循环内改变无法传递到循环外)
* [Shell中按指定分隔符读取文件字段](#shell中按指定分隔符读取文件字段)
* [Shell数组](#shell数组)
## Docker
> Docker is a tool to run Linux containers based on selected images.
### Docker从入门到实践
>
### Win10家庭版用WSL2运行Docker Desktop，将数据从C盘迁移到其他目录
Win10开始使用Hyper-V运行docker，家庭版无此功能，所以只能pro版本才能用docker desktop。后来升级到2004系统后，家庭版可升级WSL(Windows Subsystem for Linux)至WSL2，便可基于WSL2运行docker desktop，但相较于Hyper-V的区别在于，其数据由WSL2代为管理，无法在docker里设置镜像存储路径。
安装docker后，docker会自动创建2个发行版：`docker-desktop`和`docker-desktop-data`，其默认安装在C盘，在`%LOCALAPPDATA%/Docker/wsl`目录里，而docker的运行数据、镜像文件都存在`%LOCALAPPDATA%/Docker/wsl/data/ext4.vhdx`中，比较占用C盘空间，故考虑将其迁移至D盘。
对于WSL发行版的迁移，网上教程基本均需使用LxRunOffline，但其虽然可以迁移例如Ubuntu的发行版，但迁移不了docker自动创建的2个发行版。故考虑如下两种方式：
**方法一：使用wsl命令**
* 关闭docker desktop
* 关闭所有发行版
```
wsl --shutdown
```
* 导出docker-desktop-data
```
wsl --export docker-desktop-data D:\docker-desktop-data.tar
```
* 注销docker-desktop-data
```
wsl --unregister docker-desktop-data
```
* 重新导入docker-desktop-data
```
wsl --import docker-desktop-data D:\Tools\WSL\docker-desktop-data\ D:\docker-desktop-data.tar --version 2
```
* *注：只迁移docker-desktop-data即可，另一个占用空间较小*
**方法二：修改注册表（未直接验证，理论上及其他操作证明应当可行）**
* 关闭docker desktop
* 打开`powershell`，输入`whoami /user`，获得\[SID]；用`wsl --shutdown`命令关闭所有发行版
* 运行`regedit`，跳转至`HKEY_USERS\[SID]\SOFTWARE\Microsoft\Windows\CurrentVersion\Lxss`
* 在下属的文件文件夹中（文件夹名为一个UUID）找到`DistributionName`为`docker-desktop-data`的项
* 将其`BasePath`改为目标目录，如`\\?\D:\Tools\WSL\docker-desktop-data`，并将原目录下`ext4.vhdx`拷贝至该目录
* 重启即可使用
### Docker创建共享文件夹
* 检查docker是否安装成功
```
docker info
```
* 装载镜像
```
docker load -i ~/Downloads/bioinfo_PartI-PartII-PartIII1-3.tar.gz
```
* 创建共享文件夹
```
mkdir ~/Documents/bioinfo_tsinghua_share
```
* 创建容器（**win10下共享文件夹需用绝对路径**）
```
docker run --name=bioinfo_tsinghua -dt -h bioinfo_docker --restart unless-stopped -v C:/Users/[username]/Documents/bioinfo_tsinghua_share:/home/test/share bioinfo_tsinghua
```
* 将docker中的`/home/test/share`由`root`所有改为`test`所有
```
docker exec -u root bioinfo_tsinghua chown test:test /home/test/share
```
* 以`test`用户运行docker
```
docker exec -it bioinfo_tsinghua bash
```
* *注：以`root`用户运行docker*
```
docker exec -it -u root bioinfo_tsinghua bash
```
## 鳥哥的Linux私房菜
>
## Linux常用命令
>
## Linux特殊符号
>
## 三十分钟学会AWK
>
## 三十分钟学会SED
>
## Learn Vim Progressively
>
## Linux查看系统基本信息
* 查看版本当前操作系统内核信息
```bash
uname -a
```
* 查看当前操作系统版本信息
```bash
cat /proc/version
```
* 查看版本当前操作系统发行版信息
```bash
cat /etc/issue
```
* 查看cpu相关信息，包括型号、主频、内核信息等
```bash
cat /proc/cpuinfo
```
* 查看服务器名称
```bash
hostname
```
* 查看网络信息
```bash
cat /etc/sysconfig/network-scripts/ifcfg-eth0
cat /etc/sysconfig/network-scripts/ifcfg-l0
```
* 查看磁盘信息
```bash
lsblk 查看磁盘信息 - 列出所有可用块设备的信息，而且还能显示他们之间的依赖关系，但是它不会列出RAM盘的信息
fdisk -l 观察硬盘实体使用情况，也可对硬盘分区
df -h 查看磁盘总体情况
du -sh 查看当前文件夹磁盘占用
```
* 查看进程与用户信息
```bash
ps -ef 查看所有进程
ps -aux 按用户查看进程
top 实时显示进程状态
w 查看活动用户
id 查看指定用户信息
```
* [更多内容](https://blog.csdn.net/qq_31278903/article/details/83146031)
## Bash和Sh的区别
> Bash is the most commonly used linux shell.
* sh(或Shell命令语言)是由POSIX标准描述的一种编程语言。它有很多实现(ksh88, dash，…)。bash也可以被认为是sh的实现。因为sh是规范，不是实现，`/bin/sh`是在大部分POSIX系统上实际实现的符号连接（or 硬链接）。
* bash是兼容sh的一种实现（虽然在几年之前被视为POSIX标准），但随着时间流逝，它需要更多的扩展。这里面的一些扩展会改变有效的POSIX shell脚本的行为，所以bash本身不是有效的POSIX shell，而是POSIX shell语言的方言。但bash可以执行`--posix`切换，使得它更加的兼容POSIX，同时也尝试通过调用sh来模仿POSIX。
* 长期以来，在大部分GNU/Linux系统上，`/bin/sh`都是指向`/bin/bash`。结果，几乎可以忽略两者之间的区别了。但是这种情况最近开始改变。
* 在`/bin/sh`不指向`/bin/bash`（在某些情况下甚至都不存在`/bin/bash`）的系统中，一些常见的例子是：
* 现代的debian和ubuntu系统上，`sh`默认是`dash`的符号链接
* Busybox，它通常在Linux系统引导时作为initramfs的一部分运行。它使用了ash shell实现。
* BSDs，以及通常所有非linux系统。OpenBSD 使用pdksh，Korn shell的后代。FreeBSD的sh是原始UNIX Bourne shell的后代。Solaris有它自己的sh，但长期以来都不是与POSIX兼容的，是一种Heirloom项目提供的一个开源实现。
* 如何找到`/bin/sh`在我们系统上的指向
* `/bin/sh`的复杂之处是：它可以是符号链接也可以是硬链接。
* 如果是符号链接，可以尝试：
```bash
file -h /bin/sh
/bin/sh: symbolic link to dash
```
* 如果是硬链接，可以尝试：
```bash
find -L /bin -samefile /bin/sh
/bin/sh.distrib
/bin/dash
/bin/sh
```
* 注：实际上`-L`标志同时包括符号链接和硬链接，但是这种方法的缺点是它不是可移植的，POSIX不需要`find`来支持`-samefile`选项，尽管GNU `find`和FreeBSD `find`都支持它。
* Shebang：在计算领域中，Shebang（也称为Hashbang）是一个由井号和叹号构成的字符序列#!，其出现在文本文件的第一行的前两个字符。最终，通过在脚本的第一行编写Shebang来决定使用sh还是bash。
```bash
# 1. 使用sh
#!/bin/sh
# 2. 使用bash（如果不可用会失败并带上错误信息）
#!/bin/bash
# 3. 使用dash
#!/bin/dash
```
## 利用.bashrc个性化配制bash环境
**示例一**
```vim
# .bashrc
# Source global definitions
if [ -f /etc/bashrc ]; then
. /etc/bashrc
fi
# User specific environment and startup programs
if [ -f $HOME/shortcuts ]; then
source $HOME/shortcuts
fi
PATH=$HOME/bin:$PATH
export PATH
# User specific aliases and functions
alias qstat="qstat -u '*'"
#alias screen="/usr/bin/screen -D -R"
#alias rm="$HOME/bin/del.sh"
#alias undel="$HOME/bin/del.sh -u"
#alias ls="ls --color"
alias ld="ls -d"
alias c="clear"
alias l="ls -alh"
alias lf="ls -F|grep /"
alias lt="ls -tlr"
alias mv="mv -i"
alias cp="cp -pi"
alias diff="diff -b"
#PERL5LIB=$MYHOME/perllib:$MYHOME/perllib/lib64/perl5/site_perl/5.8.5:$MYHOME/perlib/lib/perl5/site_perl/5.8.5
#export PERL5LIB
#export R_LIBS_USER=~/R:/data/apps/R_library
```
**示例二**
```vim
# ~/.bashrc: executed by bash(1) for non-login shells.
# see /usr/share/doc/bash/examples/startup-files (in the package bash-doc)
# for examples
# If not running interactively, don't do anything
case $- in
*i*) ;;
*) return;;
esac
# don't put duplicate lines or lines starting with space in the history.
# See bash(1) for more options
HISTCONTROL=ignoreboth
# append to the history file, don't overwrite it
shopt -s histappend
# for setting history length see HISTSIZE and HISTFILESIZE in bash(1)
HISTSIZE=1000
HISTFILESIZE=2000
# check the window size after each command and, if necessary,
# update the values of LINES and COLUMNS.
shopt -s checkwinsize
# If set, the pattern "**" used in a pathname expansion context will
# match all files and zero or more directories and subdirectories.
#shopt -s globstar
# make less more friendly for non-text input files, see lesspipe(1)
[ -x /usr/bin/lesspipe ] && eval "$(SHELL=/bin/sh lesspipe)"
# set variable identifying the chroot you work in (used in the prompt below)
if [ -z "${debian_chroot:-}" ] && [ -r /etc/debian_chroot ]; then
debian_chroot=$(cat /etc/debian_chroot)
fi
# set a fancy prompt (non-color, unless we know we "want" color)
case "$TERM" in
xterm-color|*-256color) color_prompt=yes;;
esac
# uncomment for a colored prompt, if the terminal has the capability; turned
# off by default to not distract the user: the focus in a terminal window
# should be on the output of commands, not on the prompt
#force_color_prompt=yes
if [ -n "$force_color_prompt" ]; then
if [ -x /usr/bin/tput ] && tput setaf 1 >&/dev/null; then
# We have color support; assume it's compliant with Ecma-48
# (ISO/IEC-6429). (Lack of such support is extremely rare, and such
# a case would tend to support setf rather than setaf.)
color_prompt=yes
else
color_prompt=
fi
fi
if [ "$color_prompt" = yes ]; then
PS1='${debian_chroot:+($debian_chroot)}\[\033[01;32m\]\u@\h\[\033[00m\]:\[\033[01;34m\]\w\[\033[00m\]\$ '
else
PS1='${debian_chroot:+($debian_chroot)}\u@\h:\w\$ '
fi
unset color_prompt force_color_prompt
# If this is an xterm set the title to user@host:dir
case "$TERM" in
xterm*|rxvt*)
PS1="\[\e]0;${debian_chroot:+($debian_chroot)}\u@\h: \w\a\]$PS1"
;;
*)
;;
esac
# enable color support of ls and also add handy aliases
if [ -x /usr/bin/dircolors ]; then
test -r ~/.dircolors && eval "$(dircolors -b ~/.dircolors)" || eval "$(dircolors -b)"
alias ls='ls --color=auto'
#alias dir='dir --color=auto'
#alias vdir='vdir --color=auto'
alias grep='grep --color=auto'
alias fgrep='fgrep --color=auto'
alias egrep='egrep --color=auto'
fi
# colored GCC warnings and errors
#export GCC_COLORS='error=01;31:warning=01;35:note=01;36:caret=01;32:locus=01:quote=01'
# some more ls aliases
alias ll='ls -alF'
alias la='ls -A'
alias l='ls -CF'
# Add an "alert" alias for long running commands. Use like so:
# sleep 10; alert
alias alert='notify-send --urgency=low -i "$([ $? = 0 ] && echo terminal || echo error)" "$(history|tail -n1|sed -e '\''s/^\s*[0-9]\+\s*//;s/[;&|]\s*alert$//'\'')"'
# Alias definitions.
# You may want to put all your additions into a separate file like
# ~/.bash_aliases, instead of adding them here directly.
# See /usr/share/doc/bash-doc/examples in the bash-doc package.
if [ -f ~/.bash_aliases ]; then
. ~/.bash_aliases
fi
# enable programmable completion features (you don't need to enable
# this, if it's already enabled in /etc/bash.bashrc and /etc/profile
# sources /etc/bash.bashrc).
if ! shopt -oq posix; then
if [ -f /usr/share/bash-completion/bash_completion ]; then
. /usr/share/bash-completion/bash_completion
elif [ -f /etc/bash_completion ]; then
. /etc/bash_completion
fi
fi
# personal alias
alias c="clear"
alias ca="cat -A"
```
## 利用.vimrc个性化配置vim
* 复制一份vim配置模板到个人目录下
```bash
cp /usr/share/vim/vimrc ~/.vimrc
```
* 利用`vim`编辑该文件
```vim
"" 系统自带文件关键内容如下
"
" Vim5 and later versions support syntax highlighting. Uncommenting the next
" line enables syntax highlighting by default.
if has("syntax")
syntax on
endif
"
" If using a dark background within the editing area and syntax highlighting
" turn on this option as well
set background=dark
"
" Uncomment the following to have Vim jump to the last position when
" reopening a file
if has("autocmd")
au BufReadPost * if line("'\"") > 1 && line("'\"") <= line("$") | exe "normal! g'\"" | endif
endif
"
" Uncomment the following to have Vim load indentation rules and plugins
" according to the detected filetype.
"if has("autocmd")
" filetype plugin indent on
"endif
"
" The following are commented out as they cause vim to behave a lot
" differently from regular Vi. They are highly recommended though.
"set showcmd " Show (partial) command in status line.
"set showmatch " Show matching brackets.
"set ignorecase " Do case insensitive matching
"set smartcase " Do smart case matching
"set incsearch " Incremental search
"set autowrite " Automatically save before commands like :next and :make
"set hidden " Hide buffers when they are abandoned
"set mouse=a " Enable mouse usage (all modes)
"
" Source a global configuration file if available
if filereadable("/etc/vim/vimrc.local")
source /etc/vim/vimrc.local
endif
"
"" 实用设置
"
set nocompatible "去掉有关vi一致性模式，避免以前版本的bug和局限
set nu! "显示行号
set guifont=Luxi/ Mono/ 9 "设置字体，字体名称和字号
filetype on "检测文件的类型
set history=1000 "记录历史的行数
set background=dark "背景使用黑色
syntax on "语法高亮度显示
set autoindent "vim使用自动对齐，也就是把当前行的对齐格式应用到下一行(自动缩进）
set cindent "cindent是特别针对C语言语法自动缩进
set smartindent "依据上面的对齐格式，智能的选择对齐方式，对于类似C语言编写上有用
set tabstop=4 "设置tab键为4个空格
set shiftwidth=4 "设置当行之间交错时使用4个空格
set ai! "设置自动缩进
set showmatch "设置匹配模式，类似当输入一个左括号时会匹配相应的右括号
set guioptions-=T "去除vim的GUI版本中的toolbar
set vb t_vb= "当vim进行编辑时，如果命令错误，会发出警报，该设置去掉警报
set ruler "在编辑过程中，在右下角显示光标位置的状态行
set nohls "默认情况下，寻找匹配是高亮度显示，该设置关闭高亮显示
set incsearch "在程序中查询一单词，自动匹配单词的位置；如查询desk单词，当输到/d时，会自动找到第一个d开头的单词，当输入到/de时，会自动找到第一个以ds开头的单词，以此类推，进行查找；当找到要匹配的单词时，别忘记回车
set backspace=2 "设置退格键可用
```
* 保存退出
* [更多内容](https://blog.csdn.net/amoscykl/article/details/80616688)
## Bash下使用`rsync`和`crontab`备份文件
* Install `rsync` and `crontab`
```bash
# in Ubuntu
sudo apt -y install rsync
sudo apt -y install crontabs
# in CentOS
yum -y install rsync
yum -y install crontabs
```
* Prepare backup directory
```bash
mkdir /mac/backup
```
* Prepare a backup script, for example, `~/backup.sh`
```bash
#!/bin/bash
#backup.sh
#1. Local backup
RSYNC="rsync --stats --compress --recursive --times --perms --links --delete --max-size=100M --exclude-from=/home/john/.rsync/exclude"
echo "1. Backup of /home/john start at:"
date
$RSYNC /home/john/data/ /mac/backup/
echo "Backup end at:"
date
#2. Remote backup
RSYNC="rsync --stats --compress --recursive --times --perms --links --delete --max-size=100M"
echo "2. Backup 172.22.220.20:/data/ to /mac/backup2/ start at:"
date
$RSYNC john@172.22.220.20:/home/john/data/ /mac/backup2/
echo "Backup end at:"
date
exit 0
```
* Using `crontab` command to execute the backup script routinely, and record in a log file, for example, execute the command `~/backup.sh > ~/backup.log` in 5:10am everyday:
* add executable permission
```bash
chmod +x ~/backup.sh
```
* open crontab and edit it by the following command:
```bash
crontab -e # or crontab ~/cronjob
```
* type in the following lines or write the following in a file (i.e. `~/crontab`):
```bash
# minute hour day_in_month month day_in_week command
10 5 * * * ~/backup.sh > ~/backup.log
```
* exit and save
## Linux中for循环的几个常用写法
* 数字型循环
```bash
#!/bin/bash
# 1
for ((i=1;i<=10;i++))
do
echo $(expr $i \* 3 + 1);
done
# 2
for i in $(seq 1 10)
do
echo $(expr $i \* 3 + 1);
done
# 3
for i in {1..10}
do
echo $(expr $i \* 3 + 1);
done
# 4
awk 'BEGIN{for(i=1; i<=10; i++) print i}'
exit 0
```
* 字符型循环
```bash
#!/bin/bash
# 1
for i in `ls`;
do
echo $i is file name\! ;
done
# 2
for i in $* ;
do
echo $i is input chart\! ;
done
# 3
for i in f1 f2 f3 ;
do
echo $i is appoint ;
done
# 4
list="rootfs usr data data2"
for i in $list;
do
echo $i is appoint ;
done
exit 0
```
* 路径查找型循环
```bash
#!/bin/bash
# 1
for file in /proc/*;
do
echo $file is file path \! ;
done
# 2
for file in $(ls *.sh)
do
echo $file is file path \! ;
done
exit 0
```
## Linux下将文件夹命名为今天的日期的方法
```bash
alias today="date +F%" # +F% format is like 2020-01-01
mkdir results-$(today)
```
## Linux下使ls命令只显示目录的方法
```bash
ls -F | grep '/$' #最易用，若将其结果保存在变量里，可用循环遍历并用cd访问
ls -l | grep '^d' #显示信息最完整
```
附：ls与cd连用示例
```bash
#!/bin/bash
dir=`ls -F | grep "/$"`
for i in $dir
do
cd $i
files=`ls` # or files=$(ls)
for j in $files
do
cat $j >> /home/test/share/all.out
done
cd ..
done
exit 0
```
## Linux下替换`^M`字符方法
在Linux下使用`vi`或`cat -A`查看一些在Windows下创建的文本文件，有时会发现在行尾有一些`^M`，是由于Linux的换行符为`LF`，而Windows的换行符为`CRLF`所造成。它的存在虽然不影响文件的一般查看，但会影响利用`awk`、`grep`等命令对文件进行操作，见下：
```bash
cat -A text.txt
1^M$
2^M$
3^M$
4^M$
5^M$
6^M$
7^M$
8^M$
```
有如下解决方法：
* 使用`dos2unix`命令（**建议所有在win下创建的文件均先在root用户下运行此命令转换一下格式**）
```bash
dos2unix text.txt
```
* 使用vi的替换功能，在vi的命令模式下输入:
```
:%s/^M$//g #去掉行尾的^M
:%s/^M//g #去掉所有的^M
:%s/^M/[ctrl-v]+[enter]/g #将^M替换成回车
:%s/^M/\r/g #将^M替换成回车
```
* 使用`sed`命令
```bash
sed -e 's/^M/\n/g' text.txt #注意：^M需使用[ctrl-v] [ctrl-m]生成，并非直接输入
```
* 注：在vim的.vimrc文件中把fileformat=unix去掉便不会显示（默认不显示^M）
### 附：Windows下使用git时保证为`LF`格式
```bash
# 先设置用户名和密码
git config --global user.email "test@foo.com"
git config --global user.name "test"
# 提交时将CRLF转换为LF，拉取时不将LF转换为CRLF
# 配合VS Code设置默认EOL为`\n`(LF)，可使所有文件格式保持为LF
git config --global core.autocrlf input
# 也可设置为false，拒绝所有转换，但需保证项目所有参与者均用LF提交
# 拒绝提交包含混合换行符的文件
git config --global core.safecrlf true
# 查看配置
git config --global --list
```
## Linux下将多行文件合并为一行
* 注意：对于win下文件（非linux创建），建议先运行`dos2unix`命令
* 使用`awk`命令
```bash
awk 'BEGIN{ORS=" "} {print}' text.txt
# ORS：输出行分隔符，默认\n，此处改为空格，故可使两行合并
awk 'BEGIN{RS=EOF} {gsub(/\n/," "); print}' text.txt
# RS：输入行分隔符，默认\n，此处改为EOF文件结尾，故可一次读入整个文件，方便替换操作
```
* 使用`sed`命令：`sed`默认按行处理，`N`可以让其读入下一行，再对\n进行替换，这样就可以将两行并做一行。但为了将所有行并作一行，需要采用其跳转功能。`:flag`在代码开始处设置一个标记`flag`，在代码执行到结尾处时利用跳转命令`t flag`重新跳转到标号`flag`处，重新执行代码，这样就可以递归将所有行合并成一行。
```bash
sed ':flag; N; s/\n/ /g; t flag;' text.txt
```
* 使用`xargs`命令
```bash
cat text.txt | xargs
```
* 附：文件合并、行筛选、多行合并脚本示例
```bash
#!/bin/bash
dir=`ls -F | grep "/$"`
for i in $dir
do
echo $i >> all.out
cd $i
files=`ls`
for j in $files
do
dos2unix $j
echo $j >> ../all.out
awk 'BEGIN{ORS=" "}; /^[^0-9]/{print}' $j >> ../all.out
echo -e "\n" >> ../all.out
done
cd ..
done
exit 0
```
## Linux中cut命令
* cut是一个选取命令，其以行为单位，选择性输出符合条件的内容到标准输出，使用格式为：
```bash
cut