标题：[替换实战]sed模拟替换，sed -i （先sed -n匹配模拟替换输出加p模拟替换显示后）实现*.conf批量替换文件中的控制字符（特别是模拟替换）,以替换PHP-FPM的PHP-SOCK位置为例子。 出处：向东博客 专注WEB应用 构架之美 --- 构架之美，在于尽态极妍 | 应用之美，在于药到病除 时间：Tue, 27 Jun 2017 11:08:24 +0000 作者：jackxiang 地址：http://jackxiang.com/post/9286/ 内容： 核心是模拟替换，用 sed -n 's#0.0.0.0:8443#0.0.0.0:443#p' nginx-kong.conf listen 0.0.0.0:443 ssl; 记住，斜杠要转意，再就是是 sed -n 's#abc#def#p' replcee.txt ==> sed -i 's#abc#def#' replcee.txt 不要有g，如： sed -i #abc#def#g replcee.txt,出现没有被替换： sed -n "s#,'pdo-mysql-php70-7.0.5'#123#p" ./*.yml #单引不行用双引，sed -n 's#,\'pdo-mysql-php70-7.0.5\'#123#p' ./*.yml 真实的替换将123给去了： sed -i "s#,'pdo-mysql-php70-7.0.5'##" ./*.yml sed -i "s#,'opcache-php70-7.0.5'##" ./*.yml &符号也要转义： sed -n 's@^error_reporting =.*@error_reporting = E_ALL & ~E_DEPRECATED & ~E_STRICT@p' php.ini error_reporting = E_ALL error_reporting = E_ALL & ~E_DEPRECATED ~E_DEPRECATED error_reporting = E_ALL & ~E_DEPRECATED ~E_STRICT 正确替换为： sed -n 's@^error_reporting =.*@error_reporting = E_ALL \& ~E_DEPRECATED \& ~E_STRICT@p' php.ini error_reporting = E_ALL & ~E_DEPRECATED & ~E_STRICT PHP.ini替换示例： sed -n "s#stream_socket_server,#333#p" php.ini ; disable_functions = chroot,chgrp,chown,shell_exec,proc_open,proc_get_status,ini_alter,ini_restore,dl,openlog,syslog,readlink,symlink,popepassthru,333fsocket 批量替换包含某些内容的sed结合grep脚本： sed -i "s#localhost#10.71.182.128#g" grep -rl "localhost" ./ 上面也可以实现先模拟替换，再真实替换，更靠谱一些： sed -n 's#\/data\/jenkins\/jobs\/jackxiang.com_deploy\/#\/data\/jenkins\/jobs\/jackxiang.com_deploy\/workspace\/#p' *.yml 真的替换： sed -i 's#\/data\/jenkins\/jobs\/jackxiang.com_deploy\/#\/data\/jenkins\/jobs\/jackxiang.com_deploy\/workspace\/#' *.yml nginx.lua2内容,给$upstream_response_time变量加上引号： '"upstream_response_time":$upstream_response_time,' sed -n 's@:$upstream_response_time@:"$upstream_response_time"@p' /usr/local/share/lua/5.1/kong/templates/nginx.lua2 '"upstream_response_time":"$upstream_response_time",' 替换一下PHP的SOCK文件位置,/usr/local/php/var/run/php-fpm.sock ===> /dev/shm/php-fcgi.sock： cat /usr/local/php/etc/php-fpm.conf |grep php-fpm.sock cat /usr/local/nginx/conf/vhost/*.conf|grep php-fpm.sock 新的: cat /usr/local/php/etc/php-fpm.conf |grep php-fcgi.sock cat /usr/local/nginx/conf/vhost/*.conf|grep php-fcgi.sock 启动Nginx和PHP成功后删除软链接的sock文件： ls -lart /usr/local/php/var/run/php-fpm.sock rm -rf /usr/local/php/var/run/php-fpm.sock ansible 10.70.32.33,10.70.32.32 -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/vhost/*.conf" ansible 10.70.32.33,10.70.32.32 -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/php/etc/php-fpm.conf" cp -rf /usr/local/php/etc/php-fpm.conf /usr/local/php/etc/php-fpm.conf.bak.04.20 sed -i "s/\/usr\/local\/php\/var\/run\/php-fpm.sock/\/dev\/shm\/php-fcgi.sock/g" /usr/local/php/etc/php-fpm.conf diff /usr/local/php/etc/php-fpm.conf.bak.04.20 /usr/local/php/etc/php-fpm.conf service php-fpm restart 替换Nginx的配置文件： ansible xiyou_vedio_upload -a"cp /usr/local/nginx/conf/nginx.conf /usr/local/nginx/conf/nginx.conf.bak.07.21" ansible xiyou_vedio_upload -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/nginx.conf" 批量测试： ansible jack_vedio_upload -a"curl -i -H"Host:u.jackxiang.com" http://127.0.0.1/simpleupload.php"|grep 200 -B 2 > simpleupload.php.test.response.200.log 批量： ansible 10.71.182.6 -a"sed -i 's/\/usr\/local\/php\/var\/run\/php-fpm.sock/\/dev\/shm\/php-fcgi.sock/g' /usr/local/php/etc/php-fpm.conf && service php-fpm restart" 换成#号： ansible 192.168.112.161 -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#g' /usr/local/php/etc/php-fpm.conf" sed -n 's#\/usr\/local\/php\/var\/run\/php-fpm\.sock#\/dev\/shm\/php-fcgi\.sock#p' /usr/local/nginx/conf/vhost/*.conf 用ansible尝试批量替换#p ,注意显示内容： ansible 10.71.182.6 -a"sed -n 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#p' /usr/local/nginx/conf/vhost/*.conf" 正式开始批量替换： ansible 10.71.182.6 -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/vhost/*.conf" ansible xiyou -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/vhost/*.conf" ansible xiyou_api -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/vhost/*.conf" ansible xiyou_my -a"sed -i 's#\/usr\/local\/php\/var\/run\/php-fpm.sock#\/dev\/shm\/php-fcgi.sock#' /usr/local/nginx/conf/vhost/*.conf"

用awk和sed实现批量替换文件中的控制字符

　　有时候会遇到这样一个问题，就是把文件ftp上传到AIX系统以后，发现文件中包含了一些特殊的控制字符，例如最常见的^M。如果文件只是一个两个，那直接用vi打开文件，把文件中的控制字符替换掉就可以了。但如果文件数量很多的话，这样一个个去改就会变得很麻烦。这时候我们可以通过awk和sed实现对多个文件的批量处理，具体步骤如下： 1）假设需要修改的文件放在/tmp/test1目录下，然后新建一个目录，如/tmp/test2目录，这个目录用来存放修改后的文件。 ls -1 * | awk '{print "sed 's/^M//g' "$1" >/tmp/test2/"$1}' > sed.sh 生成的脚本文件如下所示：
sed s/^M//g test.txt >/tmp/test2/test.txt sed s/^M//g test2.txt >/tmp/test2/test2.txt 3）执行生成的脚本文件： 就会在/tmp/test2目录下生成去掉控制字符^M后的文件。 一些其他的方法可以参考以下的文章： 用sed批量替换文件中的字符 批量修改文件 sed的in-place edit选项，和RTFM 方法1： 这两天在构建一个应用的使用用到了maven,由于project很大,足足有700多个pom.xml文件,更郁闷的是在很多pom.xml文件里都单独指定了资源库的url,我需要把这些资源库的url统一指定到nexus本地中央库. 手工一个个改文件配置有点不太实际,所以google了一下,找到批量替换文件内容的好方法,命令结构如下: find -name '要查找的文件名' | xargs perl -pi -e 's|被替换的字符串|替换后的字符串|g'下面这个例子就是将当前目录及所有子目录下的所有pom.xml文件中的”http://repo1.maven.org/maven2“替换为”http://localhost:8081/nexus/content/groups/public“. find -name 'pom.xml' | xargs perl -pi -e 's|http://repo1.maven.org/maven2|http://localhost:8081/nexus/content /groups/public|g'这里用到了Perl语言, perl -pi -e 在Perl 命令中加上-e 选项，后跟一行代码，那它就会像运行一个普通的Perl 脚本那样运行该代码. 从命令行中使用Perl 能够帮助实现一些强大的、实时的转换。认真研究正则表达式，并正确地使用，将会为您省去大量的手工编辑工作。 find -name 'pom.xml' | xargs perl -pi -e 's|http://repo1.maven.org/maven2|http://localhost:8081/nexus/content/groups/public|g' 方法2： Linux下批量替换多个文件中的字符串的简单方法。用sed命令可以批量替换多个文件中的字符串。 用sed命令可以批量替换多个文件中的字符串。 sed -i "s/原字符串/新字符串/g" `grep 原字符串 -rl 所在目录` 例如：我要把mahuinan替换为huinanma，执行命令： sed -i "s/mahuinan/huinanma/g" 'grep mahuinan -rl /www' 这是目前linux最简单的批量替换字符串命令了！ 具体格式如下： sed -i "s/oldString/newString/g" `grep oldString -rl /path` 实例代码：sed -i "s/大小多少/日月水火/g" `grep 大小多少 -rl /usr/aa` sed -i "s/大小多少/日月水火/g" `grep 大小多少 -rl ./` 方法3： 在日程的开发过程中，可能大家会遇到将某个变量名修改为另一个变量名的情况，如果这个变量是一个局部变量的话，vi足以胜任，但是如果是某个全局变量的话，并且在很多文件中进行了使用，这个时候使用vi就是一个不明智的选择。这里给出一个简单的shell命令，可以一次性将所有文件中的指定字符串进行修改： grep "abc" * -R | awk -F: '{print $1}' | sort | uniq | xargs sed -i 's/abc/abcde/g' Generated by Jackxiang's Bo-blog 2.1.1 Release