<?xml version="1.0" encoding="UTF-8" ?>
<rss version="2.0">
<channel>
<title><![CDATA[向东博客 专注WEB应用 构架之美 --- 构架之美，在于尽态极妍 | 应用之美，在于药到病除]]></title> 
<link>http://jackxiang.com/index.php</link> 
<description><![CDATA[赢在IT，Playin' with IT,Focus on Killer Application,Marketing Meets Technology.]]></description> 
<language>zh-cn</language> 
<copyright><![CDATA[向东博客 专注WEB应用 构架之美 --- 构架之美，在于尽态极妍 | 应用之美，在于药到病除]]></copyright>
<item>
<link>http://jackxiang.com/post//</link>
<title><![CDATA[[替换实战]sed模拟替换，sed -i （先sed -n匹配模拟替换输出加p模拟替换显示后）实现*.conf批量替换文件中的控制字符（特别是模拟替换）,以替换PHP-FPM的PHP-SOCK位置为例子。]]></title> 
<author>jack &lt;xdy108@126.com&gt;</author>
<category><![CDATA[Php/Js/Shell/Go]]></category>
<pubDate>Tue, 27 Jun 2017 03:08:24 +0000</pubDate> 
<guid>http://jackxiang.com/post//</guid> 
<description>
<![CDATA[ 
	核心是模拟替换，用<br/><textarea name="code" class="php" rows="15" cols="100">
sed -n &#039;s#0.0.0.0:8443#0.0.0.0:443#p&#039; nginx-kong.conf&nbsp;&nbsp;&nbsp;&nbsp;
&nbsp;&nbsp;&nbsp;&nbsp;listen 0.0.0.0:443 ssl;
</textarea><br/>CentOS下面例子：<br/><textarea name="code" class="php" rows="15" cols="100">
sed -i &quot;s#urlfiltord#urlfilterd#&quot; `grep -rl &quot;urlfiltord&quot; ./`&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;//#号最后面不要有g的全局替换
</textarea><br/><br/>最后没有 g 选项<br/>在 sed 替换命令中，g 是一个可选的标志，它的意思是全局替换。如果没有指定 g 选项，sed 只会在每一行中替换第一个匹配的模式。<br/>例如，如果一行中有多个 “urlfiltord” 出现，不加 g 只会替换第一个出现的 “urlfiltord” 为 “urlfilterd”。如果加上 g，就会将这一行中所有的 “urlfiltord” 都替换为 “urlfilterd”。<br/>所以在这种情况下，没有加 g 是因为只想替换每一行中第一个匹配的 “urlfiltord”，而不是全部匹配的项。这是根据具体的替换需求来决定的，如果需要替换全部匹配项，就可以加上 g 选项。<br/><br/><br/>More：更多替换实践之Go 项目中使用的原生日志函数（log.Println / log.Printf / log.Fatalf）批量替换为你自定义的 logutil 包中的日志函数，可以使用如下 sed 脚本来完成替换。：https://jackxiang.com/post/12937/<br/><br/>记住，斜杠要转意，再就是是 sed -n &#039;s#abc#def#p&#039; replcee.txt&nbsp;&nbsp;==&gt;&nbsp;&nbsp;sed -i &#039;s#abc#def#&#039; replcee.txt 不要有g，如： sed -i #abc#def#g replcee.txt,出现没有被替换：<br/>sed -n &quot;s#,&#039;pdo-mysql-php70-7.0.5&#039;#123#p&quot;&nbsp;&nbsp;./*.yml&nbsp;&nbsp;#单引不行用双引，sed -n &#039;s#,&#92;&#039;pdo-mysql-php70-7.0.5&#92;&#039;#123#p&#039;&nbsp;&nbsp;./*.yml<br/>真实的替换将123给去了：<br/><textarea name="code" class="php" rows="15" cols="100">
sed -i &quot;s#,&#039;pdo-mysql-php70-7.0.5&#039;##&quot;&nbsp;&nbsp;./*.yml 
sed -i &quot;s#,&#039;opcache-php70-7.0.5&#039;##&quot;&nbsp;&nbsp;./*.yml
</textarea><br/><br/>&amp;符号也要转义：<br/><textarea name="code" class="php" rows="15" cols="100">
sed -n &#039;s@^error_reporting =.*@error_reporting = E_ALL &amp; ~E_DEPRECATED &amp; ~E_STRICT@p&#039; php.ini&nbsp;&nbsp;
error_reporting = E_ALL error_reporting = E_ALL &amp; ~E_DEPRECATED ~E_DEPRECATED error_reporting = E_ALL &amp; ~E_DEPRECATED ~E_STRICT
</textarea><br/>正确替换为：<br/><textarea name="code" class="php" rows="15" cols="100">
sed -n &#039;s@^error_reporting =.*@error_reporting = E_ALL &#92;&amp; ~E_DEPRECATED &#92;&amp; ~E_STRICT@p&#039; php.ini 
error_reporting = E_ALL &amp; ~E_DEPRECATED &amp; ~E_STRICT
</textarea><br/><br/>PHP.ini替换示例：<br/>sed -n &quot;s#stream_socket_server,#333#p&quot; php.ini&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<br/>; disable_functions = chroot,chgrp,chown,shell_exec,proc_open,proc_get_status,ini_alter,ini_restore,dl,openlog,syslog,readlink,symlink,popepassthru,333fsocket<br/><br/>批量替换包含某些内容的sed结合grep脚本：<br/>sed -i &quot;s#localhost#10.71.182.128#g&quot; grep -rl &quot;localhost&quot; ./<br/><br/>上面也可以实现先模拟替换，再真实替换，更靠谱一些：<br/>sed -n &#039;s#&#92;/data&#92;/jenkins&#92;/jobs&#92;/jackxiang.com_deploy&#92;/#&#92;/data&#92;/jenkins&#92;/jobs&#92;/jackxiang.com_deploy&#92;/workspace&#92;/#p&#039;&nbsp;&nbsp;*.yml<br/>真的替换：<br/>sed -i &#039;s#&#92;/data&#92;/jenkins&#92;/jobs&#92;/jackxiang.com_deploy&#92;/#&#92;/data&#92;/jenkins&#92;/jobs&#92;/jackxiang.com_deploy&#92;/workspace&#92;/#&#039;&nbsp;&nbsp;*.yml<br/><br/>nginx.lua2内容,给$upstream_response_time变量加上引号：<br/>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&#039;&quot;upstream_response_time&quot;:$upstream_response_time,&#039;<br/>sed -n &#039;s@:$upstream_response_time@:&quot;$upstream_response_time&quot;@p&#039; /usr/local/share/lua/5.1/kong/templates/nginx.lua2<br/>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&#039;&quot;upstream_response_time&quot;:&quot;$upstream_response_time&quot;,&#039;<br/><br/><br/>替换一下PHP的SOCK文件位置,/usr/local/php/var/run/php-fpm.sock&nbsp;&nbsp;===&gt;&nbsp;&nbsp;/dev/shm/php-fcgi.sock：<br/>cat /usr/local/php/etc/php-fpm.conf &#124;grep php-fpm.sock <br/>cat /usr/local/nginx/conf/vhost/*.conf&#124;grep php-fpm.sock<br/>新的:<br/>cat /usr/local/php/etc/php-fpm.conf &#124;grep php-fcgi.sock&nbsp;&nbsp;<br/>cat /usr/local/nginx/conf/vhost/*.conf&#124;grep php-fcgi.sock<br/><br/>启动Nginx和PHP成功后删除软链接的sock文件：<br/>ls -lart /usr/local/php/var/run/php-fpm.sock<br/>rm -rf /usr/local/php/var/run/php-fpm.sock<br/><br/>ansible 10.70.32.33,10.70.32.32 -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/vhost/*.conf&quot; <br/><br/>ansible 10.70.32.33,10.70.32.32 -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/php/etc/php-fpm.conf&quot; <br/><br/><br/>cp -rf&nbsp;&nbsp;/usr/local/php/etc/php-fpm.conf&nbsp;&nbsp;/usr/local/php/etc/php-fpm.conf.bak.04.20<br/>sed -i &quot;s/&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock/&#92;/dev&#92;/shm&#92;/php-fcgi.sock/g&quot; /usr/local/php/etc/php-fpm.conf<br/>diff /usr/local/php/etc/php-fpm.conf.bak.04.20 /usr/local/php/etc/php-fpm.conf<br/>service php-fpm restart<br/><br/>替换Nginx的配置文件：<br/><textarea name="code" class="php" rows="15" cols="100">
ansible xiyou_vedio_upload -a&quot;cp /usr/local/nginx/conf/nginx.conf&nbsp;&nbsp;/usr/local/nginx/conf/nginx.conf.bak.07.21&quot;&nbsp;&nbsp;
ansible xiyou_vedio_upload -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/nginx.conf&quot; 
</textarea><br/>批量测试：<br/>ansible jack_vedio_upload -a&quot;curl -i -H&quot;Host:u.jackxiang.com&quot; http://127.0.0.1/simpleupload.php&quot;&#124;grep 200 -B 2 &gt; simpleupload.php.test.response.200.log<br/><br/><br/>批量：<br/><br/>ansible 10.71.182.6 -a&quot;sed -i &#039;s/&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock/&#92;/dev&#92;/shm&#92;/php-fcgi.sock/g&#039; /usr/local/php/etc/php-fpm.conf&nbsp;&nbsp; &amp;&amp; service php-fpm restart&quot;<br/><br/>换成#号：<br/>ansible 192.168.112.161 -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#g&#039; /usr/local/php/etc/php-fpm.conf&quot;<br/><br/><br/>sed -n &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm&#92;.sock#&#92;/dev&#92;/shm&#92;/php-fcgi&#92;.sock#p&#039; /usr/local/nginx/conf/vhost/*.conf<br/><br/><br/>用ansible尝试批量替换#p ,注意显示内容：<br/><br/>ansible 10.71.182.6 -a&quot;sed -n &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#p&#039; /usr/local/nginx/conf/vhost/*.conf&quot;<br/><br/><br/>正式开始批量替换：<br/><br/>ansible 10.71.182.6 -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/vhost/*.conf&quot;<br/><br/>ansible xiyou -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/vhost/*.conf&quot;&nbsp;&nbsp;<br/>ansible xiyou_api -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/vhost/*.conf&quot;&nbsp;&nbsp;<br/>ansible xiyou_my -a&quot;sed -i &#039;s#&#92;/usr&#92;/local&#92;/php&#92;/var&#92;/run&#92;/php-fpm.sock#&#92;/dev&#92;/shm&#92;/php-fcgi.sock#&#039; /usr/local/nginx/conf/vhost/*.conf&quot;&nbsp;&nbsp;<br/><br/><br/>&lt;H2 class=post-title&gt;用&lt;FONT style=&quot;BACKGROUND-COLOR: #ffff00&quot;&gt;awk&lt;/FONT&gt;和sed实现批量替换文件中的控制字符&lt;/H2&gt;&lt;DIV class=post-body&gt;　　有时候会遇到这样一个问题，就是把文件ftp上传到AIX系统以后，发现文件中包含了一些特殊的控制字符，例如最常见的^M。如果文件只是一个两个，那直接用vi打开文件，把文件中的控制字符替换掉就可以了。但如果文件数量很多的话，这样一个个去改就会变得很麻烦。这时候我们可以通过&lt;FONT style=&quot;BACKGROUND-COLOR: #ffff00&quot;&gt;awk&lt;/FONT&gt;和sed实现对多个文件的批量处理，具体步骤如下：<br/>1）假设需要修改的文件放在/tmp/test1目录下，然后新建一个目录，如/tmp/test2目录，这个目录用来存放修改后的文件。<br/>ls -1 * &amp;#124; &lt;FONT style=&quot;BACKGROUND-COLOR: #ffff00&quot;&gt;awk&lt;/FONT&gt; &#039;&#123;print &quot;sed &#039;s/^M//g&#039; &quot;$1&quot; &amp;gt;/tmp/test2/&quot;$1&#125;&#039; &amp;gt; sed.sh<br/>生成的脚本文件如下所示：&lt;BR&gt;&lt;div class=code&gt;sed s/^M//g test.txt &amp;gt;/tmp/test2/test.txt<br/>sed s/^M//g test2.txt &amp;gt;/tmp/test2/test2.txt<br/>3）执行生成的脚本文件：<br/>就会在/tmp/test2目录下生成去掉控制字符^M后的文件。<br/>一些其他的方法可以参考以下的文章：<br/>&lt;U&gt;&lt;FONT color=#0000ff&gt;用sed批量替换文件中的字符&lt;/FONT&gt;&lt;/U&gt;&lt;/A&gt;<br/>&lt;U&gt;&lt;FONT color=#0000ff&gt;批量修改文件&lt;/FONT&gt;&lt;/U&gt;&lt;/A&gt;<br/>&lt;U&gt;&lt;FONT color=#0000ff&gt;sed的in-place edit选项，和RTFM&lt;/FONT&gt;&lt;/U&gt;&lt;/A&gt;<br/><br/><br/>方法1：<br/>这两天在构建一个应用的使用用到了maven,由于project很大,足足有700多个pom.xml文件,更郁闷的是在很多pom.xml文件里都单独指定了资源库的url,我需要把这些资源库的url统一指定到nexus本地中央库.<br/>手工一个个改文件配置有点不太实际,所以google了一下,找到批量替换文件内容的好方法,命令结构如下:<br/>find -name &#039;要查找的文件名&#039; &amp;#124; xargs perl -pi -e &#039;s&amp;#124;被替换的字符串&amp;#124;替换后的字符串&amp;#124;g&#039;下面这个例子就是将当前目录及所有子目录下的所有pom.xml文件中的&amp;#8221;http://repo1.maven.org/maven2&amp;#8220;替换为&amp;#8221;http://localhost:8081/nexus/content/groups/public&amp;#8220;.<br/>find -name &#039;pom.xml&#039; &amp;#124; xargs perl -pi -e &#039;s&amp;#124;http://repo1.maven.org/maven2&amp;#124;http://localhost:8081/nexus/content /groups/public&amp;#124;g&#039;这里用到了Perl语言,<br/>perl -pi -e 在Perl 命令中加上-e 选项，后跟一行代码，那它就会像运行一个普通的Perl 脚本那样运行该代码.<br/>从命令行中使用Perl 能够帮助实现一些强大的、实时的转换。认真研究正则表达式，并正确地使用，将会为您省去大量的手工编辑工作。<br/>find -name &#039;pom.xml&#039; &amp;#124; xargs perl -pi -e &#039;s&amp;#124;http://repo1.maven.org/maven2&amp;#124;http://localhost:8081/nexus/content/groups/public&amp;#124;g&#039;<br/><br/>方法2：<br/>Linux下批量替换多个文件中的字符串的简单方法。用sed命令可以批量替换多个文件中的字符串。<br/>用sed命令可以批量替换多个文件中的字符串。<br/>sed -i &quot;s/原字符串/新字符串/g&quot; `grep 原字符串 -rl 所在目录`<br/>例如：我要把mahuinan替换为huinanma，执行命令：<br/>sed -i &quot;s/mahuinan/huinanma/g&quot; &#039;grep mahuinan -rl /www&#039;<br/>这是目前linux最简单的批量替换字符串命令了！<br/>具体格式如下：<br/>sed -i &quot;s/oldString/newString/g&quot; `grep oldString -rl /path`<br/>实例代码：sed -i &quot;s/大小多少/日月水火/g&quot; `grep 大小多少 -rl /usr/aa`<br/>sed -i &quot;s/大小多少/日月水火/g&quot; `grep 大小多少 -rl ./`<br/><br/>方法3：<br/>在日程的开发过程中，可能大家会遇到将某个变量名修改为另一个变量名的情况，如果这个变量是一个局部变量的话，vi足以胜任，但是如果是某个全局变量的话，并且在很多文件中进行了使用，这个时候使用vi就是一个不明智的选择。这里给出一个简单的shell命令，可以一次性将所有文件中的指定字符串进行修改：<br/>grep &quot;abc&quot; * -R &amp;#124; awk -F: &#039;&#123;print $1&#125;&#039; &amp;#124; sort &amp;#124; uniq &amp;#124; xargs sed -i &#039;s/abc/abcde/g&#039;
]]>
</description>
</item><item>
<link>http://jackxiang.com/post//#blogcomment</link>
<title><![CDATA[[评论] [替换实战]sed模拟替换，sed -i （先sed -n匹配模拟替换输出加p模拟替换显示后）实现*.conf批量替换文件中的控制字符（特别是模拟替换）,以替换PHP-FPM的PHP-SOCK位置为例子。]]></title> 
<author> &lt;user@domain.com&gt;</author>
<category><![CDATA[评论]]></category>
<pubDate>Thu, 01 Jan 1970 00:00:00 +0000</pubDate> 
<guid>http://jackxiang.com/post//#blogcomment</guid> 
<description>
<![CDATA[ 
	
]]>
</description>
</item>
</channel>
</rss>