向东博客 专注WEB应用 构架之美 --- 构架之美，在于尽态极妍 | 应用之美，在于药到病除|赢在IT，Playin' with IT,Focus on Killer Application,Marketing Meets Technology.

背景：开发web程序来讲，凡是用户输入都不可信的原则，加强web应用的安全性培训笔记，主要是有这个安全的意识至关重要，形成梯队、纵深、层层防御体系至关重要。

1=1注入，主要是输入过滤：
数字型：？ID=120 and 1=1
字符型：单引号保障其完整性，闭合，形成完整查询。
搜索型：模糊搜索，like，test=adb%abc%。

信息泄漏
拖库
执行恶意代码获取administrator。
如何杜绝sql inject：参数化，检测非法字符，安全api。

身份认证，会话管理（放服务器验证别放前台）。
提升用户不存在，密码错误（弱密码）。撞库。
验证码饶过：网站回退，验证码名称和图片名一致；把验证码放session验证。

xss攻击：网站用户。输入js代码盗取cookie。javascript 尖括号过滤。跨站脚本主要是对用户的攻击，对服务器没有用。

越权漏洞：我可以修改你的资料。
春秋航空，update？id=xxx xxx变yyy。
垂直越权：访问更高级别的用户权限。
test 访问到了管理界面，发现按钮是灰色，F12 直接修改去disable，可点击，后没添加按钮，div disable=none，打开后就可以修改了（输入必填项），成功后再次登录，成功越权。

不安全的直接对象引用（xia z）：
任意文件引用～下载路径：.. 上一路径。
查看到系统的路径，网站源码。修复：只让输入.xml的，下源码%00终结符号：password=a.php%00download.xml
Ngnix在遇到%00空字节时与后端FastCGI处理不一致，导致可以在图片中嵌入PHP代码然后通过访问xxx.jpg%00.php来执行其中的代码
影响版本：
nginx 0.5.*
nginx 0.6.*
nginx 0.7 <= 0.7.65
nginx 0.8 <= 0.8.37

而新漏洞的利用方式是：
/test.jpg%00.php
对应fastcgi_script_name的匹配正则，我们会发现是匹不到这个漏洞的，所以非常杯具，以前被老nginx漏洞黑过的肉鸡还能被重新黑一次。
一般这个漏洞需要在能够上传文件的应用中才能被利用，所以论坛首当其冲，象discuz论坛的两个文件就能非常方便的识别这个漏洞。
解决方法：升级Nginx
摘录自：http://www.unhonker.com/bug/153.html
——————————————————————————————————————————————————————————————————
重定向漏洞：
redirect 检验refer。

上传漏洞：
只前台校验后缀。
可以用工具干掉那块校验的js，截包工具，fiddler2，再查查。传shell啥的，控制主机。

未验证的访问重定向：
?url=http://api.开放平台网址.cn/gettoken？code=xxxx  对跳转地址输入处（浏览器参数）做验证（用户填写的申请的网站回调获取code的url地址），其它地址不让他跳转。

借来GPRS模块试了一下，http.get方法还是很容易的，估计POST也简单，就不试了.

查了一下，貌似没有任何资料有关SIM900a模块HTTP 1.1长链接的事情，如果不支持长链接，需要上位机给下位机实时发消息，就只能用TCP了。。

//下面的测试指令是可选的，用于确定当前是否可以连接 AT+CSQ AT+CREG? AT+CGATT? //下面的配置指令是必须的 AT+SAPBR=3,1,"CONTYPR","GPRS" AT+SAPBR=3,1,"APN","CMNET" AT+SAPBR=1,1 //操作HTTP AT+HTTPINIT AT+HTTPPARA="URL","http://keepaneye.sinaapp.com/getinfo/get/?user=zm&paswd=zm&data1=111&data2=222&data3=333&data4=444&data5=555" AT+HTTPACTION=0   //读结果和关闭连接是可选的 AT+HTTPREAD AT_HTTPTERM

正常的话 返回200

来自：http://www.ysgh.net/archives/601

背景：写PHP时特别是调试页面时，不想有额外输出，于是相应的的调试插件出现了。
以前寫PHP都用var_dump來debug
現在改用ChromePHP來debug
ChromePHP是Chrome上的套件
在Firefox上也有Firephp
ChromePHP使用上也非常簡單
先到chrome web store
安裝ChromePHP套件
在去ChromePHP官網下載ChromePhp.php檔案
chromephp官網:http://www.chromephp.com/
接著只有在需要用的時後
include 'ChromePhp.php';
ChromePhp::log('需要輸出的var');
這樣一來就可以在Chrome控制台上的console看到輸出的訊息
如果要在CodeIgniter上使用
需要修改一下ChromePhp.php
把用本的private function __construct()
修改為public function __construct()
$this->load->library('ChromePhp');
$this->chromephp->log('需要輸出的var');
来自：http://blog.ipushs.com/codeigniter%E7%94%A8chromephp%E4%BE%86debugphp/?replytocom=78

最近研究安全性时，偶尔发现php.ini上并没有开启open_basedir，于是搜索了下，有人说开启后有性能影响，于是测试了一下。

首先，交代一下环境：centos + nginx + php-fpm + php + mysql，典型的lnmp了。

测试代码如下：
Php代码  收藏代码
<?php   function microtimeToFloat()   {       list($usec, $sec) = explode(" ", microtime());       return ((float)$usec + (float)$sec);   }      $timeStart = microtimeToFloat();   for($i=0;$i<100;$i++)   {       is_file('www.91loli.com.html');   }   $timeEnd = microtimeToFloat();   $time = $timeEnd - $timeStart;      echo "is_file in $time seconds\n";   ?>
执行100次，实测结果是未开启open_basedir时大约是0.00001秒。
开启后：0.001秒。
性能相差100倍。

在安全性和性能上，该怎么取舍呢。。。还是安全性吧？哈哈。。。

来自：http://exvision.iteye.com/blog/830506

背景：今天一链接测试机，执行ls时出现：Input/output error，-bash: /bin/df: Input/output error，-bash: /usr/bin/uptime: Input/output error......

   今天在linux下执行umount时无意用了远程目录而不是本地目录，结果悲剧了，当前用户出错，直接进入bash，不管输入什么命令都提示：input/output error。-bash: /home/myhome/.bash_profile: Input/output error
-bash-3.2$


用root账户进去，发现自己的目录变成这样：
d?????????  ? ?           ?              ?                ? myhome


在网上一搜都说可能是硬盘错误，一身汗～～


最后想起之前umount命令好像有问题，在root下重新执行：
# umount /home/myhome
unmount error 16 = Device or resource busy
Refer to the umount.cifs(8) manual page (man 8 umount.cifs)
unmount error 16 = Device or resource busy
Refer to the umount.cifs(8) manual page (man 8 umount.cifs)





以前也经常出现" Device or resource busy"这种问题，到网上再搜，查到一段话：




“有些时候，可能某些设备(通常是 CD-ROM)正忙或无法响应。此时，大多数用户的解决办法是重新启动计算机。我们大可不必这么做。例如，如果 umount /dev/hdc 失败的话，您可以试试“lazy” umount。语法十分简单：
umount -l <挂载点|设备>
此命令将会断开设备并关闭打开该设备的全部句柄。通常，您可以使用 eject <挂载点|设备>命令弹出碟片。所以，如果 eject 命令失效而您又不想重新启动，请使用 lazy umount。”


再次执行后搞定，谢天谢地！！记下以备忘！

转：http://bbs.c114.net/thread-564376-1-1.html

背景：想在树莓派上插上Arduion Uno的串口，进而两者进行通讯，后根据数据进一步判断并通过另一个Raspberry Pi的usb接口接上SIM900打电话的功能。
实践OK，如下：
Welcome to minicom 2.6.1 OPTIONS: I18n Compiled on Apr 28 2012, 19:24:31. Port /dev/ttyACM0 a Press CTRL-A Z for help on special keys OK! GOOD Job
输入minicom后，想退出怎么办，帮助：Ctrl+a，退出：x（eXit and reset.....X ），清屏：c（Clear Screen.......C）

用c语言读取的代码如下：
http://jackxiang.com/post/8003/

1.安装python（安装过的请跳到下一步）:  sudo aptitude install python-dev
2.安装python的GPIO模块,用于控制LED、电机等（安装过的请跳到下一步）
  命令行下 输入（一行一个命令）
wget http://raspberry-gpio-python.googlecode.com/files/RPi.GPIO-0.3.1a.tar.gz    (下载GPIO库)
  tar xvzf RPi.GPIO-0.3.1a.tar.gz  (tar解压)
  cd RPi.GPIO-0.3.1a               (进入解压后的文件夹)
  sudo python setup.py install     (安装GPIO库文件)
复制代码 要是看不懂上面的两点请移步到这http://www.shumeipai.net/forum.php?mod=viewthread&tid=939

  3.安装serial，用于串口通信及USB通信:
sudo apt-get install python-serial
复制代码 4.当然你要是想在树莓派装串口调试工具就装：
sudo apt-get install minicom  
配置minicom：
sudo minicom -s    
启动出现配置菜单：选serial port setup
进入串口配置
输入A 配置串口驱动为/dev/ttyAMA0
输入E 配置速率为9600 8N1
输入F 将 Hardware Flow Control 设 为 NO
回车 退出      
由于我们使用minicom作为超级终端控制路由器等设备, 而不是控制modem, 所以需要修改Modem and dialing, 将Init string, Reset string, Hang-up string设置为空. 设置完成后选择Save setup as dfl将当前设置保存为默认设置.    在配置菜单 选Save setup as df1保存（一定要记得这一步）   选Exit退出下次在输入minicon 即可直接进入。
命令minicom是进入串口超级终端画面，而minicom -s为配置minicom。说明/dev/ttyAMA0 对应为串口0 为你连接开发板的端口
。（如何更详细使用说明移步到这http://www.shumeipai.net/forum.php?mod=viewthread&tid=550）

接下来测一下环境是否都OK
sudo nano test.py
或用xwindow下用python IDE打开一个空的文件
    输入内容
import serial
import RPi.GPIO
保存退出,
    然后运行代码:
python test.py
(如果没有报错那就说明RPi.GPIO与serial两个库安装成功)上面环境说完了，重点部份来了

USB对接方式：
  1.插上两个Arduion Uno与树莓派 的USB 然后 在树莓派输入:
ls /dev/tty*
查看有没有ttyACM0 这个文件(注只有在两个硬件USB互连的情况下才会有这个。如果两者没有连接是不会有的) 最新的系统一般都会自动生成。看到ttyACMO就说明二者可以通讯了 接下来上测试代码
  Arduino代码:
  byte number = 0;
  void setup(){
     Serial.begin(9600);
  }

  void loop(){
    if (Serial.available())  {
       number = Serial.read();
       Serial.print("character recieved: ");
       Serial.println(number, DEC);
   }
   }
先把上面的代码下载的Arduino上然后再把两者USB互接

树莓派python代码：
import serial
ser = serial.Serial('/dev/ttyACM0', 9600, timeout=1)
ser.open()

ser.write("testing")
try:
    while 1:
             response = ser.readline()
             print response
except KeyboardInterrupt:
    ser.close()
保存xxx.py 退出

注:树莓派下的serial与GPIO库都要在root帐户下才能运行
Python脚本报错AttributeError: ‘module’ object has no attribute’xxx’解决方法：
http://lovesoo.org/python-script-error-attributeerror-module-object-has-no-attribute-solve-method.html

然后运行树莓派代码 python xxx.py（这里的xxx就是你保存的树莓派代码）看到
character recieved: 116
character recieved: 101
character recieved: 115
...
character recieved: 103
说明两者USB通迅成功了

摘自：http://forum.eepw.com.cn/thread/258770/1

void setup() {   // put your setup code here, to run once:   pinMode(13, OUTPUT);//这一行必须有设置，否则会没有一闪一闪的效果 } void loop() {   // put your main code here, to run repeatedly:   digitalWrite(13, HIGH);   // set the LED on     delay(1000);              // wait for a second     digitalWrite(13, LOW);    // set the LED off     delay(1000);              // wait for a second }


摘自：http://www.arduino123.com/a/jiaocheng/jichu/2013/0817/26398.html

Arduino的扩展库：
http://wenku.baidu.com/link?url=g1ilpiUc7MRP6sJ69J1oFCkk5JMH9JthfzzClH482SsiYcMn2hIpdzGd0mJc_7QdQZuUXMZIwZdaxPta_XL5QvSUYoqHkXNUUG6gL9WJYEa
http://www.arduino.cn/thread-1009-1-1.html


C:\Users\Administrator\Documents\Arduino\libraries\tsic/tsic.h:17:22: fatal error: WProgram.h: No such file or directory

Arduino1.0无法使用以前的库文件(WProgram.h) :
查看原文：http://elitezhe.sinaapp.com/wprogram-loss/
刚才使用自己以前编写的一个库文件，总是编译不通过，在0021上就没有问题。仔细看了看这个问题，发现原因是Arduino+1.0的版本里面没有了WProgram.h文件。
我找到的解决办法是把文件中的WProgram.h替换为Arduino.h
这个问题真心是坑爹,困扰好久.官网上居然也不给解释!!!


串口发数据调试：
Arduino不但有14个数字接口和6个模拟接口外，还有1个更为常用的串口接口。在实际应用中串口以只需要少量的几根线就能和其他串口设备通讯优势被广应用。
        串行接口按标准被分为RS-232、RS-422、RS-485。RS-232是在1962年发布的，也是目前PC机与通信工业中应用最广泛的一种串行接口，RS-232采取不平衡传输方式，即所谓单端通讯。典型的RS-232信号在正负电平之间摆动，在发送数据时，发送端驱动器输出正电平在+5～+15V，负电平在-5～-15V电平。我们的单片机使用的是TTL电平的串行协议，因此单片机与pc通讯时需要进行RS-232电平和TTL电平的转换，单片机与单片机通讯时则可以直接连接。
        USB版本的Arduino则是通过USB转成TTL串口下载程序的，数字接口0和1就是TTL串口RX和TX。
        串口通讯中最重要的一点就的通讯协议，一般串口通讯协议都会有波特率、数据位、停止位、校验位等参数。大家不会设置也不用怕，Arduino语言中Serial.begin()函数就能使大家轻松完成设置，我们只需要改变该函数的参数即可，例如Serial.begin(9600)，则表示波特率为9600bit/s(每秒比特数bps)，其余参数默认即可。
        Arduino语言中还提供了Serial.available() 判断串口缓冲器状态、Serial.read()读串口、Serial.print()串口发送及Serial.println()带换行符串口发送四个函数。
        下面我们用一段代码来演示这些函数的用途。实验无须外围电路，只需要将下载的USB线连接即可。
————————————————————————————————————————
String comdata = ""; void setup() {     Serial.begin(9600); } void loop() {     while (Serial.available() > 0)       {         comdata += char(Serial.read());         delay(2);     }     if (comdata.length() > 0)     {         Serial.println(comdata);         comdata = "";     } }
摘自：http://blog.csdn.net/daditao/article/details/20408949


Arduino 串口通讯：
http://blog.sina.com.cn/s/blog_624e2b450100l7p8.html
http://www.geekfans.com/thread-57780-1-1.html

核心：由于我们将使用arduino自带的USB转串口,因此我们必须给raspberry pi安装其驱动,而驱动就在arduino提供的软件上。所以我们必须在 raspberry pi安装arduino软件。
阅读全文

https://www.mockplus.cn/blog/post/73

背景:生成唯一编码的uuid值，标识一个资源是很有必要的。
1.执行uuidgen命令，可以生成一个uuid数

2.sudo apt-get install uuid-dev，调用uuid_generate函数

来自：http://blog.csdn.net/sruru/article/details/8137871


Linux & Windows上生成UUID/GUID:
http://blog.csdn.net/ghlfllz/article/details/17128393

背景：有时像硬件测试，比如SIM900a，如果你有一台公网ip服务器，想开一个tcp上的ip端口，在Windows下有tcp/ip的调试助手的界面软件，而linux下没有这样的玩意，怎么办呢？shell有这个功能，好像nc也有类似的模拟client去连接服务器的功能，咱就先找个shell的，Linux 下有兄弟好像写了一个debian下的的deb包：http://blog.chinaunix.net/uid-21977056-id-4310527.html 如下。
bash socket 编程 ：
在bash环境中,你可以打开一个socket,并通过它发送数据. 并不需要安装curl或者lynx等程序.

通过两个特殊的设备文件, 可以打开网络socket

/dev/tcp/host/port

如果 host是一个有效的主机名或者IP地址, 端口号是一个整数或者常见的服务名(如dns, http), 那么bash将打开一个TCP连接
/dev/udp/host/port

打开到host:port的UDP连接

(echo >/dev/tcp/localhost/80) &>/dev/null && echo “TCP port 80 open” || echo “TCP port 80 close”
/dev/[tcp|upd]/host/port 只要读取或者写入这个文件，相当于系统会尝试连接:host 这台机器，对应port端口。如果主机以及端口存在，就建立一个socket 连接。将在，/proc/self/fd目录下面，有对应的文件出现。
用来判断本机的80端口是否打开

另外, 一段crontab脚本

!/bin/bash
exec 8<>/dev/tcp/zhiwei.li/80

if [ $? -eq 0 ] ; then

    printf "GET /status HTTP/1.0rn" >&8
    printf "Host: zhiwei.lirn" >&8
    printf "User-Agent: Mozilla/5.0rn" >&8
    printf "rn" >&8

    while read -u 8 -r -t 2 block;
    do
            echo $block
            echo "$(date) - web server is running."
            while read -u 8 line ;
            do
                    echo $line
            done
            exec 8&-
            exit
    done
fi

echo “need reboot”
….
来自：http://my.oschina.net/panzhc/blog/182843#OSC_h1_1
参考资料：
http://xpt.sourceforge.net/techdocs/nix/shell/gsh05-ShBash/ar01s28.html
http://www.cyberciti.biz/tips/spice-up-your-unix-linux-shell-scripts.html
————————————————————————————————————————————
一）如果出于效率的话还是选择工具的好shell不怎么合适做这个^_^，但作测试足够了：
直接在交互shell下
exec 3</dev/tcp/localhost/80
exec 3</dev/tcp/localhost/25
lsof -p $$
我开了httpd和sendmail服务，因此80和25端口有响应。
可以看到当前shell只打开了25这个端口。

二）如何查看这个shell是否真正打开了这个80端口？
一、安装nmap
yum install nmap #输入y安装
二、使用nmap
nmap localhost #查看主机当前开放的端口
nmap -p 1024-65535 localhost#查看主机端口（1024-65535）中开放的端口
nmap -PS 192.168.21.163 #探测目标主机开放的端口
nmap -PS22,80,3306 192.168.21.163 #探测所列出的目标主机端口
nmap -O 192.168.21.163 #探测目标主机操作系统类型
nmap -A 192.168.21.163 #探测目标主机操作系统类型
nmap --help #更多nmap参数请查询帮助信息
三、关闭或者打开主机端口
1、nmap localhost #查看主机当前开放端口
2、ntsysv #打开系统服务器管理器（需要先安装yum install ntsysv），选择要关闭或者打开的服务
摘自：http://www.dedecms.com/knowledge/servers/linux-bsd/2012/0819/8442.html
nmap localhost  

Starting Nmap 5.51 ( http://nmap.org ) at 2015-04-26 18:07 CST
Nmap scan report for localhost (127.0.0.1)
Host is up (0.000026s latency).
Other addresses for localhost (not scanned): 127.0.0.1
Not shown: 992 closed ports
PORT     STATE SERVICE
22/tcp   open  ssh
25/tcp   open  smtp
80/tcp   open  http
111/tcp  open  rpcbind
443/tcp  open  https
5901/tcp open  vnc-1
6001/tcp open  X11:1
8080/tcp open  http-proxy

三）测试：用telnet就行了。
——————————————————————————————————————————————————————————
http://www.csdn.net/article/2012-02-28/312483
时间 2014-03-17 22:04:04  向东博客
原文  http://jackxiang.com/post/7098/
阅读全文

背景：多进程有set follow-fork-mode=child，多线程怎么办呢?尤其是有那个时钟啥的，共享变量，这儿提供了一方法，我也没看懂，先放这儿。应该是gdb新的版本有这个功能。
阅读全文

http://66889922.blog.51cto.com/9959194/1636194

本月初就有消息称 GCC 5 将在本月晚些时候发布，今天开源编译器 GCC 项目组直接跳过了5.0，发布了GCC 5.1，同样是大量新特性和Bug修复。

C编译器默认使用-std=gnu11而不是-std=gnu89；
默认情况下，libstdc++ 库默认使用了全新的ABI；（详见发行说明的Runtime Library (libstdc++)一栏）
Graphite loop optimizations 不再需要 CLooG 库，只支持ISL 0.14（推荐） 或者 0.12.2，安装手册中都有详细说明；
非标准版的 C++0x traits has＿trivial＿default＿constructor, has＿trivial＿copy＿constructor 和 has＿trivial＿copy＿assign 已弃用，在接下来的版本中将移除，标准化的 C++11 traits is＿trivially＿default＿constructible, is＿trivially＿copy＿constructible 和 is＿trivially＿copy＿assignable来取代；
libstdc++ 库完整支持 C++11，实验性支持 C++14；
完整支持多线程实现OpenMP 4.0；
C 和 C++支持英特尔的 Cilk Plus并行编程接口；
完整支持 Go 1.4;
支持ARM Cortex-A72和 Cortex-A17；
初步支持 Just-In-Time (JIT)编译；
正式支持DragonFlyBSD。
此外还有许多编译优化等等。

其它诸多特性及详情请点击这里查看发行说明。

点击这里查看HackerNews的讨论。

关于GCC

GCC（GNU Compiler Collection，GNU编译器套件），是由 GNU 开发的编程语言编译器。它是以GPL许可证所发行的自由软件，也是 GNU计划的关键部分。GCC原本作为GNU操作系统的官方编译器，现已被大多数类Unix操作系统（如Linux、BSD、Mac OS X等）采纳为标准的编译器，GCC同样适用于微软的Windows。 GCC是自由软件过程发展中的著名例子，由自由软件基金会以GPL协议发布。

GCC 原名为 GNU C 语言编译器（GNU C Compiler）[3] ，因为它原本只能处理 C语言。GCC 很快地扩展，变得可处理 C++。后来又扩展能够支持更多编程语言，如Fortran、Pascal、Objective-C、Java、Ada、Go以及各类处理器架构上的汇编语言等，所以改名GNU编译器套件（GNU Compiler Collection）。

知
知乎上有网友问"为什么很多看起来不是很复杂的网站，比如 Facebook 需要大量顶尖高手来开发？"，这个问题在知乎上引发了激烈的讨论，同时知乎大神们也贡献了很多有价值的问答，小编将这些价值的回答分享给大家，希望对大家有所帮助。

知乎网友＠子柳 的回答得到了4778个赞同。

@子柳：

就拿淘宝来说说，当作给新人一些科普。

先说你看到的页面上，最重要的几个：

【搜索商品】——这个功能，如果你有几千条商品，完全可以用select * from tableXX where title like %XX%这样的操作来搞定。但是——当你有10000000000（一百亿）条商品的时候，任何一个数据库都无法存放了，请问你怎么搜索？这里需要用到分布式的数据存储方案，另外这个搜索也不可能直接从数据库里来取数据，必然要用到搜索引擎（简单来说搜索引擎更快）。好，能搜出商品了，是否大功告成可以啵一个了呢？早着呢，谁家的商品出现在第一页？这里需要用到巨复杂的排序算法。要是再根据你的购买行为做一些个性化的推荐——这够一帮牛叉的算法工程师奋斗终生了。

【商品详情】——就是搜索完毕，看到你感兴趣的，点击查看商品的页面，这个页面有商品的属性、详细描述、评价、卖家信息等等，这个页面的每天展示次数在30亿以上，同样的道理，如果你做一个网站每天有10个人访问，你丝毫感觉不到服务器的压力，但是30亿，要解决的问题就多了去了。首先，这些请求不能直接压到数据库上，任何单机或分布式的数据库，承受30亿每天的压力，都将崩溃到完全没有幸福感，这种情况下要用到的技术就是大规模的分布式缓存，所有的卖家信息、评价信息、商品描述都是从缓存里面来取到的，甚至更加极致的一点“商品的浏览量”这个信息，每打开页面一次都要刷新，你猜能够从缓存里面来取吗？淘宝做到了，整个商品的详情都在缓存里面。

【商品图片】——一个商品有5个图片，商品描述里面有更多图片，你猜淘宝有多少张图片要存储？100亿以上。这么多图片要是在你的硬盘里面，你怎么去查找其中的一张？要是你的同学想拷贝你的图片，你需要他准备多少块硬盘？你需要配置多少大的带宽？你们的网卡是否能够承受？你需要多长时间拷贝给他？这样的规模，很不幸市面上已经没有任何商业的解决方案，最终我们必须自己来开发一套存储系统，如果你听说过google的GFS，我们跟他类似，叫TFS。顺便说一下，腾讯也有这样的一套，也叫TFS。

【广告系统】——淘宝上有很多广告，什么，你不知道？那说明我们的广告做的还不错，居然很多人不认为它是广告，卖家怎么出价去买淘宝的广告位？广告怎么展示？怎么查看广告效果？这又是一套算法精奇的系统。

【BOSS系统】——淘宝的工作人员怎么去管理这么庞大的一个系统，例如某时刻突然宣布某位作家的作品全部从淘宝消失，从数据库到搜索引擎到广告系统，里面的相关数据在几分钟内全部消失，这又需要一个牛叉的后台支撑系统。

【运维体系】——支持这么庞大的一个网站，你猜需要多少台服务器？几千台？那是零头。这么多服务器，上面部署什么操作系统，操作系统的内核能否优化？Java虚拟机能否优化？通信模块有没有榨取性能的空间？软件怎么部署上去？出了问题怎么回滚？你装过操作系统吧，优化过吧，被360坑过没，崩溃过没？这里面又有很多门道。

不再多写了，除了上面提到的这些，还有很多很多需要做的技术，当然并不是这些东西有多么高不可攀，任何复杂的庞大的东西都是从小到大做起来的，里面需要牛叉到不行的大犇，也需要充满好奇心的菜鸟，最后这一句，你当我是别有用心好了。

知乎网友@蔡正海 得到了941个赞同。

@蔡正海 ：

刚看了一篇很有意思的文章，讲的很清楚——《你刚才在淘宝上买了一件东西》

　　你发现快要过年了，于是想给你的女朋友买一件毛衣，你打开了http://www.taobao.com。这时你的浏览器首先查询DNS服务器，将http://www.taobao.com转换成ip地址。不过首先你会发现，你在不同的地区或者不同的网络（电信、联通、移动）的情况下，转换后的IP地址很可能是 不一样的，这首先涉及到负载均衡的第一步，通过DNS解析域名时将你的访问分配到不同的入口，同时尽可能保证你所访问的入口是所有入口中可能较快的一个 (这和后文的CDN不一样)。

　　你通过这个入口成功的访问了http://www.taobao.com的实际的入口IP地址。这时你产生了一个PV，即Page View，页面访问。每日每个网站的总PV量是形容一个网站规模的重要指标。淘宝网全网在平日（非促销期间）的PV大概是16-25亿之间。同时作为一个独立的用户，你这次访问淘宝网的所有页面，均算作一个UV（Unique Visitor用户访问）。最近臭名昭著的http://12306.cn的日PV量最高峰在10亿左右，而UV量却远小于淘宝网十余倍，这其中的原因我相信大家都会知道。

　　因为同一时刻访问http://www.taobao.com的人数过于巨大，所以即便是生成淘宝首页页面的服务器，也不可能仅有一台。仅用于生成http://www.taobao.com首页的服务器就可能有成百上千台，那么你的一次访问时生成页面给你看的任务便会被分配给其中一台服务器完成。这个过程要保证公正、公平、平均（暨这成百上千台服务器每台负担的用户数要差不多），这一很复杂的过程是由几个系统配合完成，其中最关键的便是LVS(Linux Virtual Server)，世界上最流行的负载均衡系统之一，正是由目前在淘宝网供职的章文嵩博士开发的。

　　经过一系列复杂的逻辑运算和数据处理，用于这次给你看的淘宝网首页的HTML内容便生成成功了。对web前端稍微有点常识的童鞋都应该知道，下一步浏览器会去加载页面中用到的css、js、图片、脚本和资源文件。但是可能相对较少的同学才会知道，你的浏览器在同一个域名下并发加载的资源数量是有限制的，例如IE6-7是两个，IE8是6个，Chrome各版本不大一样，一般是4-6个。我刚刚看了一下，我访问淘宝网首页需要加载126个资源，那么如此小的并发连接数自然会加载很久。所以前端开发人员往往会将上述这些资源文件分布在好多个域名下，变相的绕过浏览器的这个限制，同时也为下文的CDN工作做准备。

　　据不可靠消息，在双十一当天高峰，淘宝的访问流量最巅峰达到871GB/S。这个数字意味着需要178万个4Mb带宽的家庭宽带才能负担的起，也完全有能力拖垮一个中小城市的全部互联网带宽。那么显然，这些访问流量不可能集中在一起。并且大家都知道，不同地区不同网络（电信、联通等）之间互访会非常缓慢，但是你却发现很少发现淘宝网访问缓慢。这便是CDN(Content Delivery Network)，即内容分发网络的作用。淘宝在全国各地建立了数十上百个CDN节点，利用一些手段保证你访问的（这里主要指js、css、图片等）地方是离你最近的CDN节点，这样便保证了大流量分散在各地访问的加速节点上。

　　这便出现了一个问题，那就是假若一个卖家发布了一个新的宝贝，上传了几张新的宝贝图片，那么淘宝网如何保证全国各地的CDN节点中都会同步的存在这几张图 片供用户使用呢？这里边就涉及到了大量的内容分发与同步的相关技术。淘宝开发了分布式文件系统TFS(Taobao File System)来处理这类问题。

　　好了，这时你终于加载完了淘宝首页，那么你习惯性的在首页搜索框中输入了'毛衣'二字并敲回车，这时你又产生了一个PV，然后，淘宝网的主搜索系统便开始为你服务了。它首先对你输入的内容基于一个分词库进行分词操作。众所周知，英文是以词为单位的，词和词之间是靠空格隔开，而中文是以字为单位，句子中所有的字连起来才能描述一个意思。例如，英文句子I am a student，用中文则为：“我是一个学生”。计算机可以很简单通过空格知道student是一个单词，但是不能很容易明白“学”、“生”两个字合起来才表示一个词。把中文的汉字序列切分成有意义的词，就是中文分词，有些人也称为切词。我是一个学生，分词的结果是：我 是 一个 学生。

　　进行分词之后，还需要根据你输入的搜索词进行你的购物意图分析。用户进行搜索时常常有如下几类意图：（1）浏览型：没有明确的购物对象和意图，边看边买，用户比较随意和感性。Query例如：”2010年10大香水排行”，”2010年流行毛衣”， “zippo有多少种类？”；（2）查询型：有一定的购物意图，体现在对属性的要求上。Query例如：”适合老人用的手机”，”500元 手表”；（3）对比型：已经缩小了购物意图，具体到了某几个产品。Query例如：”诺基亚E71 E63″，”akg k450 px200″；（4）确定型：已经做了基本决定，重点考察某个对象。Query例如：”诺基亚N97″，”IBM T60″。通过对你的购物意图的分析，主搜索会呈现出完全不同的结果来。

　　之后的数个步骤后，主搜索系统便根据上述以及更多复杂的条件列出了搜索结果，这一切是由一千多台搜索服务器完成。然后你开始逐一点击浏览搜索出的宝贝。你开始查看宝贝详情页面。经常网购的亲们会发现，当你买过了一个宝贝之后，即便是商家多次修改了宝贝详情页，你仍然能够通过‘已买到的宝贝’查看当时的快照。这是为了防止商家对在商品详情中承诺过的东西赖账不认。那么显然，对于每年数十上百亿比交易的商品详情快照进行保存和快速调用不是一个简单的事情。这 其中又涉及到数套系统的共同协作，其中较为重要的是Tair，淘宝自行研发的分布式KV存储方案。

　　然后无论你是否真正进行了交易，你的这些访问行为便忠实的被系统记录下来，用于后续的业务逻辑和数据分析。这些记录中访问日志记录便是最重要的记录之一， 但是前边我们得知，这些访问是分布在各个地区很多不同的服务器上的，并且由于用户众多，这些日志记录都非常庞大，达到TB级别非常正常。那么为了快速及时 传输同步这些日志数据，淘宝研发了TimeTunnel，用于进行实时的数据传输，交给后端系统进行计算报表等操作。

　　你的浏览数据、交易数据以及其它很多很多的数据记录均会被保留下来。使得淘宝存储的历史数据轻而易举的便达到了十数甚至更多个 PB(1PB=1024TB=1048576GB)。如此巨大的数据量经过淘宝系统1:120的极限压缩存储在淘宝的数据仓库中。并且通过一个叫做云梯的，由2000多台服务器组成的超大规模数据系统不断的进行分析和挖掘。

　　从这些数据中淘宝能够知道小到你是谁，你喜欢什么，你的孩子几岁了，你是否在谈恋爱，喜欢玩魔兽世界的人喜欢什么样的饮料等，大到各行各业的零售情况、各类商品的兴衰消亡等等海量的信息。

　　说了这么多，其实也只是叙述了淘宝上正在运行的成千上万个系统中的寥寥几个。即便是你仅仅访问一次淘宝的首页，所涉及到的技术和系统规模都是你完全无法想 象的，是淘宝2000多名顶级的工程师们的心血结晶，其中甚至包括长江学者、国家科学技术最高奖得主等众多大牛。同样，百度、腾讯等的业务系统也绝不比淘宝简单。你需要知道的是，你每天使用的互联网产品，看似简单易用，背后却凝聚着难以想象的智慧与劳动。

来自：http://mp.weixin.qq.com/s?__biz=MjM5NDMwNjMzNA==&mid=204484065&idx=2&sn=5892f77d1a95718f28fd48089df97dc2#rd

背景：之前大学学习过c语言，后来上班后学习并以php工作了几年，近来对纯c语言感兴趣，于是学习并试着用c语言编写并编译一个简单的内存指针池小程序发现有warning，multipepollserver.cpp:648: warning: deprecated conversion from string constant to ‘char*’，于是查了下是这样解决的，作一下学习并备案。
原来是：
void saveUpedFilePartInfo2Mem(upFilePart* filePart,const char* guid,unsigned int partIndex,char* httpHeader,char* httpBody,unsigned int httpBodyLen,char* uploadTime)
修改为：
void saveUpedFilePartInfo2Mem(upFilePart* filePart,const char* guid,unsigned int partIndex,const char* httpHeader,const char* httpBody,unsigned int httpBodyLen,const char* uploadTime);//存一个分片>信息到内存池里去                                                                                                                                                                      
阅读全文

背景：今天开了一个Edraw也就是艺图软件，没想到一直在桌面上显示启动画面，且最前面，用任务管理器结束进程还结束不了，还最前面挡住其它软件了，于是，只有强制杀死这个进程了。
有两种方法杀死，一种是进程名，一种是进程ID。
一）Windows 下根据进程名称强制杀死进程命令：
-运行：  taskkill -f -im processname
实践成功如下：
C:\Users\admin> taskkill -f -im Edraw.exe
成功: 已终止进程 "Edraw.exe"，其 PID 为 7116。

二） windows下根据进程ID强制杀死进程：
[windows 进程ID PID]
NTSD命令详解
1. ntsd -c q -p PID
2. ntsd -c q -pn ImageName 比如:ntsd -c q -pn qq.exe

-c是表示执行debug命令
q表示执行结束后退出(quit)

-p 表示后面紧跟着是你要结束的进程对应的PID

-pn 表示后面紧跟着是你要结束的进程名（process_name.exe 比如：QQ.exe,explorer.exe 等等，值得注意的是后缀名.exe是不可省略的，否则系统会告诉你“不支持此接口”）

只有System、SMSS.EXE和CSRSS.EXE不能杀。前两个是纯内核态的，最后那个是Win32子系统，ntsd本身需要它。ntsd从 2000开始就是系统自带的用户态调试工具。被调试器附着(attach)的进程会随调试器一起退出，所以可以用来在命令行下终止进程。使用ntsd自动 就获得了debug权限，从而能杀掉大部分的进程。

另外说明一点，一般在windows下可以通过任务管理器得到要操作的进程的ID，或者通过在命令行下执行netstat -ano来得到当前本地已经占用端口的进程信息。

实践如下：
C:\Users\admin>ntsd -c q -p 7080
'ntsd' 不是内部或外部命令，也不是可运行的程序
或批处理文件。



ntsd从Windows 2000开始就是系统自带的进程调试工具,在system32目录下。NTSD的功能非常的强大,用法也比较复杂,但如果只用来结束一些进程,那就比较简单了。WIN7下没有NTSD的你怎么办?
win7 下可以用的 ntsd.exe：
http://download.csdn.net/download/kj863257/2802035


Win7下载后放到path路径下，即可杀死，实践OK：
C:\Users\admin>ntsd -c q -p 7080
C:\Users\admin>





实践来源：http://blog.itpub.net/26994026/viewspace-731483/
http://blog.chinaunix.net/uid-15028-id-2779793.html