小猪的生活

明天开始北漂了

Erick — Sun, 28 Feb 2010 20:42:28 +0800

大一的时候和源源谈论“北方”，几经波折，终于明天要踏上向北的飞机了，追寻理想，这才是刚刚开始……

你可能对这些感兴趣

今天是1月26日，我想写东西了

Erick — Tue, 26 Jan 2010 11:40:43 +0800

1月2号，我和同学的笔记本都丢了，更不幸的是我的钱包也被拿了，身份证，银行卡一起没了，顿时没钱了，我和同学还在庆幸他的钱包没有被拿，要不然我们要提前回家过年了。先后补办了信用卡，身份证，工资卡，哎，还好深圳有个湖北办事处，要不然今年搞火车票实名制，我还真回不了家了，补办身份证花了15天，还是挺快的。

现在每天都在加班，要做的事挺多，一直也没有时间，也没有心情写日志，不过以后不会了，还有很重要的事要做了。

你可能对这些感兴趣

2010年02月28日 -- 明天开始北漂了
2009年11月23日 -- 搬家啦,上班不怕迟到了……
2009年08月31日 -- 燥市里宁静的朋友

2010沉默几天

Erick — Tue, 05 Jan 2010 09:34:28 +0800

NND，在家里睡觉东西被偷了，实在是叫人不爽！

最多留言日志

2009年12月4日 -- 博客终于恢复啦
2009年11月11日 -- 发一个dedeEIMS企业模板
2009年12月8日 -- MySQL Can’t find messagefile,解决方法
2009年11月19日 -- 留言板
2010年01月5日 -- 2010沉默几天
2009年11月23日 -- 搬家啦,上班不怕迟到了……
2009年06月27日 -- 武汉的这个六月
2009年06月15日 -- 关于
2009年11月13日 -- 红酒网站–ecshop
2009年11月11日 -- 什么也不想做

PHP批量删除空行|wordpress迁移的艰辛

Erick — Thu, 24 Dec 2009 16:48:03 +0800

博客这些天一直处于死亡状态，昨天空间商帮忙把博客从浙江机房搬到河南机房了，暂时可以开通了。
Warning: Cannot modify header information – headers already sent by (output started at /*****/wp-includes/compat.php:230
头部有输出，昨天加班到比较晚，回家看《花木兰》，没去管博客，今天来公司，发现问题严重了，Google竟然抓取了页面

打开这些PHP的文件，发现下面全部都多了两行，就是php闭合标签之后多出了两个空行，造成在include 或是 require 后会有输出。
开始以为是只有几个文件是这样的，多打开几个发现，整个空间里面的php文件js,css,php都多出了两个空行，估计是华夏名网的在线文件管理器打包造成的。
因为本人对正则不熟悉，不过其实用正则替换倒不是太难，关键问题在于windows和linux下面的换行，回车符号的区别，费了不少时间研究。
虽然我知道windows下面是\r\n linux下面是\n 可是我用\r\n在windows系统上怎么也匹配不了，后来才发现我用的eclipse里面的我用的是Unix格式，换行就是\n，而不是\r\n，功夫不负苦心人哈，把代码贴出，也可以下载，有什么更好的方法，记得告诉我哈，各位！

//$path=__DIR__;//php 5.3
$path=dirname(__FILE__);
function get_all_files($path,$pattern='/php$|js$|css$/i'){
    $list = array();
    foreach( glob( $path.DIRECTORY_SEPARATOR.'*') as $item ){
        if( is_dir( $item ) ){
         $list = array_merge( $list , get_all_files( $item,$pattern ) );
        }
        else{
            if(preg_match($pattern,$item)){
                $list[] = $item;
        	}
        }
    }
    return $list;
}
$list=get_all_files($path,'/php$/i');
foreach($list as $v){
$str=file_get_contents($v);
//var_dump($str);
$str=preg_replace("/\?>\s*$/i",'?>',$str);
//var_dump($str);
file_put_contents($v,$str);
}
header('Content-Type:text/html;Charset=utf-8');
echo "删除空白完成，Have a good time!";
echo "回首页";

点这里下载文件
解压后放到空间的根目录下面，会遍历所有子目录，并删除末尾的空行。

你可能对这些感兴趣

2009年11月19日 -- Flickr Photo Album for WordPress|wp 相册
2009年11月8日 -- CentOS 5.3搭建Apache2.2.4+Mysql5.1.4+PHP5.3服务器
2009年10月27日 -- Warning: strtotime() [function.strtotime]: It is not safe to rely on the system’s timezone settings. 解决方法
2009年08月16日 -- 给博客加个作者|wordpress作者函数
2009年06月15日 -- 换博客啦
2009年06月15日 -- PHP的大括号，详解

Google Voice 免费短信免费电话

Erick — Thu, 24 Dec 2009 16:21:00 +0800

实际上Google voice，已经拿到四五天了，虽然很高兴，但是也没有办法写到日志里来，NND，机房被关了几次，搞的都没心情了，昨天把空间从浙江机房转到河南机房，弄了一天，直到现在才能写日志，至于为什么昨天写不了，看下一遍日志吧，这遍就写google voice。

抱着试试的心理在http://www.google.com/voice/ 申请了邀请了，大概半个月后收到了google的邀请。注册过程就是谷奥的那一个教程：
http://www.google.org.cn/posts/how-to-signup-google-voice-in-china-mainland.html
1-6步都是相当简单的不用说什么了，

第7步的时候，出问题了，要用拨号盘输入两们验证数字，这是关键，正常人像我一样，都是直接在Gtalk里面输入两个数字比如：54然后按回车，这时候语音提示要输入验证码，就是说这样的输入就没有效果。这地方害我搞差不多一个小时，应该是按一个4，回车，再按一个5，回车，数字分开输入。这样就OK了，验证通过了。

用了这几天，最爽的就是发短信了，原来给澳洲的朋友发短信，都不敢短信好贵的，现在可以尽情的发了，免费哈，要是能发中文就好了。。。
注册通过赠送0.1dollar可以给大陆打5分钟的电话。

没用上的快去申请邀请吧，感觉还行。
PS：我没有用VPN，用的是Gapproxy，速度还可以的。
Gizmo5我去注册的时候，竟然不允许新用户注册了，汗。。。。

你可能对这些感兴趣

2009年11月27日 -- 从google wave进行Twitter
2009年11月26日 -- Twitter and Google Wave
2009年11月13日 -- Google Mobile APP 挺方便的

Firefox安装插件后，重启无效的解决方法

Erick — Wed, 09 Dec 2009 23:21:04 +0800

平时装FF的插件一个一个的安装，没有发现问题，最近电脑重装系统后，一下装多个插件，按FF的提示点击重新启动，
可是再次打打开FF，发现那些插件都没有正常安装，还是重新启动完成安装，摸了一会才发现，FF根本没有正常关闭。
这时候，应该把firefox进程杀掉，再重新打开FF就完成安装了，我遇到这个问题的时候，在网上搜索没有人说出原因，偶尔有人遇到这个
问题，论坛的人就说重新安装FF。。。

linux下杀进程
ps -A|grep firefox
kill PID(PID是上一步看到的ID号)
windows下就不说啦，ctrl+alt+delete,转到进程，找到firefox,结束进程

顺序说下我装的插件：
Firebug
FireFTP
FirePHP
Firecookie
YSlow
SearchStatus
Coral IE Tab
DownloadHelper
Easy DragToGo
Mason
Gmail Manager
Thunder Extension
FoxyProxy Standard

你可能对这些感兴趣

2009年11月19日 -- Flickr Photo Album for WordPress|wp 相册
2009年10月14日 -- 小小改动高亮插件Google Syntax Highlighter for WordPress

MySQL Can’t find messagefile,解决方法

Erick — Tue, 08 Dec 2009 22:02:00 +0800

今天新本本到了，晚上回家来安装xampp，APACHE还是一样好装，加入服务后，关闭80端口后，就启动了。
mysql竟然出问题，这还是第一次启动不了呢。1067错误，在windows的日志里查看，错误如下

Can’t find messagefile ‘\xampp\mysql\share\english\errmsg.sys’
Can’t create test file \xampp\mysql\data\cherry-PC.lower-test

在WINDOWS XP下没有问题，因为我现在用的是VISTA，解决办法是找到xampp\mysql\bin\mysql.ini
把其中的\xampp\ 加上盘符，比如我的xampp装在E盘，改变后就是E:\xampp\
这样就可以启动啦。

你可能对这些感兴趣

2009年11月17日 -- mysql 查找重复记录删除重复记录
2009年11月8日 -- CentOS 5.3搭建Apache2.2.4+Mysql5.1.4+PHP5.3服务器
2009年06月15日 -- MySQL备份
2009年06月15日 -- Mysql ERROR 1045 (28000): Access denied for user ‘root’@'localhost’

[转]大型网站系统架构分析

Erick — Mon, 07 Dec 2009 10:19:25 +0800

收藏下，讲到的多，可惜没有深入，学习中…
来源:http://www.cnblogs.com/silverLee/archive/2009/11/05/1596418.html
千万级的注册用户，千万级的帖子，nTB级的附件，还有巨大的日访问量，大型网站采用什么系统架构保证性能和稳定性？

首先讨论一下大型网站需要注意和考虑的问题。
数据库海量数据处理：负载量不大的情况下select、delete和update是响应很迅速的，最多加几个索引就可以搞定，但千万级的注册用户和一个设计不好的多对多关系将带来非常严重的性能问题。另外在高UPDATE的情况下，更新一个聚焦索引的时间基本上是不可忍受的。索引和更新是一对天生的冤家。
高并发死锁：平时我们感觉不到，但数据库死锁在高并发的情况下的出现的概率是非常高的。
文件存储的问题：大型网站有海量图片数据、视频数据、文件数据等等，他们如何存储并被有效索引？高并发的情况下IO的瓶颈问题会迅速显现。也许用RAID和专用存贮服务器能解决眼下的问题，但是还有个问题就是各地的访问问题，也许我们的服务器在北京，可能在云南或者***的访问速度如何解决?如果做分布式，那么我们的文件索引以及架构该如何规划。

接下来讨论大型网站的底层系统架构，来有效的解决上述问题。

毋庸置疑，对于规模稍大的网站来说，其背后必然是一个服务器集群来提供网站服务，例如，2004年eBay的服务器有2400台，估计现在更多。当然，数据库也必然要和应用服务分开，有单独的数据库服务器集群。对于像淘宝网这样规模的网站而言，就是应用也分成很多组。

下面，就从服务器操作系统与Web服务器、数据库、服务器集群与负载均衡、缓存、独立的图片服务器、其它等几个方面来分析大型网站的系统架构。

服务器操作系统与Web服务器

最底层首先是操作系统。好的操作系统能提高好的性能、稳定性和安全性，而这些对大型网站的性能、安全性和稳定性都是至关重要的。
淘宝网（阿里巴巴）: Linux操作系统 + Web 服务器: Apache
新浪：FreeBSD + Web 服务器：Apache
Yahoo：FreeBSD + Web 服务器：自己的
Google: 部分Linux + Web 服务器：自己的
百度：Linux + Web 服务器: Apache
网易：Linux + Web 服务器: Apache
eBay: Windows Server 2003/8 (大量) + Web 服务器：Microsoft IIS
MySpace: Windows Server 2003/8 + Web 服务器：Microsoft IIS

由此可见，开源操作系统做Web应用是首选已经是一个既定事实。在开源操作系统中Linux和FreeBSD差不太多，很难说哪个一定比另外一个要优秀很多、能够全面的超越对手，应该是各有所长。但熟悉Linux的技术人员更多些，利于系统管理、优化等，所以Linux使用更广泛。而Windows Server和IIS虽然有的网站使用，但不开源，而且需要购买微软的一系列应用产品，限制了其使用。总之，开源操作系统，尤其是Linux做Web应用是首选已经是一个既定事实。

常用的系统架构是:
Linux + Apache + PHP + MySQL
Linux + Apache + Java (WebSphere) + Oracle
Windows Server 2003/2008 + IIS + C#/ASP.NET + 数据库

数据库

因为是千万人同时访问的网站，所以一般是有很多个数据库同时工作的，说明白一点就是数据库集群和并发控制，数据分布到地理位置不同的数据中心，以免发生断电事故。

主流的数据库有Sun的是MySQL和Oracle。

Oracle是一款优秀的、广泛采用的商业数据库管理软件。有很强大的功能和安全性，可以处理相对海量的数据。而MySQL是一款非常优秀的开源数据库管理软件，非常适合用多台PC Server组成多点的存储节点阵列(这里我所指的不是MySQL自身提供的集群功能)，每单位的数据存储成本也非常的低廉。用多台PC Server安装MySQL组成一个存储节点阵列，通过MySQL自身的Replication或者应用自身的处理，可以很好的保证容错(允许部分节点失效)，保证应用的健壮性和可靠性。可以这么说，在关系数据库管理系统的选择上，可以考虑应用本身的情况来决定。

MySQL数据库服务器的master-slave模式，利用数据库服务器在主从服务器间进行同步，应用只把数据写到主服务器，而读数据时则根据负载选择一台从服务器或者主服务器来读取，将数据按不同策略划分到不同的服务器（组）上，分散数据库压力。

服务器集群与负载均衡

服务器群集中每个服务结点运行一个所需服务器程序的独立拷贝，而网络负载均衡则将工作负载在这些主机间进行分配。负载均衡建立在现有网络结构之上，它提供了一种廉价有效的方法扩展服务器带宽和增加吞吐量，加强网络数据处理能力，提高网络的灵活性和可用性。它主要完成以下任务:解决网络拥塞问题，服务就近提供，实现地理位置无关性 ;为用户提供更好的访问质量;提高服务器响应速度;提高服务器及其他资源的利用效率;避免了网络关键部位出现单点失效。

常用的服务器集群和数据库集群负载均衡实现方法：
CitrixNetScaler的硬件负载均衡交换机做服务器集群的负载均衡。
MySQL Proxy做MySQL服务器集群的负载均衡并实现读写分离。其实现读写分离的基本原理是让主数据库处理事务性查询，而从数据库处理SELECT查询。数据库复制被用来把事务性查询导致的变更同步到集群中的从数据库。
CDN(Content Delivery Network): 几乎在各大网站都有使用该技术。例如，使得你的网站在各省市访问更快，其原理是采取了分布式网络缓存结构（即国际上流行的web cache技术），通过在现有的Internet中增加一层新的网络架构，将网站的内容发布到最接近用户的cache服务器内，通过DNS负载均衡的技术，判断用户来源就近访问cache服务器取得所需的内容，解决Internet网络拥塞状况，提高用户访问网站的响应速度，如同提供了多个分布在各地的加速器，以达到快速、可冗余的为多个网站加速的目的。

缓存

众所周知，使用缓存能有效应对大负载，减少数据库的压力，并显著提高**应用程序的性能，如果某个用户多次请求同一资源，则可以从缓存返回该资源，从而避免了重新从服务器或数据库请求该资源而产生的系统开销。缓存可以通过减少获取请求的资源所需的时间，提高应用程序性能。缓存还可以通过减少到服务器的往返次数，降低网络通信量。尽管缓存可以提高性能，但它也增加了返回到应用程序的资源可能变得陈旧的风险。这意味着，返回的资源可能与假设没有使用缓存的情况下，服务器有可能发送的资源并不完全相同(即取得“脏数据”)。

即便如此，简单的缓存策略也能大大提升网站性能。例如，Youtube把首页最新的视频列表缓存60秒，也就是说60秒内并发的request都是从缓存读取的，大大减少了数据库压力。再加上CDN，使得Youtube首页的并发访问速度很快。

单机内存缓存、文件缓存、数据库缓存等的策略都是可以很简单的实现的，例如可以使用微软的Caching Application Block，但如何在集群环境中使多个缓存、**缓存并保存同步是个重大问题。大型网站一般都使用缓存服务器群，并使用**缓存。业内最常用的有：
Squidcache，Squid服务器群，把它作为web服务器端前置cache服务器缓存相关请求来提高web服务器速度。Squid将大部分静态资源(图片，js，css等）缓存起来，直接返回给访问者，减少应用服务器的负载
memcache，memcache服务器群，一款分布式缓存产品，很多大型网站在应用; 它可以应对任意多个连接，使用非阻塞的网络IO。由于它的工作机制是在内存中开辟一块空间，然后建立一个HashTable，Memcached自管理这些HashTable。因为通常网站应用程序中最耗费时间的任务是数据在数据库的检索，而多个用户查询相同的SQL时，数据库压力会增大，而通过memcache的查询缓存命中，数据直接从memcache内存中取，每次缓存命中将替换到数据库服务器的一次往返，到达数据库服务器的请求更少，间接地提高了数据库服务器的性能，从而使应用程序运行得更快。它通过基于内存缓存对象来减少数据库查询的方式改善网站系统的反应，其最吸引人的一个特性就是支持分布式部署。有关memcache，以下文章可以参考：参考1，参考2，参考3官方站点。
e-Accelerator，比较特殊，PHP的缓存和加速器。是一个免费开源的PHP加速、优化、编译和动态缓存的项目，它可以通过缓存PHP代码编译后的结果来提高PHP脚本的性能，使得一向很复杂和离我们很远的 PHP脚本编译问题完全得到解决。通过使用eAccelerator，可以优化你的PHP代码执行速度，降低服务器负载，可以提高PHP应用执行速度最高达10倍。

独立的图片服务器

无论从管理上，还是从性能上看，只要有可能，尽量部署独立的图片服务器。这几乎成为常识了。具备独立的图片服务器或者服务器集群后，在 Web 服务器上就可以有针对性的进行配置优化。

其他

一个互联网应用，除了服务器的操作系统，Web Server软件，应用服务器软件，数据库软件外，我们还会涉及到一些其他的系统，比如一些中间件系统、文件存储系统（图片服务器，视频服务器，管理服务器，RSS和广告服务器等等）、全文检索、搜索、等等。会在以后介绍。

最多留言日志

2009年12月4日 -- 博客终于恢复啦
2009年11月11日 -- 发一个dedeEIMS企业模板
2009年12月8日 -- MySQL Can’t find messagefile,解决方法
2009年11月19日 -- 留言板
2010年01月5日 -- 2010沉默几天
2009年11月23日 -- 搬家啦,上班不怕迟到了……
2009年06月27日 -- 武汉的这个六月
2009年06月15日 -- 关于
2009年11月13日 -- 红酒网站–ecshop
2009年11月11日 -- 什么也不想做

博客终于恢复啦

Erick — Fri, 04 Dec 2009 12:10:06 +0800

**网站，也不用把所有IDC搞了吧，就算要搞，我们这些良民也被扯进去了，真是不爽啊。

本博客在浙江机房，网上都说浙江机房被关了，以为是真的呢，没想到只是电信用户访问不了我的博客，网通用户照样可以哈，昨天还有32IP，不错。

拥有的时候不知道珍惜，当要失去的时候，百感焦急，才发现，我的博客对我来说，原来有这么重要。

你可能对这些感兴趣

2009年06月15日 -- PigBlog系统

windows下安装svn服务器和客户端

Erick — Fri, 27 Nov 2009 00:59:35 +0800

在家里的电脑上，安装svn，当然今天是突发奇想。
说来也真是见鬼了，subversion的官网竟然进不去了，只有用代理才能进，可是网页代理进了又不能下载。。。，http://subversion.tigris.org/，害得我到处找安装文件，最后还是在csdn上面下载的。
svn-1.5.6-setup.exe
客户端就好下载的多：
TortoiseSVN-1.6.6.17493-win32-svn-1.6.6.msi
LanguagePack_1.6.6.17493-win32-zh_CN.msi

今天不是讲教程，只是写下今天安装的经历。。。
先安装的TortoiseSVN
再安装svn-1.5.6-setup，很简单，在F盘随便建立一个文件夹，SVNprojects\project1，然后通过TortoiseSVN
遇到的第一个问题：
在\project1里面建立版本控制，进入subversion\bin\启动服务，浏览svn，结果报错，什么format 3..format 5之类的，不记得了，有人说这个应该是客户端和服务端兼容的问题，知道原因后，删除project1里面的内容，然后通过subverion\bin\svnadmin.exe 建立版本控制，再启动服务，果然可以正常浏览SVN了

第二个问题：
编辑svnserve.conf这个文件，
去掉[general]，anon-access = none。。。前面的#号后，又报错，原因是这些语句必须顶格写，前面不能有空格。

最多留言日志

2009年12月4日 -- 博客终于恢复啦
2009年11月11日 -- 发一个dedeEIMS企业模板
2009年12月8日 -- MySQL Can’t find messagefile,解决方法
2009年11月19日 -- 留言板
2010年01月5日 -- 2010沉默几天
2009年11月23日 -- 搬家啦,上班不怕迟到了……
2009年06月27日 -- 武汉的这个六月
2009年06月15日 -- 关于
2009年11月13日 -- 红酒网站–ecshop
2009年11月11日 -- 什么也不想做

小猪的生活

明天开始北漂了

你可能对这些感兴趣

今天是1月26日，我想写东西了

你可能对这些感兴趣

2010沉默几天

最多留言日志

PHP批量删除空行|wordpress迁移的艰辛

你可能对这些感兴趣

Google Voice 免费短信 免费电话

你可能对这些感兴趣

Firefox安装插件后，重启无效的解决方法

你可能对这些感兴趣

MySQL Can’t find messagefile,解决方法

你可能对这些感兴趣

[转]大型网站系统架构分析

最多留言日志

博客终于恢复啦

你可能对这些感兴趣

windows下安装svn服务器和客户端

最多留言日志

Google Voice 免费短信免费电话