混在北京

在CentOS下安装及配置openfp

nlfd — Mon, 08 Feb 2010 22:03:00 +0800

openfp需要用到fftw，所以要先安装fftw。

OpenFP allows to create audio fingerprint files from music tracks using the OpenFP client to match them against a set of reference fingerprints provided by the OpenFP server.Via

安装目录的README文件里面有相关的说明

Before installing ensure that you have met the library requirements:

* libfftw3

To compile the sources simply run:

   ./configure
   make
   make install

从这儿找到下载地址，http://www.fftw.org/download.html
[root@CentOS_Test_Server openfp-1.3.0]# wget http://www.fftw.org/fftw-3.2.2.tar.gz
[root@CentOS_Test_Server openfp-1.3.0]# tar zxvf fftw-3.2.2.tar.gz
./configure
make && make install

wget http://sourceforge.net/projects/open-fp/files/Unstable/1.3.0/openfp-1.3.0.tar.gz/download
tar zxvf openfp-1.3.0.tar.gz
cd openfp-1.3.0
./configure
make && make install

open-fp安装完成以后，在/usr/local/bin下面会发现三个文件，afp就是Audio Fingerprinting的意思。
[root@CentOS_Test_Server openfp-1.3.0]# cd /usr/local/bin/
[root@CentOS_Test_Server bin]# ls -l *fp*
-rwxr-xr-x 1 root root 918326 Feb 6 04:57 afp_extract
-rwxr-xr-x 1 root root 17815 Feb 6 04:57 afp_match
-rwxr-xr-x 1 root root 84972 Feb 6 04:57 afp_server

-----------------------------------------
下面说一下配置open-fp时遇到的郁闷问题，一直提示下面的错误信息，怎么也过不去。
checking for pkg-config... /usr/bin/pkg-config
checking pkg-config is at least version 0.9.0... yes
checking for FFTW3... configure: error: Package requirements ("fftw3") were not met:

No package 'fftw3' found

Consider adjusting the PKG_CONFIG_PATH environment variable if you
installed software in a non-standard prefix.

Alternatively, you may set the environment variables FFTW3_CFLAGS
and FFTW3_LIBS to avoid the need to call pkg-config.
See the pkg-config man page for more details.

其实从openfp的配置命令中也可以知道FFTW3_CFLAGS及FFTW3_LIBS的解释
[root@CentOS_Test_Server openfp-1.3.0]# ./configure --help | grep FFTW3
FFTW3_CFLAGS
C compiler flags for FFTW3, overriding pkg-config
FFTW3_LIBS linker flags for FFTW3, overriding pkg-config

从这篇文章找到了解决方案，那就是修改了环境变量PKG_CONFIG_PATH的值，将/usr/local/lib/pkgconfig加到里面，因为fftw3默认是安装到/usr/local目录下面的，如果不指定，则configure无法知道的，配置的时候就不报错了。这是我第一次遇到这种问题，以前没遇到过，也算是新学了一招。
[root@CentOS_Test_Server openfp-1.3.0]# export PKG_CONFIG_PATH=/usr/lib/pkgconfig:/usr/local/lib/pkgconfig

[root@CentOS_Test_Server bin]# echo $PKG_CONFIG_PATH
/usr/lib/pkgconfig:/usr/local/lib/pkgconfig

也可以把环境变量PKG_CONFIG_PATH中到bash文件里面

[root@CentOS_Test_Server bin]# vi ~/.bashrc
# .bashrc

# User specific aliases and functions

alias rm='rm -i'
alias cp='cp -i'
alias mv='mv -i'

PKG_CONFIG_PATH=/usr/lib/pkgconfig:/usr/local/lib/pkgconfig

# Source global definitions
if [ -f /etc/bashrc ]; then
. /etc/bashrc
fi

查看文件fftw3.pc的内容
[root@CentOS_Test_Server openfp-1.3.0]# more /usr/local/lib/pkgconfig/fftw3.pc
prefix=/usr/local
exec_prefix=${prefix}
libdir=${exec_prefix}/lib
includedir=${prefix}/include

Name: FFTW
Description: fast Fourier transform library
Version: 3.2.2
Libs: -L${libdir} -lfftw3 -lm
Cflags: -I${includedir}

openfp总时还不知道怎么使用，安装以后提供了三个命令，使用起来估计比lastfmfpclient要复杂一些，实在不行再找其它的。

在CentOS下安装及配置lastfmfpclient

nlfd — Mon, 08 Feb 2010 21:41:01 +0800

1.安装last.fm提供的音频指纹工具
wget http://cdn.last.fm/fingerprints/lastfm.fpclient.beta2.1.linux-32.zip
[root@CentOS_Test_Server software]# unzip lastfm.fpclient.beta2.1.linux-32.zip
Archive: lastfm.fpclient.beta2.1.linux-32.zip
creating: lastfm.fpclient.beta2.linux-32/
inflating: lastfm.fpclient.beta2.linux-32/lastfmfpclient
inflating: lastfm.fpclient.beta2.linux-32/readme.txt

解压后执行./lastfmfpclient报错，提示缺少一些依赖包。

2.安装libmad
libmad的介绍如下：

Introduction

MAD is a high-quality MPEG audio decoder. It currently supports MPEG-1 and the MPEG-2 extension to lower sampling frequencies, as well as the de facto MPEG 2.5 format. All three audio layers — Layer I, Layer II, and Layer III (i.e. MP3) — are fully implemented. Via

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# wget http://dag.wieers.com/rpm/packages/libmad/libmad-0.15.1b-3.0.rh8.dag.i386.rpm

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# ls
lastfmfpclient libmad-0.15.1b-3.0.rh8.dag.i386.rpm readme.txt
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# rpm -ivh libmad-0.15.1b-3.0.rh8.dag.i386.rpm
warning: libmad-0.15.1b-3.0.rh8.dag.i386.rpm: Header V3 DSA signature: NOKEY, key ID 6b8d79e6
Preparing... ########################################### [100%]
1:libmad ########################################### [100%]

3.安装libtag

TagLib Audio Meta-Data Library

TagLib is a library for reading and editing the meta-data of several popular audio formats. Currently it supports both ID3v1 and ID3v2 for MP3 files, Ogg Vorbis comments and ID3 tags and Vorbis comments in FLAC, MPC, Speex, WavPack and TrueAudio files. Via

wget http://developer.kde.org/~wheeler/files/src/taglib-1.6.1.tar.gz
tar zxvf taglib-1.6.1.tar.gz
cd taglib-1.6.1
./configure
make && make install

libtag的库文件默认安装在/usr/local/lib目录下
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# ls -l /usr/local/lib/*tag*
-rwxr-xr-x 1 root root 810 Feb 6 06:04 /usr/local/lib/libtag_c.la
lrwxrwxrwx 1 root root 17 Feb 6 06:04 /usr/local/lib/libtag_c.so -> libtag_c.so.0.0.0
lrwxrwxrwx 1 root root 17 Feb 6 06:04 /usr/local/lib/libtag_c.so.0 -> libtag_c.so.0.0.0
-rwxr-xr-x 1 root root 18742 Feb 6 06:04 /usr/local/lib/libtag_c.so.0.0.0
-rwxr-xr-x 1 root root 773 Feb 6 06:04 /usr/local/lib/libtag.la
lrwxrwxrwx 1 root root 15 Feb 6 06:04 /usr/local/lib/libtag.so -> libtag.so.1.7.0
lrwxrwxrwx 1 root root 15 Feb 6 06:04 /usr/local/lib/libtag.so.1 -> libtag.so.1.7.0
-rwxr-xr-x 1 root root 626356 Feb 6 06:04 /usr/local/lib/libtag.so.1.7.0

安装完成以后，修改/etc/ld.so.conf，加入一行/usr/local/lib
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# cat /etc/ld.so.conf
/usr/local/lib
include ld.so.conf.d/*.conf
然后再执行ldconfig，更新/etc/ld.so.cache文件

生成的cache文件里面能匹配libtag
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# grep libtag /etc/ld.so.cache
Binary file /etc/ld.so.cache matches

如果不执行以上几步操作，则执行./lastfmfpclient时还是会报找不到libtag的错误。

而如果直接是用yum install 包名安装rpm包，则一般情况不用修改/etc/ld.so.conf及进行ldconfig的操作，因为操作系统默认已经知道了。

4.安装libsamplerate
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# wget http://dag.wieers.com/rpm/packages/libsamplerate/libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# ls
lastfmfpclient libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm taglib-1.6.1
libmad-0.15.1b-3.0.rh8.dag.i386.rpm readme.txt taglib-1.6.1.tar.gz
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# rpm -ivh libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm
warning: libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm: Header V3 DSA signature: NOKEY, key ID 6b8d79e6
error: Failed dependencies:
 libsndfile.so.1 is needed by libsamplerate-0.1.2-1.0.rh7.dag.i386

提示错误信息，libsamplerate需要libsndfile

-------------------------------
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# wget http://dag.wieers.com/rpm/packages/libsndfile/libsndfile-1.0.10-2.0.rh8.dag.i386.rpm
--06:18:39-- http://dag.wieers.com/rpm/packages/libsndfile/libsndfile-1.0.10-2.0.rh8.dag.i386.rpm
[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# rpm -ivh libsndfile-1.0.10-2.0.rh8.dag.i386.rpm
warning: libsndfile-1.0.10-2.0.rh8.dag.i386.rpm: Header V3 DSA signature: NOKEY, key ID 6b8d79e6
Preparing... ########################################### [100%]
 1:libsndfile ########################################### [100%]

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# rpm -ivh libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm
warning: libsamplerate-0.1.2-1.0.rh7.dag.i386.rpm: Header V3 DSA signature: NOKEY, key ID 6b8d79e6
Preparing... ########################################### [100%]
 1:libsamplerate ########################################### [100%]

5.lastfmfpclient的使用

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# ./lastfmfpclient
./lastfmfpclient: /usr/lib/libcurl.so.3: no version information available (required by ./lastfmfpclient)
lastfmfpclient (FP Beta 1.45)
A minimal fingerprint client, public release.
Copyright (C) 2007-2008 by Last.fm (MIR) - Build: Mar 25 2008 (10:27:33)

Usage:
lastfmfpclient yourMp3File.mp3
or
lastfmfpclient -nometadata yourMp3File.mp3
or
lastfmfpclient -url yourMp3File.mp3
(will output the url of the metadata)

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# ./lastfmfpclient http://f.mp3cn.net/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3
./lastfmfpclient: /usr/lib/libcurl.so.3: no version information available (required by ./lastfmfpclient)
ERROR: Cannot find file <http://f.mp3cn.net/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3>!

执行lastfmfpclient命令时还是报错，重新下载libcurl

wget http://curl.freeby.pctools.cl/download/libcurl4-devel-7.19.7-1.i386.rpm

在Debian下测试了一下last.fm提供的lastfmfpclient，有时候能正常获取fid(即指纹id)，有时候却不能，原来能正常获取指纹id的一直返回-1 FAIL，不知道是什么原因，调用命令行lastfmfpclient可能是在连接last.fm的服务器，因为有时候比较慢，有时候需要三、四十秒才会返回结果。

看来lastfmfpclient也不太靠谱，也许要找另外一个工具了。

6.总结
在Debian下面安装lastfmfpclient非常简单，用readme.txt中说明的命令安装就可以了。而在CentOS下面安装非常复杂，用“yum install 包名”进行安装时总时提示找不到对应的包。

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# yum install libtag1c2a
Setting up Install Process
Parsing package install arguments
No package libtag1c2a available.
Nothing to do

[root@CentOS_Test_Server lastfm.fpclient.beta2.linux-32]# cat readme.txt
If it does not run, you might need to install the following libs:

libtag, libmad, libcurl

here's how to install them:
su
apt-get install libtag1c2a
apt-get install libcurl3
apt-get install libmad0

possibly also
apt-get install fftw3
apt-get install libsamplerate0

我的相关日志：

Chrome + Proxy Switchy! + Puff实现翻墙

nlfd — Sun, 07 Feb 2010 17:43:15 +0800

在这儿下载Proxy Switchy!，然后安装到Chrome中。

到 AutoProxy 2 PAC项目首页下载与你所使用的代理服务器对应的 PAC 文件，或获取在线版本，我获取的是在线版本，地址为http://autoproxy2pac.appspot.com/pac/puff。

将获取的在线版本地址填到Online Rule List中，相关的配置如下。

pac是Proxy Auto Config的简称，通俗理解就是代理的配置文件，也就是说，当你在浏览器中输入的网址匹配pac文件中规则时，则使用代理服务器访问(也可以理解为翻墙)，不匹配的则不使用代理服务器访问。

访问网站时怎么判断你是用代理服务器访问还是没用代理服务器访问的呢？如果你能正常访问twitter、facebook、youtube等这些在墙外的网站，说明你是通过代理服务器访问的。如果你访问www.ip138.com时上面显示的ip地址与你的网络接入商（比如北京网通)上面的ip地址一致(在浏览器中输入http://192.168.1.1/一般可以看到ip地址)，说明你没有通过代理服务器访问，这是正常的现象，如果在墙内的网站也是通过代理服务器访问，那速度是有点慢的;如果访问www.ip138.com时上面显示的ip地址与你的网络接入商上面的ip地址不一致，说明你的配置不正确，说明你是在通过代理服务器访问墙内的网站。翻墙的工具主要是为了访问那些在墙外的网站，而不是为了访问墙内的网站。

pac的部分内容如下：
/*
* Proxy Auto-Config file generated by autoproxy2pac
* Rule source: http://autoproxy-gfwlist.googlecode.com/svn/trunk/gfwlist.txt
* Last update: Sat, 06 Feb 2010 06:00:46 GMT
*/
function FindProxyForURL(url, host) {
PROXY = "PROXY 127.0.0.1:1984";
DEFAULT = "DIRECT";

//-- AUTO-GENERATED RULES, DO NOT MODIFY!
if(/^[\w\-]+:\/+(?!\/)(?:[^\/]+\.)?stats\.wordpress\.com/i.test(url)) return DEFAULT;
if(/^http\:\/\/s3\.wordpress\.com/i.test(url)) return DEFAULT;
if(/^http\:\/\/s2\.wordpress\.com/i.test(url)) return DEFAULT;
if(/^http\:\/\/s1\.wordpress\.com/i.test(url)) return DEFAULT;
....

从此，在Chrom浏览器里面，对你来说，就无墙了。

参考：
在 Chrome + Switchy 下使用 AutoProxy gfwList PAC，http://autoproxy.org/zh-CN/node/61
Firefox, Chrome, IE说: 由AutoProxy决定用不用梯子，http://zww.me/archives/25050

试用Google Chrome 4.0

nlfd — Sat, 06 Feb 2010 18:09:34 +0800

今天看了文章我为什么使用 Google Chrome 浏览器后，对Chrom浏览器也动了心，原来只是在Google第一次发布Chrome的时候试用过一段时间，觉得不太好，就没有使用了。

现在Chrome已经发布了4.0版本，功能及性能有了很大的改进，而且也有了很多扩展，特别是速度要比Firefox快得多，内存占用比Firefox要少。

在Google输入chrome(为了不让跳转到www.google.cn，输入www.google.com/ncr即可)，搜索结果的第一项就是chrome英文版的链接，进入Chrome的页面以后，下载Chrome浏览器的离线版，双击下载的exe文件安装即可。

怎样尽可能的避免请求是的空数据？

nlfd — Wed, 03 Feb 2010 02:57:47 +0800

在最近的一个项目中，当请求某个url时，有时有可能会返回空的数据，用curl -I查看此url后发现用的是CDN缓存。

将程序调整了一下，就是如果请求某个url为空时，随机传入一个随机数，然后再递归调用函数本身，然后请求的数据就不为空了，看来当请求某个url为空时往url后面传入一个随机数是比较好的方式。

如果不传入随机数，则如果缓存在有效期内，则返回的是缓存里面的数据(当缓存服务器比较繁忙或出问题的时候，有可能返回的内容就是空的了)，而如果传入一个随机数，则因为此缓存不存在，所以访问的是真实的服务器，也许真实服务器就可以返回正确的内容了。

大致的算法如下：

/**
* 生成随机数
*
* @param int $length 生成的随机数的长度
* @param int $numeric 是否生成数字随机数的标志
*/
function random($length, $numeric = 0) {
 PHP_VERSION < '4.2.0' && mt_srand((double)microtime() * 1000000);
 if($numeric) {
 $hash = sprintf('%0'.$length.'d', mt_rand(0, pow(10, $length) - 1));
 } else {
 $hash = '';
 $chars = 'ABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789abcdefghijklmnopqrstuvwxyz';
 $max = strlen($chars) - 1;
 for($i = 0; $i < $length; $i++) {
 $hash .= $chars[mt_rand(0, $max)];
 }
 }
 return $hash;
}

function addRandomForUrl($url) {
if (empty($url)) return false;

$r = random(32);
return strstr($url, 'r=') ? preg_replace("/r=[0-9a-zA-Z]{32}/", 'r='.$r, $url) : (strstr($url, '?') ? $url . '&r='.$r : $url . '?r='.$r);
}

我的相关日志：

在CentOS5.2下安装PHP的id3扩展

nlfd — Mon, 01 Feb 2010 23:57:57 +0800

ID3通俗来理解就是附加到mp3文件中的歌曲元数据。PHP有一个id3的扩展，用来获取mp3文件的id3信息。

ID3标签是MP3音乐档案中的歌曲附加讯息，它能够在MP3中附加曲子的演出者、作者以及其它类别资讯，方便众多乐曲的管理。缺少ID3标签并不会影响 MP3的播放，但若没有的话，管理音乐文件也会相当的麻烦。如果你在网上download MP3，里面多半已经写有预设的ID3讯息。如果你想要将其清除重设，使用WinAMP中的“Alt + 3”热键，就能修改MP3档案中之的ID3标签。
　　ID3，一般是位于一个mp3文件的开头或末尾的若干字节内，附加了关于该mp3的歌手，标题，专辑名称，年代，风格等信息，该信息就被称为ID3信息，ID3信息分为两个版本，v1和v2版。Via

cd /home/software/php-5.2.8/ext

[root@CentOS_Test_Server ext]# wget http://pecl.php.net/get/id3-0.2.tgz
--02:09:27-- http://pecl.php.net/get/id3-0.2.tgz
Resolving pecl.php.net... 76.75.200.106
Connecting to pecl.php.net|76.75.200.106|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 20693 (20K) [application/octet-stream]
Saving to: `id3-0.2.tgz'

100%[=========================================================================>] 20,693 23.8K/s in 0.8s

02:09:29 (23.8 KB/s) - `id3-0.2.tgz' saved [20693/20693]

[root@CentOS_Test_Server ext]# tar zxvf id3-0.2.tgz
package.xml
id3-0.2/examples/example_get.php
id3-0.2/examples/example_get_genre_name.php
id3-0.2/examples/example_id3v2_frames.php
id3-0.2/examples/example_set.php
id3-0.2/examples/example_version.php
id3-0.2/config.m4
id3-0.2/config.w32
id3-0.2/CREDITS
id3-0.2/EXPERIMENTAL
id3-0.2/id3.c
id3-0.2/id3.dsp
id3-0.2/php_id3.h
id3-0.2/TODO

cd id3-0.2
./configure
[root@CentOS_Test_Server id3-0.2]# make && make install

编辑php.ini文件，在里面加入如下的一行
root@CentOS_Test_Server id3-0.2]# vi /usr/local/webserver/php/etc/php.ini

extension = "id3.so"

用命令行下模块id3已经生效了，连php-fpm也不需要重启，如果要通过web server调用id3，则需要重启web server及php-fpm
[root@CentOS_Test_Server id3-0.2]# php -m | grep id3
id3

用王菲的歌曲幽兰操来作测试，天后级歌手嘛:-)，(http://www.abc.com/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3)

将此首mp3通过wget下载到测试服务器里面
[root@CentOS_Test_Server www]# wget http://www.abc.com/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3
--02:22:32-- http://www.abc.com/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3
Resolving www.abc.com... 125.32.112.38
Connecting to f.mp3cn.net|125.32.112.38|:80... connected.
HTTP request sent, awaiting response... 302 Found
Location: http://222.35.28.8:9203/2670207D15FEE1CF4FB33BEA0961ADD4C92981369BE8D287/www.abc.com/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3 [following]
--02:22:32-- http://222.35.28.8:9203/2670207D15FEE1CF4FB33BEA0961ADD4C92981369BE8D287/f.mp3cn.net/cb/11/cb11a75fd33adc4a16de34ce12429730.mp3
Connecting to 222.35.28.8:9203... connected.
HTTP request sent, awaiting response... 200 OK
Length: 2192227 (2.1M) [audio/mpeg]
Saving to: `cb11a75fd33adc4a16de34ce12429730.mp3'

100%[=========================================================================>] 2,192,227 76.8K/s in 18s

02:22:51 (122 KB/s) - `cb11a75fd33adc4a16de34ce12429730.mp3' saved [2192227/2192227]

编辑文件id3.php_{，输入如下的内容}
[root@CentOS_Test_Server www]# vim id3.php
<?php
$tag = id3_get_tag('cb11a75fd33adc4a16de34ce12429730.mp3');
var_dump($tag);
?>

执行，最后输出的信息太少了，根本不是我们需要的，还有一种可能是将wma格式的文件转换为mp3格时歌曲的元数据ffmpeg给自动过滤了。
[root@CentOS_Test_Server www]# php id3.php
Array
(
 [encodedBy] => Lavf52.31.0
)

我们再下载一个mp3文件试一下，在百度mp3搜索的“幽兰操”
[root@CentOS_Test_Server www]# wget http://www.citynorth.cn/music/confucius.mp3
--23:04:28-- http://www.citynorth.cn/music/confucius.mp3
Resolving www.citynorth.cn... 122.70.148.28
Connecting to www.citynorth.cn|122.70.148.28|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 4396223 (4.2M) [audio/mpeg]
Saving to: `confucius.mp3'

100%[=========================================================================>] 4,396,223 174K/s in 42s

23:05:10 (102 KB/s) - `confucius.mp3' saved [4396223/4396223]

vim id3.php，加入一行代码$tag = id3_get_tag('confucius.mp3');
<?php
//$tag = id3_get_tag('eff86facdb73deaee395270c585f5a4b.mp3', ID3_V2_3);
//$tag = id3_get_tag('cb11a75fd33adc4a16de34ce12429730.mp3', ID3_V2_3);
$tag = id3_get_tag('confucius.mp3');
print_r($tag);
?>

执行，输出的信息如下，mp3的id3信息基本上都取出来了。
[root@CentOS_Test_Server www]# php id3.php
Array
(
 [title] => 大地電影
 [artist] => 王菲
 [album] => Album
 [year] => 2010
 [comment] => Comment
 [genre] => 13
)

我的相关日志：

AutoProxy结合puff实现翻墙

nlfd — Fri, 29 Jan 2010 22:19:23 +0800

前面写过一篇翻墙软件puff，如果单纯用puff则浏览网页时是否使用代理必须手动配置，这样比较麻烦，偶然间发现了AutoProxy这个firefox的扩展，使用后发现还不错。

首先，在firefox里面打开https://addons.mozilla.org/en-US/firefox/addon/11009，点击Add to Firefox图标，安装完AutoProxy扩展以后firefox提示你重启浏览器，重启以后就进入如下的界面。

AutoProxy提示你订阅代理规则列表，也就是出现在订阅列表里面的会自动使用代理访问，不在里面的不用代理访问，都是全自动的，无需人工干遇。点击ok按钮就订阅了。

点击firefox右下角的福字图标，点击Proxy Server -> Choose proxy server，选择你的代理服务器，我使用的是puff，点击ok，这样代理服务器就设置完成了。

AutoProxy只是一个代理服务器的切换软件，而翻墙时真正起作用是的Tor、Puff、ssh -d这些软件或服务，我使用的是puff做代理，把puff.exe放到启动里面可以随操作系统一起启动。

参考：

http://hi.baidu.com/%E6%B5%81%E6%B0%B4%E5%B0%8F%E9%95%87/blog/item/6b58cff206bce5c20a46e0bc.html

我的相关日志：

2010-01-14 | 翻墙软件puff
2009-07-16 | 试用翻墙软件tor
2010-01-23 | SSH登录超时设置

计算mp3文件的播放时间

nlfd — Fri, 29 Jan 2010 01:19:36 +0800

在*nix服务器上用ffmpeg计算mp3文件的长度等信息
ffmpeg -i /data/www/music/mu/ce/e6/cee631121c2ec9232f3a2f028ad5c89b.mp3
FFmpeg version 0.5, Copyright (c) 2000-2009 Fabrice Bellard, et al.
configuration: --prefix=/usr/local --enable-memalign-hack --enable-libmp3lame --enable-shared
libavutil     49.15. 0 / 49.15. 0
libavcodec    52.20. 0 / 52.20. 0
libavformat   52.31. 0 / 52.31. 0
libavdevice   52. 1. 0 / 52. 1. 0
built on Dec 14 2009 11:41:56, gcc: 4.3.2
Input #0, mp3, from '/data/www/music/mu/ce/e6/cee631121c2ec9232f3a2f028ad5c89b.mp3':
Duration: 00:04:58.13, start: 0.000000, bitrate: 64 kb/s
    Stream #0.0: Audio: mp3, 44100 Hz, stereo, s16, 64 kb/s
At least one output file must be specified

然后用Windows Media Player通过url方式打开此文件
长度显示的是04:58(即4分58秒，与上面用ffmpeg计算的长度基本上是一致的，只不过WMPlayer没有显示秒后面的时间。

看来ffmpeg的计算应该是比较准确的。

我的相关日志：

怎样避免MySQL中的MySQL server has gone away错误？

nlfd — Sun, 24 Jan 2010 19:53:06 +0800

我在最近的一个项目中，因为要抓取一些数据，且程序执行的时间较长，少则几个小时，多则几天时间，而且在程序执行期间，不可能总是在执行数据库操作，数据库操作只是很少的一部分了，为了避免出现上述标题中的错误，需要在wait_timeout指定的时间内执行mysql_ping操作，否则会提示上述错误。

比如你要下载一个100M的视频可能在5分钟之内无法下载完成，下载完成后再进行数据库相关的操作，在程序执行的时候你可以计算一下程序的执行时间，在程序执行时间小于300秒前需要执行一下mysql_ping操作。

这个方法很管用，我亲自试过了，在wait_timeout指定的时间内执行mysql_ping以后，就再也不会出现上述的错误。

download_video();

function microtime_float() {
 list($usec, $sec) = explode(" ", microtime());
 return ((float)$usec + (float)$sec);
}

function down_video() {
 if (下载进程还在运行) {
 $i++;

 do_check_mysql($i);

 sleep(1);
 }
}

我们看一下MySQL数据库的有关wait_timeout的配置，单位是秒，时间是5分钟，也就是说，如果你在5分钟之内不进行任何数据库相关的操作，必须告诉一下MySQL Server你自己还活着，否则你下次执行数据库操作时就会报此错误。
grep timeout /etc/my.cnf
wait_timeout = 300

mysql_ping函数在PHP手册的说明
mysql_ping

(PHP 4 >= 4.3.0, PHP 5)
mysql_ping -- Ping 一个服务器连接，如果没有连接则重新连接
说明
bool mysql_ping ( [resource link_identifier] )

mysql_ping() 检查到服务器的连接是否正常。如果断开，则自动尝试连接。本函数可用于空闲很久的脚本来检查服务器是否关闭了连接，如果有必要则重新连接上。如果到服务器的连接可用则 mysql_ping() 返回 TRUE，否则返回 FALSE。

我自己自定义了两个函数，用在我的项目中。
function check_mysql() {
 global $mysql;
 /**
 * mysql_ping() 检查到服务器的连接是否正常。如果断开，则自动尝试连接。本函数可用于空闲很久的脚本来检查服务器是否关闭了连接，如果有必要则重新连接上。如果到服务器的连接可用则 mysql_ping() 返回 TRUE，否则返回 FALSE。
 */
 $can_use = mysql_ping($mysql -> Link_id);
 writeLog(sprintf("%s Mysql status %s", __FUNCTION__, $can_use));
}

/**
* 有条件的执行mysql_ping
*/
function do_check_mysql($count, $second = 10) {
 if ((int)$second <= 0) $second = 10;

 //为防止操作超时，当操作时间是$second的倍数的时候，执行一行check_mysql()
 if ($count % $second == 0) {
 check_mysql();
 }
}

more nohup.out
SQL: SELECT a.songid,a.songname,b.sengername FROM `song` AS a INNER JOIN senger AS
b ON a.sengerid=b.sengerid WHERE a.sengerid > 0 ORDER BY songid ASC Error
Number: 2006 Error: MySQL server has gone away

参考：
http://hi.baidu.com/thinkinginlamp/blog/item/8512ad4b6f2e96f482025cf7.html
http://hi.baidu.com/thinkinginlamp/blog/item/d9e0cb13b04c5428dd540111.html

文件缓存有时也挺快的

nlfd — Sun, 24 Jan 2010 18:56:36 +0800

有个项目中要实现增量抓取数据的功能，由于数据库的数据有点大，有几十万条数据，如果每次去数据库中进行判重可能效率有点慢，一开始是考虑是把数据缓存在Tokyo Cabinet(简称tc)中，用的是tc的tchmgr put命令，没想到执行了大概5分钟左右的时间后，不知道为什么进程已经停止了，即使已经执行完成了，速度也是太慢了，有点弄巧成拙了。

最后改用php的文件来实现，没想到速度非常快，1秒多的时间就全部执行完了，速度非常快。

下面是用文件缓存时的日志。

2010-01-22 14:03:27 0.47822300 ==================================================
2010-01-22 14:03:27 0.47838400 Begin cache song...
2010-01-22 14:03:28 0.73927700 End cache song...
2010-01-22 14:03:28 0.73953700 ==================================================

2010-01-22 14:03:28 0.82295800 ==================================================
2010-01-22 14:03:28 0.82315600 Begin cache singer...
2010-01-22 14:03:28 0.85681800 End cache singer...
2010-01-22 14:03:28 0.85695600 ==================================================

2010-01-22 14:03:28 0.91378100 ==================================================
2010-01-22 14:03:28 0.91395600 Begin cache special...
2010-01-22 14:03:29 0.02663200 End cache special...
2010-01-22 14:03:29 0.02677700 ==================================================

生成的缓存文件是一个关联数组，key值用md5进行哈希。
more /tmp/song.tch
<?php
$song_data = array (
'7d6e7b19cae5de83199c6e56ec141faf' => '30352',
'0226ee2f895178aaefb9256cf1290e8a' => '2',
'01de4d31dbe931d417d5ef71dcc88a94' => '3',
'67409ef165858f3a29ab2fe5fd4dbe16' => '4',
'85e924cd88a7df47d7c8559d9d67ee38' => '5',
'4c862c8742905570097dc5b935d2eb34' => '6',
'a31caa27611fd5bdbdcc9a61a198e4e1' => '7',
'89dcbdeef46047092e5cb8cfbb198fb0' => '8',
'1ec661fda84b56478eff2945b0cb256b' => '9',
'736534681a7345b992a2fe96b903a235' => '10',

我的相关日志：

2010-01-21 | 关于循环中的变量问题
2010-01-17 | 关于进程的一点信息
2010-01-17 | PHP中system及exec的用法