某人的栖息地 http://www.ooso.net Linux + Apache + Mysql + Php + Flash Fri, 03 Jul 2009 02:33:08 +0000 http://wordpress.org/?v=2.8 en hourly 1 启用memcached压缩注意事项 http://www.ooso.net/archives/475 http://www.ooso.net/archives/475#comments Wed, 13 May 2009 23:56:05 +0000 Volcano http://www.ooso.net/?p=475 阅读全文（1179字）]]> 在php开发中，开启memcache的数据压缩存储是一件很简单的事情。在多数情况下，压缩数据不仅不会降低程序的执行效率，反倒会因为网络传输的开销降低，带来速度提升。看看最常用的Memcache::set方法:
bool Memcache::set ( string $key , mixed $var [, int $flag [, int $expire ]] )

在这个方法中，将$flag设置为MEMCACHE_COMPRESSED即可启用memcache压缩存储。

这样做有什么弊端？

如果没有做额外判断，每一次写入memcache都会启用压缩，不管数据的大小。对应的，每次获得数据都需要做一次解压缩的操作，这是典型的一刀切手法。实际上在数据很小的情况下，不需要压缩，在这个基础上压缩省不了多少空间。

更好的压缩策略？

好了，我的想法是在数据超过一定大小（比如2k）的情况下，才开启压缩。这个好办，捋起袖子就干，在调用Memcache::set方法之前，首先判断一下数据的大小，一个strlen就搞定了，再简单不过了。

PLAIN TEXT
PHP:
  1. $memcache = new Memcache;
  2. $memcache->connect('localhost', 11211);
  3. $flag = strlen($data)> 2048 ? MEMCACHE_COMPRESSED : 0;
  4. $memcache->set('mykey', $data, $flag);

有人可能会问了，array和object怎么办，这玩意可不能用strlen判断长度。

这还真能难住我一阵子，要知道把array/object写入memcache的时候，php会自动做serialize，再把它当作字符串插入memcache。

PLAIN TEXT
PHP:
  1. $flag = strlen(serialize($data))> 2048 ? MEMCACHE_COMPRESSED : 0;

谁会采用这段代码？看起来非常山寨，而且serialize也不快，赔本买卖。

更好的办法！

上面的文字都是废话，直接看这段就好。Memcache::setCompressThreshold方法可以包办之前所有的逻辑。

Memcache::setCompressThreshold — Enable automatic compression of large values

bool Memcache::setCompressThreshold ( int $threshold [, float $min_savings ] )

举个例子，下面这段会自动启用压缩策略，当数据大于2k时，以0.2的压缩比进行zlib。

PLAIN TEXT
PHP:
  1. $memcache->setCompressThreshold(2000, 0.2);

根据我的测试结果，setCompressThreshold方法会忽略Memcache::set的flag参数。

]]> http://www.ooso.net/archives/475/feed 2 Git-svn on cygwin http://www.ooso.net/archives/520 http://www.ooso.net/archives/520#comments Thu, 09 Apr 2009 22:55:21 +0000 Volcano http://www.ooso.net/?p=520 阅读全文（870字）]]> 开始试用最近比较红的git，我看中的是它的本地版本库功能，即便网络比较烂的时候，也可以在本地提交，等到了合适的时候一并传上去。由于以前的代码版本控制使用的是svn，所以我用git-svn过渡一下。

目前在windows下，最好的git客户端恐怕就是装一个cygwin。鼓捣了一个时辰，整理好一些可用的配置文件，陈列一下以备下次使用：

~/.bash_profile

偶尔还会使用svn验证一下check in的情况，刚转过来不放心啊，下面的配置是为了防止svn命令行乱码。命令行git-svn在/usr/sbin/git-core/路径下，是一个perl脚本，为了方便，我把这个路径加入了PATH环境变量。

PLAIN TEXT
CODE:
  1. export PATH=$PATH:/usr/sbin/git-core/
  2. export SVN_EDITOR=vim
  3. export LC_ALL=en_US.UTF-16
  4. export LC_CTYPE=en_US.UTF-16
  5. export LANG=en_US.UTF-16
  6. export XMODIFIERS=@im=Chinput3
  7. stty cs8 -istrip
  8. stty pass8
  9. export LESSCHARSET=latin1

~/.inputrc

去掉注释即可

PLAIN TEXT
CODE:
  1. set meta-flag on
  2. set convert-meta off
  3. set input-meta on
  4. set output-meta on

~/.gitconfig

PLAIN TEXT
CODE:
  1. [user]
  2. name = muhaha
  3. email = aa@bb.cc
  4.  
  5. [color]
  6. diff = auto
  7. status = auto
  8. branch = auto
  9.  
  10. [alias]
  11. st = status
  12. rb = svn rebase
  13. ci = commit -a
  14. co = checkout

常用操作

clone一个svn git-svn clone -s svn://xxx.xxx.com
类svn up操作？ git-svn rebase
添加文件 git add xfile
check in git ci
往svn库提交 git-svn dcommit
]]> http://www.ooso.net/archives/520/feed 6 关于mysql proxy 0.7.0 http://www.ooso.net/archives/501 http://www.ooso.net/archives/501#comments Sun, 05 Apr 2009 09:12:40 +0000 Volcano http://www.ooso.net/?p=501 阅读全文（1334字）]]> 听说mysql proxy 0.7.0即将发布，正好前些日子从bzr上获取mysql proxy的代码编译过，看看当时bzr的版本号，和现在也差不了多少。在这期间，我又花了一些时间把mysql配置成读写分离，出了不少妖蛾子，由于使用的人不太多，解决问题超费劲——搜索不到有帮助的内容啊。但是我可能是比较幸运的，最后成功的实现了读写分离，目前在开发环境运行的比较稳定，所以有必要做个笔记分享一下。

读写分离脚本的问题

刚启动mysql proxy的时候，经常报错 -- "Mysql server has gone away"。我进一步缩小了可能出问题的范围(把环境简化是很重要的查错手段哦！)，比如只连接一个mysql，或者只连接本机的mysql，没有太大帮助，最后是在mysql proxy的日志文件中看到些蛛丝马迹：

(critical) proxy-plugin.c:1367: (connect_server) [string "/usr/local/share/mysql-proxy/r..."]:69: .address is deprecated. Use .src.name or .dst.name instead
(critical) (read_query) [string "/usr/local/share/mysql-proxy/r..."]:179: .address is deprecated. Use .src.name or .dst.name instead
(critical) proxy-plugin.c.1115: I have no server backend, closing connection

在mysql proxy的论坛上看到有人碰到类似的问题，很简单，读写分离的lua脚本还是旧的，0.6.1时代的产物了，更糟糕的是，即便是即将发布的0.7.0，rw-splitting.lua也是旧版本的。lua脚本中的.address需要替换成.src.name或者.dst.name。

解决办法 —— 下载更新之后的rw-splitting.lua，情况会好转。

使用prepare方法无法获得结果

我在测试代码中采用php的pdo_mysql，单独连接mysql是毫无问题的，然而配合mysql proxy使用则是屡屡受挫，查询经常没有结果返回，比较随机，从日志中也找不到有帮助的内容。这次没有找到解决办法，所以我绕了过去，在连接mysql的时候使用伪prepare的方式：

PLAIN TEXT
PHP:
  1. $option = array(PDO::ATTR_EMULATE_PREPARES => 1);

据称emulate方式的性能比prepare要好，所以这也算安慰奖了。

专门的lua脚本分支

lua脚本开发滞后，是一个比较严重的问题，所以在邮件组上看到有个新的lua脚本分支出来 —— https://launchpad.net/mysql-proxy-lua-scripts。希望开发速度能跟上来。

keepalive参数

mysql proxy还不算太稳定，偶尔crash我也不觉得惊讶，所以新增的keepalive参数很有用。在proxy启动的时候，加上--keepalive参数，它便会努力保持proxy的运行状态，停止了也会自动重启。

]]> http://www.ooso.net/archives/501/feed 6 apache的RewriteMap使用心得 http://www.ooso.net/archives/493 http://www.ooso.net/archives/493#comments Thu, 02 Apr 2009 13:57:47 +0000 Volcano http://www.ooso.net/?p=493 阅读全文（1250字）]]> 在apache的环境下，rewrite还真是生活之友啊，时不时就得用上。前些日子有个需求，要将url重新转一转。

什么情况？

原来的url
http://www.xxx.com/demo/oldpage.php?param1=1&param2=2

转换后的url
http://www.xxx.com/newpage.php?url=%2Fdemo%2Fmypage.php%3Fparam1%3D1&param2%3D2

需要把粗体部分的url进行urlencode，能看出上面的字符"?&="都分别转义过，作为参数发给另外一个url。那么这时候请出rewrite还真是最合适不过了。

坎坷的Rewrite经历

查查rewrite手册，俺这才知道，转义这活，非得派出RewriteMap的map function才能做的比较漂亮。现在只有四个内部map function可供差遣：

  • toupper: Converts the key to all upper case.
  • tolower: Converts the key to all lower case.
  • escape: Translates special characters in the key to hex-encodings.
  • unescape: Translates hex-encodings in the key back to special characters.

那么很快就有了第一个rewrite出现：

RewriteMap escape int:escape
RewriteRule ^/([^/]*)$ /newpage.php?mi_url_suffix=${escape:$1?%{QUERY_STRING}} [L,PT]

注：这里的int不是intger的意思，它是internal的缩写，表示调用内部函数。

看上去非常简单，跑起来貌似也正....常？且慢，俺打开RewriteLog一瞅，形式不容乐观啊，"&"字符通通没有转义。看来是失败了，爬到狗狗上翻了一下，貌似escape对"?="之类的特殊字符是不做转义的，晕。

RewriteMap到底

接着细看apache的rewrite手册，发现RewriteMap还支持自定义脚本，那么还得使出俺的看家绝技——php了。首先弄一个能转义的php，必须非常简单，复杂了apache容易挂掉，写出来发现想复杂都挺难啊：

/usr/local/bin/escape.php

PLAIN TEXT
PHP:
  1. #!/usr/bin/php -f
  2. <?php
  3. while($in = trim(fgets(STDIN)))
  4.         fputs(STDOUT, urlencode($in) . "\r\n");
  5. ?>

在这个脚本里可别使用php:://stdin之类的，具体原因查php手册。相应的，rewrite规则如下：

RewriteMap escape prg:/usr/local/bin/escape.php
RewriteRule ^/([^/]*)$ /newpage.php?mi_url_suffix=${escape:$1?%{QUERY_STRING}} [L,PT]

rewrite规则没有太大的改变，prg表示使用自定义脚本。现在这个版本总算正常运作了。

]]> http://www.ooso.net/archives/493/feed 4 wordpress plugin “search engine related posts” 1.2发布 http://www.ooso.net/archives/516 http://www.ooso.net/archives/516#comments Sun, 29 Mar 2009 02:19:45 +0000 Volcano http://www.ooso.net/?p=516 阅读全文（479字）]]> 去年写了个wordpress插件"search engine related posts"，不知不觉也有将近一年没有更新过了。这个插件的作用：当用户从google搜索到你的博客上，自动显示站内搜索相关的主题。这里没有用到数据库来做相关的搜索工作，而是利用google公开的一些api进行查询，因此对个人博客来说，不会增加服务器负载，完全只是一段js代码而已。

本次1.2相对第一个版本的改动

  • 将javascript提取出来放到单独的js文件里，这是为了减小每个url的大小，浏览器也会对外部js进行缓存，有效的减少带宽输出
  • js文件已经用yui compressor压缩过，只有900多个字节
  • 支持多语种搜索，修改文件中的$related_posts_lang变量即可，中文用户需要将这个值修改为zh-CN(默认是en-US)
  • 可以去除网页标题中的站名以及部分连接字符，让标题更简短且有意义

下载search engine related posts 1.2

http://wordpress.org/extend/plugins/search-engine-related-posts/

]]> http://www.ooso.net/archives/516/feed 0 starling试用手记 http://www.ooso.net/archives/506 http://www.ooso.net/archives/506#comments Sat, 21 Mar 2009 10:48:53 +0000 Volcano http://www.ooso.net/?p=506 阅读全文（745字）]]> twitter最近将ruby实现的消息队列服务器starling开源了，这是一个支持memcache协议的轻量级持久化服务器，因此使用php/perl/ruby/java等多种客户端都没问题，可以将较慢的处理逻辑通过消息队列放在后台处理，同时也支持多点分布式处理。周末找了个闲置的centos 5机器搭了一套starling试用，配合php的memcache扩展测试一番，有点意思。

starling安装步骤

centos默认不带ruby，得重新装，以下安装步骤都是以root身份跑的。

yum install ruby ruby-devel rubygems
gem install memcache-client starling

如果你使用yum找不到ruby的相关包，请记得添加epel repository。安装之后新增的程序：

  • /usr/bin/starling #一个ruby脚本，starling的服务程序
  • /usr/bin/starling_top #starling的状态检查程序，可以查看starling的运行状态，类似memcache的状态显示，不同的是能够显示每个key的状态

starling启动后默认会在22122端口蹲点守候。

为了使用方便，我修改了一个starling在centos下的启动脚本，放在/etc/init.d/starling，下载地址：http://customcode.googlecode.com/files/starling。使用方法：
/etc/init.d/starling start|stop|restart

测试程序

以下是在测试中用的php脚本，说实话php在循环比较大的时候没啥优势，但是关键是简单，几行就搞定了。

写入的测试程序

PLAIN TEXT
CODE:
  1. #!/usr/bin/php
  2. <?php
  3. $m = new Memcache;
  4. $m->addServer('127.0.0.1', '22122');
  5.  
  6. $start = microtime(true);
  7.  
  8. for($i = 0; $i <10000; ++$i) {
  9.     //echo $i, "\n";
  10.     $m->set('testtesttesttest', '中文测试中文测试中文测试中文测试中文测试中文测试中中文测试中中文中a');
  11. }
  12. echo "time:" . (microtime(true) - $start), "\n";

读出来的测试程序

PLAIN TEXT
CODE:
  1. #!/usr/bin/php
  2. <?php
  3. $m = new Memcache;
  4. $m->addServer('127.0.0.1', '22122');
  5.  
  6. while(1) {
  7.     echo $m->get('test'), "\n";
  8.     usleep(100); // 休息一下，否则容易cpu 100%
  9. }

性能测试

测试条件:

  • key的长度16B
  • value的长度100B,
  • 8个并发写入进程
  • 每个进程插入10,000条记录

平均每个进程花了7秒完成写入操作，那么照这样计算：

10000 * 8 / 7 = 每秒写入11428次

以上测试进行的比较随意，而且我懒得插入大量数据来测试了，这个比较花时间，所以测试结果仅供参考。由于starling是目前twitter在生产环境中运行的，经过实践检验过，稳定性应该不成问题。

]]> http://www.ooso.net/archives/506/feed 7 在centos 5.2下安装最新的mysql proxy http://www.ooso.net/archives/495 http://www.ooso.net/archives/495#comments Sat, 14 Mar 2009 14:09:16 +0000 Volcano http://www.ooso.net/?p=495 阅读全文（1677字）]]> mysql proxy的代码树已经迁移到lauchpad，采用bazaar进行版本管理。参考了一些文档，在centos 5.2下编译安装最新mysql proxy成功。步骤记录如下（在centos 5下应该也适用）：

首先让EPEL (Extra Packages for Enterprise Linux) repository 生效
# rpm -Uvh http://download.fedora.redhat.com/pub/epel/5/i386/epel-release-5-2.noarch.rpm

确定这些包已经安装：GNU Autotools, flex, pkg-config, bazaar, MySQL client libraries
# yum install autoconf automake libtool flex pkgconfig bzr mysql-devel

centos下自带的libevent版本超老，这个没有别的办法，只能自己重新编译，版本需要在1.4.0以上，越高越好

$ wget http://monkey.org/~provos/libevent-1.4.9-stable.tar.gz
$ tar zvfx libevent-1.4.9-stable.tar.gz
$ cd libevent-1.4.9-stable
$ ./configure
$ make
# make install

centos自带的glib版本也比较老，mysql proxy 0.7.0以上需要glib2 2.16.0以上才能编译成功，因此不得不重新编译glib

$ wget http://ftp.gnome.org/pub/gnome/sources/glib/2.18/glib-2.18.4.tar.gz
$ tar zvfx glib-2.18.4.tar.gz
$ cd glib-2.18.4
$ ./configure
$ make
# make install

编译安装lua 5.1

$ wget http://www.lua.org/ftp/lua-5.1.4.tar.gz
$ tar zvfx lua-5.1.4.tar.gz
$ cd lua-5.1.4
$ vi src/Makefile

在CFLAGS里加上-fPIC，因为我在64位机上编译出现了“relocations”错误


$ make linux
# make install
# cp etc/lua.pc /usr/local/lib/pkgconfig/

重要：让pkg-config找到自己编译的库在哪里

$ export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/local/lib/pkgconfig

最后，从bazaar中检出最新的mysql-proxy源文件进行编译：

$ bzr branch lp:mysql-proxy
$ cd mysql-proxy
$ ./autogen.sh
$ ./configure
$ make
# make install

编译完成，可以检查一下最终结果：

# mysql-proxy -V


mysql-proxy 0.7.0
glib2: 2.18.4
libevent: 1.4.9-stable
admin: 0.7.0
proxy: 0.7.0

配置启动脚本，在系统启动时运行mysql-proxy

cd /etc/init.d
wget http://customcode.googlecode.com/files/mysql-proxy
chmod 0755 /etc/init.d/mysql-proxy
chkconfig mysql-proxy on

增加运行参数

cat >/etc/sysconfig/mysql-proxy


# Options to mysql-proxy
# do not remove --daemon
PROXY_OPTIONS="--daemon"

CTRL+D保存，然后就可以使用以下命令启动|停止mysql-proxy

/etc/init.d/mysql-proxy start|stop

参考文档：
How to Compile and Install MySQL Proxy from Bazaar on CentOS 5.2

]]> http://www.ooso.net/archives/495/feed 0 131个字符的php framework http://www.ooso.net/archives/415 http://www.ooso.net/archives/415#comments Tue, 10 Mar 2009 06:40:03 +0000 Volcano http://www.ooso.net/?p=415 阅读全文（632字）]]> 在friendfeed上看到这个链接 —— The 140 Characters Webapp Challenge!，这个比赛要求用140个字符的代码造就一个web应用。

里头有36个程序可供投票，基本上全是脚本语言大杂烩：php,perl,ruby,javascript。实现的应用也是五花八门，有相册，类twitter，小游戏，甚至还有php代码框架？摘录如下：

PLAIN TEXT
CODE:
  1. require __DIR__.'/c.php';
  2. if (!is_callable($c = @$_GET['c'] ?: function() { echo 'Woah!'; }))
  3.         throw new Exception('Error');
  4. $c();

这段代码利用了php5.3的一些新特性：

  • __DIR__
  • Anonymous functions
  • ?:运算符

代码只有131个字符，由于代码极为简陋，安全性也是没得保障的，只能算一个程序的统一入口罢了。

如果用php 5.2来写这段代码，大概就是：

PLAIN TEXT
CODE:
  1. require dirname(__FILE__).'/c.php';
  2. if (!is_callable($c = @$_GET['c'] ? $_GET['c'] : create_function('', "echo 'Woah!';")))
  3.         throw new Exception('Error');
  4. $c();

如果要让这段代码变得实用点，可以在$c前面加上一个前缀，这样安全性会有进一步提升，代码也会相应的增加若干字节。

]]> http://www.ooso.net/archives/415/feed 2 解决memcache连接奇慢问题一例 http://www.ooso.net/archives/479 http://www.ooso.net/archives/479#comments Sat, 07 Mar 2009 03:19:44 +0000 Volcano http://www.ooso.net/?p=479 阅读全文（788字）]]> 最近用xdebug观察线上程序的运行时间统计，发现往日里跑起来像飞的memcache居然是系统中拖后腿的耗时大户，连接时间特长。

运行环境

  • webserver是apache + php
  • php memcache extension版本是3.0.2，当时是最新的beta版...
  • 有4个memcache server可供使用
  • 代码中会利用php的Memcache::addServer依次连接四个memcache，长连接方式

现象

完成四次addServer一共需要300ms以上，但是一旦连接上，获取单个item飞快，时间在3ms以下。
更可恶的问题在于，虽然执行了四次Memcache::addServer，但是实际使用的始终是最后一个memcache，这实在让人崩溃。

问题解决

使用了一点搜索技巧，在pecl.php.net上找到了类似的bug: First get slow when using multiple memcached servers

这个bug的描述如下：

We are monitoring memcached performance and noticed that when we added a second memcached via Memcache::addServer the first get request is always slower than the subsequent ones although we are using persitent memcached connections. Switching from crc32 to fnv hashing didn't help either. Is that delay explainable

看起来是最新的memcache extension有一些问题，尝试将这个扩展降级成最新的稳定版2.2.6，然后重启apache看看，memcache连接过慢的问题果然已经解决。

结论

吃螃蟹果然是要付出代价的。。

]]> http://www.ooso.net/archives/479/feed 8 Friendfeed secure pro for greasemonkey http://www.ooso.net/archives/478 http://www.ooso.net/archives/478#comments Fri, 06 Feb 2009 08:21:56 +0000 Volcano http://www.ooso.net/?p=478 阅读全文（234字）]]> 今天听说friendfeed可以支持https://访问了，考虑到目前GFW功能越来越强大，建议所有中国用户都采用这种访问形式。顺手写了一个greasemonkey脚本 —— Friendfeed secure pro，当你采用http://访问friendfeed,那么会自动跳转到https://，firefox下的懒人专用。

满足下面两个条件，你就可以安装这个脚本：

  • 你使用的是firefox
  • 你甚至安装了greasemonkey插件

安装Friendfeed secure pro

]]> http://www.ooso.net/archives/478/feed 2 关于smarty3的一些说明 http://www.ooso.net/archives/476 http://www.ooso.net/archives/476#comments Sun, 01 Feb 2009 10:10:16 +0000 Volcano http://www.ooso.net/?p=476 阅读全文（838字）]]> 这些天看到了smarty 3 alpha冒头了，于是花时间做了个走访调查。下面的文字基本上来自其readme：

基本文件文件结构

index.php
/libs/
  Smarty.class.php 		#主文件
/libs/sysplugins/		#内部plugin
  internal.*
/plugins/			#外部plugin,可自由扩充
  function.mailto.php
  modifier.escape.php
/templates/			#模板，可以是纯php或传统的smarty模板
  index.tpl
  index_view.php

一个经典的smarty调用

PLAIN TEXT
PHP:
  1. require('Smarty.class.php');
  2. $smarty = new Smarty;
  3. $smarty->assign('foo','bar');
  4. $smarty->display('index.tpl');

和之前的版本似乎没什么差别

SINGLETON

这个有意义吗？

PLAIN TEXT
PHP:
  1. $smarty = Smarty::instance();

模板

之前的smarty模板，相当于重新定义了一套标签语言，那么smarty3提供了一种新的模板形式，直接支持php语法的模板。

但是问题就出来了，我们还有必要用模板吗？

引用php类型模板的一个例子：

PLAIN TEXT
PHP:
  1. $smarty->display('php:mytemplate.tpl');

模板中可以直接使用熟悉的语法： <?=$foo?> <?=$bar?>

使用php类型模板的话，安全问题需要自己解决。但这个对成熟的团队来说不是问题。

除此之外，新支持字符串类型的模板，感觉比较生猛，离模板之路也是渐行渐远：

PLAIN TEXT
PHP:
  1. $smarty->display('string:This is my template, {$foo}!');

smarty3的相关链接

]]> http://www.ooso.net/archives/476/feed 3 用gvim编辑firefox的文本框内容 http://www.ooso.net/archives/432 http://www.ooso.net/archives/432#comments Mon, 05 Jan 2009 16:28:08 +0000 Volcano http://www.ooso.net/?p=432 阅读全文（1043字）]]> 到目前为止，已经使用近两年vim，渐渐的对这玩意有一些依赖性。

平常用的是firefox浏览器，为了看上去比较酷或者在装A和装C之间徘徊，我又安装了vimperator插件，这样操作firefox就像用vim一样，干啥都得敲一些键盘命令，浏览网页的时候对鼠标不会太依赖，还可以方便的调整本本的位置比如放在腿上。

为了最大化的利用vim，我不厌其烦的在狗狗上爬来爬去，终于学到一招实用技巧——利用gvim编辑网页中的文本内容。简单的说，只要光标停留在目标网页的文本框里，就可以使用ctrl + i （<C + i>）快捷键biu的一下呼出gvim编辑文本。

设置过程笔记

  • 安装vimperator插件
  • 在firefox里输入伪vim命令 :set editor=gvim -f
  • 在系统的path环境变量中加入gvim.exe的路径，比如俺的是 D:\Program Files\Vim\vim72，很可能要重启电脑才能生效

顺利的话就可以使用前文说到的快捷键了。

优点

  • 切换页面的时候，不会因为编辑焦点区域丢失导致保存内容失败
  • 论坛中灌水的时候效率明显提升
  • 写wiki或blog的时候得心应手

缺点

  • 对vim的依赖程度会越来越高，不可自拔

本人的_vimperatorrc配置

PLAIN TEXT
CODE:
  1. autocmd LocationChange .* :js modes.passAllKeys = /mail\.google\.com/.test(buffer.URL) || /google\.com\/reader\//.test(buffer.URL) || /www\.qidian\.com/.test(buffer.URL)
  2. set complete=sfl
  3. set titlestring=hello
  4. set wildoptions=auto
  5.  
  6. noremap <C-V> <C-v>
  7. noremap <C-Z> <C-z>
  8. noremap <C-c> <C-v><C-c>
  9. noremap <C-a> <C-v><C-a>
  10. cnoremap <C-c> <C-v><C-c>
  11. cnoremap <C-v> <C-v><C-v>
  12. cnoremap <C-x> <C-v><C-x>
  13. inoremap <C-a> <C-v><C-a>
  14. inoremap <C-c> <C-v><C-c>
  15. inoremap <C-v> <C-v><C-v>
  16. inoremap <C-x> <C-v><C-x>
  17. inoremap <C-z> <C-v><C-z>
  18. inoremap <C-y> <C-v><C-y>
  19.  
  20. set nextpattern=\s*下一页|下一张|下一篇|下一頁|下页|后页\s*,^\bnext\b,\bnext\b,\bsuivant\b,^>$,^(>>|››|»)$,^(>|»),(>|»)$,\bmore\b
  21. set previouspattern=\s*上一页|上一张|上一篇|上一頁|上页|前页\s*,^\bprev|previous\b, \bprev|previous\b,\bprécédent\b,^<$,^(<<|‹‹|«)$,^(<|«),(<|«)$

]]> http://www.ooso.net/archives/432/feed 3 trac使用经验两则 http://www.ooso.net/archives/443 http://www.ooso.net/archives/443#comments Fri, 28 Nov 2008 10:01:36 +0000 Volcano http://www.ooso.net/?p=443 阅读全文（1527字）]]> 最近开始使用trac进行项目管理，和svn同步。使用过程中解决了两个并不常见的问题，贴出来和大家分享。

如何修改trac的assign to下拉列表

trac ticket的assign to下拉列表中的名单，没有保存在配置文件里头。读一下TracFaq有下面发现：

This will change the Assign To ticket filed into a select box that only contains existing users. However as it says on the TracTickets page, the user must have logged, in at least once, and set their email address.

If you run multiple Trac sites, and have a set of common users across all Trac sites, it gets annoying to have to log into each one and set the email.

So, what is one to do? Well, there are two things that need to be entered into the database: a session record, and an email record.

所以我们只需要对trac的session表做操作就可以修改assign to的下拉菜单列表。session的表结构如下:

Table "session"
Column         | Type    | Modifiers
---------------+---------+-----------
sid            | text    | not null
authenticated  | integer | not null
last_visit     | integer |

让trac的ticket和bugzilla有同样的状态

缺省配置下，trac ticket的状态和bugzilla的bug状态不一样，只有new,fixed,invalid,wontfix,duplicate,worksforme这几种。在trac 0.11之后，可以自己定义workflow，只需要将trac.ini的[ticket-workflow]章节修改一下，就可以支持verify状态：


accept = new -> assigned
accept.operations = set_owner_to_self
accept.permissions = TICKET_MODIFY
leave = * -> *
leave.default = 1
leave.operations = leave_status
reassign = new,assigned,reopened -> new
reassign.operations = set_owner
reassign.permissions = TICKET_MODIFY
reopen = resolved,verified,closed -> reopened
reopen.operations = del_resolution
reopen.permissions = TICKET_CREATE
resolve = new,assigned,reopened -> resolved
resolve.operations = set_resolution
resolve.permissions = TICKET_MODIFY
verify = resolved -> verified
verify.permissions = TICKET_MODIFY
close = verified -> closed
close.permissions = TICKET_MODIFY

]]> http://www.ooso.net/archives/443/feed 2 在CentOS / Red Hat下安装PHP 5.x PECL Filter Extension http://www.ooso.net/archives/473 http://www.ooso.net/archives/473#comments Mon, 27 Oct 2008 08:22:30 +0000 Volcano http://www.ooso.net/index.php/archives/473 阅读全文（1164字）]]> php 5.2之后，默认会装有filter extension，这个扩展可以帮助php开发者过滤用户输入的内容，由php的创始人之一Rasmus Lerdorf提供，可以见我早期的文章介绍。

Q. How do I install filter extension for safely dealing with input parameters supplied via a web form using filter_var()?
A. This extension is part of PHP Core version 5.20 and above. Unfortunately, RHEL / CentOS comes with PHP version 5.1.6. So you need to install this extension by typing the following commands.

由于RHEL / CentOS自带的php版本是5.1.6，那么只好手工安装filter扩展。安装过程：

安装php-devel

为了编译php extensions，需要安装php-devel包:
# yum install php-devel

下载php的源码

php 5.1.6的源码树中没有包含php_pcre.h header文件, 所以需要另行下载一个php源码. 从php.net下载最新版本的源码并放到/opt目录:
# cd /opt
# elinks http://cn2.php.net/get/php-5.2.6.tar.bz2/from/cn.php.net/mirror

保存之后解压:
# tar -jxvf php-5.2.6.tar.bz2

下载filter extension

在pecl上找到最新的filter源码:
# cd /opt
# wget http://pecl.php.net/get/filter-0.11.0.tgz

安装filter extension

解压文件:
# tar -jxvf filter-0.11.0.tgz
# cd filter-0.11.0
打开logical_filters.c文件:
# vi logical_filters.c
找到下面的代码行:

#include "ext/pcre/php_pcre.h"

修改成 (php_pcre.h的绝对路径):

#include "/opt/php-5.2.6/ext/pcre/php_pcre.h"

保存并关闭文件. 最后输入下面命令来编译filter扩展:
# phpize
# ./configure
# make install

配置Filter Extension

输入下列命令:
# echo 'extension=filter.so' > /etc/php.d/filter.ini

然后重启web server即可。

原文: CentOS / Red Hat Linux Install PHP 5.x PECL Filter Extension

]]> http://www.ooso.net/archives/473/feed 2 php 5.3带来了什么(三) http://www.ooso.net/archives/472 http://www.ooso.net/archives/472#comments Wed, 24 Sep 2008 08:50:01 +0000 Volcano http://www.ooso.net/index.php/archives/472 阅读全文（606字）]]> 之前介绍的php 5.3的新特性，都是方便开发人员的东东。下面介绍个很讨虚拟主机提供商喜欢的特性。

增强的ini文件支持

  • CGI/ FastCGI支持类似.htaccess的INI配置
  • 每个目录下都可以有INI设置，ini的文件名取决于php.ini的配置，但是[PATH=/var/www/domain.com], [HOST=www.domain.com]段落的设置用户不能修改。
  • 增强的error handling
  • 允许在ini文件中定义变量和常量，可以在程序中直接调用。

附上一段ini文件的例子

PLAIN TEXT
CODE:
  1. #用户自定义的php.ini文件名 (.htaccess). 默认是".user.ini"
  2. user_ini.filename = ".user.ini"
  3.  
  4. #如果要禁用这个特性，设置为空值即可
  5. user_ini.filename =
  6.  
  7. #用户自定义的php.ini文件TTL时长(time-to-live)，单位为秒，我理解为缓存过期时间。默认为300秒
  8. user_ini.cache_ttl = 300
  9.  
  10. [PATH=/var/www/domain.com]
  11. variables_order = GPC
  12. safe_mode = 1
  13.  
  14. [my variables]
  15. somevar = “1234”
  16. anothervar = ${somevar} ; anothervar == somevar
  17.  
  18. [ini arrays]
  19. foo[bar] = 1
  20. foo[123] = 2
  21. foo[] = 3

]]> http://www.ooso.net/archives/472/feed 4 memcached Binary协议的ppt http://www.ooso.net/archives/471 http://www.ooso.net/archives/471#comments Tue, 23 Sep 2008 12:35:09 +0000 Volcano http://www.ooso.net/index.php/archives/471 memcached 1.3将开始支持Binary Protocol，下面是一篇介绍的ppt。

大概看了一遍，可以认为memcache的binary协议相对原来基于文本的协议，略快一些。key的长度可以到65536(2 bytes)。而memcache 1.3将仍然保持向后兼容，同时支持文本协议和binary协议。

]]> http://www.ooso.net/archives/471/feed 0 php 5.3带来了什么(二) http://www.ooso.net/archives/470 http://www.ooso.net/archives/470#comments Sun, 21 Sep 2008 06:44:53 +0000 Volcano http://www.ooso.net/index.php/archives/470 阅读全文（1275字）]]> 接上文

性能提升

php 5.3的总体性能提升了5 - 15%

  • md5()快了10-15%
  • Better stack implementation in the engine
  • Constants移到read-only内存里
  • exception处理过程改进(简化，opcodes更少)
  • (require/include)_once改进，去掉重复open
  • Smaller binary size & startup size with gcc4

新语言特性

__DIR__

在5.3以前，为了获得当前脚本的目录，需要一次函数调用

PLAIN TEXT
CODE:
  1. echo dirname(__FILE__); // < PHP 5.3

在5.3，只需要一个魔术常量__DIR__就解决了。

PLAIN TEXT
CODE:
  1. echo __DIR__; // >= PHP 5.3

?:操作符

便捷的?:操作符，可以从两个值/表达式中快速取得非空值。

PLAIN TEXT
CODE:
  1. $a = true ?: false; // true
  2. $a = false ?: true; // true
  3. $a = "" ?: 1; // 1
  4. $a = 0 ?: 2; // 2
  5. $a = array() ?: array(1); // array(1);
  6. $a = strlen("") ?: strlen("a"); // 1

__callStatic()

新增了魔术方法__callStatic，功能和__call类似，但是仅对static方法有效。

PLAIN TEXT
CODE:
  1. class helper {
  2.         static function __callStatic($name, $args) {
  3.                 echo $name.'('.implode(',', $args).')';
  4.         }
  5. }
  6. helper::test("foo","bar"); // test(foo,bar)

动态调用static方法

动态的调用静态方法？动静结合。

PLAIN TEXT
CODE:
  1. class helper {
  2.         static function foo() { echo __METHOD__; }
  3. }
  4. $a = "helper";
  5. $b = "foo";
  6. $a::$b(); // helper::foo

Late Static Binding

不知道怎么译，可能留个原文更容易理解。静态方法的事件处理时机有变化，以前是在编译期处理，现在是执行期间处理。

在php 5.3之前，下面的代码会输出一个A，但是这不是咱们要的，whoami方法已经在class B中重新定义，它本该输出B才符合咱们想当然的思维。

PLAIN TEXT
CODE:
  1. class A {
  2.    public static function whoami() {
  3.       echo __CLASS__;
  4.    }
  5.    public static function identity() {
  6.      self::whoami();
  7.    }
  8. }
  9. class B extends A {
  10.    public static function whoami() {
  11.       echo __CLASS__;
  12.    }
  13. }
  14. B::identity(); // A <-- PHP <5.3

下面代码中使用了static::whoami()来调用静态方法。php 5.3之后，由于__CLASS__是在执行期被处理，那么这个例子中能顺利抓到class B。

PLAIN TEXT
CODE:
  1. class A {
  2.    public static function whoami() {
  3.       echo __CLASS__;
  4.    }
  5.    public static function identity() {
  6.       static::whoami();
  7.    }
  8. }
  9. class B extends A {
  10.    public static function whoami() {
  11.       echo __CLASS__;
  12.    }
  13. }
  14. B::identity(); // B <-->= PHP 5.3

mysqlnd

见mysqlnd成为php 5.3中的默认mysql驱动

但是PDO_MySQL暂时还不支持mysqlnd，目前只有mysql(i)扩展可以用到

]]> http://www.ooso.net/archives/470/feed 7 php 5.3带来了什么(一) http://www.ooso.net/archives/469 http://www.ooso.net/archives/469#comments Sun, 21 Sep 2008 00:49:31 +0000 Volcano http://www.ooso.net/index.php/archives/469 阅读全文（1229字）]]> 之前陆续介绍了php 5.3的一些新特性，正好上周看到ZendCon关于5.3的ppt，介绍的更为详细，那么这里做个归总或者说翻译:)

Namespaces

php 5.3最大的改动，毫无疑问就是Namespaces(此前有一篇相关的PHP Namespaces FAQ)。这给php开发人员带来的好处不少，广为人们所诟病的函数命名问题也得到了解决。

代码更清晰

5.3之前常见的代码，需要自定义前缀区分函数和类名

PLAIN TEXT
CODE:
  1. function MY_wrapper() {}
  2. class MY_DB { }
  3. define('MY_CONN_STR', '');
  4. MY_wrapper();
  5. new MY_DB();
  6. MY_CONN_STR;

使用名称空间之后，代码看上去更加clean。

PLAIN TEXT
CODE:
  1. namespace MY;
  2. function wrapper() {}
  3. class DB { }
  4. const CONN_STR = '';
  5. use MY AS MY;
  6. wrapper();
  7. new DB();
  8. CONN_STR;

一个文件中定义了多个namespace

如果一个文件中定义了多个namespace，应该怎样处理？

PLAIN TEXT
CODE:
  1. namespace LIB;
  2. class MySQL {}
  3. class SQLite {}
  4. $b = new SQLite();
  5. namespace LIB_EXTRA;
  6. class MScrypt {}
  7. $a = new MScrypt();
  8. var_dump(
  9.         get_class($a),
  10.         get_class($b)
  11. );

以上代码输出为：

PLAIN TEXT
CODE:
  1. string(18) "LIB_EXTRA::MScrypt"
  2. string(11) "LIB::SQLite"

php是解释执行的语言，以上结果合情合理。

namespace的优先级

namespace中定义的函数，类和常量优先，其次才是全局的。

PLAIN TEXT
CODE:
  1. namespace foo;
  2. function strlen($foo) { return htmlentities($foo); }
  3. echo strlen("test"); // test 
  4. echo ::strlen("test"); // 4
  5. echo namespace::strlen("test"); // test

namespace和autoload的友情

  • autoload会根据namespace名称以及class名称来解析类文件位置
  • 仅当namespace和全局范围都没找到class定义的情况下，autoload才会被触发
  • 在namespace中定义的__autoload不会被自动调用
PLAIN TEXT
CODE:
  1. function __autoload($var) { var_dump($var); } // LIB::foo
  2. require "./ns.php"; /*
  3.         <?php
  4.                 namespace LIB;
  5.                 new foo();
  6. */

namespace一些辅料

PLAIN TEXT
CODE:
  1. namespace really::long::pointlessly::verbose::ns;  
  2. __NAMESPACE__; // 新增的魔法常量，表示当前namespace名称
  3. class a{}   
  4. get_class(new a()); // really::long::pointlessly::verbose::ns::a
  5. use really::long::pointlessly::verbose::ns::a AS b; // 从名称空间中引用一个类

注：这里的内容节选自pdf Introduction to PHP 5.3 Slides，后文不再复述。

]]> http://www.ooso.net/archives/469/feed 9 wget的亲戚 – wput http://www.ooso.net/archives/468 http://www.ooso.net/archives/468#comments Sat, 20 Sep 2008 11:22:50 +0000 Volcano http://www.ooso.net/index.php/archives/468 阅读全文（431字）]]> 世界上最远的距离，是网通到电信 —— 这简直是赤果果的真理！

俺这个狗窝host在南方某个电信机房里，从北京访问页面，速度也还凑合着能过。但是要想通过ftp上传几个文件，几乎是不可能，只有三种情况会发生：

  1. timeout!
  2. timeout!
  3. timeout!

这天我打算把wordpress升级到最新版本，更新文件就成了个大难题。那么只好找了个server做跳板，用wget的亲戚 - wput来解决文件批量上传的问题：

PLAIN TEXT
CODE:
  1. wput -B wordpress/* ftp://xxxxxx.net/xxxx/

这样一行命令就能把整个wordpress上传到ftp指定目录下。

wput的参数

Usage: wput [options] [file]… [url]…
url ftp://[username[:password]@]hostname[:port][/[path/][file]]

注：如果username和password有:, @之类的字符，可以用urlencode编码

]]> http://www.ooso.net/archives/468/feed 2 mysql proxy的常见问题 http://www.ooso.net/archives/467 http://www.ooso.net/archives/467#comments Sat, 20 Sep 2008 09:34:26 +0000 Volcano http://www.ooso.net/index.php/archives/467 阅读全文（915字）]]> 最近试用mysql proxy，遇到若干问题，好在一一找到了解决方案，列出来备忘。这次使用的版本是0.6.x，也许新版本就没有这些问题了。

无法通过mysql proxy连接mysql

在host,password正确的情况下，也会遇到无法连接mysql的情况，可以查查mysql server是不是使用了old_password，检查my.cnf里面是不是有

PLAIN TEXT
CODE:
  1. old_password = 1

有的数据库是从老版本升级上来的，所以会开启这个选项，mysql proxy不支持old_password。另外也可以通过查看密码长度的方式来判断:

PLAIN TEXT
CODE:
  1. select length(password) from mysql.user

如果长度为16位则是old_password无疑。

字符乱码

通过proxy连上数据库之后，查到的字符串始终是乱码，即便手工执行了set names 'utf8'也没有效果。

解决办法，mysql server必须设置

PLAIN TEXT
CODE:
  1. [mysqld]
  2. skip-character-set-client-handshake
  3. init-connect='SET NAMES utf8'
  4. default-character-set=utf8

一台mysql slave当掉之后，mysql proxy会报错导致全部的mysql无法连接

安装了mysql proxy实现读写分离，有master x 1, slave x 2。为了测试failover，停掉了一个slave，然后mysql proxy会一直报错，提示无法连接。这个情况比单点的mysql还糟糕，挂掉一个就全挂掉！mysql的工程师给提供了一段代码，替换掉src/network-mysqld-proxy.c的NETWORK_MYSQLD_PLUGIN_PROTO函数可以解决这个问题。

代码比较长，直接附上下载地址： network-mysqld-proxy-function.c

定期crash

这个问题也很糟糕，mysql proxy经常会自己悄悄的停止工作，所幸时间间隔很长。猜想是有内存泄漏的问题存在，希望以后的版本能解决。

我采用的解决办法就是晚上定期重启它。

]]> http://www.ooso.net/archives/467/feed 5 sphinx新建索引的一般流程 http://www.ooso.net/archives/466 http://www.ooso.net/archives/466#comments Sat, 20 Sep 2008 09:19:37 +0000 Volcano http://www.ooso.net/index.php/archives/466 阅读全文（196字）]]> 在sphinx中新建索引(不是新增数据)的一般流程：

  • 在sphinx.conf中增加index配置项
  • 手工重建索引，不要使用--rotate参数，例如
    PLAIN TEXT
    CODE:
    1. /usr/local/sphinx/bin/indexer --config /usr/local/sphinx/etc/sphinx.conf --all

  • 重启searchd

这样才不会产生sphinx索引的临时.new.*文件

]]> http://www.ooso.net/archives/466/feed 0 从memcache中dump所有key的patch http://www.ooso.net/archives/465 http://www.ooso.net/archives/465#comments Sat, 23 Aug 2008 04:27:41 +0000 Volcano http://www.ooso.net/?p=465 阅读全文（343字）]]> 在邮件组里看到这个补丁，能够将memcache中所有的key dump出来。

I have just finished a patch to dump all keys from memcached.
And I am glad to share this patch to anyone who wants to use it.

In the attachment, there are two python scripts which are used for dump all keys from a memcached server,
you can find the usage in the example.py script.

Any questions or advice can mail to we_2002 at 163.com

用法见example.py

下载: memcached-hack.zip

]]> http://www.ooso.net/archives/465/feed 0 mysqlnd成为php 5.3中的默认mysql驱动 http://www.ooso.net/archives/464 http://www.ooso.net/archives/464#comments Wed, 06 Aug 2008 15:15:03 +0000 Volcano http://www.ooso.net/?p=464 阅读全文（255字）]]> mysqlnd成为php 5.3中的默认mysql驱动，它有如下优点：

  • mysqlnd更容易编译: 因为它是php源码树的一个组成部分
  • mysqlnd和php内部机制结合更紧密，是优化过的mysql驱动
  • mysqlnd更节省内存，从测试结果来看，比传统的mysql扩展节省40%的内存
  • mysqlnd更快
  • mysqlnd提供了丰富的性能统计功能
  • mysqlnd使用了PHP license以避免不必要的版权纠纷

这个改动应同时对mysql和pdo_mysql扩展生效。

mysqlnd是什么

mysqlnd是mysql原装的php驱动

]]> http://www.ooso.net/archives/464/feed 8 php 5.3将提供改进的Lambda函数 http://www.ooso.net/archives/463 http://www.ooso.net/archives/463#comments Mon, 21 Jul 2008 01:32:24 +0000 Volcano http://www.ooso.net/?p=463 阅读全文（86字）]]> 从前的lambda函数

在php里面，传统方法是利用create_function来建立lambda函数，老实说，这个创建过程比较麻烦。拿php手册上的例子来说：

PLAIN TEXT
CODE:
  1. <?php
  2. $newfunc = create_function('$a,$b', 'return "ln($a) + ln($b) = " . log($a * $b);');
  3. echo "New anonymous function: $newfunc\n";
  4. echo $newfunc(2, M_E) . "\n";
  5. // outputs
  6. // New anonymous function: lambda_1
  7. // ln(2) + ln(2.718281828459) = 1.6931471805599
  8. ?>

上头这样一段代码，恐怕一时半会还看不明白$newfunc到底是怎样的一个lambda函数。

php 5.3的lambda函数语法

改进的lambda基本语法

PLAIN TEXT
CODE:
  1. function & (parameters) use (lexical vars) { body }

创建一个简单lambda函数的例子。下面的例子看上去，语法和javascript甚至很接近了，对于我这样一个由javascript入门到php来的coder来说，这样的代码真是让人瞅着亲切。代码最后的;号是不可省略的，否则会碰到语法错误。

PLAIN TEXT
CODE:
  1. $lambda = function () { echo "Hello World!\n"; };

调用方法很多

PLAIN TEXT
CODE:
  1. $lambda ();
  2. call_user_func ($lambda);
  3. call_user_func_array ($lambda, array ());

在函数中的简单调用

PLAIN TEXT
CODE:
  1. function replace_spaces ($text) {
  2.     $replacement = function ($matches) {
  3.     return str_replace ($matches[1], ' ', '&nbsp;').' ';
  4.     };
  5.     return preg_replace_callback ('/( +) /', $replacement, $text);
  6. }

甚至可以把lambda函数作为结果返回，这样引申的语法变化会相当丰富，想想javascript就知道了

PLAIN TEXT
CODE:
  1. function getAdder($x) {
  2.     return function ($y) use ($x) {
  3.         // or: lexical $x;
  4.         return $x + $y;
  5.     };
  6. }

还可以导入外部变量到lambda函数，通过关键字use完成。如果没有这个关键字，以前可能要通过global来传递这些变量。

PLAIN TEXT
CODE:
  1. function replace_in_array ($search, $replacement, $array) {
  2.     $map = function ($text) use ($search, $replacement) {
  3.         if (strpos ($text, $search)> 50) {
  4.              return str_replace ($search, $replacement, $text);
  5.         } else {
  6.              return $text;
  7.         }
  8.     };
  9.     return array_map ($map, $array);
  10. }

这个patch由Christian Seiler, Dmitry Stogov提供，目前已经加入到php 5.3。

原文见：Request for Comments: Lambda functions and closures

]]> http://www.ooso.net/archives/463/feed 17 最简便的清空memcache的方法 http://www.ooso.net/archives/462 http://www.ooso.net/archives/462#comments Sun, 20 Jul 2008 01:08:58 +0000 Volcano http://www.ooso.net/index.php/archives/462 阅读全文（210字）]]> 如果要清空memcache的items，常用的办法是什么？杀掉重启？如果有n台memcache需要重启怎么办？挨个做一遍？

很简单，假设memcached运行在本地的11211端口，那么跑一下命令行：
$ echo ”flush_all” | nc localhost 11211

注：flush并不会将items删除，只是将所有的items标记为expired。

原文：Flushing memcached servers the easy way

]]> http://www.ooso.net/archives/462/feed 2