Erlang-China

erlang 中文社区

[荐] “RPC is bad” 续篇 —— joe 老爷爷如是说


继 Steve 大叔的 “RPC is bad” 开腔惊起娃声一片之后,Joe 老爷爷抓当前的大好形势又写了一篇“大字报”,“掀起了Erlang主义建设的新高潮”(第二声部唱:新高潮,新高潮)。不过,Joe 老爷爷的 Blog 建在 BlogSpot ,有“伟大的火墙”“护着”,我们可以免受这些“不良内容”的毒害,为方便大家学习,特将这篇文章盗版如下,供大家批判。(召唤翻译达人):


[荐]RPC is bad?


偶像 Steve Vinoski 在 maillist 的回帖中一不留神就泄漏了他为 ErlangeXchange 准备的 session ,我们可以先一睹为快。Steve 大拿是 CORBA 界的牛人,对 RPC 是 bad 很有发言权地。这篇文章也写得很漂亮,水分相当少,我就不干“损失味道”的事情了。

为方便阅读,将 mail 内容盗版如下:


Facebook chat 跟踪报导 —— comet with mochiweb


话说 facebook 推出了支持高并发的 web im 引起众“hacker”(与 linux hacker 中的 hacker 相同的那个词)的一片哗然,纷纷出手研究其秘密。互联网上迅速的出现了一批“拆解 facebook webim”的文章。这里就是其中相当有意思的一篇。其中的干货如下:

1 作者放出 firebug 发现,http header 的 server 字段赫然写着 MochiWeb/1.0 的字样。

2 作者开动脑筋,在 mochiweb 基础之上,写了一个“最简单”的 facebook webim 概念模型,mochi loop 的核心代码如下:

...
'GET' ->
 
case Path of
    
"chat" ->
      
% 1) subscribing
      
Room ! {self(), subscribe},
      
% 2) waiting
      
receive
        
Message ->
          
% 3) everything went right
          
Req:ok({"text/plain", Message})
      
after 10000
        
% 4) oOops, too long buddy.
        
room ! {self(), unsubscribe},
        
Req:not_found()
    
end;
...

简而言之就是:在 browser 和 mochiweb 之间保持 10 秒的长连接,这(10s的)期间收到的任何消息都会即时发送给 browser ,然后再由 browser 内的代码再次发起下一个连接。作者提供了完整例子代码的下载。PS.关于这一实现方式的更多说明也可以参考拙作“the google way”。

当然这只是一个“概念模型”,距离“实用价值”仍有一段距离。比如:这个 web 层如何与 ejabberd 接起来,如何识别同一个用户,如何增加更多的“聊天逻辑”。

有兴趣(有时间)深入研究的读者可以移步阅读原文。如果看不到原文,请留言,以便“进行盗版”。


Facebook 的 Erlang 加持


这篇消息的两个要点是:

1. Facebook 总算推出了 developer’s blog,在大家都推出自己的“开发者博”之后。
2. 这个“facebook 开发者博”透出来的第一条消息是——纯正 PHP/LAMP 血统的 Facebook 在高度 realtime 的 Chat 应用中,终于用了 Erlang 来提高性能( ejarbberd backend? 估计是 process-one 的那帮法国人最近一直都在搞的定制项目 ),我知道他迟早都会要用的。

如果觉得“干货”不过瘾,时间充裕的朋友可以移步阅读更“ juicy ”的原文—— 《Real-World Erlang Applications - Scaling Facebook Chat to 70 Million Active Users Almost Overnight》。

PS. 这篇 blog 亦可看作是《challenges of scaling up a realtime application》,所以,如果有人花时间将其 i8n 一下,那将会非常棒。

update 20080516:有人说打不开,那就“被迫盗版”一下吧。[节约版面起见,请点“继续阅读”]


来点压力——tsung


昨日四川发生7.8级大地震,灾情陆续传来,在此,先向死难的同胞们默哀。。。。

最近用上了 Tsung ,传说中“压垮了N台服务器”的 download midi ringtones nickelback ringtones cell phone ringtones virgin mobile usa ringtones download nokia ringtones samsung polyphonic ringtones ericsson polyphonic ringtones sony free real tone ringtones free nextel ringtones ringtones composer free ringtones and wallpaper for cell phone download free ringtones virgin mobile 1600 nokia ringtones cell cingular free phone ringtones christian download free ringtones free real ringtones sprint free nokia mp3 ringtones cingular free phone ringtones sony ericsson ringtones download free ringtones t mobile Erlang 压力测试工具啊。在这里记一下流水帐。

安装

获取tsung 的源码

wget http://www.process-one.net/downloads/tsung/1.2.2/tsung-1.2.2.tar.gz; tar -zxvf tsung-1.2.2.tar.gz

svn co http://svn.process-one.net/tsung/trunk

确保依赖关系
tsung 依赖了这些东西 erlang(废话,从源码编译 erlang 写的程序,能不装么) gnuplot perl5(如果想看 report 中的图形,就要装这个),将其一一装上。

apt-get install erlang erlang-src gnuplot perl5

编译安装

./configure
make
sudo make install

安装完成之后的 tsung 运行脚本在 /usr/bin/tsung ,在系统 path 之中,可以直接运行。

设置

从 /usr/share/doc/tsung/examples 中挑一两个例子拷贝到 ~/.tsung/tsung.xml 作为配置文件。我只需要 http 测试,所以:

cp /usr/share/doc/tsung/examples/http_simple.xml ~/.tsung/tsung.xml

tsung 采用了巧妙的 proxy 方式来“录制”测试脚本。具体来说,就是建立一个本机的 http proxy 默认使用 8090 端口,在配好 firefox 使用 localhost 8090 作为代理之后(推荐 foxyproxy 插件),所有“流经”这个 proxy 的 http 动作都会被记录下来,测试时可以“回放”这些步骤来产生请求。

tsung rocorder
tsung stop_recorder

“录制”完了,会得到一个 ~/.tsung/tsung_recorderXXXXXXXXXX.xml 文件,这就是测试时回回放的脚本。

将这个脚本加到 tsung.xml 之中

gedit ~/.tsung/tsung.xml

就像这样

<!DOCTYPE tsung SYSTEM "/usr/share/tsung/tsung-1.0.dtd" [
 <!
ENTITY mysession1 SYSTEM "/home/yourname/.tsung/tsung_recorderXXXXXXXXXX.xml">
]>
...
<sessions>
 
&mysession1;
</sessions>

对配置稍作调整

<monitoring>
    
<monitor host="localhost" type="erlang"></monitor>
 
</monitoring>
 
<!-- 需要配置到 localhost 无须密码的 ssh 登录(ssh via rsa_key),开启了这个配置可以,获得目标机器的 cpu 和 ram 消耗情况 -->
 
<load>
  
<arrivalphase phase="1" duration="1" unit="minute">
    
<users interarrival="2" unit="second"></users>
  
</arrivalphase>
 
</load>
 
<!-- 第1阶段1分钟(你可以自己多搞几个阶段),其中每2秒新建一个用户,每个用户都会完整执行 session 的测试脚本,最高并发约为 30 个,个人认为这个“逐渐加压”的方法比 ab xxxx 的“突然加压”要慢一些,但更科学一点 -->

运行

准备好了,加压运行。

tsung start

运行完,在 ~/.tsung/log 目录会生成一个以时间命名的目录,进入这个目录

cd ~/.tsung/log/xxxxx
/usr/lib/tsung/bin/tsung_stats.pl

生成 html 的压力测试报告

firefox report.html

慢慢欣赏吧。

除了 http 以外 tsung 还可以压很多东西,比如:jabber, postgreSQL 还可以写插件来给任何你想要测试的东西加压,配置文件也很“丰富多彩”,更多的内容情看文档。

注,以上内容在 ubuntu 8 下整理,其他平台,请自行探索。


运行Processing代码——在Javascript里


mebeliProcessing是一门为视觉艺术家们设计的程序设计语言。尤其是对我们中国的程序员来说,恐怕是极度的冷门。怎么说呢,因为,这个语言“既不能挣钱,又不能出名”,不过就是“画画图”,“没啥技术含量”,简直具备“一无是处”的所有特质。

早在 Turbo Pascal 的时代(199x年),我就曾因为”不慎”买了一本《分形艺术程序设计》,而掉到“用程序画图”的大窟窿里,不可自拔。确实是不慎,就因为这本书,在毕业之前耗费掉了我了大量“大脑CPU”以及“昂贵的机时”来调试和运行那些“除了好看之外,对于求职根本一无是处”的程序。当时可没想过,竟然有人会了这么“不靠谱的事情”而专门设计一个“视觉艺术程序设计语言”。后来才明白,除了写程序卖钱之外,还有很多其他的赚钱方法,只不过,我卖的是程序(工具),而人家卖的是程序的运行结果(用工具做出来的产品),这就叫做艺术(品),这也确实是艺术(商业模式)。是的,用程序来画图,将其画成一件艺术品——站在程序员(特指卖程序为生的人)的角度,这确实还是一件理解起来有点困难的事。

第一次听说这个名词,是在首图的艺术阅览室,随手拿起来的一本香港艺术杂志(名字不记得了)用了很多页的彩图来展示这门语言所创造的艺术。当时的感觉是——相当精美,回忆起了那段“掉到窟窿里的时光”,不过和我已经没啥关系。

再次听到 Processing 的名字,是从 Joho Resig 的 Blog 上看到的,这位大神的 JQuery 事关吃饭,乃是“教主宝训,时刻在心,建功克敌,无事不成”级的东西。所以,当我看到这位大神竟然花了 7 个月的时间用 5000 多行的代码将 Processing 语言请到了 JavaScript + Canvas 环境中,可以说是相当的惊讶(不好好的花精力提升吃饭用的 JQuery ,跑去搞什么不务正业的 Processing 嘛)。莫非,人吃饱了饭都会开始追求艺术么?

anyway, 从纯技术的角度来说,Web确实是“艺术最广泛的平台”,最近还看到另外一个 JavaScript Information Visualization(一个动态的六度空间图,让人印象深刻),再加上这个 Processing in JavaScript。让人被 canvas 标准喷出的炽热气息灼伤,而 web 视觉艺术的春天也正在凶猛来袭。

Javascript 的未来会很精彩。


运行Java代码——在Javascript里


Joho Resig (即 JQuery 之神),是一位知名的“ JavaScript is the next big things”论者。他最近有机会参加了一个日本的 JavaScript 交流活动,给我们带回了一个有趣 JavaScript 项目 orto 的介绍。

这个名字看起来特别象 orz 的日本项目,可比它的名字看起来可要牛逼不少,它的野心是能让 java 代码运行在 JavaScript 之上,我的意思是 —— 用 JavaScript 做一个 JVM 出来。虽说可能不会全面支持 java 的所有特性,但至少能做一些有意思的东西,比如这个性能还不错的俄罗斯方块

它的做法相当有意思,乃是将 java 的 byte code 转换为 JavaScript 代码,比如,你会看到这样的代码:

"java/lang/Thread 1316742099":function(){var orto333=orto245[0];
var orto336=orto350(orto333);
if(orto336.orto340!=orto310){orto223("java/lang/IllegalThreadStateException",null);
return ;
}
...
case 117:orto246[orto247-2]={high:(~orto246[orto247-2].high)
  &
0xffffffff,low:(~orto246[orto247-2].low+1)&0xffffffff};
if(orto246[orto247-2].low==0){orto246[orto247-2].high++;
orto246[orto247-2].high&=0xffffffff;
orto246[orto247-2].low=0;
}break;
...
case "CHECKBOX":orto171=orto188["orto/ui/CheckBox"];
break;
case "IMAGE":orto171=orto188["orto/ui/ImageButton"];
break;
case "RADIO":orto171=orto188["orto/ui/RadioButton"];
break;

显然“不是给人读的程序”(因为是给机器读的嘛)。orto 的特性包括:

* The result is able to handle threaded application code (translating the threads into a series of yields with setTimeout (mentioned in the presentation and demonstrated in the Tetris example).
* The application can use regular Java conventions for designing and constructing the UI (as shown here, as well). User Interface components are translated to, similar, HTML ones. It’s not apparent to what extent functionality is implemented, but it is to a certain degree.
* Keyboard interactions are able to be handled and translated to normal Java callbacks.

说起来,这和 gwt 很有一些“异曲同工”的意思。这让我联想到了 rhino,呵呵,你来实现我,我又来实现你,真是一个互操作的时代。畅想一下,如果在 rhino 的基础用上跑 orto 又或者在 orto 的基础上跑 rhino ,那会是一副什么光景,又有着怎样的意义呢?

也许是我个人食古不化的误解——私下里,个人认为 orto/gwt 这种项目让我有种“狗拿耗子多管闲事”的感觉,JavaScript 这样的脚本语言,不是正好适合于“需求变化迅猛”以及“强调快速原型化开发”的 UI 层么?找两个美工,一个 js 程序员就能做界面,不正是又快又好用么,为啥非要用 java 来写?追求语言上的纯粹?又或者是 js 程序员太难找?从后端的业务逻辑到前端的用户界面,全部都用 java 来包打天下,这是合适的做法么?如果说传统“应用程序”界面的程序,用用 swing/swt 什么的还可以理解,而在 web 一桶糨糊的现如今,这语言的 babel 之塔,就这么难以建立?

呵呵,JavaScript,我支持你。


[荐]如何给你的奶奶解释“云计算”


大道至简,简单是美。在下一直以为,能“把复杂的东西解释得很简单”是件很了不起的事,远比“把简单的东西解释得很复杂”要牛逼很多倍(后面一种事,好像每天有很多人都在做)。

王小波善于通过小说将复杂的社会政治问题给广大长期被洗脑的人民解释得一清二楚(这里),而 highscalability.com 的 Todd Hoff 则善于通过博客将复杂的软件技术问题给毫无技术背景的奶奶解释得明明白白(这里)。在其中的任何一个领域,要干好这件事都需要相当的智慧,殊为不易,同样都值得推荐。

恩,推荐阅读的文章地址在[这里]。

PS. 不知道为了什么,象 highscalability.com 这样的纯技术站点也被我们“伟大的防火墙”(不知道的自己去google英文版)挡在了外面,国人无缘得见。(科技领域也搞闭关锁国?)各位无法访问的朋友,要么使用“伟大的过墙梯”(不知道的自己去google英文版)自己翻墙去看,要么看下面我“被迫的盗版”。


[blah] REST —— 一个实用主义者的思考


这几天在考虑“虚构ajax 聊天室”的 uri 设计,想用 rest 风格来试试,时髦一下嘛。但对 rest 有很多地方其实都是一知半解,于是去问老朋友—— rest in action 上的 dlee 同学——拽着问了一大堆初级问题(见这里,以及这里),回头又啃了一些文章,也算是对 rest 进行了一番独立思考吧。想到整个过程对于其它人或许也有用,于是 blah 之。

需要说明的背景是:我是一个实用主义者。也就是说:搞开发不求纯粹但求实用。乃是在“多快好省”实现需求的前提下,顺便向“有风格”的方向靠,能靠上最好,靠不上拉倒。重点不在结果,而是在过程——也就是说,设计决策中,如果我选择了 free mobile phone ringtones | cricket free phone ringtones | 1600 nokia ringtones | madonna ringtones | free ringtones converter | cheap virgin mobile ringtones | free ringtones 3gforfree | mobile phone ringtones virgin | sprint pcs ringtones | free nokia mp3 ringtones | download free ringtones nokia | download free ringtones to cellular phone | free lg ringtones verizon wireless | get ringtones | free composer ringtones | gold mp3 ringtones | motorola ringtones | alltel free music ringtones | cingular free ringtones wireless | free boost mobile ringtones | rest ,那么借鉴的是什么,如果我选择了不遵循它,那么理由又是什么。另外一个需要说明的是,尽管这几天啃了不少 rest 的文章,但“每个人的心中都有一个 xxx”(请自行将 xxx 替换为你喜欢的任何词语),加之对 rest 可能仍未吃透,所以大家凑合着看,或许某天夜里悟透了,爬起来把这里的思考全都推倒重来亦无不可能(免责声明了啊)。如果发现有错误,那太好了,欢迎之至,请随时指出。

下面就是“虚构 ajax 聊天室”的 rest 设计之旅。


CouchDB Language Change


CouchDB 的作者 Damien Katz 炮轰 Erlang 的语法后,现在发布了消息CouchDB Language Change

I’m somewhat sad to say that Erlang will not be used in future releases of CouchDB. We are switching the whole codebase to (…drumroll..) Java.

最大的原因似乎是Erlang开发人员不足

But perhaps the biggest problem with Erlang is the relative lack of Erlang developers. Developers in the US who’ve worked on a successful Erlang project probably number less than 10.

:P