这篇贴子讲Google雇用许多人员来做搜索结果的评价工作，这似乎不是新闻。据我所知，Google也聘请过中文结果评价员，不过限制在海外华人那里了。这些人不是正式员工，可以兼职工作，因为只要有网络就行了。这些人当然也不能改变搜索结果，只是评价这些结果，然后搜索引擎会据此进行一些算法上的调整。

通常要求是母语是目标网页的语言，在web上做研究发掘资料的能力要强，要有宽带连接，要懂所处环境的网络文化。像hao123一度被清除就是不理解本地网络文化的问题。

这个贴子也给出了评价员的工作界面，对一个结果同时会有多人进行评价。评价分为相关/不相关/有用，最好的是有用。评价后还可以写下自己的评论。有时有些搜索词可能会出现在多个类别中，评价员也要逐一说明，这里的例子是美洲虎，可能是动物，也可能是汽车。

Google把查询分为3类：导航性，只有一个结果；信息性，可能有多个结果；交易性的，用户要求得到某种东西。评价员就要分辨一个查询属于哪一类或其组合，分辨它的类型，对结果进行研究（包括其他引擎，数据库，分类目录，站点以及线下资料），然后评价，当然还要注意那些欺骗性的网页。

文中提到Google新近注册了indexbench.com和Google-testing.com这样的域名，于是推测说也许会让网民都参与这种工作？就像对图像搜索那样？当然，这回不大可能是付费工作了。

其实，Google前些天刚拿到一个专利：System and method for supporting editorial opinion in the ranking of search results。虽然很有可能是防护性的专利，但也不能排除真的加以直接地应用吧。