确定推特帖子的语言

Question

确定推特帖子语言的最佳方法是什么。

流式API附带了语言参数，但它似乎并不十分准确。甚至许多日本帖子也被标记为英语。

其他人做了什么来整理语言？

Answer 1

这个PHP包有很好的结果： http://pear.php.net/package/Text_LanguageDetect/

快速开源。我们使用它来为我们在http://2012twit.com运行的网站选择仅限英文的帖子。

Answer 2

如果使用 evil 外部服务是go-er，google会在他们的Translate API中进行语言检测吗？

http://code.google.com/apis/language/translate/v1/reference.html#detectResult