如何在不使用在线服务的情况下使用Ruby检测用户的输入语言？

Question

我正在寻找一种库或技术来检测用户提供的文本块的输入语言。在线查找（如谷歌翻译）不能用于此任务，因为我正在编写一个必须离线运行的应用程序。

感谢。

Answer 1

以下是您可能想要尝试的另外两个基于 n-gram 的宝石。他们离线工作。

• https://github.com/echen/unsupervised-language-identification，针对分离英语和其他语言进行了优化（有现场演示）
不太专业的
• https://github.com/feedbackmine/language_detector会检测更多语言。有些语言可能需要一些额外的培训 - 我发现它对于德语文本来说不够精确。

Answer 2

对于任何有兴趣的人，我都找到了http://rubygems.org/gems/kenwaln-whatlanguage，表现非常出色。

Answer 3

我正在使用我非常喜欢的CLD，简洁易用。试一试。

Answer 4

Ruby中的WhatLanguage快速演示：

http://www.youtube.com/watch?v=lNqZ2cqOReo&list=UUJ_3fstMOH-g4yBxtvgAWkw&index=0&feature=plcp