我在 UTF8编码， varchar（255）中的 MySQL 表中插入了数千行。我检查是否先前使用operator =插入了行。我看过很多重复的条目。当我用PHP“清理”字符串时，我发现重复条目的数量减少了，如果我只接受非扩展ASCII ，则最大减少（条目最小值），这是非常有限的（在在这种情况下，我怀疑我正在解释两个真正不同的字符串，就像它们是相同的一样）。
如何删除不需要的字符（ \ n，\ t等），这些字符很难“=”比较而不会扭曲数据或限制太多（不接受非扩展ASCII） ，因为我们在UTF8）。