+ -
当前位置:首页 → 问答吧 → chardet误码,咋办?

chardet误码,咋办?

时间:2010-12-20

来源:互联网

本帖最后由 whitefirer 于 2010-12-20 17:59 编辑

下载 (33.49 KB)
2010-12-20 17:57

纠结了,utf8是用chardet全文对比出来的结果,但是效率低,
下面的gb2312是只对title进行判断的结果(偶尔会误码。。)
而我要对本地文件(各种编码都有可能,跟charset里的不一定相同),进行扫描,提取titil,如果编码出错的话,提取的title就是甚至挂掉

所以,现在纠结的就是有没有个折中的方案呢?。。

作者: whitefirer   发布时间: 2010-12-20

一共有多少中编码阿?
chardet确实经常猜错,频率非常高。
如果不多,就用try 然后直接decode 捕获错误后,再try

作者: rockyaow   发布时间: 2010-12-20