chardet误码,咋办?
时间:2010-12-20
来源:互联网
本帖最后由 whitefirer 于 2010-12-20 17:59 编辑
纠结了,utf8是用chardet全文对比出来的结果,但是效率低,
下面的gb2312是只对title进行判断的结果(偶尔会误码。。)
而我要对本地文件(各种编码都有可能,跟charset里的不一定相同),进行扫描,提取titil,如果编码出错的话,提取的title就是甚至挂掉
所以,现在纠结的就是有没有个折中的方案呢?。。

纠结了,utf8是用chardet全文对比出来的结果,但是效率低,
下面的gb2312是只对title进行判断的结果(偶尔会误码。。)
而我要对本地文件(各种编码都有可能,跟charset里的不一定相同),进行扫描,提取titil,如果编码出错的话,提取的title就是甚至挂掉
所以,现在纠结的就是有没有个折中的方案呢?。。
作者: whitefirer 发布时间: 2010-12-20
一共有多少中编码阿?
chardet确实经常猜错,频率非常高。
如果不多,就用try 然后直接decode 捕获错误后,再try
chardet确实经常猜错,频率非常高。
如果不多,就用try 然后直接decode 捕获错误后,再try
作者: rockyaow 发布时间: 2010-12-20
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28