js 是否有专门进行编码检测(charset|encoding detection)的轮子

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐关注

› Meteor

› JSLint - a JavaScript code quality tool

› jsFiddle

› D3.js

› WebStorm

推荐书目

› JavaScript 权威指南第 5 版

› Closure: The Definitive Guide

这是一个创建于 2758 天前的主题，其中的信息可能已经有所发展或是发生改变。

纯 javascript ，不是 nodejs

最近一直在研究如何让浏览器直接读取用户提供的文件，就和原生应用一样，发现有个问题很难解决，用户提供的文件使用的编码集你是不知道的，也不是所有文件都有 Bom 头， GBK 和 UTF-8 No bom 头是无法从头部分辨的。导致你读取的时候很容易乱码，你不能默认就是认为 txt 文件一定是 GBK 也不能认为 csv 就一定是 UTF8 ，其它语言都有能进行编码检测的能力， js 有没有相关的轮子实现？

编码

gbk

bom

文件

7 条回复 • 2017-04-26 16:18:01 +08:00

denghongcai

2017-04-26 15:05:09 +08:00

https://www.npmjs.com/package/iconv-lite

denghongcai

2017-04-26 15:08:06 +08:00

楼上那个是 decode 的，探测可以看看 https://github.com/aadsm/jschardet

abcbuzhiming

2017-04-26 15:54:09 +08:00

@denghongcai 66666 ，我就说应该有轮子，但是始终找不到

AdamChrist

2017-04-26 16:04:33 +08:00

iconv-lite 需要 node 环境才能使用,里面用了 buffer 和 stream

orzfly

2017-04-26 16:07:30 +08:00

@AdamChrist #4 https://www.npmjs.com/package/iconv-lite 人家有提到脱离 Node 的方法……
In-browser usage via Browserify (~180k gzip compressed with Buffer shim included).

binux

2017-04-26 16:12:32 +08:00

大部分 nodejs 的 lib 都能 Browserify ，大部分库都不单独发布 Browserify 的版本了

AdamChrist

2017-04-26 16:18:01 +08:00

@orzfly 我之前在 react-native 中使用不行..忘记有 Browserify 的方法了..不过刚才看了一下..最新版也支持了 react-native 了..