Node fs.writeFileSync 操作中 UTF-8 格式 BOM 缺失

NodeJS 默认使用 utf8 格式,这点是没错的

瞎逼逼一下,不解释,意会就好:

  • 万花丛中过,片叶不沾身
  • 常在江边走,哪有不湿鞋
o.gif

<br />


故事由来

后端给我的是 .cshtml 文件,代码粘贴来复制去太恶心了,于是我写了一段脚本:

const ORIGIN_DIR = './origin'; // 源目录
const DESTINATION_DIR = './destination';

let fs = require('fs');

//  遍历目录得到文件信息
function walk(path, callback) {
    let files = fs.readdirSync(path);

    files.forEach(function(file){
        if (fs.statSync(path + '/' + file).isFile()) {
            callback(path, file);
        }
    });
}

function setUp () {
    if ( !fs.existsSync(DESTINATION_DIR) ) {
        fs.mkdirSync(DESTINATION_DIR);
    }

    // 运行
    walk(ORIGIN_DIR, function (path, file) {
        let fileName = file.match(/(\S+)(\.\S+)$/)[1]; // 获得文件名

        let oldPath = path + '/' + file, // 原路径
            newPath = DESTINATION_DIR + '/' + fileName + '.cshtml'; // 新路径

        let html = fs.readFileSync(oldPath);

        fs.writeFileSync(newPath, html);
    });
}

setUp();

然后我扔到后端服务器,中文就乱码了,不开玩笑,哥是认真的。

gibberish.png

<br />


懵逼中

我就纳闷了,文件明明是 UTF-8,为什么就乱码了?~ o( ̄ ̄)o
拿后端的文件,粘代码进去,WTF,居然正常,这不科学 = =

2.0 视力的我发现两个文件字节大小不一样,嗯哼......

怎么看出来的?你猜

使用 Beyond Compare 软件对比一下:

missBOM.png

字节顺序标记(ByteOrderMark),好陌生的名词,茫然、懵逼。

<br />


墙里开花墙外香

纵你搜它上百度,蓦然回首,那人却在,灯火阑珊处。嗯,好诗,好诗,此处应该有掌声 ( ̄ ̄)"
chrome 定位到 StackOverflow ,好,找到解决方法:

// UTF-8 doesn't require a bom, but you can add it by yourself of course.
filesys.writeFile('test.txt', '\ufeffThis is an example with accents : é è à ','utf8', function (err) {});

原来开头加 \uFEFF 就好了...大端,不觉明厉

<br />


测试

修改后脚本(就是加了一行):

const ORIGIN_DIR = './origin'; // 源目录
const DESTINATION_DIR = './destination';

let fs = require('fs');

//  遍历目录得到文件信息
function walk(path, callback) {
    let files = fs.readdirSync(path);

    files.forEach(function(file){
        if (fs.statSync(path + '/' + file).isFile()) {
            callback(path, file);
        }
    });
}

function setUp () {
    if ( !fs.existsSync(DESTINATION_DIR) ) {
        fs.mkdirSync(DESTINATION_DIR);
    }

    // 运行
    walk(ORIGIN_DIR, function (path, file) {
        let fileName = file.match(/(\S+)(\.\S+)$/)[1]; // 获得文件名

        let oldPath = path + '/' + file, // 原路径
            newPath = DESTINATION_DIR + '/' + fileName + '.cshtml'; // 新路径

        let html = '\uFEFF'; // BOM

        html += fs.readFileSync(oldPath);
        fs.writeFileSync(newPath, html);
    });
}

setUp();

再虐一次,你是否会有感觉:

withBOM.png

O yeah ! 完美对称~

上传,上传,上传测试:

normal.png

Done !

<br />


总结

  • writeFileSyncwriteFile 都会有这个问题,其实之前合并 markdown 文件我就碰见过...
  • 不会就搜索,没啥不好 ~

—— 2017/02/16 By Live


simile.gif
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,457评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,837评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,696评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,183评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,057评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,105评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,520评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,211评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,482评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,574评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,353评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,213评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,576评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,897评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,174评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,489评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,683评论 2 335

推荐阅读更多精彩内容

  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,051评论 25 707
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,497评论 18 139
  • 你向闺蜜抱怨老公每天回家不陪你,只顾自己玩手机时,闺蜜说“这算不了什么。好歹你们每天能见到他。我家老公是每年在酒店...
    弗兰克阅读 11,206评论 30 274
  • 1.感恩我有一对负责任的父母,将我养大并供我上大学,教会我说第一句话,教会我走第一步路,教会我穿衣服。 2.感恩我...
    空空dj阅读 144评论 0 0
  • 文/筱安时光 1 窗外雨丝飘飘凉意直扑面 窗内思念如潮尽把我淹 我抱着腿蜷缩在床边 2 初秋的天气 若打喷嚏 那是...
    筱安时光阅读 298评论 3 8