Windows上的utf8编码文件的node.js读取文件错误

Question

我正在尝试在Windows 8.1上使用node.js（0.10.29）从磁盘加载UTF8 json文件。以下是运行的代码：

var http = require('http');
var utils = require('util');
var path = require('path');
var fs = require('fs');

var myconfig;
fs.readFile('./myconfig.json', 'utf8', function (err, data) {
    if (err) {
        console.log("ERROR: Configuration load - " + err);
        throw err;
    } else {
        try {
            myconfig = JSON.parse(data);
            console.log("Configuration loaded successfully");
        }
        catch (ex) {
            console.log("ERROR: Configuration parse - " + err);
        }


    }
});

运行此命令时出现以下错误：

SyntaxError: Unexpected token ´╗┐
    at Object.parse (native)
    ...

现在，当我将文件编码（使用Notepad ++）更改为ANSI时，它可以正常工作。

任何想法为什么会这样？在Windows上进行开发的同时，最终解决方案将部署到各种非Windows服务器上，例如，如果将ANSI文件部署到Linux，我担心会在服务器端遇到问题。

根据我在此处以及通过Google进行的搜索，该代码应该可以在Windows上运行，因为我明确告诉它应该使用UTF-8文件。

我正在阅读的示例配置：

{
    "ListenIP4": "10.10.1.1",
    "ListenPort": 8080
}

Answer 1

每个“
fs.readFileSync（filename，’utf8’）不会剥离BOM标记＃1918”
，fs.readFile按设计工作：
如果存在 BOM，则 不会 从UTF-8文件的标题中剥离BOM 。由开发人员酌情处理。

可能的解决方法：

• data = data.replace(/^\uFEFF/, '');每个https://github.com/joyent/node/issues/1918#issuecomment-2480359
• bomstrip根据https://github.com/joyent/node/issues/1918#issuecomment-38491548，使用NPM模块转换传入流以删除BOM表头。

您得到的是UTF-8文件的字节顺序标记标头（BOM）。当JSON.parse看到这一点，它提供了一个语法错误（读：“意外字符”错误）。您必须先从文件中删除字节顺序标记，然后再将其传递给JSON.parse：

fs.readFile('./myconfig.json', 'utf8', function (err, data) {
    myconfig = JSON.parse(data.toString('utf8').replace(/^\uFEFF/, ''));
});
// note: data is an instance of Buffer