【编解码】解码字符串中的 UNICODE 字符

前言

由于前后端交互中编码的问题，出现了这样的一串字符：

{"share_names":["\u4e2d\u6587\u8def\u5f84"]}
1

出现了unicode编码作为字符串内容的情况，直接用json解析的话会报错，所以在json解析前需要先进行转码，两种方案

1. 所有的 ASCII 编码转为 UNICODE
2. 所有 UNICODE 转为 ASCII

常规思维就是 UNICODE 转为 ASCII。

思路

UNICODE 编码占用了两个字节，所以在处理时需要使用宽字符，也就是 wchar_t 或者 wstring。

特征：

UNICODE 的编码格式固定：\udddd 的形式。

步骤说明：

1. 遍历整个字符串
2. 发现 \\u 则读取对应的 dddd
3. 保存 dddd 到宽字符串中。需要按照 16 进制读取。

代码

CString Unescape(const CString& csInput) {
	string input = CW2A(csInput);
	wstring wresult;
	for (size_t i = 0; i < input.length(); ) {
		if (input[i] == '\\' && input[i + 1] == 'u') {
			string code = input.substr(i + 2, 4);
			wchar_t unicode = stoi(code, nullptr, 16);
			wresult += unicode;
			i += 6;
		}
		else {
			wresult += input[i++];
		}
	}
	CString csResult;
	csResult.Format(L"%s", wresult);
	return csResult;
}
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

补充

如果直接使用 C++ string 构造的话，就能正确识别十六进制中文字符

#include 
using namespace std;

int main() {
    string jsonStr = "{\"share_names\":[\"\u4e2d\u6587\u8def\u5f84\"]}";

    cout << jsonStr << endl;

    cout << "≡ is the same as \u2261" << endl;
    string s("≡ is the same as \u2261");
    cout << s << endl;
}
1
2
3
4
5
6
7
8
9
10
11
12