Python处理JSON字符串中非法双引号及序列化注意事项

Python处理JSON字符串中的非法双引号问题

在进行数据清洗工作时，可能会遇到如下情况：

a = '{"地区": "湖南", "描述": "精通软件开发、"数据挖掘"和分布式"}'

由于读取到的JSON字符串内部包含未转义的非法双引号，直接调用json.loads()进行解析时会触发报错。

json.decoder.JSONDecodeError: Expecting ',' delimiter: line 1 column 29 (char 28)

尝试编写正则表达式处理长达半小时仍未能彻底解决。

最终采用以下方法解决，该方法同时处理了JSON字符串中的换行符、分隔符以及双引号的转义问题。

def deal_json_invaild(data):
    data = data.replace("\n", "\\n").replace("\r", "\\r").replace("\n\r", "\\n\\r") \
        .replace("\r\n", "\\r\\n") \
        .replace("\t", "\\t")
    data = data.replace('": "', '&&testPassword&&')\
        .replace('", "', "$$testPassword$$")\
        .replace('{"', "@@testPassword@@")\
        .replace('"}', "**testPassword**")
    print(data)

    data = data.replace('"', r'\"')\
        .replace('&&testPassword&&', '": "').replace('$$testPassword$$', '", "').replace('@@testPassword@@', '{"').replace('**testPassword**', '"}')
    print(data)
    return data

测试过程如下：

a = deal_json_invaild(a) json_data = json.loads(a)

> {"地区": "湖南", "描述": "精通软件开发、\"数据挖掘\"和分布式"}

经过上述处理后，再次调用json.loads()即可成功解析，不再报错。

Python JSON单双引号处理详解

在Python 3环境中，JSON对象通常对应字典结构，例如 {"a":15}。

若需将其转换为字符串格式：

如果直接使用str({"a":15})进行转换，结果可能是s= "{'a':'15'}"，即键值对使用了单引号。将此字符串传递至其他系统或模块后，若再次使用json.loads(s)解析，将会因JSON标准不支持单引号而报错。

因此，若需将JSON结构转换为字符串以便传输，并希望在远端重新解析为JSON结构，应遵循以下规范：

s = json.dumps({"a":15})

具体操作是将数据发送至远端，并在接收端进行解析：

d = json.loads(s)

按照此方式操作即可避免解析错误。

该方法同样支持列表结构，允许一次性传输多个JSON对象。

s = json.dumps([{"a":15}, {"b":20}])

将数据发送至远端后，接收端解析方式如下：

d = json.loads(s)

总结

以上为个人实践经验总结，旨在提供参考，欢迎继续支持本站内容。