pyList

python JSON 中文 unicode 的性能问题

🕒 2014-07-08 14:12

python2.x 版的字符编码一直是大家的诟病，字典转换成json时中文字符串变成 unicode。

Python json unicode

unicode转换

转换会转成类似这样的 \u65b0\u8f66 字符。

要想显示中文则需加个参数：

json.dumps(some_dict, ensure_ascii=False)

设置 ensure_ascii=False 可以节省大量内存，但 json 在设置 ensure_ascii=False 后性能急剧下降。ujson 还好。

Converts arbitrary object recursivly into JSON. Use ensure_ascii=false to output UTF-8. Pass in double_precision to alter the maximum digit precision of doubles. Set encode_html_chars=True to encode < > & as unicode escape sequences.

python 编码类型

在python 2或者3 ，字符串编码只有两类 ：

  • （1）通用的Unicode编码；
  • （2）将Unicode转化为某种类型的编码，如UTF-8，GBK；

encode()和decode()的区别

encode() 的作用是将Unicode编码的字符串转换为其他编码格式。

例如： st1.encode("utf-8") 这句的作用是将Unicode编码的st1编码为utf-8编码的字符串

decode() 的作用是把其他编码格式的字符串转换成Unicode编码的字符串。

例如： st2.decode("utf-8") 这句的作用是将utf-8编码的字符串st2解码为Unicode编码的字符串

编码之间互转

除Unicode编码的字符串以外，任何一种编码的字符串要想转换为其他编码格式，必须先解码后编码

非Unicode编码--> Unicode编码-->非Unicode编码

例如，utf-8编码的字符串st想要转换为gbk编码的字符串，必须经过以下步骤：

st=st.decode("utf-8") #解码为Unicode编码
st=st.encode("gbk") #从Unicode编码编码为gbk编码
本文标签： python JSON unicode 中文 性能
本文网址: https://pylist.com/t/1404799920 （转载注明出处）
如果你有任何建议或疑问可以在下面 留言
发表第一条评论！
验证码图片
相关推荐

标签

python go web 服务器 性能 转码 链接 中文 安全 字符串 分割 英文 json 效率 问题 print 终端 正确 html 实体 转换 天干地支 获取 一年 方法 小试 japronto 最快 markdown 解析 速度 比较 轻量级 sae 博客 一款 ubuntu caddy https 部署 网站 多个 socks5 代理 依赖 安装 使用 互转 简体 繁体 golang opencc 格式 常见 时间 bottle 入门 简洁 预览 js 原生 图片 选择 adblock 攻守 变砖 arris ac1750 sbr 路由 webview file android input 上传 简析 await async 场景 dbutils 连接池 mysql 数据 left space device no gzip 虚拟机 virtualbox 很慢 网络 解决 pkcs7 crypto aes ecb u盘 mac diskutil 格式化 顽固 之坑 files open 服务 牛云上 encrypt 免费 攻略 断言 类型 注意 brad google fitzpatrick 程序员 网页 正文 提取 新闻 老旧 笔记本 改造 记录 文本 bbr openwrt 开启

最近发表

最近浏览