python写utf-8文件的问题 - 小众知识

python写utf-8文件的问题

2013年01月27日 14:18:05 苏内容
  标签: python/utf-8
阅读:7328

import codecs

txt = u"\u5e10\u53f7\u4e0d\u5b58\u5728"
file=codecs.open("test","w","utf-8")
file.write(txt)
file.close()
这个可以正确写入
但当string只为ascii字符时,比如

txt = u"qwer"
这时生成的file仍旧为ascii格式
需要怎么做才能生成utf-8格式的文件?
谢谢

import codecs
txt = u"qwer"
file=codecs.open("test","w","utf-8-sig")
file.write(txt)
file.close()

utf-8编码本身是ascii兼容的,所以只有ascii字符的时候,“是否utf-8”编码是没有意义的。

如果要求文件可以被明确识别为utf8编码,则需要在文件头写入几个特殊字符(即UTF-8的BOM),详情参见cute同学的回答。

p.s. 由于文件开头多了几个字符,这时候可能会导致某些应用无法兼容。


我一般都手动编码成str之后再写入的
s = s.encode("utf-8")

bom是微软自己发明的东西~其他系统都不带这个。。。


写入和读出的时候都用encode和decode处理一下就好

文件开头加上:

import sys
reload(sys)
sys.setdefaultencoding('utf-8')

import codecs

txt = u"qwer"
file=codecs.open("test","w","utf-8")
file.write(txt)
file.close()

扩展阅读