Python-Unicode(UTF-8)用Python读写文件
我在理解将文本写入文件和将文件写入文件时遇到了大脑故障(Python 2.4)。
# The string, which has an a-acute in it.ss = u'Capit\xe1n'
ss8 = ss.encode('utf8')
repr(ss), repr(ss8)
(“ u'Capit \ xe1n'”,“'Capit \ xc3 \ xa1n'”)
print ss, ss8
print >> open('f1','w'), ss8
>>> file('f1').read()
'Capit\xc3\xa1n\n'
因此,我Capit\xc3\xa1n
在文件f2 中输入我最喜欢的编辑器。
然后:
>>> open('f1').read()'Capit\xc3\xa1n\n'
>>> open('f2').read()
'Capit\\xc3\\xa1n\n'
>>> open('f1').read().decode('utf8')
u'Capit\xe1n\n'
>>> open('f2').read().decode('utf8')
u'Capit\\xc3\\xa1n\n'
我在这里不明白什么?显然,我缺少一些至关重要的魔术(或理性)。一种类型的文本文件可以正确转换?
在这里,我真正无法理解的是UTF-8表示法的意义所在,如果你实际上无法让Python识别它的话(如果它来自外部)。也许我应该只将JSON转储字符串,然后使用它,因为它具有可表示性!更重要的是,当来自文件时,Python是否会识别并解码该Unicode对象的ASCII表示形式?如果是这样,我怎么得到它?
>>> print simplejson.dumps(ss)'"Capit\u00e1n"'
>>> print >> file('f3','w'), simplejson.dumps(ss)
>>> simplejson.load(open('f3'))
u'Capit\xe1n'
回答:
在符号中
u'Capit\xe1n\n'
“ \ xe1”
仅代表一个字节。“ \ x”
告诉你“ e1”
为十六进制。当你写
Capit\xc3\xa1n
到你的文件中,你有“ \ xc3”
。这些是4个字节,在你的代码中,你全部读取了它们。显示它们时可以看到以下内容:
>>> open('f2').read()'Capit\\xc3\\xa1n\n'
你可以看到反斜杠被反斜杠转义了。因此,你的字符串中有四个字节:“ \”,“ x”,“ c”
和“ 3”
。
编辑:
正如其他人在他们的答案中指出的那样,你只需要在编辑器中输入字符,然后你的编辑器就应处理到UTF-8的转换并保存。
如果你实际上有这种格式的字符串,则可以使用string_escape编解码器将其解码为普通字符串:
In [15]: print 'Capit\\xc3\\xa1n\n'.decode('string_escape')Capitán
结果是一个以UTF-8编码的字符串,其中重音字符由\\xc3\\xa1
原始字符串中写入的两个字节表示。如果要使用unicode字符串,则必须使用UTF-8再次解码。
编辑:文件中没有UTF-8。实际查看其外观:
s = u'Capit\xe1n\n'sutf8 = s.encode('UTF-8')
open('utf-8.out', 'w').write(sutf8)
将文件utf-8.out内容与使用编辑器保存的文件内容进行比较。
以上是 Python-Unicode(UTF-8)用Python读写文件 的全部内容, 来源链接: utcz.com/qa/427790.html