python讀寫gbk帮哈、utf-8等輸入輸出流

python編碼問(wèn)題:

所有使用python的都會(huì)遇到下面的問(wèn)題:

Traceback (most recent call last):
  File "amazon_test.py", line 30, in 
    print(s)
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-7: ordinal not in range(128)

解決方法

首先万哪,你要有個(gè)通用的環(huán)境:

  • locale保證
LANG=zh_CN.UTF-8
LC_CTYPE="en_US.UTF-8"
LC_NUMERIC="en_US.UTF-8"
LC_TIME="en_US.UTF-8"
LC_COLLATE="en_US.UTF-8"
LC_MONETARY="en_US.UTF-8"
LC_MESSAGES="en_US.UTF-8"
LC_PAPER="en_US.UTF-8"
LC_NAME="en_US.UTF-8"
LC_ADDRESS="en_US.UTF-8"
LC_TELEPHONE="en_US.UTF-8"
LC_MEASUREMENT="en_US.UTF-8"
LC_IDENTIFICATION="en_US.UTF-8"
LC_ALL=en_US.UTF-8

具體設(shè)置:

# ~/.bashrc中添加
LANG=zh_CN.UTF-8
LANGUAGE=zh_CN:zh:en_US:en
LC_ALL=en_US.UTF-8
  • py文件第一行一般為#!/usr/bin/env python
    第二行# -*- coding: utf-8 -*- 或者# coding=utf-8
    保證文件的編碼為utf-8格式(有些人會(huì)把vim環(huán)境設(shè)置為gbk或者chinese秀撇,文件保存時(shí)可能會(huì)變成gbk格式,需要注意)
    p.s. : vimrc設(shè)置推薦:
set encoding=utf-8  " 新創(chuàng)建文件格式為utf-8
set termencoding=utf-8 " 終端顯示格式舍肠,把解析的字符用utf-8編碼來(lái)進(jìn)行顯示和渲染終端屏幕
set fileencodings=utf-8,gb18030,gbk,cp936,gb2312 " 可以查看多種格式的文件

python2

  • 解碼輸入流

    • 讀取文件
    with open(file_path, 'r') as f:
        for line in f:
        line = line.decode('your_file_encoding', errors='ignore').strip()
    
    • 標(biāo)準(zhǔn)輸入流
       for line in sys.stdin:
           line = line.decode('your_file_encoding', errors='ignore').strip()
    
  • 寫某編碼的文件

print >> sys.stdout, line.encode('gb18030', 'ignore') 
# 或者用搀继,推薦下面的方法
sys.stdout.write(line.encode('gb18030', 'ignore') + '\n')

python3

  • 解碼輸入流
    • 讀取文件
    with open(file_path, mode='r', encoding='gb18030', errors='ignore') as f:
        for line in f:  # line is unicode string
            pass
    
    • 標(biāo)準(zhǔn)輸入流
       import io
       import sys
       sys.stdin = io.TextIOWrapper(sys.stdin.buffer, encoding='utf-8')
       for line in sys.stdin:
          pass
    
import sys
sys.stdin.reconfigure(encoding='utf-8')
for line in sys.stdin:
         pass
  • 編碼輸出
    • 寫文件
    with open(file_output, encoding='your_dest_encoding', mode='w') as f:
        f.write(line) 
    
    • 輸出流
    import sys
    import io
    sys.stdout = io.TextIOWrapper(sys.stdout.buffer, encoding='utf-8')
    sys.stdout.write(line + '\n')
    
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市翠语,隨后出現(xiàn)的幾起案子叽躯,更是在濱河造成了極大的恐慌,老刑警劉巖肌括,帶你破解...
    沈念sama閱讀 206,839評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件点骑,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡们童,警方通過(guò)查閱死者的電腦和手機(jī)畔况,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門鲸鹦,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)慧库,“玉大人,你說(shuō)我怎么就攤上這事馋嗜∑氚澹” “怎么了?”我有些...
    開(kāi)封第一講書人閱讀 153,116評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵葛菇,是天一觀的道長(zhǎng)甘磨。 經(jīng)常有香客問(wèn)我,道長(zhǎng)眯停,這世上最難降的妖魔是什么济舆? 我笑而不...
    開(kāi)封第一講書人閱讀 55,371評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮莺债,結(jié)果婚禮上滋觉,老公的妹妹穿的比我還像新娘。我一直安慰自己齐邦,他們只是感情好椎侠,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,384評(píng)論 5 374
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著措拇,像睡著了一般我纪。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 49,111評(píng)論 1 285
  • 那天浅悉,我揣著相機(jī)與錄音趟据,去河邊找鬼。 笑死仇冯,一個(gè)胖子當(dāng)著我的面吹牛之宿,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播苛坚,決...
    沈念sama閱讀 38,416評(píng)論 3 400
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼比被,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了泼舱?” 一聲冷哼從身側(cè)響起等缀,我...
    開(kāi)封第一講書人閱讀 37,053評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎娇昙,沒(méi)想到半個(gè)月后尺迂,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,558評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡冒掌,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,007評(píng)論 2 325
  • 正文 我和宋清朗相戀三年噪裕,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片股毫。...
    茶點(diǎn)故事閱讀 38,117評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡膳音,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出铃诬,到底是詐尸還是另有隱情祭陷,我是刑警寧澤,帶...
    沈念sama閱讀 33,756評(píng)論 4 324
  • 正文 年R本政府宣布趣席,位于F島的核電站兵志,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏宣肚。R本人自食惡果不足惜想罕,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,324評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望霉涨。 院中可真熱鬧按价,春花似錦、人聲如沸嵌纲。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 30,315評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)逮走。三九已至鸠蚪,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背茅信。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 31,539評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工盾舌, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人蘸鲸。 一個(gè)月前我還...
    沈念sama閱讀 45,578評(píng)論 2 355
  • 正文 我出身青樓妖谴,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親酌摇。 傳聞我的和親對(duì)象是個(gè)殘疾皇子膝舅,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,877評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容