淺談UTF-8編碼

1. 下表為UTF-8編碼規(guī)則表

2. 上述很重要的一個(gè)信息是下一個(gè)的first code point是接著上一個(gè)的last code point的,因此utf-8有一些看似合乎規(guī)則的編碼也無法轉(zhuǎn)化,譬如11000000 10000001蟹肘,雖然符合雙字節(jié)的規(guī)則,但其剩余的二進(jìn)制表示的值小于128作喘,所以無效【之前一直以為是移位規(guī)則之類的轻纪,會(huì)自動(dòng)+128這樣】

3. 這個(gè)常見的亂碼符號(hào)是utf-8編碼錯(cuò)誤時(shí)產(chǎn)生的,對(duì)應(yīng)的二進(jìn)制數(shù)為11101111 10111111 10111101催植,共三個(gè)字節(jié)肮蛹,每當(dāng)utf-8編碼錯(cuò)誤時(shí)【不符合上表的規(guī)則】,每一個(gè)字節(jié)都會(huì)對(duì)應(yīng)轉(zhuǎn)化成三個(gè)字節(jié)的這個(gè)亂碼符號(hào)创南,譬如執(zhí)行

? ? byte[] bBytes = new byte[20];

? ? bBytes[0] = (byte) 0b11000000;

? ? bBytes[1] = (byte) 0b10000001;

? ? System.out.println(new String(bBytes, StandardCharsets.UTF_8));

會(huì)得到兩個(gè)如下的亂碼符號(hào)

也正因?yàn)槿绱寺字遥?dāng)你得到一串亂碼字符時(shí),可通過減去兩倍亂碼字符數(shù)來得到原字節(jié)數(shù)

4. utf-8稿辙,二進(jìn)制在線轉(zhuǎn)換

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末昆码,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子邓深,更是在濱河造成了極大的恐慌未桥,老刑警劉巖笔刹,帶你破解...
    沈念sama閱讀 221,820評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件芥备,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡舌菜,警方通過查閱死者的電腦和手機(jī)萌壳,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,648評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來日月,“玉大人袱瓮,你說我怎么就攤上這事“В” “怎么了尺借?”我有些...
    開封第一講書人閱讀 168,324評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)精拟。 經(jīng)常有香客問我燎斩,道長(zhǎng)虱歪,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,714評(píng)論 1 297
  • 正文 為了忘掉前任栅表,我火速辦了婚禮笋鄙,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘怪瓶。我一直安慰自己萧落,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,724評(píng)論 6 397
  • 文/花漫 我一把揭開白布洗贰。 她就那樣靜靜地躺著找岖,像睡著了一般。 火紅的嫁衣襯著肌膚如雪敛滋。 梳的紋絲不亂的頭發(fā)上宣增,一...
    開封第一講書人閱讀 52,328評(píng)論 1 310
  • 那天,我揣著相機(jī)與錄音矛缨,去河邊找鬼爹脾。 笑死,一個(gè)胖子當(dāng)著我的面吹牛箕昭,可吹牛的內(nèi)容都是我干的灵妨。 我是一名探鬼主播,決...
    沈念sama閱讀 40,897評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼落竹,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼泌霍!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起述召,我...
    開封第一講書人閱讀 39,804評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤朱转,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后积暖,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體藤为,經(jīng)...
    沈念sama閱讀 46,345評(píng)論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,431評(píng)論 3 340
  • 正文 我和宋清朗相戀三年夺刑,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了缅疟。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,561評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡遍愿,死狀恐怖存淫,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情沼填,我是刑警寧澤桅咆,帶...
    沈念sama閱讀 36,238評(píng)論 5 350
  • 正文 年R本政府宣布,位于F島的核電站坞笙,受9級(jí)特大地震影響岩饼,放射性物質(zhì)發(fā)生泄漏刽脖。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,928評(píng)論 3 334
  • 文/蒙蒙 一忌愚、第九天 我趴在偏房一處隱蔽的房頂上張望曲管。 院中可真熱鬧,春花似錦硕糊、人聲如沸院水。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,417評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)檬某。三九已至,卻和暖如春螟蝙,著一層夾襖步出監(jiān)牢的瞬間恢恼,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,528評(píng)論 1 272
  • 我被黑心中介騙來泰國(guó)打工胰默, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留场斑,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,983評(píng)論 3 376
  • 正文 我出身青樓牵署,卻偏偏與公主長(zhǎng)得像漏隐,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子奴迅,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,573評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容

  • 字符是用戶可以讀寫的最小單位取具。計(jì)算機(jī)所能支持的字符組成的集合脖隶,就叫做字符集。字符集通常以二維表的形式存在暇检。二維表的...
    劉惜有閱讀 8,131評(píng)論 2 14
  • 圖片發(fā)自簡(jiǎn)書App 譚嬅产阱,是個(gè)網(wǎng)名么 因了空間距離遙不可及 故,沒有擊掌為約 但占哟,鍵盤敲出鑿鑿言之-- ...
    麥動(dòng)文閱讀 284評(píng)論 8 53
  • 果然心墅,爽快的背后果然藏著陰謀。錢包里一分錢都沒有榨乎。 我也是有脾氣的人啊,不說幾句好像顯示不出我在這個(gè)家里的地位瘫筐。我...
    若璃殤閱讀 381評(píng)論 1 2
  • 那天陽(yáng)光正好策肝! 一個(gè)短發(fā)肛捍,看起來羞答答的小女孩說:“大哥哥隐绵,你可不可以,拙毫,依许,∽禾悖”樹上的小男孩用著霸...
    陽(yáng)光最傾城閱讀 162評(píng)論 1 1