// 可以使用以下方式讀取text文件數(shù)據(jù)
JavaRDD<String> rdd = sc.hadoopFile("PSP_MCC_CB.TXT", TextInputFormat.class, LongWritable.class, Text.class).map(new Function<Tuple2<LongWritable,Text>, String>() {
@Override
public String call(Tuple2<LongWritable, Text> tuple)throws Exception {
return new String(tuple._2.getBytes(), 0, tuple._2.getLength(), "GBK");
}
});
Spark讀取數(shù)據(jù)(GBK)亂碼解決
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門既琴,熙熙樓的掌柜王于貴愁眉苦臉地迎上來占婉,“玉大人,你說我怎么就攤上這事甫恩∧婕茫” “怎么了?”我有些...
- 文/不壞的土叔 我叫張陵磺箕,是天一觀的道長奖慌。 經(jīng)常有香客問我,道長松靡,這世上最難降的妖魔是什么简僧? 我笑而不...
- 正文 為了忘掉前任,我火速辦了婚禮击困,結(jié)果婚禮上涎劈,老公的妹妹穿的比我還像新娘。我一直安慰自己阅茶,他們只是感情好,可當(dāng)我...
- 文/花漫 我一把揭開白布谅海。 她就那樣靜靜地躺著脸哀,像睡著了一般。 火紅的嫁衣襯著肌膚如雪扭吁。 梳的紋絲不亂的頭發(fā)上撞蜂,一...
- 文/蒼蘭香墨 我猛地睜開眼九杂,長吁一口氣:“原來是場噩夢啊……” “哼颁湖!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起例隆,我...
- 正文 年R本政府宣布毅哗,位于F島的核電站,受9級特大地震影響捧挺,放射性物質(zhì)發(fā)生泄漏虑绵。R本人自食惡果不足惜,卻給世界環(huán)境...
- 文/蒙蒙 一闽烙、第九天 我趴在偏房一處隱蔽的房頂上張望翅睛。 院中可真熱鬧,春花似錦黑竞、人聲如沸捕发。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽扎酷。三九已至,卻和暖如春遏匆,著一層夾襖步出監(jiān)牢的瞬間法挨,已是汗流浹背。 一陣腳步聲響...
推薦閱讀更多精彩內(nèi)容
- 使用PHP和MYSQL開發(fā)過程中經(jīng)常會遇到PHP寫入或讀取MYSQL數(shù)據(jù)庫中數(shù)據(jù)巩掺,出現(xiàn)中文亂碼的問題偏序,英文和數(shù)字不...
- 轉(zhuǎn)自 https://www.cnblogs.com/teagnes/p/6112019.html 其實在很久之前...
- R語言不是中國人開發(fā)的,自然對中文的處理上沒有特別考慮胖替,但是我們依然可以處理研儒。 下面我給出了解決方案豫缨。但我想,別的...
- 示例代碼SparkHiveAPP 主類注意:需要將 core-site.xml,hdfs-site.xml, ya...
- 方法1:對應(yīng)解碼 result=new String(result.getBytes("ISO-8859-1"),...