Flink(5)讀取數(shù)據(jù)源的幾種方式

執(zhí)行環(huán)境

創(chuàng)建一個執(zhí)行環(huán)境陆盘,表示當(dāng)前執(zhí)行程序的上下文,如果程序是獨立調(diào)用的則此方法返回本地執(zhí)行環(huán)境败明,如果從命令行客戶端調(diào)用程序提交到集群隘马,則此方法返回此集群的執(zhí)行環(huán)境,也就是是說妻顶,getExecutionEnvironment(),會根據(jù)查詢運(yùn)行的方式?jīng)Q定返回什么樣的運(yùn)行環(huán)境祟霍。是最常用的一種創(chuàng)建執(zhí)行環(huán)境的方式。

# 流處理環(huán)境
StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
#批處理
ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();

1.讀取的數(shù)據(jù)源-Elements

DataStreamSource<Integer> integerDataStreamSource = env.fromElements(1, 2, 2, 5, 44);

2.讀取的數(shù)據(jù)源-Collection

public class SensorReading {

    private String id;
    private Long timestamp;
    private Double temperature;

    public SensorReading() {
    }

    public SensorReading(String id, Long timestamp, Double temperature) {
        this.id = id;
        this.timestamp = timestamp;
        this.temperature = temperature;
    }

    public String getId() {
        return id;
    }

    public void setId(String id) {
        this.id = id;
    }

    public Long getTimestamp() {
        return timestamp;
    }

    public void setTimestamp(Long timestamp) {
        this.timestamp = timestamp;
    }

    public Double getTemperature() {
        return temperature;
    }

    public void setTemperature(Double temperature) {
        this.temperature = temperature;
    }

    @Override
    public String toString() {
        return "SensorReading{" +
                "id='" + id + '\'' +
                ", timestamp=" + timestamp +
                ", temperature=" + temperature +
                '}';
    }
DataStreamSource<SensorReading> sensorDataStream = env.fromCollection(Arrays.asList(
                new SensorReading("sensor_1", 1547718199L, 35.8),
                new SensorReading("sensor_6", 1547718201L, 15.8),
                new SensorReading("sensor_7", 1547718202L, 37.8),
                new SensorReading("sensor_10", 1547718203L, 38.8)
        ));

3.讀取的數(shù)據(jù)源-File

 //從文件讀取
DataStreamSource<String> stringDataStreamSource = env.readTextFile("/path/to/hello.txt");

4.從socket文本流讀取數(shù)據(jù)

DataStream<String> inputDataStream = env.socketTextStream(localhost,7777);

最終執(zhí)行

 sensorDataStream.print("sensor");
 integerDataStreamSource.print("int");
 stringDataStreamSource.print("file");

 env.execute("my job name");
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末盈包,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子醇王,更是在濱河造成了極大的恐慌呢燥,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,183評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件寓娩,死亡現(xiàn)場離奇詭異叛氨,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)棘伴,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評論 3 399
  • 文/潘曉璐 我一進(jìn)店門寞埠,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人焊夸,你說我怎么就攤上這事仁连。” “怎么了?”我有些...
    開封第一講書人閱讀 168,766評論 0 361
  • 文/不壞的土叔 我叫張陵饭冬,是天一觀的道長使鹅。 經(jīng)常有香客問我,道長昌抠,這世上最難降的妖魔是什么患朱? 我笑而不...
    開封第一講書人閱讀 59,854評論 1 299
  • 正文 為了忘掉前任,我火速辦了婚禮炊苫,結(jié)果婚禮上裁厅,老公的妹妹穿的比我還像新娘。我一直安慰自己侨艾,他們只是感情好执虹,可當(dāng)我...
    茶點故事閱讀 68,871評論 6 398
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著蒋畜,像睡著了一般声畏。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上姻成,一...
    開封第一講書人閱讀 52,457評論 1 311
  • 那天插龄,我揣著相機(jī)與錄音,去河邊找鬼科展。 笑死均牢,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的才睹。 我是一名探鬼主播徘跪,決...
    沈念sama閱讀 40,999評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼琅攘!你這毒婦竟也來了垮庐?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,914評論 0 277
  • 序言:老撾萬榮一對情侶失蹤坞琴,失蹤者是張志新(化名)和其女友劉穎哨查,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體剧辐,經(jīng)...
    沈念sama閱讀 46,465評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡寒亥,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,543評論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了荧关。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片溉奕。...
    茶點故事閱讀 40,675評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖忍啤,靈堂內(nèi)的尸體忽然破棺而出加勤,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 36,354評論 5 351
  • 正文 年R本政府宣布胸竞,位于F島的核電站欺嗤,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏卫枝。R本人自食惡果不足惜煎饼,卻給世界環(huán)境...
    茶點故事閱讀 42,029評論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望校赤。 院中可真熱鬧吆玖,春花似錦、人聲如沸马篮。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,514評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽浑测。三九已至翅阵,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間迁央,已是汗流浹背掷匠。 一陣腳步聲響...
    開封第一講書人閱讀 33,616評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留岖圈,地道東北人讹语。 一個月前我還...
    沈念sama閱讀 49,091評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像蜂科,于是被迫代替她去往敵國和親顽决。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,685評論 2 360

推薦閱讀更多精彩內(nèi)容