BigDL是一個基于Apache Spark的開源分布式深度學(xué)習(xí)框架,可以直接在現(xiàn)有的大數(shù)據(jù)集群上用深度學(xué)習(xí)技術(shù)來分析大數(shù)據(jù)绰播,而不需要對數(shù)據(jù)進行任何拷貝骄噪。讓深度學(xué)習(xí)和大數(shù)據(jù)平臺能夠無縫、非常容易地結(jié)合在一起蠢箩,使得深度學(xué)習(xí)更易于被大數(shù)據(jù)的社區(qū)和數(shù)據(jù)科學(xué)的社區(qū)使用链蕊。Analytics Zoo是Spark和BigDL的擴充事甜,它的目的是方便用戶開發(fā)基于大數(shù)據(jù)端到端學(xué)習(xí)的應(yīng)用,除了內(nèi)置的模型滔韵、內(nèi)置的一些非常簡單的操作之外讳侨,它里面還提供了大量的高級的流水線的支持,能夠使用Spark DataFrames奏属、ML Pipelines的深度學(xué)習(xí)流水線,能夠通過遷移學(xué)習(xí)的API構(gòu)建API模型的定義潮峦,在這個基礎(chǔ)上就可以很方便地將我們提供的Model Zoo的模型甚至端到端的參考應(yīng)用囱皿。
寶信軟件研發(fā)并推出的具有自主知識產(chǎn)權(quán)的大數(shù)據(jù)平臺軟件 xInsight 及一體機產(chǎn)品 xIncube,率先應(yīng)用在智能制造和智慧城市領(lǐng)域拘悦。寶信軟件組建了AI(人工智能)研究團隊齿兔,通過與業(yè)界領(lǐng)先的大數(shù)據(jù)和AI研發(fā)團隊合作,探索數(shù)據(jù)應(yīng)用的新模式础米。
近期分苇,寶信軟件和英特爾團隊共同對Analytics Zoo深度學(xué)習(xí)平臺在研發(fā)環(huán)境中做了適配和測試,并利用該平臺開發(fā)了設(shè)備故障自動預(yù)測的驗證模型屁桑。該模型基于業(yè)界公開的設(shè)備全生命周期數(shù)據(jù)医寿,利用循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)特別是長短期記憶模型(LSTM),實現(xiàn)了時間序列的異常檢測(Time series anomaly detection)蘑斧,并可以在數(shù)據(jù)上進行無監(jiān)督深度學(xué)習(xí)和預(yù)測靖秩。