一張圖說數(shù)據(jù)

數(shù)據(jù)是什么检激?

數(shù)據(jù)(data)是事實或觀察的結(jié)果齐莲,是對客觀事物的邏輯歸納嚣鄙,是用于表示客觀事物的未經(jīng)加工的的原始素材放祟。


數(shù)據(jù)分類

????????數(shù)據(jù)有很多種分類鳍怨,但大的類別可以從結(jié)構(gòu)化和非結(jié)構(gòu)化進行分割。所謂結(jié)構(gòu)化舞竿,有傳統(tǒng)的行列存儲的數(shù)據(jù)格式京景,每一行就是一個觀測,每一列是一種屬性特征骗奖,最常見的文檔格式是 CSV确徙;另外有XML、JSON等特定的結(jié)構(gòu)格式执桌。所謂非結(jié)構(gòu)化鄙皇,指數(shù)據(jù)不是按照固定的格式存儲,如文本文件仰挣,圖片文件伴逸,聲音、視頻等膘壶。

? ? ? ? 在結(jié)構(gòu)化數(shù)據(jù)中错蝴,我們可以按照數(shù)據(jù)本身特性洲愤,分為:

? ? ? ? 類別數(shù)據(jù)(nominal level): 一般是字符型,比如名稱顷锰,張三柬赐、李四、王二官紫。類別數(shù)據(jù)通常用于計算頻數(shù)分布肛宋,對其進行均值、方差等計算沒有意義束世。

? ? ? ? 序列數(shù)據(jù)(ordinal level):一般是整數(shù)酝陈,比如序號,1,2,3,4毁涉。序列數(shù)據(jù)通常進行歸一化處理沉帮、分位數(shù)處理等。日期/時間數(shù)據(jù)是一種特殊的序列數(shù)據(jù)贫堰。對序列數(shù)據(jù)進行頻數(shù)計算是沒有意義的遇西。

? ? ? ? 區(qū)間數(shù)據(jù)(interval level):可以是整數(shù),也可以是小數(shù)严嗜,比如重量、身高等洲敢。區(qū)間數(shù)據(jù)適用于各種統(tǒng)計計算漫玄,比如平均數(shù)、方差等压彭,也可以進行頻數(shù)計算看數(shù)據(jù)分布睦优。

? ? ? ? 對于非結(jié)構(gòu)化數(shù)據(jù)的處理:

? ? ? ? 文本數(shù)據(jù):通常進行分詞、詞性標注壮不、去除停用詞汗盘、向量化等;

? ? ? ? 圖片數(shù)據(jù):圖片是由像素組成询一,通過顏色提取隐孽、灰度、二值化健蕊、加粗/弱化等一系列處理菱阵;

? ? ? ? 語音數(shù)據(jù):將語音信號轉(zhuǎn)為聲學特征,然后建立言語模型進行匹配識別缩功;

? ? ? ? 視頻數(shù)據(jù):提取幀圖片數(shù)據(jù)晴及,進行目標運動檢測或者特征識別。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末嫡锌,一起剝皮案震驚了整個濱河市虑稼,隨后出現(xiàn)的幾起案子琳钉,更是在濱河造成了極大的恐慌,老刑警劉巖蛛倦,帶你破解...
    沈念sama閱讀 222,590評論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件歌懒,死亡現(xiàn)場離奇詭異,居然都是意外死亡胰蝠,警方通過查閱死者的電腦和手機序芦,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,157評論 3 399
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來乾巧,“玉大人描沟,你說我怎么就攤上這事〖嘏埃” “怎么了噪窘?”我有些...
    開封第一講書人閱讀 169,301評論 0 362
  • 文/不壞的土叔 我叫張陵,是天一觀的道長效扫。 經(jīng)常有香客問我倔监,道長,這世上最難降的妖魔是什么菌仁? 我笑而不...
    開封第一講書人閱讀 60,078評論 1 300
  • 正文 為了忘掉前任浩习,我火速辦了婚禮,結(jié)果婚禮上济丘,老公的妹妹穿的比我還像新娘谱秽。我一直安慰自己,他們只是感情好摹迷,可當我...
    茶點故事閱讀 69,082評論 6 398
  • 文/花漫 我一把揭開白布疟赊。 她就那樣靜靜地躺著,像睡著了一般峡碉。 火紅的嫁衣襯著肌膚如雪近哟。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,682評論 1 312
  • 那天鲫寄,我揣著相機與錄音吉执,去河邊找鬼。 笑死地来,一個胖子當著我的面吹牛鼠证,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播靠抑,決...
    沈念sama閱讀 41,155評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼量九,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起荠列,我...
    開封第一講書人閱讀 40,098評論 0 277
  • 序言:老撾萬榮一對情侶失蹤类浪,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后肌似,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體费就,經(jīng)...
    沈念sama閱讀 46,638評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,701評論 3 342
  • 正文 我和宋清朗相戀三年川队,在試婚紗的時候發(fā)現(xiàn)自己被綠了力细。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,852評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡固额,死狀恐怖眠蚂,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情斗躏,我是刑警寧澤逝慧,帶...
    沈念sama閱讀 36,520評論 5 351
  • 正文 年R本政府宣布,位于F島的核電站啄糙,受9級特大地震影響笛臣,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜隧饼,卻給世界環(huán)境...
    茶點故事閱讀 42,181評論 3 335
  • 文/蒙蒙 一沈堡、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧燕雁,春花似錦踱蛀、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,674評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽崩泡。三九已至禁荒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間角撞,已是汗流浹背呛伴。 一陣腳步聲響...
    開封第一講書人閱讀 33,788評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留谒所,地道東北人热康。 一個月前我還...
    沈念sama閱讀 49,279評論 3 379
  • 正文 我出身青樓,卻偏偏與公主長得像劣领,于是被迫代替她去往敵國和親姐军。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,851評論 2 361

推薦閱讀更多精彩內(nèi)容