07.17

評分函數(shù)(score function),它是原始圖像數(shù)據(jù)到類別分值的映射稼钩。
損失函數(shù)(loss function)顾稀,它是用來量化預測分類標簽的得分與真實標簽之間一致性的。
該方法可轉(zhuǎn)化為一個最優(yōu)化問題坝撑,在最優(yōu)化過程中静秆,將通過更新評分函數(shù)的參數(shù)來最小化損失函數(shù)值

python excel 轉(zhuǎn) json

#!/usr/bin/python
# -*- coding: utf-8 -*-
import pandas as pd
import json

# df = pd.read_excel('tmp.xls',sheetname=1,index_col='領域')

#讀xls
df = pd.read_excel('target.xls',sheetname=0)
str = df.to_json(orient='records',force_ascii=False)
f = open('jsondata_xls.txt','a')
json.dump(str,f,ensure_ascii=False)

#讀csv
#,encoding = "ISO-8859-1"
df = pd.read_csv('target.csv',encoding="gb18030")
str = df.to_json(orient='records',force_ascii=False)
f = open('jsondata_cvs.txt','a')
json.dump(str,f,ensure_ascii=False)

string 轉(zhuǎn) json

import pandas as pd

def processLine(target):
    str1 = (' '.join(target.split())).replace(' 訪客問題', '#訪客問題') \
        .replace(' 所屬類目', '@所屬類目').replace(' 機器人回答', '@機器人回答').replace(' 相關(guān)問題', '@相關(guān)問題') \
        .replace(' 匹配答案', '&匹配答案').replace(' 答案', '&答案')
    str2 = (''.join(str1.split()).replace('>>/', '>>')).replace(':',':')
    #chat list
    chat_list = str2.split('#')

    # print(chat_list)

    list_all = []
    for chat_item in chat_list:
        item1_list = chat_item.split('@')
        dict = {}
        for i in item1_list:
            if '&' not in i:
                i_list = i.split('>>')
                if len(i_list)<2:
                    print('', end='')
                else:
                    dict[i_list[0]] = i_list[1]
            else:
                i_list = i.split('>>')
                if len(i_list)<2:
                    print('', end='')
                else:
                    dict_temp = {}
                    tmp1 = i_list[1].split('&')

                    for tt in tmp1:
                        ttl = tt.split(':')
                        if len(ttl) < 2:
                            print('',end='')
                        else:
                            dict_temp[ttl[0]] = ttl[1]

                    dict[i_list[0]] = dict_temp
        list_all.append(dict)

    print(list_all)

df = pd.read_excel('target.xls',sheetname=0)

chats = df['對話詳細信息']

_target = chats[0]


for chat in chats:
    processLine(chat)



最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末巡李,一起剝皮案震驚了整個濱河市抚笔,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌侨拦,老刑警劉巖殊橙,帶你破解...
    沈念sama閱讀 218,451評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異狱从,居然都是意外死亡膨蛮,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,172評論 3 394
  • 文/潘曉璐 我一進店門季研,熙熙樓的掌柜王于貴愁眉苦臉地迎上來敞葛,“玉大人,你說我怎么就攤上這事与涡∪切常” “怎么了?”我有些...
    開封第一講書人閱讀 164,782評論 0 354
  • 文/不壞的土叔 我叫張陵驼卖,是天一觀的道長氨肌。 經(jīng)常有香客問我,道長酌畜,這世上最難降的妖魔是什么怎囚? 我笑而不...
    開封第一講書人閱讀 58,709評論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮桥胞,結(jié)果婚禮上恳守,老公的妹妹穿的比我還像新娘。我一直安慰自己埠戳,他們只是感情好井誉,可當我...
    茶點故事閱讀 67,733評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著整胃,像睡著了一般颗圣。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上屁使,一...
    開封第一講書人閱讀 51,578評論 1 305
  • 那天在岂,我揣著相機與錄音,去河邊找鬼蛮寂。 笑死蔽午,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的酬蹋。 我是一名探鬼主播及老,決...
    沈念sama閱讀 40,320評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼抽莱,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了骄恶?” 一聲冷哼從身側(cè)響起食铐,我...
    開封第一講書人閱讀 39,241評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎僧鲁,沒想到半個月后虐呻,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,686評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡寞秃,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,878評論 3 336
  • 正文 我和宋清朗相戀三年斟叼,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片春寿。...
    茶點故事閱讀 39,992評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡朗涩,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出堂淡,到底是詐尸還是另有隱情馋缅,我是刑警寧澤,帶...
    沈念sama閱讀 35,715評論 5 346
  • 正文 年R本政府宣布绢淀,位于F島的核電站萤悴,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏皆的。R本人自食惡果不足惜覆履,卻給世界環(huán)境...
    茶點故事閱讀 41,336評論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望费薄。 院中可真熱鬧硝全,春花似錦、人聲如沸楞抡。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,912評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽召廷。三九已至凳厢,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間竞慢,已是汗流浹背先紫。 一陣腳步聲響...
    開封第一講書人閱讀 33,040評論 1 270
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留筹煮,地道東北人遮精。 一個月前我還...
    沈念sama閱讀 48,173評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像败潦,于是被迫代替她去往敵國和親本冲。 傳聞我的和親對象是個殘疾皇子准脂,可洞房花燭夜當晚...
    茶點故事閱讀 44,947評論 2 355

推薦閱讀更多精彩內(nèi)容