廣信項(xiàng)目總結(jié)

<div style="font-weight: 400;">

<h2 class="clear"><strong>背景</strong></h2>
<p>在5月20號(hào)入職后浙芙,經(jīng)歷了初期兩到三天的業(yè)務(wù)了解后菱肖,就投入項(xiàng)目的第一次上線工作扒最。其實(shí)這種情況下告嘲,各種問(wèn)題我是考慮不到的。</p>
<h2 class="clear"><strong>問(wèn)題</strong></h2>
<p><strong>總結(jié)有三大類</strong>:</p>
<p><img decoding="async" src="https://upload-images.jianshu.io/upload_images/21597556-6889ee78ee91d285.png" alt=""></p>
<p>1.?剛?cè)肼殬I(yè)務(wù)不清</p>
<p>l?杭州集群奖地,秒針集群的概念及網(wǎng)絡(luò)拓?fù)洳磺澹?lt;/p>
<p>l?Flume,ftp分別處于數(shù)據(jù)處理的位置橄唬;</p>
<p>l?Flume采集牽涉到的網(wǎng)絡(luò)機(jī)器及拓?fù)洌瑢?duì)應(yīng)的業(yè)務(wù)方(地區(qū)参歹,運(yùn)營(yíng)商仰楚,內(nèi)容商),對(duì)應(yīng)的日志文件格式犬庇,處理的中間結(jié)果數(shù)據(jù)存儲(chǔ)及格式僧界,最終落地hdfs還是數(shù)據(jù)庫(kù)哪張表,項(xiàng)目的源碼位置臭挽;</p>
<p>l?ftp服務(wù)同上捂襟,網(wǎng)絡(luò)拓?fù)浼八帞?shù)據(jù)流的位置等;</p>
<p>l?甲方,乙方欢峰,第三方等概念模糊葬荷;</p>
<p>l?C3,c2,探針,sdk纽帖,log.js宠漩,nginx等模糊</p>
<p>2.?平臺(tái)環(huán)境問(wèn)題</p>
<p>l?源碼依賴添加scala依賴版本是2.11跟秒針確認(rèn)對(duì)方給的錯(cuò)誤答案,我直接依照當(dāng)前版本開(kāi)發(fā)導(dǎo)致后期任務(wù)出錯(cuò)抛计;</p>
<p>l?成都測(cè)試哄孤,秒針線上集群環(huán)境各一套,而且環(huán)境配置及部署位置等不了解吹截,服務(wù)的各種排錯(cuò)web界面沒(méi)有方便的訪問(wèn)方式瘦陈,線上資源受限;</p>
<p>l?網(wǎng)絡(luò)環(huán)境問(wèn)題:成都網(wǎng)絡(luò)不穩(wěn)定波俄,局方機(jī)器權(quán)限申請(qǐng)晨逝,提交任務(wù)總是需要提到成都測(cè)試,需要步驟和網(wǎng)絡(luò)影響很大懦铺;</p>
<p>l?腳本windown到linux跨平臺(tái)問(wèn)題</p>
<p>3.?工作溝通問(wèn)題</p>
<p>l?工作中出現(xiàn)問(wèn)題時(shí)捉貌,有時(shí)無(wú)法定位責(zé)任人,很多問(wèn)題到頭來(lái)推到大數(shù)據(jù)我這邊冬念,造成還不了解業(yè)務(wù)的情況下趁窃,問(wèn)都不確定找誰(shuí);找到經(jīng)常問(wèn)的人急前,而我每次問(wèn)都會(huì)對(duì)業(yè)務(wù)了解更多更清晰一些醒陆;</p>
<p>l?溝通中會(huì)因?yàn)橹肛?zé)別人問(wèn)題,造成雙方帶有情緒裆针;</p>
<p>l?有些問(wèn)題是無(wú)法確定責(zé)任人刨摩,從不同角度認(rèn)知不同寺晌;我認(rèn)為工作中研發(fā)的角色太重,各種參與度太高澡刹;</p>
<p>4.?工作編排問(wèn)題</p>
<p>l?廣信項(xiàng)目雖說(shuō)優(yōu)先級(jí)最高呻征,但是很多杭州線上問(wèn)題經(jīng)常出現(xiàn),緊急度較高罢浇;占用過(guò)多時(shí)間排查原因和處理問(wèn)題陆赋。</p>
<p>l?叮當(dāng)小鎮(zhèn):很多問(wèn)題不確定,在處理廣信項(xiàng)目中己莺,并發(fā)處理叮當(dāng)小鎮(zhèn)問(wèn)題溝通花費(fèi)時(shí)間很多奏甫,另外通話也不順暢(手機(jī)信號(hào),溝通條理性)凌受,初期的處理方式阵子,內(nèi)容界定劃分有所理解不同,需要的磨合期胜蛉。</p>
<p>l?跟測(cè)試之間初期溝通問(wèn)題有些不對(duì)口(初次交流有些細(xì)節(jié)與以前公司不同雙方處理方式不同磨合)挠进;后期改善。</p>
<p>5.?代碼問(wèn)題</p>
<p>l?源碼與項(xiàng)目對(duì)應(yīng)關(guān)系誊册,源碼使用的最新版本分支不確認(rèn)领突;</p>
<p>l?融合平臺(tái)對(duì)應(yīng)的報(bào)表與接口和數(shù)據(jù)表和大數(shù)據(jù)job的關(guān)系;</p>
<p>l?Flume采集源碼修改的內(nèi)容造成的效果案怯;</p>
<h2 class="clear"><strong>解決:</strong></h2>
<p>業(yè)務(wù)問(wèn)題:找旗哥溝通整體流程君旦,找測(cè)試,運(yùn)維溝通各自負(fù)責(zé)的地區(qū)及業(yè)務(wù)環(huán)節(jié)嘲碱。找小駱了解代碼邏輯金砍,找李偉協(xié)調(diào)項(xiàng)目進(jìn)度。麦锯、</p>
<p>環(huán)境問(wèn)題:與秒針溝通恕稠,他們給的答案是錯(cuò)的;跟小駱溝通扶欣;通過(guò)命令查看鹅巍,確認(rèn),然后修正料祠,重搭骆捧。</p>
<p>工作溝通問(wèn)題:盡量溝通不攜帶感情色彩,可能表達(dá)會(huì)造成雙方?jīng)_突髓绽,但是都會(huì)很好處理彼此情緒凑懂,不會(huì)造成敵對(duì)態(tài)度,很好處理工作和情緒梧宫。即使有沖突也會(huì)推進(jìn)工作接谨,規(guī)劃彼此工作內(nèi)容。</p>
<p>工作編排問(wèn)題:跟各個(gè)項(xiàng)目經(jīng)理溝通排期塘匣,并發(fā)處理各個(gè)工作脓豪,即使有些內(nèi)容無(wú)法現(xiàn)在處理,也可以做到知曉忌卤,工作方向及每一步的內(nèi)容扫夜,可以把握節(jié)奏。在處理完重急事情后驰徊,繼續(xù)該工作笤闯。</p>
<p>代碼問(wèn)題:確定項(xiàng)目及分支,然后閱讀代碼棍厂,對(duì)比接口和數(shù)據(jù)庫(kù)颗味;對(duì)比報(bào)表,整理總結(jié)牺弹。</p>
<h2 class="clear"><strong>優(yōu)化:</strong></h2>
<p>1.?杭州集群及所對(duì)接的甲方flume采集集群監(jiān)控和報(bào)警平臺(tái)搭建浦马;知識(shí)庫(kù)文檔記錄。</p>
<p>2.?大數(shù)據(jù)本地測(cè)試集群搭建张漂,及版本測(cè)試升級(jí)改造晶默。</p>
<p>3.?統(tǒng)一開(kāi)發(fā),測(cè)試航攒,部署環(huán)境和數(shù)據(jù)庫(kù)結(jié)構(gòu)和內(nèi)容磺陡。</p>
<p>4.?交流測(cè)試,運(yùn)維大數(shù)據(jù)方面的內(nèi)容及腳本漠畜。</p>
<p></p><div id="safari-reader-element-marker" style="position: relative; top: 58%;"></div>5.?以后提供給甲方:大數(shù)據(jù)代碼(產(chǎn)品)币他,平臺(tái)運(yùn)維服務(wù),杭州計(jì)算集群的計(jì)算資源服務(wù)盆驹,報(bào)表服務(wù)等內(nèi)容盡量明確圆丹。否則一塊內(nèi)容可能牽涉整條大數(shù)據(jù)線的內(nèi)容,造成工作大數(shù)據(jù)工作人員效率低下躯喇。當(dāng)廣度太大的話辫封,分心太重,會(huì)造成排錯(cuò)的錯(cuò)誤定位廉丽,另外因?yàn)榉中臅?huì)造成探查問(wèn)題深度不夠就會(huì)下定論倦微。<p></p>
<p>在此感謝諸位同事的通力支持:特別是嚴(yán)總的任務(wù)優(yōu)先級(jí)提醒,旗哥業(yè)務(wù)流程的梳理指點(diǎn)和項(xiàng)目中可能出現(xiàn)問(wèn)題及應(yīng)該了解的內(nèi)容提點(diǎn)正压。</p>
</div><blockquote><p>本文使用 <a href="http://www.reibang.com/p/5709df6fb58d" class="internal">文章同步助手</a> 同步</p></blockquote>

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末欣福,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子焦履,更是在濱河造成了極大的恐慌拓劝,老刑警劉巖雏逾,帶你破解...
    沈念sama閱讀 218,546評(píng)論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異郑临,居然都是意外死亡栖博,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,224評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門厢洞,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)仇让,“玉大人,你說(shuō)我怎么就攤上這事躺翻∩ミ矗” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 164,911評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵公你,是天一觀的道長(zhǎng)踊淳。 經(jīng)常有香客問(wèn)我,道長(zhǎng)省店,這世上最難降的妖魔是什么嚣崭? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,737評(píng)論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮懦傍,結(jié)果婚禮上雹舀,老公的妹妹穿的比我還像新娘。我一直安慰自己粗俱,他們只是感情好说榆,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,753評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著寸认,像睡著了一般签财。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上偏塞,一...
    開(kāi)封第一講書(shū)人閱讀 51,598評(píng)論 1 305
  • 那天唱蒸,我揣著相機(jī)與錄音,去河邊找鬼灸叼。 笑死神汹,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的古今。 我是一名探鬼主播屁魏,決...
    沈念sama閱讀 40,338評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼捉腥!你這毒婦竟也來(lái)了氓拼?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 39,249評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎桃漾,沒(méi)想到半個(gè)月后坏匪,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,696評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡呈队,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,888評(píng)論 3 336
  • 正文 我和宋清朗相戀三年剥槐,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片宪摧。...
    茶點(diǎn)故事閱讀 40,013評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖颅崩,靈堂內(nèi)的尸體忽然破棺而出几于,到底是詐尸還是另有隱情,我是刑警寧澤沿后,帶...
    沈念sama閱讀 35,731評(píng)論 5 346
  • 正文 年R本政府宣布沿彭,位于F島的核電站,受9級(jí)特大地震影響尖滚,放射性物質(zhì)發(fā)生泄漏喉刘。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,348評(píng)論 3 330
  • 文/蒙蒙 一漆弄、第九天 我趴在偏房一處隱蔽的房頂上張望睦裳。 院中可真熱鬧,春花似錦撼唾、人聲如沸廉邑。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,929評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)蛛蒙。三九已至,卻和暖如春渤愁,著一層夾襖步出監(jiān)牢的瞬間牵祟,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,048評(píng)論 1 270
  • 我被黑心中介騙來(lái)泰國(guó)打工抖格, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留诺苹,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,203評(píng)論 3 370
  • 正文 我出身青樓他挎,卻偏偏與公主長(zhǎng)得像筝尾,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子办桨,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,960評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容