intel ISA-L library 程序庫的使用

1. ISA-L 是什么東西?

intel?-storage-acceleration-library Intel存儲加速庫盗舰,包括兩個大類:加密和非加密的蕊程。非加密的 crc局装,izip,erase-code摩幔,加密的包括sha512彤委,sha256,md5或衡,sha1等焦影。

核心技術(shù)就是使用intel sse/avx/avx2/avx256的擴展指令,并行運算多個流的方法封断。單線程比openssl要快2~8倍斯辰。

現(xiàn)在ISA-L已經(jīng)開源:

https://github.com/01org/isa-l

https://github.com/01org/isa-l_crypto

2. 接口

并行運算的接口有些像write/writev:

ssize_t write(int fd, const void *buf, size_t count);

ssize_t writev(int fd, const struct iovec *iov, int iovcnt);

struct iovec {

void *iov_base; ?/* Starting address */

size_t iov_len; ?/* Number of bytes to transfer */

};

實際接口:

SHA512_HASH_CTX_MGR *mgr = NULL;

SHA512_HASH_CTX ctxpool[NUM_JOBS], *ctx = NULL;

posix_memalign((void *)&mgr, 16, sizeof(SHA512_HASH_CTX_MGR));

sha512_ctx_mgr_init(mgr);

// Init contexts before first use

for (i = 0; i < MSGS; i++) {

hash_ctx_init(&ctxpool[i]);

ctxpool[i].user_data = (void *)((uint64_t) i);

}

for (i = 0; i < MSGS; i++) {

?sha512_ctx_mgr_submit(mgr, &ctxpool[i], msgs[i], strlen((char *)msgs[i]), HASH_ENTIRE);

}

while (1) {

? ? ?ctx = sha512_ctx_mgr_flush(mgr);

? ? ?if (ctx) {

? ? ?t = (unsigned long)(ctx->user_data);

}

3. 實際應(yīng)用

因為有write到writev的類似的接口,所以單buffer接口到多buffer接口的轉(zhuǎn)化是必須的坡疼。

單線程環(huán)境:只有多buffer接口彬呻,不能轉(zhuǎn)化成單buffer接口

1)緩沖多個buffer。

2)submit buffers回梧。

3)等待多個buffer結(jié)果废岂。

程序設(shè)計成多buffer + lazy load的形式祖搓。

多線程:單buffer接口設(shè)計

1)fifo 緩沖: 多個寫buffer線程 《----》fifo 《----》多個算sha256線程狱意。

2)promise/future 返回

? ?接口形式: std::future<sha256_digest> cal_sha256(voiud *buf, size_t len);

? 使用std::atomic 生成sequence number,內(nèi)部使用map管理 promise指針拯欧。

? map <uint64, std::unique_ptr<std::promise<sha256_digest>>>

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末详囤,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子镐作,更是在濱河造成了極大的恐慌藏姐,老刑警劉巖,帶你破解...
    沈念sama閱讀 221,548評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件该贾,死亡現(xiàn)場離奇詭異羔杨,居然都是意外死亡,警方通過查閱死者的電腦和手機杨蛋,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,497評論 3 399
  • 文/潘曉璐 我一進(jìn)店門兜材,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人逞力,你說我怎么就攤上這事曙寡。” “怎么了寇荧?”我有些...
    開封第一講書人閱讀 167,990評論 0 360
  • 文/不壞的土叔 我叫張陵举庶,是天一觀的道長。 經(jīng)常有香客問我揩抡,道長户侥,這世上最難降的妖魔是什么镀琉? 我笑而不...
    開封第一講書人閱讀 59,618評論 1 296
  • 正文 為了忘掉前任,我火速辦了婚禮添祸,結(jié)果婚禮上滚粟,老公的妹妹穿的比我還像新娘。我一直安慰自己刃泌,他們只是感情好凡壤,可當(dāng)我...
    茶點故事閱讀 68,618評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著耙替,像睡著了一般亚侠。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上俗扇,一...
    開封第一講書人閱讀 52,246評論 1 308
  • 那天硝烂,我揣著相機與錄音,去河邊找鬼铜幽。 笑死滞谢,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的除抛。 我是一名探鬼主播狮杨,決...
    沈念sama閱讀 40,819評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼到忽!你這毒婦竟也來了橄教?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,725評論 0 276
  • 序言:老撾萬榮一對情侶失蹤喘漏,失蹤者是張志新(化名)和其女友劉穎护蝶,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體翩迈,經(jīng)...
    沈念sama閱讀 46,268評論 1 320
  • 正文 獨居荒郊野嶺守林人離奇死亡持灰,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,356評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了负饲。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片堤魁。...
    茶點故事閱讀 40,488評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖绽族,靈堂內(nèi)的尸體忽然破棺而出姨涡,到底是詐尸還是另有隱情,我是刑警寧澤吧慢,帶...
    沈念sama閱讀 36,181評論 5 350
  • 正文 年R本政府宣布涛漂,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏匈仗。R本人自食惡果不足惜瓢剿,卻給世界環(huán)境...
    茶點故事閱讀 41,862評論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望悠轩。 院中可真熱鬧间狂,春花似錦、人聲如沸火架。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,331評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽何鸡。三九已至纺弊,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間骡男,已是汗流浹背淆游。 一陣腳步聲響...
    開封第一講書人閱讀 33,445評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留隔盛,地道東北人犹菱。 一個月前我還...
    沈念sama閱讀 48,897評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像吮炕,于是被迫代替她去往敵國和親腊脱。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,500評論 2 359

推薦閱讀更多精彩內(nèi)容