IP屬地：四川
-
ce
1111
-
Hive 大表數(shù)據(jù)導(dǎo)入 HBase
本文簡單介紹 HBase 的數(shù)據(jù)導(dǎo)入工具 ImportTSV 谬墙。通過一次將 hive 大表導(dǎo)入 HBase 的實(shí)戰(zhàn)案例测蹲，梳理期間遇到的問題仇味，調(diào)研...
-
Linux 如何正確監(jiān)控 ulimit
1 統(tǒng)計(jì)占用文件句柄數(shù)常見誤區(qū) Linux 上運(yùn)行的程序經(jīng)常能遇到 "max open files" 的報(bào)錯(cuò)搔弄，這是由于 linux 對程序以及...
-
[Hive] - Beeline 偶發(fā) Unable to read HiveServer2 uri from ZooKeeper 問題
1 問題 用戶有大量的并發(fā) beeline hive sql 任務(wù)眶诈，偶發(fā) Unable to read HiveServer2 uri from...
-
如何給 HDFS 「減肥」之?dāng)?shù)據(jù)清理
Hadoop 平臺(tái)運(yùn)行至今棍厌，前期處于放任自由的狀態(tài)友题，后期才開始稍加管控虚倒，指定相關(guān)數(shù)據(jù)使用規(guī)范嫡锌。日積月累，數(shù)據(jù)規(guī)模越來越大檬寂，元數(shù)據(jù)暴增终抽，Namen...
-
[HBase] - 一次由 Hive HBase 外部表引發(fā)的讀性能問題1 問題 近期業(yè)務(wù)反饋 HBase GET 讀性能不佳，查看監(jiān)控，每天有幾個(gè)時(shí)間波段昼伴，GET P99 請求時(shí)延很高匾旭。 2 問題原因 定位有一個(gè)業(yè)...
-
[HBase] - 讀懂 BucketCache 日志信息
這是 HBase regionserver 打印的一段 bucket cache 統(tǒng)計(jì)信息，里面有些指標(biāo)有點(diǎn)讓人摸不著頭腦圃郊。下面將通過提問的方式...
-
Before Sunrise - 第一次感受金屬樂現(xiàn)場1. 緣起 今年年初价涝，在 B 站無意關(guān)注了一個(gè)成都騎摩托車摩旅去西藏的 UP 主，視頻拍的非常棒持舆，幽默有趣飒泻，其中一期有一小段 BGM -《鹿柴...
-
[HBase] - 理解 HBase Rowkey 字典排序
我們都知道 HBase 的數(shù)據(jù)根據(jù) rowkey 字典序排序的，理解這個(gè)概念很重要吏廉。 先理解名詞 - 「字典序」 根據(jù) wiki 解釋： 在英文...