Day31中小規(guī)模集群架構(gòu)(課堂筆記)

Day31


作者:孫鵬鵬

歸檔:課后筆記

時(shí)間:2019/4/12


快捷鍵:

Ctrl + 1??? 標(biāo)題1

Ctrl + 2??? 標(biāo)題2

Ctrl + 3??? 標(biāo)題3

Ctrl + 4??? 標(biāo)題4

Ctrl + 5??? 程序代碼

Ctrl + 6??? 正文

Ctrl + 7??? 實(shí)例1-1

格式說明:

藍(lán)色字體:注釋

黃色背景:重要

綠色背景:注意

老男孩教育教學(xué)核心思想6重:重目標(biāo)扮念、重思路筹陵、重方法呵萨、重實(shí)踐锅很、重習(xí)慣该面、重總結(jié)

學(xué)無止境窒升,老男孩教育成就你人生的起點(diǎn)跷睦!

聯(lián)系方式:

網(wǎng)站運(yùn)維QQ交流群:

Linux?385168604架構(gòu)師390642196

Python 29215534大數(shù)據(jù)421358633

官方網(wǎng)站:

http://www.oldboyedu.com?

目? 錄

第一章:中小規(guī)模集群架構(gòu)









第一節(jié):

#什么是集群?

##簡(jiǎn)單的說侠鳄,集群就是一堆集群做同一件事

##例如:www.jd.con提供賣東西服務(wù)這就是一件事埠啃,可能是幾千臺(tái)服務(wù)器在背后運(yùn)轉(zhuǎn)支撐這個(gè)網(wǎng)站

???? www.baidu.com看著就是一個(gè)搜索框,背后可能是上萬臺(tái)服務(wù)器伟恶。

#為什么企業(yè)要用集群?

##7*24服務(wù)毅该,需要多臺(tái)機(jī)器同時(shí)工作博秫,互為實(shí)時(shí)備份。

##高并發(fā)訪問眶掌,需要多臺(tái)服務(wù)器同時(shí)提供服務(wù)挡育。

#集群的特點(diǎn):

##數(shù)據(jù)量大、用戶多朴爬、

##7*24持續(xù)服務(wù)

##高并發(fā)

##用戶分布廣泛即寒、網(wǎng)絡(luò)情況復(fù)雜

###獨(dú)行快,眾行遠(yuǎn)召噩。?? ----老男孩

#形象的描述一下集群:

##

基礎(chǔ)優(yōu)化:

#規(guī)范目錄

##mkdir -p /server/tools

##mkdir -p /server/scripts

#配置所有主機(jī)域名解析

##cat >/etc/hosts<

127.0.0.1??? localhost localhost.localdomain localhost4localhost4.localdomain4

::1????????? localhost localhost.localdomainlocalhost6 localhost6.localdomain6

172.16.1.5 lb01

172.16.1.6 lb02

172.16.1.7 web01

172.16.1.8 web02

172.16.1.9 web03

172.16.1.31 nfs01

172.16.1.41 backup

172.16.1.51 db01 db01.etiantian.org

172.16.1.61 m01

EOF

# cat /etc/hosts

127.0.0.1??? localhost localhost.localdomain localhost4localhost4.localdomain4

::1????????? localhost localhost.localdomainlocalhost6 localhost6.localdomain6

172.16.1.5 lb01

172.16.1.6 lb02

172.16.1.7web01

172.16.1.8 web02

172.16.1.9 web03

172.16.1.31 nfs01

172.16.1.41 backup

172.16.1.51 db01 db01.etiantian.org

172.16.1.61 m01

# ping lb01

PING lb01 (172.16.1.5) 56(84) bytesof data.


#1.基礎(chǔ)優(yōu)化操作項(xiàng):更新yum源信息

第一個(gè):就近使用yum源地址母赵,安裝軟件更快。

curl -s-o /etc/yum.repos.d/CentOS-Base.repohttp://mirrors.aliyun.com/repo/Centos-7.repo

第二個(gè):安裝RHEL/CentOS官方源不提供的軟件包

curl -s-o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo

安全優(yōu)化

#2.關(guān)閉selinux

sed -i 's#SELINUX=.*#SELINUX=disabled#g'/etc/selinux/config

sed -i's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config

grep SELINUX=disabled/etc/selinux/config

setenforce 0

getenforce

#3.關(guān)閉firewalld防火墻服務(wù)

systemctl stop firewalld

systemctl disable firewalld


#4.基礎(chǔ)優(yōu)化操作項(xiàng):設(shè)置普通用戶提權(quán)操作(可選優(yōu)化)

提權(quán)oldboy可以利用sudo

useradd oldboy

echo 123456|passwd --stdin oldboy

\cp /etc/sudoers /etc/sudoers.ori

echo "oldboy? ALL=(ALL) NOPASSWD: ALL ">>/etc/sudoers

tail -1 /etc/sudoers

visudo -c

#5.設(shè)置系統(tǒng)中文UTF8字符集

cat /etc/locale.conf

LANG="en_US.UTF-8"

修改命令如下:

cp/etc/locale.conf? /etc/locale.conf.ori

echo'LANG="zh_CN.UTF-8"' >/etc/locale.conf?

source/etc/locale.conf

echo$LANG

cp/etc/locale.conf? /etc/locale.conf.ori

localectlset-locale LANG="zh_CN.UTF-8"

cat/etc/locale.conf

#6.基礎(chǔ)優(yōu)化操作項(xiàng):時(shí)間同步設(shè)置

設(shè)置系統(tǒng)時(shí)間同步

yum install ntpdate -y

/usr/sbin/ntpdate ntp3.aliyun.com

echo '#crond-id-001:time sync byoldboy' >>/var/spool/cron/root

echo"*/5 * * * * /usr/sbin/ntpdate ntp3.aliyun.com >/dev/null2>&1">>/var/spool/cron/root

crontab -l

#7.基礎(chǔ)優(yōu)化操作項(xiàng):提升命令行操作安全性(可選優(yōu)化)

提升命令行安全(可選配置)

echo 'export TMOUT=300'>>/etc/profile

echo 'export HISTSIZE=5'>>/etc/profile

echo 'export HISTFILESIZE=5'>>/etc/profile

tail -3 /etc/profile

. /etc/profile


#8.基礎(chǔ)優(yōu)化操作項(xiàng):加大文件描述符

實(shí)例演示:加大文件描述

echo'*?????????????? -?????? nofile????????? 65535 '>>/etc/security/limits.conf

tail -1 /etc/security/limits.conf

ulimit -SHn?? 65535

ulimit -n??????? #<==命令方式查看配置結(jié)果

#9.基礎(chǔ)優(yōu)化操作項(xiàng):優(yōu)化系統(tǒng)內(nèi)核

cat>>/etc/sysctl.conf<

net.ipv4.tcp_fin_timeout = 2

net.ipv4.tcp_tw_reuse = 1

net.ipv4.tcp_tw_recycle = 1

net.ipv4.tcp_syncookies = 1

net.ipv4.tcp_keepalive_time = 600

net.ipv4.ip_local_port_range =4000??? 65000

net.ipv4.tcp_max_syn_backlog = 16384

net.ipv4.tcp_max_tw_buckets = 36000

net.ipv4.route.gc_timeout = 100

net.ipv4.tcp_syn_retries = 1

net.ipv4.tcp_synack_retries = 1

net.core.somaxconn = 16384

net.core.netdev_max_backlog = 16384

net.ipv4.tcp_max_orphans = 16384

#10.以下參數(shù)是對(duì)iptables防火墻的優(yōu)化具滴,防火墻不開會(huì)提示凹嘲,可以忽略不理。

net.nf_conntrack_max = 25000000

net.netfilter.nf_conntrack_max =25000000

net.netfilter.nf_conntrack_tcp_timeout_established= 180

net.netfilter.nf_conntrack_tcp_timeout_time_wait= 120

net.netfilter.nf_conntrack_tcp_timeout_close_wait= 60

net.netfilter.nf_conntrack_tcp_timeout_fin_wait= 120

net.core.wmem_default = 8388608

net.core.rmem_default = 8388608

net.core.wmem_max = 16777216

net.core.rmem_max = 16777216

EOF

sysctl -p

#11.基礎(chǔ)優(yōu)化操作項(xiàng):安裝系統(tǒng)常用軟件

CentOS6和CentOS7都要安裝的企業(yè)運(yùn)維常用基礎(chǔ)工具包

yuminstall tree nmap dos2unix lrzsz nc lsof wget tcpdump htop iftop iotop sysstatnethogs -y

CentOS7要安裝的企業(yè)運(yùn)維常用基礎(chǔ)工具包

yum install psmisc net-toolsbash-completion vim-enhanced -y

獨(dú)行快构韵,眾行遠(yuǎn)周蹭∏魉遥——老男孩

#12.基礎(chǔ)優(yōu)化操作項(xiàng):優(yōu)化SSH遠(yuǎn)程連接效率

禁止root遠(yuǎn)程連接

修改默認(rèn)22端口,改為52113

監(jiān)聽內(nèi)網(wǎng)服務(wù)器IP

###練習(xí)不動(dòng)凶朗。

#13.擴(kuò)展優(yōu)化操作項(xiàng)-修改yum.conf文件配置信息

保留yum安裝的軟件包

將/etc/yum.conf中的keepcache=0改為keepcache=1瓷胧,為日后一鍵安裝網(wǎng)站集群留好rpm及依賴工具包。

#14. 鎖定關(guān)鍵系統(tǒng)文件如/etc/passwd棚愤、/etc/shadow抖单、/etc/group、/etc/gshadow遇八、/etc/inittab矛绘,

處理以上內(nèi)容后把chattr、lsattr改名為oldboy刃永,轉(zhuǎn)移走货矮,這樣就安全多了。

#15.??? 清空/etc/issue斯够、/etc/issue.net囚玫,去除系統(tǒng)及內(nèi)核版本登錄前的屏幕顯示。

#16.??? 清除多余的系統(tǒng)虛擬用戶賬號(hào)读规。

#17.??? 為grub引導(dǎo)菜單加密碼(自學(xué))抓督。

#18.??? 禁止主機(jī)被ping(內(nèi)核參數(shù))。

#19.??? 打補(bǔ)丁并升級(jí)有已知漏洞的軟件束亏。

??? yum update

#20.精簡(jiǎn)開機(jī)自啟動(dòng)服務(wù)

systemctl list-unit-files |grepenable|egrep -v"sshd.service|crond.service|sysstat|rsyslog|^NetworkManager.service|irqbalance.service"|awk'{print "systemctl disable",$1}'|bash

systemctl list-unit-files |grepenable

#保留服務(wù):

sshd|crond|sysstat|rsyslog|NetworkManager|irqbalance

*****企業(yè)生產(chǎn)最小化原則:

*****1铃在、安裝軟件包最小化。

*****2碍遍、用戶權(quán)限最小化定铜。

*****3、目錄文件權(quán)限最小化怕敬。

*****4揣炕、自啟動(dòng)服務(wù)最小化。

*****5东跪、服務(wù)運(yùn)行用戶最小化畸陡。

克隆三臺(tái):

B1-web服務(wù)器1?? ??? 10.0.0.7/24 ??? 172.16.1.7/16? web01

C1-NFS存儲(chǔ)服務(wù)器?? 10.0.0.31/24 172.16.1.31/16? nfs01

C2-rsync備份服務(wù)器? 10.0.0.41/24 172.16.1.41/16? backup

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市虽填,隨后出現(xiàn)的幾起案子丁恭,更是在濱河造成了極大的恐慌,老刑警劉巖卤唉,帶你破解...
    沈念sama閱讀 211,743評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件涩惑,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡桑驱,警方通過查閱死者的電腦和手機(jī)竭恬,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,296評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門跛蛋,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人痊硕,你說我怎么就攤上這事赊级。” “怎么了岔绸?”我有些...
    開封第一講書人閱讀 157,285評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵理逊,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我盒揉,道長(zhǎng)晋被,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,485評(píng)論 1 283
  • 正文 為了忘掉前任刚盈,我火速辦了婚禮羡洛,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘藕漱。我一直安慰自己欲侮,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,581評(píng)論 6 386
  • 文/花漫 我一把揭開白布肋联。 她就那樣靜靜地躺著威蕉,像睡著了一般。 火紅的嫁衣襯著肌膚如雪橄仍。 梳的紋絲不亂的頭發(fā)上韧涨,一...
    開封第一講書人閱讀 49,821評(píng)論 1 290
  • 那天,我揣著相機(jī)與錄音沙兰,去河邊找鬼氓奈。 笑死,一個(gè)胖子當(dāng)著我的面吹牛鼎天,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播暑竟,決...
    沈念sama閱讀 38,960評(píng)論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼斋射,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了但荤?” 一聲冷哼從身側(cè)響起罗岖,我...
    開封第一講書人閱讀 37,719評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎腹躁,沒想到半個(gè)月后桑包,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,186評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡纺非,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,516評(píng)論 2 327
  • 正文 我和宋清朗相戀三年哑了,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了赘方。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,650評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡弱左,死狀恐怖窄陡,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情拆火,我是刑警寧澤跳夭,帶...
    沈念sama閱讀 34,329評(píng)論 4 330
  • 正文 年R本政府宣布,位于F島的核電站们镜,受9級(jí)特大地震影響币叹,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜模狭,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,936評(píng)論 3 313
  • 文/蒙蒙 一颈抚、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧胞皱,春花似錦邪意、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,757評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至宴树,卻和暖如春策菜,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背酒贬。 一陣腳步聲響...
    開封第一講書人閱讀 31,991評(píng)論 1 266
  • 我被黑心中介騙來泰國打工又憨, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人锭吨。 一個(gè)月前我還...
    沈念sama閱讀 46,370評(píng)論 2 360
  • 正文 我出身青樓蠢莺,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國和親零如。 傳聞我的和親對(duì)象是個(gè)殘疾皇子躏将,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,527評(píng)論 2 349

推薦閱讀更多精彩內(nèi)容

  • 思想 1、什么是集群考蕾? 簡(jiǎn)單地說祸憋,集群就是一堆機(jī)器做同一件事, 例如:www.jd.com提供賣東西服務(wù)這就是一件...
    喂00閱讀 205評(píng)論 0 0
  • 作者:馬帥琦 歸檔:day31 時(shí)間:2019/4/12 1肖卧、什么是集群蚯窥? 簡(jiǎn)單地說,集群就是一堆機(jī)器做同一件事,...
    馬帥琦閱讀 240評(píng)論 0 0
  • 1拦赠、什么是集群巍沙? 簡(jiǎn)單地說,集群就是一堆機(jī)器做同一件事矛紫, 例如:www.jd.com提供賣東西服務(wù)這就是一件事赎瞎,可...
    山有木兮_8adb閱讀 200評(píng)論 0 0
  • 集靈臺(tái) 作者:張祜 虢國夫人承主恩,平明騎馬入宮門颊咬。 卻嫌脂粉污顏色务甥,淡掃蛾眉朝至尊。 小禾個(gè)見: 這是一首很獨(dú)特...
    驀山磎閱讀 266評(píng)論 0 1
  • 【原文】 四曰:春氣至則草木產(chǎn)喳篇,秋氣至則草木落敞临。產(chǎn)與落,或使之麸澜,非自然也挺尿。故使之者至,物無不為炊邦;使之者不至...
    錢江潮369閱讀 1,685評(píng)論 2 19