2019-04-12 Day31 中小規(guī)模集群架構(gòu)

Day31

作者:方維超

歸檔:課堂筆記

時(shí)間:2019/4/12

老男孩教育教學(xué)核心思想6重:重目標(biāo)梧税、重思路占业、重方法、重實(shí)踐赦肋、重習(xí)慣块攒、重總結(jié)

學(xué)無(wú)止境,老男孩教育成就你人生的起點(diǎn)佃乘!

一囱井、中小規(guī)模集群架構(gòu)

1、什么是集群

簡(jiǎn)單地說就是一堆機(jī)器做同一件事恕稠。

例如:
www.jd.com提供賣東西服務(wù)這就是一件事琅绅,可能是幾千臺(tái)服務(wù)器在背后運(yùn)轉(zhuǎn)支撐這個(gè)網(wǎng)站運(yùn)行。
www.bai.com看著就是一個(gè)搜索框鹅巍,背后可能就是上萬(wàn)臺(tái)服務(wù)器在運(yùn)行千扶。

2料祠、為什么企業(yè)要用集群

a. 讓業(yè)務(wù)7×24小時(shí)服務(wù),需要多臺(tái)機(jī)器同時(shí)工作澎羞,能夠互為備份髓绽,并且是實(shí)時(shí)備份。
b.高并發(fā)的訪問妆绞,需要多臺(tái)服務(wù)器同時(shí)提供服務(wù)顺呕。

3、集群的特點(diǎn)

a. 數(shù)據(jù)量大括饶、用戶多(獨(dú)行快株茶、眾行遠(yuǎn))
b.持續(xù)服務(wù)7×24
c. 高并發(fā)、大流量
d.用戶分布廣泛图焰、網(wǎng)絡(luò)情況復(fù)雜

4启盛、形象描述集群

image.png
image.png

自己手動(dòng)畫圖 visio圖庫(kù)工具

手把手帶你快速做【最專業(yè)】的項(xiàng)目文檔實(shí)戰(zhàn) http://edu.51cto.com/course/course_id-4992.html
手把手帶你快速畫【最專業(yè)】的邏輯架構(gòu)圖實(shí)戰(zhàn) http://edu.51cto.com/course/course_id-4991.html

image.png
image.png
image.png
image.png

搭載順序

image.png
image.png
image.png

啟動(dòng)模板機(jī)時(shí)報(bào)錯(cuò):


image.png

解決辦法:
https://blog.csdn.net/Angelloverbest/article/details/77825105

給虛擬機(jī)添加一塊網(wǎng)卡 命名eth1


image.png
image.png
image.png
image.png
image.png

改完后輸入重啟網(wǎng)卡命令 systemctl restart network或者命令直接復(fù)制eth0修改

基礎(chǔ)優(yōu)化:

1、規(guī)范目錄

mkdir -p /server/tools
mkdir -p /server/scripts

2技羔、配置所有主機(jī)域名解析

cat >/etc/hosts<<EOF
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
172.16.1.5 lb01
172.16.1.6 lb02
172.16.1.7 web01
172.16.1.8 web02
172.16.1.9 web03
172.16.1.31 nfs01
172.16.1.41 backup
172.16.1.51 db01 db01.etiantian.org
172.16.1.61 m01
EOF

[root@oldboyedu ~]# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
172.16.1.5 lb01
172.16.1.6 lb02
172.16.1.7 web01
172.16.1.8 web02
172.16.1.9 web03
172.16.1.31 nfs01
172.16.1.41 backup
172.16.1.51 db01 db01.etiantian.org
172.16.1.61 m01

[root@oldboyedu ~]# ping lb01
PING lb01 (172.16.1.5) 56(84) bytes of data.

3僵闯、基礎(chǔ)優(yōu)化操作項(xiàng):更新yum源


image.png

第一個(gè):就近使用yum源地址,安裝軟件更快藤滥。
curl -s -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
第二個(gè):安裝RHEL/CentOS官方源不提供的軟件包鳖粟。
curl -s -o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo

image.png

4、安全優(yōu)化

1拙绊、關(guān)閉selinux
sed -i 's#SELINUX=.*#SELINUX=disabled#g' /etc/selinux/config
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
grep SELINUX=disabled /etc/selinux/config
setenforce 0
getenforce

2向图、關(guān)閉防火墻
systemctl stop firewalld #<===關(guān)閉firewalld防火墻
systemctl disable firewalld #<===禁止firewalld防火墻開機(jī)自啟動(dòng)
systemctl status firewalld #<===查看關(guān)閉狀態(tài)

image.png

5、基礎(chǔ)優(yōu)化操作:設(shè)置普通用戶提權(quán)操作
對(duì)于系統(tǒng)運(yùn)維工作中时呀,一些普通用戶需要分擔(dān)超級(jí)管理員root的工作壓力张漂,因此需要將相應(yīng)的root權(quán)限進(jìn)行下放,所以要將相應(yīng)普通用戶進(jìn)行提權(quán)谨娜。

提權(quán)oldboy可以利用sudo

useradd oldboy
echo 123456|passwd --stdin oldboy
\cp /etc/sudoers /etc/sudoers.ori
echo "oldboy ALL=(ALL) NOPASSWD: ALL " >>/etc/sudoers
tail -1 /etc/sudoers
visudo -c

6.基礎(chǔ)優(yōu)化操作項(xiàng):設(shè)置系統(tǒng)字符集

設(shè)置系統(tǒng)中文UTF8字符集

[root@oldboyedu ~]# cat /etc/locale.conf
LANG="en_US.UTF-8"

修改命令如下:
第一種:
cp /etc/locale.conf /etc/locale.conf.ori
echo 'LANG="zh_CN.UTF-8"' >/etc/locale.conf
source /etc/locale.conf
echo $LANG
第二種:
cp /etc/locale.conf /etc/locale.conf.ori
localectl set-locale LANG="zh_CN.UTF-8"
cat /etc/locale.conf

7航攒、基礎(chǔ)優(yōu)化操作:設(shè)置時(shí)間同步


image.png

設(shè)置系統(tǒng)時(shí)間同步

yum install ntpdate -y
/usr/sbin/ntpdate ntp3.aliyun.com
echo '#crond-id-001:time sync by oldboy' >>/var/spool/cron/root
echo "*/5 * * * * /usr/sbin/ntpdate ntp3.aliyun.com >/dev/null 2>&1">>/var/spool/cron/root
crontab -l

8、基礎(chǔ)優(yōu)化操作項(xiàng):提升命令行操作完全性(可選優(yōu)化)**

提升命令行安全(可選配置)

echo 'export TMOUT=300' >>/etc/profile
echo 'export HISTSIZE=5' >>/etc/profile
echo 'export HISTFILESIZE=5' >>/etc/profile
tail -3 /etc/profile
. /etc/profile

history 查詢操作記錄
-c 清除所有
-d指定數(shù)字刪除操作記錄

9趴梢、基礎(chǔ)優(yōu)化操作項(xiàng):加大文件描述符
一般情況下漠畜,一臺(tái)服務(wù)器被訪問時(shí),會(huì)啟動(dòng)很多的程序坞靶,而啟動(dòng)每一個(gè)程序都會(huì)占用文件服務(wù)器描述符的大小憔狞,因此有時(shí)需要加大文件描述符的大小,從而不影響到程序的啟動(dòng)彰阴。

image.png

實(shí)例演示:加大文件描述

echo '* - nofile 65535 ' >>/etc/security/limits.conf
tail -1 /etc/security/limits.conf
ulimit -SHn 65535
ulimit -n #<==命令方式查看配置結(jié)果

10.基礎(chǔ)優(yōu)化操作項(xiàng):優(yōu)化系統(tǒng)內(nèi)核

cat >>/etc/sysctl.conf<<EOF
net.ipv4.tcp_fin_timeout = 2
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_keepalive_time = 600
net.ipv4.ip_local_port_range = 4000 65000
net.ipv4.tcp_max_syn_backlog = 16384
net.ipv4.tcp_max_tw_buckets = 36000
net.ipv4.route.gc_timeout = 100
net.ipv4.tcp_syn_retries = 1
net.ipv4.tcp_synack_retries = 1
net.core.somaxconn = 16384
net.core.netdev_max_backlog = 16384
net.ipv4.tcp_max_orphans = 16384

以下參數(shù)是對(duì)iptables防火墻的優(yōu)化瘾敢,防火墻不開會(huì)提示,可以忽略不理。 net.nf_conntrack_max = 25000000

net.netfilter.nf_conntrack_max = 25000000
net.netfilter.nf_conntrack_tcp_timeout_established = 180
net.netfilter.nf_conntrack_tcp_timeout_time_wait = 120
net.netfilter.nf_conntrack_tcp_timeout_close_wait = 60
net.netfilter.nf_conntrack_tcp_timeout_fin_wait = 120
net.core.wmem_default = 8388608
net.core.rmem_default = 8388608
net.core.wmem_max = 16777216
net.core.rmem_max = 16777216
EOF
sysctl -p

11.基礎(chǔ)優(yōu)化操作項(xiàng):安裝系統(tǒng)常用軟件*

image.png

CentOS6和CentOS7都要安裝的企業(yè)運(yùn)維常用基礎(chǔ)工具包
yum install tree nmap dos2unix lrzsz nc lsof wget tcpdump htop iftop iotop sysstat nethogs -y

CentOS7要安裝的企業(yè)運(yùn)維常用基礎(chǔ)工具包
yum install psmisc net-tools bash-completion vim-enhanced -y

12.基礎(chǔ)優(yōu)化操作項(xiàng):優(yōu)化SSH遠(yuǎn)程連接效率

禁止root遠(yuǎn)程連接
修改默認(rèn)22端口簇抵,改為52113
監(jiān)聽內(nèi)網(wǎng)服務(wù)器IP

練習(xí)中先不要?jiǎng)?

13.擴(kuò)展優(yōu)化操作項(xiàng)-修改yum.conf文件配置信息

保留yum安裝的軟件包庆杜,將/etc/yum.conf中的keepcache=0改為keepcache=1,為日后一鍵安裝網(wǎng)站集群留好rpm及依賴工具包碟摆。

14.鎖定關(guān)鍵系統(tǒng)文件

如/etc/passwd晃财、/etc/shadow、/etc/group典蜕、/etc/gshadow断盛、/etc/inittab,
處理以上內(nèi)容后把chattr愉舔、lsattr改名為oldboy钢猛,轉(zhuǎn)移走,這樣就安全多了屑宠。

15.清空/etc/issue厢洞、/etc/issue.net仇让,去除系統(tǒng)及內(nèi)核版本登錄前的屏幕顯示典奉。

16.清除多余的系統(tǒng)虛擬用戶賬號(hào)。

17.為grub引導(dǎo)菜單加密碼(自學(xué))丧叽。

18.禁止主機(jī)被ping(內(nèi)核參數(shù))卫玖。

19.打補(bǔ)丁并升級(jí)有已知漏洞的軟件。

yum update

20踊淳、精簡(jiǎn)開機(jī)自啟動(dòng)服務(wù)

systemctl list-unit-files |grep enable|egrep -v "sshd.service|crond.service|sysstat|rsyslog|^NetworkManager.service|irqbalance.service"|awk '{print "systemctl disable",$1}'|bash

systemctl list-unit-files |grep enable

保留服務(wù):

sshd|crond|sysstat|rsyslog|NetworkManager|irqbalance

企業(yè)生產(chǎn)最小化原則:

1假瞬、安裝軟件包最小化

2、用戶權(quán)限最小化 visudo

3迂尝、目錄文件權(quán)限最小化

4脱茉、自啟動(dòng)服務(wù)最小化

5、服務(wù)運(yùn)行用戶最小化

查看服務(wù)端口
[root@oldboyedu ~]# netstat -lntup
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name
tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 7072/sshd
tcp6 0 0 :::22 :::* LISTEN 7072/sshd

克隆三臺(tái)主機(jī)

B1-web服務(wù)器1 10.0.0.7/24 172.16.1.7/16 web01
C1-NFS存儲(chǔ)服務(wù)器 10.0.0.31/24 172.16.1.31/16 nfs01
C2-rsync備份服務(wù)器 10.0.0.41/24 172.16.1.41/16 backup

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末垄开,一起剝皮案震驚了整個(gè)濱河市琴许,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌溉躲,老刑警劉巖榜田,帶你破解...
    沈念sama閱讀 219,110評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異锻梳,居然都是意外死亡箭券,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,443評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門疑枯,熙熙樓的掌柜王于貴愁眉苦臉地迎上來辩块,“玉大人,你說我怎么就攤上這事》贤ぃ” “怎么了古今?”我有些...
    開封第一講書人閱讀 165,474評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)滔以。 經(jīng)常有香客問我捉腥,道長(zhǎng),這世上最難降的妖魔是什么你画? 我笑而不...
    開封第一講書人閱讀 58,881評(píng)論 1 295
  • 正文 為了忘掉前任抵碟,我火速辦了婚禮,結(jié)果婚禮上坏匪,老公的妹妹穿的比我還像新娘拟逮。我一直安慰自己,他們只是感情好适滓,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,902評(píng)論 6 392
  • 文/花漫 我一把揭開白布敦迄。 她就那樣靜靜地躺著,像睡著了一般凭迹。 火紅的嫁衣襯著肌膚如雪罚屋。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,698評(píng)論 1 305
  • 那天嗅绸,我揣著相機(jī)與錄音脾猛,去河邊找鬼。 笑死鱼鸠,一個(gè)胖子當(dāng)著我的面吹牛猛拴,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播蚀狰,決...
    沈念sama閱讀 40,418評(píng)論 3 419
  • 文/蒼蘭香墨 我猛地睜開眼愉昆,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了麻蹋?” 一聲冷哼從身側(cè)響起跛溉,我...
    開封第一講書人閱讀 39,332評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎哥蔚,沒想到半個(gè)月后倒谷,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,796評(píng)論 1 316
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡糙箍,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,968評(píng)論 3 337
  • 正文 我和宋清朗相戀三年渤愁,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片深夯。...
    茶點(diǎn)故事閱讀 40,110評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡抖格,死狀恐怖诺苹,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情雹拄,我是刑警寧澤收奔,帶...
    沈念sama閱讀 35,792評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站滓玖,受9級(jí)特大地震影響坪哄,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜势篡,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,455評(píng)論 3 331
  • 文/蒙蒙 一翩肌、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧禁悠,春花似錦念祭、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,003評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至瓷产,卻和暖如春站玄,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背拦英。 一陣腳步聲響...
    開封第一講書人閱讀 33,130評(píng)論 1 272
  • 我被黑心中介騙來泰國(guó)打工蜒什, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人疤估。 一個(gè)月前我還...
    沈念sama閱讀 48,348評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像霎冯,于是被迫代替她去往敵國(guó)和親铃拇。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,047評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容