查找未被容器使用的docker鏡像

需求

項(xiàng)目通過(guò)docker容器化后领突,由于種種原因暖璧,項(xiàng)目部署后存在未被容器使用的鏡像,占用磁盤空間攘须。因此漆撞,需要查找未被容器使用的docker鏡像殴泰,并將它們從部署腳本中去除。項(xiàng)目中容器數(shù)量龐大浮驳,手工查詢費(fèi)時(shí)費(fèi)力且易出錯(cuò)悍汛,故尋求自動(dòng)化方式查找出未使用鏡像

分析

  • 最好能通過(guò)docker自身命令查找出未使用的容器。
    docker images --filter dangling=true能查找出untagged images,如下
REPOSITORY          TAG                 IMAGE ID            CREATED             VIRTUAL SIZE
<none>              <none>              8abc22fbb042        4 weeks ago         0 B

但實(shí)際項(xiàng)目中未使用的docker鏡像大多是有tag的至会,只是鏡像加載后沒有使用而已离咐。故通過(guò)docker images --filter dangling=true無(wú)法查找出全部未使用的鏡像

  • 自己寫腳本解決
    1.docker ps -a獲取所有容器信息,其中包含它們所使用的鏡像名稱
    2.對(duì)所有容器奉件,docker history container_id宵蛀,查找到它們的基礎(chǔ)鏡像(由于docker鏡像的分層復(fù)用特性,下層的基礎(chǔ)鏡像不會(huì)占用額外的空間县貌,故無(wú)需清理)
    3.對(duì)1/2中所有的鏡像取并集术陶,并去重
    4.docker images查找出所有鏡像,并排查3中得到的鏡像煤痕,便是未使用的鏡像

python腳本

find_unused_images.py

#!/usr/bin/env python
# -*- coding: utf-8 -*-
import os
import re

IMAGES_COMMAND = 'docker images'
PS_COMMAND = 'docker ps -a'
HISTORY = 'docker history %s'
RE = re.compile(r'\s+\s+')


def exec_command(command):
    result = os.popen(command)
    return result.readlines()


class Image(object):
    def __init__(self, image_info):
        self.split_info = RE.split(image_info)
        self.image_id = self.split_info[2]
        self._generate_image_name()
        self.size = self.split_info[-1]

    def _generate_image_name(self):
        tag = self.split_info[1]
        repo = self.split_info[0]
        self.name = repo if tag == 'latest' else repo + ':' + tag

    def get_related_images(self):
        image_ids = [RE.split(history)[0] for history in exec_command(HISTORY % self.image_id)[1:] if
                     RE.split(history)[0] != '<missing>']
        return filter(None, [ImageUtil.get_image_by_id(image_id) for image_id in image_ids])

    def __repr__(self):
        return 'id:%s name:%s size:%s' % (self.image_id, self.name, self.size)

    def __hash__(self):
        return hash(self.image_id)

    def __eq__(self, other):
        return self.image_id == other.image_id

    def __ne__(self, other):
        return not self.__eq__(other)


class ImageUtil(object):
    all_images = [Image(image_info) for image_info in exec_command(IMAGES_COMMAND)[1:]]

    @classmethod
    def get_image_by_id(cls, image_id):
        try:
            return filter(lambda img: img.image_id == image_id, cls.all_images)[0]
        except IndexError:
            return ''

    @classmethod
    def get_image_by_name(cls, name):
        try:
            return filter(lambda img: img.name == name, cls.all_images)[0]
        except IndexError:
            return ''


class Container(object):
    def __init__(self, container_info):
        self.split_info = RE.split(container_info)
        image_name = self.split_info[1]
        self.image = ImageUtil.get_image_by_name(image_name)


class ContainerUtil(object):
    all_containers = [Container(container_info) for container_info in exec_command(PS_COMMAND)[1:]]

    @classmethod
    def get_used_images(cls):
        used_images = [container.image for container in cls.all_containers if container.image]
        related_images = []
        for used_image in used_images:
            related_images.extend(used_image.get_related_images())
        used_images.extend(related_images)
        return used_images


if __name__ == '__main__':
    all_images = ImageUtil.all_images
    images_used_by_container = ContainerUtil.get_used_images()
    unused_images = set(all_images) - set(images_used_by_container)
    print('unused images')
    for image in unused_images:
        print(image)

依賴

  • python2.7(python3.x略作修改也可使用)
  • root用戶

用法

將find_unused_images.py腳本放至任意目錄梧宫,執(zhí)行

python find_unused_images.py

便可打印出所有未使用的鏡像以及它們的大小

unused images
id:e111a70eee6a name:celery size:216MB
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市摆碉,隨后出現(xiàn)的幾起案子塘匣,更是在濱河造成了極大的恐慌,老刑警劉巖巷帝,帶你破解...
    沈念sama閱讀 218,546評(píng)論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件忌卤,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡楞泼,警方通過(guò)查閱死者的電腦和手機(jī)驰徊,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,224評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)现拒,“玉大人辣垒,你說(shuō)我怎么就攤上這事∮∈撸” “怎么了?”我有些...
    開封第一講書人閱讀 164,911評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵脱衙,是天一觀的道長(zhǎng)侥猬。 經(jīng)常有香客問(wèn)我,道長(zhǎng)捐韩,這世上最難降的妖魔是什么退唠? 我笑而不...
    開封第一講書人閱讀 58,737評(píng)論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮荤胁,結(jié)果婚禮上瞧预,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好垢油,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,753評(píng)論 6 392
  • 文/花漫 我一把揭開白布盆驹。 她就那樣靜靜地躺著,像睡著了一般滩愁。 火紅的嫁衣襯著肌膚如雪躯喇。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,598評(píng)論 1 305
  • 那天硝枉,我揣著相機(jī)與錄音廉丽,去河邊找鬼。 笑死妻味,一個(gè)胖子當(dāng)著我的面吹牛正压,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播责球,決...
    沈念sama閱讀 40,338評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼蔑匣,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了棕诵?” 一聲冷哼從身側(cè)響起裁良,我...
    開封第一講書人閱讀 39,249評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎校套,沒想到半個(gè)月后价脾,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,696評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡笛匙,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,888評(píng)論 3 336
  • 正文 我和宋清朗相戀三年侨把,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片妹孙。...
    茶點(diǎn)故事閱讀 40,013評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡秋柄,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出蠢正,到底是詐尸還是另有隱情骇笔,我是刑警寧澤,帶...
    沈念sama閱讀 35,731評(píng)論 5 346
  • 正文 年R本政府宣布嚣崭,位于F島的核電站笨触,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏雹舀。R本人自食惡果不足惜芦劣,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,348評(píng)論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望说榆。 院中可真熱鬧虚吟,春花似錦寸认、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,929評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至模庐,卻和暖如春烛愧,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背掂碱。 一陣腳步聲響...
    開封第一講書人閱讀 33,048評(píng)論 1 270
  • 我被黑心中介騙來(lái)泰國(guó)打工怜姿, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人疼燥。 一個(gè)月前我還...
    沈念sama閱讀 48,203評(píng)論 3 370
  • 正文 我出身青樓沧卢,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親醉者。 傳聞我的和親對(duì)象是個(gè)殘疾皇子但狭,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,960評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • docker基本概念 1. Image Definition 鏡像 Image 就是一堆只讀層 read-only...
    慢清塵閱讀 8,750評(píng)論 1 21
  • Docker — 云時(shí)代的程序分發(fā)方式 要說(shuō)最近一年云計(jì)算業(yè)界有什么大事件?Google Compute Engi...
    ahohoho閱讀 15,534評(píng)論 15 147
  • 一撬即、Docker 簡(jiǎn)介 Docker 兩個(gè)主要部件:Docker: 開源的容器虛擬化平臺(tái)Docker Hub: 用...
    R_X閱讀 4,388評(píng)論 0 27
  • 四月中旬剥槐,彪哥要來(lái)大連看我唱歧,我乘輕軌去機(jī)場(chǎng)接他。途中粒竖,軌道兩旁大串大串粉嫩的碧桃颅崩、淡雅亮黃的迎春花著實(shí)驚艷了我一把...
    卡卡陽(yáng)閱讀 639評(píng)論 2 4
  • 今晚想分享一些情緒對(duì)身體的害處,包括精神層面和身體層面的蕊苗。 因?yàn)樽约菏亲鲳B(yǎng)生的沿后,也熱愛中醫(yī)喜歡研究這些東西,今晚跟...
    小喬是唐寶娘親閱讀 213評(píng)論 0 2