telegram采集注意點-python3實現(xiàn)

首先需要有一個telegram賬號,

可以使用虛擬手機號注冊:textnow或者gv

準備環(huán)境:

目前是python37册赛,

# 安裝 Telethon 包
pip install Telethon

編寫登錄代碼:

from telethon import TelegramClient, utils, errors
from telethon.sessions import StringSession
import asyncio

“”“
api_id椭岩,和hash绕娘,需要去
 https://my.telegram.org/auth?to=apps
上面注冊一個app委可,注冊一次即可映皆,不需要每一個賬號都注冊,

id和hash是表示是什么軟件接入telegram服務器的凉敲,可以在官方提供的app中提取邪媳,畢竟源碼是開源的,
”“”
api_id =""
api_hash=""
phone =""
password = "" # 二次驗證的密碼荡陷,如果沒有,為空即可
"""
PROXY_TYPE_SOCKS4 = SOCKS4 = 1
PROXY_TYPE_SOCKS5 = SOCKS5 = 2
PROXY_TYPE_HTTP = HTTP = 3
"""
# 目前我使用的是socket5 的代理
p = (2, "127.0.0.1", 1080)
# 如果是多線程采集的情況下迅涮,需要指定事件循環(huán)废赞,在單線程的情況,可以不要loop參數(shù)
loop = asyncio.new_event_loop()
“”“
登錄 session,這里有兩個選擇叮姑,
一個是.session 文件唉地,這種保存session的方式,不是很推薦传透,在后面機器部署的時候耘沼,需要同步每一個賬號的session,文件朱盐,這種只需要指定一個文件的路徑即可群嗤,例如:/home/xxx.session,

另外一個是將session,保存成一個字符串兵琳,這樣可以在數(shù)據(jù)庫中保存狂秘,例如,
需要導入session包
from telethon.sessions import StringSession

StringSession("xxx")

”“

session = StringSession("xxx")
client = TelegramClient(session, api_id, api_hash,
                                        proxy=p, loop=loop,
                                        auto_reconnect=True,
                         )
client.start(phone=phone, password=password)
print(client.get_me())
## 如何保存session 字符串數(shù)據(jù)了躯肌?
# 需要登錄后的賬號者春,然后執(zhí)行下面的命令,便可以把session的token保存為字符串
print(StringSession.save(client.session))
# 使用監(jiān)聽的方式 采集消息
from telethon import TelegramClient, events
# 登錄代碼同上

client.add_event_handler(callback=msg_event_handler,
                                      event=events.NewMessage(incoming=True))


async def msg_event_handler( event: events.NewMessage.Event):
        message = event.message
                # 判斷是否是群組或者頻道發(fā)送的消息       
        if event.is_channel or event.is_group:
                    ## 獲取消息的id清女,
                if isinstance(message.to_id, types.PeerChannel):
                    to_id = message.to_id.channel_id
                else:
                    to_id = message.to_id.chat_id
               ## 自定義處理

# 使用api的方式查詢聊天記錄

username = "群組|頻道 的username或者id"
min_id = 0 # 開啟的消息id
limit =1000 # 檢索的消息數(shù)量
“”“
telegram使用的是群組|頻道+ 消息id來標示唯一消息的钱烟,而且消息id是從1-無窮的
”“”

messages = client.iter_messages(username, min_id=min_id, reverse=True, limit=limit)
        # 進行消息處理
async for message in messages:
    print(message)

    
# 例子:
async def dow():
    dialog = await client.get_entity("fordarknetspiderbot")
    old = datetime.datetime.now()
    zero_today = old - datetime.timedelta(days=0, hours=old.hour, minutes=old.minute, seconds=old.second,
                                          microseconds=old.microsecond)
    async for msg in client.iter_messages(dialog, min_id=2110, offset_date=zero_today, reverse=True):
        # user = await client.get_entity(msg.from_id)
        print(" 時間:{} id:{}  消息:{},   ".format(
            (msg.date + datetime.timedelta(hours=8)).strftime("%Y-%m-%d %H:%M:%S"), msg.id, msg.message))
    now = datetime.datetime.now()
    t = now - old
    print(t)


client.loop.run_until_complete(dow())

總結:一般來說監(jiān)聽的方式比查詢api的方式要快,而且要好拴袭,查詢api會被限流读第,目前我是兩個方式一起用的,因為有一些賬號被封了的時候稻扬,新賬號又不想去理會卦方,可以新開一個線程去輪訓服務器中的群組列表,我們只需要當前登錄的賬號中都沒有添加這些群組的群組泰佳,這樣子就不和監(jiān)聽的方式?jīng)_突了盼砍,

# 設置監(jiān)聽后,可以新開一個任務去輪訓群組逝她,
client.loop.create_task(task_Handler())
client.run_until_disconnected()
async def task_Handler():
  pass
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末浇坐,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子黔宛,更是在濱河造成了極大的恐慌近刘,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,348評論 6 491
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件臀晃,死亡現(xiàn)場離奇詭異觉渴,居然都是意外死亡,警方通過查閱死者的電腦和手機徽惋,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,122評論 2 385
  • 文/潘曉璐 我一進店門案淋,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人险绘,你說我怎么就攤上這事踢京。” “怎么了宦棺?”我有些...
    開封第一講書人閱讀 156,936評論 0 347
  • 文/不壞的土叔 我叫張陵瓣距,是天一觀的道長。 經(jīng)常有香客問我代咸,道長蹈丸,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,427評論 1 283
  • 正文 為了忘掉前任呐芥,我火速辦了婚禮白华,結果婚禮上,老公的妹妹穿的比我還像新娘贩耐。我一直安慰自己弧腥,他們只是感情好,可當我...
    茶點故事閱讀 65,467評論 6 385
  • 文/花漫 我一把揭開白布潮太。 她就那樣靜靜地躺著管搪,像睡著了一般虾攻。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上更鲁,一...
    開封第一講書人閱讀 49,785評論 1 290
  • 那天霎箍,我揣著相機與錄音,去河邊找鬼澡为。 笑死漂坏,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的媒至。 我是一名探鬼主播顶别,決...
    沈念sama閱讀 38,931評論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼拒啰!你這毒婦竟也來了驯绎?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,696評論 0 266
  • 序言:老撾萬榮一對情侶失蹤谋旦,失蹤者是張志新(化名)和其女友劉穎剩失,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體册着,經(jīng)...
    沈念sama閱讀 44,141評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡拴孤,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,483評論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了甲捏。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片乞巧。...
    茶點故事閱讀 38,625評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖摊鸡,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情蚕冬,我是刑警寧澤免猾,帶...
    沈念sama閱讀 34,291評論 4 329
  • 正文 年R本政府宣布,位于F島的核電站囤热,受9級特大地震影響猎提,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜旁蔼,卻給世界環(huán)境...
    茶點故事閱讀 39,892評論 3 312
  • 文/蒙蒙 一锨苏、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧棺聊,春花似錦伞租、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,741評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽裸弦。三九已至,卻和暖如春作喘,著一層夾襖步出監(jiān)牢的瞬間理疙,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,977評論 1 265
  • 我被黑心中介騙來泰國打工泞坦, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留窖贤,地道東北人。 一個月前我還...
    沈念sama閱讀 46,324評論 2 360
  • 正文 我出身青樓贰锁,卻偏偏與公主長得像赃梧,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子李根,可洞房花燭夜當晚...
    茶點故事閱讀 43,492評論 2 348