Huginn 淺嘗——通過 Rss 看小說

傳說有兩個(gè)烏鴉淑掌,名為 Huginn 和 Muninn蒿讥,它們被視為奧丁的左肩右臂。奧丁在黎明時(shí)送出 Huginn 和 Muninn 抛腕,它們飛到世界各地诈悍,然后在晚餐時(shí)間回來,告訴奧丁它們看到和聽到的一切兽埃,奧丁則賜予它們食物作為報(bào)酬∈释啵—— Huginn 命名的由來

Huginn

Huginn

不記得什么時(shí)候 Star 的了柄错,只記得當(dāng)時(shí)看 README 很厲害的樣子,類似一個(gè)個(gè)人監(jiān)控助理類的軟件。大概就是一個(gè)加強(qiáng)版的 IFTTT售貌,可以監(jiān)控各種信息给猾,然后通知你。比起即刻App可訂制化更高點(diǎn)颂跨,需要的一些基本知識(shí)也更多些:Linux基本操作敢伸、CSS基本使用、Xpath基本使用恒削、JSON最基本知識(shí)……當(dāng)然比起自己寫爬蟲還是簡(jiǎn)單些池颈。

春節(jié)折騰了好久,主要麻煩在搭建钓丰,配置要求也比較高躯砰,至少要 0.5GB RAM + 0.5GB swap,但是在 VPS 上裝了很多次總是有各種各樣的問題(其實(shí)就是配置不夠)携丁,還是用 docker 省事琢歇,有域名的再隨便開個(gè) Nginx 轉(zhuǎn)發(fā)就好了。

Install Script

docker 安裝腳本

# Show commands executed
set -x

# Setup swap file so it works better on lower memory VMs
fallocate -l 4G /swapfile
chmod 600 /swapfile
mkswap /swapfile
swapon /swapfile
echo "/swapfile   none    swap    sw    0   0" >> /etc/fstab

sysctl vm.swappiness=10
echo "vm.swappiness=10" >> /etc/sysctl.conf

useradd -s/bin/bash -m huginn

# Run the huginn docker container on port 3000, map the MySQL data to the host machine in /home/huginn/mysql-data
# So the data is persisted across runs/updates (handy)
mkdir /tmp/docker-huginn/
cd /tmp/docker-huginn/
docker run -d -p 3000:3000 -v /home/huginn/mysql-data:/var/lib/mysql cantino/huginn

Nginx 配置

server {
        listen 0.0.0.0:80;
        listen [::]:80 ipv6only=on;
        server_name huginn.yourdomain.com;;
        server_tokens off;

        access_log  /var/log/nginx/huginn-access.log;
        error_log   /var/log/nginx/huginn-error.log;

        add_header Strict-Transport-Security max-age=63072000;
        add_header X-Frame-Options DENY;
        add_header X-Content-Type-Options nosniff;

        gzip on;

        rewrite_log on;

        # use the application's 500.html page
        error_page 500 502 503 504 /500.html;

        # allow clients to upload large files (if necessary)
        client_max_body_size 4G;

        location / {
                proxy_pass        http://XXX.XXX.XXX.XXX:3000;
                proxy_redirect    off;

                proxy_set_header  Host                $http_host;
                proxy_set_header  X-Real-IP           $remote_addr;
                proxy_set_header  X-Forwarded-Ssl     on;
                proxy_set_header  X-Forwarded-For     $proxy_add_x_forwarded_for;
                proxy_set_header  X-Forwarded-Proto   $scheme;
                proxy_set_header  X-Frame-Options     SAMEORIGIN;

                client_max_body_size        100m;
                client_body_buffer_size     128k;

                proxy_buffer_size           4k;
                proxy_buffers               4 32k;
                proxy_busy_buffers_size     64k;
                proxy_temp_file_write_size  64k;
        }

        add_header Strict-Transport-Security max-age=2592000;
}

利用 Huginn 為小說生成 Rss

抓取的筆趣閣的梦鉴,手機(jī)版格式簡(jiǎn)單點(diǎn)李茫,更好設(shè)置 Web Agent 一些。

My Scenario

終于沒有迷人的小廣告了肥橙,不過用 Feedly 有些延時(shí)魄宏。

Twitter,商品價(jià)格監(jiān)控什么的有空在研究吧快骗。

嘗鮮

雖然自用第三方平臺(tái)上總是有各種限制娜庇,但是作為嘗鮮還是很不錯(cuò)的選擇。
如果你對(duì) Huginn 有興趣方篮,不妨可以先到我在櫻花 docker 開的 Huginn 上試試名秀。
當(dāng)然熟人我也可以在自用的上面給你多開一個(gè)帳號(hào)。

Reference

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末藕溅,一起剝皮案震驚了整個(gè)濱河市匕得,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌巾表,老刑警劉巖汁掠,帶你破解...
    沈念sama閱讀 223,002評(píng)論 6 519
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異集币,居然都是意外死亡考阱,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,357評(píng)論 3 400
  • 文/潘曉璐 我一進(jìn)店門鞠苟,熙熙樓的掌柜王于貴愁眉苦臉地迎上來乞榨,“玉大人秽之,你說我怎么就攤上這事〕约龋” “怎么了考榨?”我有些...
    開封第一講書人閱讀 169,787評(píng)論 0 365
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)鹦倚。 經(jīng)常有香客問我河质,道長(zhǎng),這世上最難降的妖魔是什么震叙? 我笑而不...
    開封第一講書人閱讀 60,237評(píng)論 1 300
  • 正文 為了忘掉前任掀鹅,我火速辦了婚禮,結(jié)果婚禮上捐友,老公的妹妹穿的比我還像新娘淫半。我一直安慰自己,他們只是感情好匣砖,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,237評(píng)論 6 398
  • 文/花漫 我一把揭開白布科吭。 她就那樣靜靜地躺著,像睡著了一般猴鲫。 火紅的嫁衣襯著肌膚如雪对人。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,821評(píng)論 1 314
  • 那天拂共,我揣著相機(jī)與錄音牺弄,去河邊找鬼。 笑死宜狐,一個(gè)胖子當(dāng)著我的面吹牛势告,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播抚恒,決...
    沈念sama閱讀 41,236評(píng)論 3 424
  • 文/蒼蘭香墨 我猛地睜開眼咱台,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了俭驮?” 一聲冷哼從身側(cè)響起回溺,我...
    開封第一講書人閱讀 40,196評(píng)論 0 277
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎混萝,沒想到半個(gè)月后遗遵,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,716評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡逸嘀,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,794評(píng)論 3 343
  • 正文 我和宋清朗相戀三年车要,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片崭倘。...
    茶點(diǎn)故事閱讀 40,928評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡翼岁,死狀恐怖维哈,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情登澜,我是刑警寧澤,帶...
    沈念sama閱讀 36,583評(píng)論 5 351
  • 正文 年R本政府宣布飘庄,位于F島的核電站脑蠕,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏跪削。R本人自食惡果不足惜谴仙,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,264評(píng)論 3 336
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望碾盐。 院中可真熱鬧晃跺,春花似錦、人聲如沸毫玖。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,755評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽付枫。三九已至烹玉,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間阐滩,已是汗流浹背二打。 一陣腳步聲響...
    開封第一講書人閱讀 33,869評(píng)論 1 274
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留掂榔,地道東北人继效。 一個(gè)月前我還...
    沈念sama閱讀 49,378評(píng)論 3 379
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像装获,于是被迫代替她去往敵國(guó)和親瑞信。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,937評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容

  • Docker — 云時(shí)代的程序分發(fā)方式 要說最近一年云計(jì)算業(yè)界有什么大事件饱溢?Google Compute Engi...
    ahohoho閱讀 15,548評(píng)論 15 147
  • Docker從2013年發(fā)布第一個(gè)版本以來喧伞,已經(jīng)火遍全球,技術(shù)迭代也比較頻繁绩郎,其周邊產(chǎn)品和技術(shù)也越來越豐富潘鲫。Doc...
    歸海聽雪閱讀 12,287評(píng)論 7 44
  • 以下原文轉(zhuǎn)載于(https://docs.docker.com/docker-for-mac/)(想找中文版的最新...
    Veekend閱讀 7,580評(píng)論 0 17
  • 文|空修 你從北方來 帶著冬雪,堅(jiān)強(qiáng)如鐵 要到南方去 看看秋雨肋杖,渺渺似弦 你身披舊時(shí)的月光 從此帶上了惆悵 你撫過...
    空修閱讀 179評(píng)論 2 9
  • 過節(jié)了溉仑,今天全程陪孩子一天,好不容易啊状植。孩子今天的表現(xiàn)棒棒的浊竟, 謝謝怨喘,謝謝上天賜給我這么活潑聰明伶俐的你,我的小寶...
    elephon閱讀 232評(píng)論 1 1