使用littleProxy實(shí)現(xiàn)網(wǎng)絡(luò)請求代理

背景

最近在項(xiàng)目測試,經(jīng)常出現(xiàn) qa 發(fā)現(xiàn)客戶端有 bug 后晃虫,由于沒有鏈接 charles 代理皆撩,無法定位是客戶端問題還是服務(wù)端問題。所以最近做了一款輕量的網(wǎng)絡(luò)請求抓取 應(yīng)用哲银,用于抓取網(wǎng)絡(luò)請求所有數(shù)據(jù)以及后續(xù)可實(shí)現(xiàn)請求數(shù)據(jù)的修改以及過濾扛吞。

實(shí)現(xiàn)方案

使用開源庫 littleProxy

使用

  • 在項(xiàng)目中添加依賴
 // littleproxy及其依賴
    implementation('net.lightbody.bmp:littleproxy:1.1.0-beta-bmp-17') {
        exclude group: 'io.netty'
    }
    implementation files('libs/netty-all-android-4.0.44.Final.jar')
  • 核心代碼
    啟動(dòng)代理類 CustomProxyServer.java
package e.lengku8e.myapplication.catchnet;

import org.littleshoot.proxy.HttpFilters;
import org.littleshoot.proxy.HttpFiltersSource;
import org.littleshoot.proxy.HttpProxyServer;
import org.littleshoot.proxy.HttpProxyServerBootstrap;
import org.littleshoot.proxy.impl.DefaultHttpProxyServer;

import java.util.ArrayList;

import io.netty.channel.ChannelHandlerContext;
import io.netty.handler.codec.http.HttpRequest;

public class CustomProxyServer {

    private static volatile CustomProxyServer mInstance;

    private CustomProxyServer() {
    }

    private HttpProxyServer httpProxyServer;

    public static CustomProxyServer getInstance() {
        if (mInstance == null) {
            synchronized (CustomProxyServer.class) {
                if (mInstance == null) {
                    mInstance = new CustomProxyServer();
                }
            }
        }
        return mInstance;
    }

    public ArrayList<MyResponse> responseArrayList = new ArrayList<>();

    public void start(int port) {
        try {
            HttpProxyServerBootstrap bootstrap = DefaultHttpProxyServer.bootstrap().withPort(port)
                    .withFiltersSource(new HttpFiltersSource() {
                        @Override
                        public HttpFilters filterRequest(HttpRequest originalRequest, ChannelHandlerContext channelHandlerContext) {
                            return new MyHttpFiltersAdapter(CustomProxyServer.this, originalRequest, channelHandlerContext, responseArrayList);
                        }

                        @Override
                        public int getMaximumRequestBufferSizeInBytes() {
                            return 20 * 1024 * 1024; // 每個(gè)網(wǎng)絡(luò)請求和響應(yīng)都是分次傳輸?shù)腂uf容量)
                        }

                        @Override
                        public int getMaximumResponseBufferSizeInBytes() {
                            return 20 * 1024 * 1024;
                        }
                    });
            httpProxyServer = bootstrap.start();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    public void stop() {
        if (httpProxyServer != null) {
            httpProxyServer.stop();
        }

    }
}

請求 filter adapter 類
MyHttpFiltersAdapter.java

public class MyHttpFiltersAdapter extends HttpFiltersAdapter {
 @Override
    public HttpObject proxyToClientResponse(HttpObject httpObject) {
        Log.d("MyHttpFiltersAdapter", "proxyToClientResponse");
        return super.proxyToClientResponse(httpObject);
    }

    @Override
    public HttpResponse proxyToServerRequest(HttpObject httpObject) {
        Log.d("MyHttpFiltersAdapter", "proxyToServerRequest");
        return super.proxyToServerRequest(httpObject);
    }
    @Override
    public HttpResponse clientToProxyRequest(HttpObject httpObject) {
        Log.d("MyHttpFiltersAdapter", "clientToProxyRequest");
        return null;
    }
    @Override
    public HttpObject serverToProxyResponse(HttpObject httpObject) {
        Log.d("MyHttpFiltersAdapter", "serverToProxyResponse");
        return httpObject;
}

這里只介紹下HttpFiltersAdapter的4個(gè)關(guān)鍵性函數(shù)的作用

  • clientToProxyRequest
    這個(gè)函數(shù)中可以獲取請求的uri以及header以及 post 中的參數(shù), 默認(rèn)返回null荆责,表示不攔截滥比,若返回?cái)?shù)據(jù),則不再走proxyToClientResponseserverToProxyResponse,這個(gè)函數(shù)中可以修改返回的數(shù)據(jù)
  • proxyToServerRequest
    這個(gè)函數(shù)和上邊的函數(shù)類似
  • serverToProxyResponse
    這里默認(rèn)返回傳入?yún)?shù)做院,這里可以對返回值做一定的修改
  • proxyToClientResponse
    這里默認(rèn)返回傳入?yún)?shù)盲泛,可以做一定的修改

發(fā)送一條網(wǎng)絡(luò)請求并接收返回結(jié)構(gòu),打印調(diào)用的日志如下

06-18 15:50:37.118 28402 28560 D MyHttpFiltersAdapter: clientToProxyRequest
06-18 15:50:37.120 28402 28560 D MyHttpFiltersAdapter: proxyToServerRequest
06-18 15:50:37.159 28402 28517 D MyHttpFiltersAdapter: serverToProxyResponse
06-18 15:50:37.160 28402 28517 D MyHttpFiltersAdapter: proxyToClientResponse

遺留問題

  1. 上邊的實(shí)現(xiàn)目前只支持了 http 請求的抓取键耕,如果想要抓 https則還需要對 https 解包寺滚,然后再生成自己的ssl正數(shù)進(jìn)行加密簽名。https 的抓取后續(xù)會繼續(xù)進(jìn)行研究屈雄。
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末村视,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子酒奶,更是在濱河造成了極大的恐慌蚁孔,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,590評論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件惋嚎,死亡現(xiàn)場離奇詭異杠氢,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)瘸彤,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,157評論 3 399
  • 文/潘曉璐 我一進(jìn)店門修然,熙熙樓的掌柜王于貴愁眉苦臉地迎上來笛钝,“玉大人质况,你說我怎么就攤上這事〔C遥” “怎么了结榄?”我有些...
    開封第一講書人閱讀 169,301評論 0 362
  • 文/不壞的土叔 我叫張陵,是天一觀的道長囤捻。 經(jīng)常有香客問我臼朗,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 60,078評論 1 300
  • 正文 為了忘掉前任视哑,我火速辦了婚禮绣否,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘挡毅。我一直安慰自己蒜撮,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,082評論 6 398
  • 文/花漫 我一把揭開白布跪呈。 她就那樣靜靜地躺著段磨,像睡著了一般。 火紅的嫁衣襯著肌膚如雪耗绿。 梳的紋絲不亂的頭發(fā)上苹支,一...
    開封第一講書人閱讀 52,682評論 1 312
  • 那天,我揣著相機(jī)與錄音误阻,去河邊找鬼债蜜。 笑死,一個(gè)胖子當(dāng)著我的面吹牛究反,可吹牛的內(nèi)容都是我干的策幼。 我是一名探鬼主播,決...
    沈念sama閱讀 41,155評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼奴紧,長吁一口氣:“原來是場噩夢啊……” “哼特姐!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起黍氮,我...
    開封第一講書人閱讀 40,098評論 0 277
  • 序言:老撾萬榮一對情侶失蹤唐含,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后沫浆,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體捷枯,經(jīng)...
    沈念sama閱讀 46,638評論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,701評論 3 342
  • 正文 我和宋清朗相戀三年专执,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了淮捆。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,852評論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡本股,死狀恐怖攀痊,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情拄显,我是刑警寧澤苟径,帶...
    沈念sama閱讀 36,520評論 5 351
  • 正文 年R本政府宣布,位于F島的核電站躬审,受9級特大地震影響棘街,放射性物質(zhì)發(fā)生泄漏蟆盐。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,181評論 3 335
  • 文/蒙蒙 一遭殉、第九天 我趴在偏房一處隱蔽的房頂上張望石挂。 院中可真熱鬧,春花似錦险污、人聲如沸誊稚。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,674評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽里伯。三九已至,卻和暖如春渤闷,著一層夾襖步出監(jiān)牢的瞬間疾瓮,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,788評論 1 274
  • 我被黑心中介騙來泰國打工飒箭, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留狼电,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 49,279評論 3 379
  • 正文 我出身青樓弦蹂,卻偏偏與公主長得像肩碟,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子凸椿,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,851評論 2 361

推薦閱讀更多精彩內(nèi)容