Tracking.js 學習筆記

這兩天莫名其妙想了解一下和人臉識別相關的技術方案然馅精,然后想撘一個與前端交互的人臉識別系統(tǒng)蛾狗,然后遇到了一個比較牛逼的前端插件骨稿,反正也是比較閑了鳖目,可以先學習一下扮叨,或許將來會有用啊。

一领迈,材料準備

tracking.js

二彻磁,學習筆記

step 1

下載完成后我們可以在example文件夾下面創(chuàng)建一個 first_tracking.html 文件并寫入下面代碼

<!doctype html>
<html>
<head>
  <meta charset="utf-8">
  <title>tracking.js - first tracking</title>
  <script src="../build/tracking-min.js"></script>
</head>
<body>
  <script>
  // Start tracking here...
  </script>
</body>
</html>

step 2

嘗試第一個功能ColorTracker,顏色追蹤狸捅。

<!doctype html>
<html>
<head>
  <meta charset="utf-8">
  <title>tracking.js - first tracking</title>
  <script src="../build/tracking-min.js"></script>
</head>
<body>

<div>
  <video id="myVideo" width="640" height="480" preload autoplay loop muted></video>

  <script type="text/javascript">

   //不使用下面代碼有可能無法打開Chrome攝像頭
    navigator.getUserMedia  = navigator.getUserMedia ||
      navigator.webkitGetUserMedia ||
      navigator.mozGetUserMedia ||
      navigator.msGetUserMedia;
    navigator.getUserMedia({video:true}, gotStream, noStream);

    function gotStream(stream) {
      myVideo.src = URL.createObjectURL(stream);
      myVideo.onerror = function () {
        stream.stop();
      };
      stream.onended = noStream;
      myVideo.onloadedmetadata = function () {
        alert('攝像頭成功打開衷蜓!');
      };
    }

    function noStream(err)
    {
      alert(err);
    }
  
    //  模板代碼
    var colors = new tracking.ColorTracker(['magenta', 'cyan', 'yellow']);
    colors.on('track', function(event)
    {
      if (event.data.length === 0)
      {
        // No colors were detected in this frame.
      }
      else
      {
        event.data.forEach(function(rect)
        {
          console.log(rect.x, rect.y, rect.height, rect.width, rect.color);
        });
      }
    });

    tracking.track('#myVideo', colors);
  </script>
</div>

</body>
</html>
效果圖

step 3

ColorTracker 只有默認的3中顏色追蹤(magenta,cyan尘喝,yellow)磁浇,如果想追蹤自己設定的顏色,則需要在ColorTracker當中進行注冊朽褪,主要是利用(r置吓,g,b)來注冊顏色缔赠,例如綠色(0衍锚,255,0)嗤堰。主要使用下面代碼

tracking.ColorTracker.registerColor('green', function(r, g, b) {
  if (r < 50 && g > 200 && b < 50) {
    return true;
  }
  return false;
});

完整代碼

<!doctype html>
<html>
<head>
  <meta charset="utf-8">
  <title>tracking.js - first tracking</title>
  <script src="../build/tracking-min.js"></script>
</head>
<body>

<div>
  <video id="myVideo" width="640" height="480" preload autoplay loop muted></video>

  <script type="text/javascript">


    navigator.getUserMedia  = navigator.getUserMedia ||
      navigator.webkitGetUserMedia ||
      navigator.mozGetUserMedia ||
      navigator.msGetUserMedia;
    navigator.getUserMedia({video:true}, gotStream, noStream);

    function gotStream(stream) {
      myVideo.src = URL.createObjectURL(stream);
      myVideo.onerror = function () {
        stream.stop();
      };
      stream.onended = noStream;
      myVideo.onloadedmetadata = function () {
        alert('攝像頭成功打開戴质!');
      };
    }

    function noStream(err)
    {
      alert(err);
    }
  
    // 先注冊顏色
    tracking.ColorTracker.registerColor('green', function(r, g, b) {
      if (r < 50 && g > 200 && b < 50) {
        return true;
      }
      return false;
    });
   
    // 調(diào)用注冊顏色
    var colors = new tracking.ColorTracker(['magenta', 'cyan', 'yellow','green']);
    colors.on('track', function(event)
    {
      if (event.data.length === 0)
      {
        // No colors were detected in this frame.
      }
      else
      {
        event.data.forEach(function(rect)
        {
          console.log(rect.x, rect.y, rect.height, rect.width, rect.color);
        });
      }
    });



    tracking.track('#myVideo', colors);

  </script>
</div>

</body>
</html>

效果圖

這是參考官網(wǎng)例子的自動跟蹤顏色版本

<!doctype html>
<html>
<head>
  <meta charset="utf-8">
  <title>tracking.js - first tracking</title>

  <script src="../build/tracking-min.js"></script>

  <style>
    .rect {
      width: 80px;
      height: 80px;
      position: absolute;
      left: -1000px;
      top: -1000px;
    }
  </style>

</head>
<body>

<div>
  <div class="demo-container" id="demo-container">
    <video id="myVideo" width="640" height="480" preload autoplay loop muted></video>
  </div>
  <script type="text/javascript">


    navigator.getUserMedia  = navigator.getUserMedia ||
      navigator.webkitGetUserMedia ||
      navigator.mozGetUserMedia ||
      navigator.msGetUserMedia;
    navigator.getUserMedia({video:true}, gotStream, noStream);

    function gotStream(stream) {
      myVideo.src = URL.createObjectURL(stream);
      myVideo.onerror = function () {
        stream.stop();
      };
      stream.onended = noStream;
      myVideo.onloadedmetadata = function () {
        alert('攝像頭成功打開!');
      };
    }

    function noStream(err)
    {
      alert(err);
    }

    tracking.ColorTracker.registerColor('green', function(r, g, b) {
      if (r < 200 && g > 200 && b < 200) {
        return true;
      }
      return false;
    });

    var rect = undefined;
    var colors = new tracking.ColorTracker(['magenta', 'cyan', 'yellow','green']);
    colors.on('track', function(event)
    {
      if (event.data.length === 0)
      {
        // No colors were detected in this frame.
      }
      else
      {
        event.data.forEach(function(rect)
        {
          //如果rect不是undefined 代表有東西,則代表有框框,則可以刪除
          if(rect != undefined)
          {
            var elements = document.getElementsByClassName('rect');
            while(elements.length > 0)
            {
              elements[0].parentNode.removeChild(elements[0]);
            }
          }
          window.plot(rect.x, rect.y, rect.width, rect.height, rect.color);
        });
      }
    });

    // 刪除框框
    window.plot = function(x, y, w, h, color)
    {
      rect = document.createElement('div');
      document.querySelector('.demo-container').appendChild(rect);
      rect.classList.add('rect');
      rect.style.border = '2px solid ' + color;
      rect.style.width = w + 'px';
      rect.style.height = h + 'px';
      rect.style.left = (myVideo.offsetLeft + x) + 'px';
      rect.style.top = (myVideo.offsetTop + y) + 'px';
    };


    tracking.track('#myVideo', colors);


  </script>


</div>


</body>
</html>

效果圖

step 4

Object Tracker 是經(jīng)過訓練的一系統(tǒng)物體追蹤庫梁棠,同樣好像使用Color Tracker的套路置森,通過初始化‘track’斗埂,注冊‘track’符糊,開啟‘track’,即可對眼睛呛凶,人臉男娄,嘴巴等進行識別,不過個人感覺準確率其實不是特別的高,偵測范圍還是比較小模闲,受環(huán)境影響有點大建瘫。

<!doctype html>
<html>
<head>
  <meta charset="utf-8">
  <title>tracking.js - first tracking</title>

  <script src="../build/tracking.js"></script>
  <script src="../build/data/face.js"></script>
  <script src="../build/data/eye.js"></script>
  <script src="../build/data/mouth.js"></script>

  <style>
    .rect {
      width: 80px;
      height: 80px;
      position: absolute;
      left: -1000px;
      top: -1000px;
    }
  </style>

</head>
<body>

<div>
  <div class="demo-container" id="demo-container">
    <video id="myVideo" width="320" height="240" preload autoplay loop muted style="position: absolute"></video>
    <canvas id="canvas" width="320" height="240" style="position: absolute" ></canvas>
  </div>
  <script type="text/javascript">

    //激活攝像頭
    navigator.getUserMedia  = navigator.getUserMedia ||
      navigator.webkitGetUserMedia ||
      navigator.mozGetUserMedia ||
      navigator.msGetUserMedia;
    navigator.getUserMedia({video:true}, gotStream, noStream);

    function gotStream(stream) {
      myVideo.src = URL.createObjectURL(stream);
      myVideo.onerror = function () {
        stream.stop();
      };
      stream.onended = noStream;
      myVideo.onloadedmetadata = function () {
        alert('攝像頭成功打開!');
      };
    }

    function noStream(err)
    {
      alert(err);
    }

    //獲取畫布
    var canvas = document.getElementById('canvas');
    var context = canvas.getContext('2d');
    //檢測人臉
    var objects = new tracking.ObjectTracker(['face']);

    objects.on('track',function (event)
    {
        context.clearRect(0, 0, canvas.width, canvas.height);

        if(event.data.length  === 0)
        {

        }
        else
        {
           event.data.forEach(function(rect)
           {
            //在圖中畫框框
             context.strokeStyle = '#a64ceb';
             context.strokeRect(rect.x, rect.y, rect.width, rect.height);
             context.font = '11px Helvetica';
             context.fillStyle = "#fff";
             context.fillText('x: ' + rect.x + 'px', rect.x + rect.width + 5, rect.y + 11);
             context.fillText('y: ' + rect.y + 'px', rect.x + rect.width + 5, rect.y + 22);

           });
        }

    });

    //激活
    tracking.track('#myVideo', objects);

  </script>


</div>


</body>
</html>

效果圖

除此之外尸折,Tracking.js 還提供了特征的自訓練接口啰脚,通過自訓練,一樣可以使用用戶自己的偵查实夹,通過配合Tracking.js 的強大接口橄浓,我想越來越多的計算將一點點的搬到前端去了,實在強大啊亮航。更多摸索自己可以查看下tracking官網(wǎng)和一些大牛的博客吧荸实。這只是幾個簡單的實驗罷了,挺有趣缴淋,以后再深入研究這個東西准给。

最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市重抖,隨后出現(xiàn)的幾起案子露氮,更是在濱河造成了極大的恐慌,老刑警劉巖仇哆,帶你破解...
    沈念sama閱讀 211,290評論 6 491
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件沦辙,死亡現(xiàn)場離奇詭異,居然都是意外死亡讹剔,警方通過查閱死者的電腦和手機油讯,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,107評論 2 385
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來延欠,“玉大人陌兑,你說我怎么就攤上這事∮缮樱” “怎么了兔综?”我有些...
    開封第一講書人閱讀 156,872評論 0 347
  • 文/不壞的土叔 我叫張陵,是天一觀的道長狞玛。 經(jīng)常有香客問我软驰,道長,這世上最難降的妖魔是什么心肪? 我笑而不...
    開封第一講書人閱讀 56,415評論 1 283
  • 正文 為了忘掉前任锭亏,我火速辦了婚禮,結(jié)果婚禮上硬鞍,老公的妹妹穿的比我還像新娘慧瘤。我一直安慰自己戴已,他們只是感情好,可當我...
    茶點故事閱讀 65,453評論 6 385
  • 文/花漫 我一把揭開白布锅减。 她就那樣靜靜地躺著糖儡,像睡著了一般。 火紅的嫁衣襯著肌膚如雪怔匣。 梳的紋絲不亂的頭發(fā)上握联,一...
    開封第一講書人閱讀 49,784評論 1 290
  • 那天,我揣著相機與錄音每瞒,去河邊找鬼拴疤。 笑死,一個胖子當著我的面吹牛独泞,可吹牛的內(nèi)容都是我干的呐矾。 我是一名探鬼主播,決...
    沈念sama閱讀 38,927評論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼懦砂,長吁一口氣:“原來是場噩夢啊……” “哼蜒犯!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起荞膘,我...
    開封第一講書人閱讀 37,691評論 0 266
  • 序言:老撾萬榮一對情侶失蹤罚随,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后羽资,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體淘菩,經(jīng)...
    沈念sama閱讀 44,137評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,472評論 2 326
  • 正文 我和宋清朗相戀三年屠升,在試婚紗的時候發(fā)現(xiàn)自己被綠了潮改。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,622評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡腹暖,死狀恐怖汇在,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情脏答,我是刑警寧澤糕殉,帶...
    沈念sama閱讀 34,289評論 4 329
  • 正文 年R本政府宣布,位于F島的核電站殖告,受9級特大地震影響阿蝶,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜黄绩,卻給世界環(huán)境...
    茶點故事閱讀 39,887評論 3 312
  • 文/蒙蒙 一羡洁、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧宝与,春花似錦焚廊、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,741評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至诽里,卻和暖如春袒餐,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背谤狡。 一陣腳步聲響...
    開封第一講書人閱讀 31,977評論 1 265
  • 我被黑心中介騙來泰國打工灸眼, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人墓懂。 一個月前我還...
    沈念sama閱讀 46,316評論 2 360
  • 正文 我出身青樓焰宣,卻偏偏與公主長得像,于是被迫代替她去往敵國和親捕仔。 傳聞我的和親對象是個殘疾皇子匕积,可洞房花燭夜當晚...
    茶點故事閱讀 43,490評論 2 348

推薦閱讀更多精彩內(nèi)容