一 .開發(fā)背景

當我們**在網(wǎng)絡(luò)上接觸到國外先進算法 IDtracker，以及在《*強大腦》電視欄 目中看到北京大學(xué) Dr.魏使用的開源工具 DeepLab Cut，我們無比興奮，因為這些 跟蹤技術(shù)將為運動科學(xué)以及實驗室里的動物行為跟蹤帶來變革，開啟了對動作捕 捉進行計算機建模的新時代。同時，基于被動及主動標記的技術(shù)更是讓快速精準的動物運動和交互行為跟蹤成為了可能。
然而，驚喜之余，我們也發(fā)現(xiàn)了這 2 款工具的一些缺陷，一是效率低下，電腦資 源消耗很嚴重，不能實時分析， 二則這 2 個工具不能同時呈現(xiàn)， 三則因為這 2 個工具開源的屬性，不可避免的存在諸多隱藏的 bug 及準確率無法有效保證 。 基于以上這些現(xiàn)象，并綜合我們多年積累的圖像 AI 算法經(jīng)驗，SocialTrack AI 多動物交互行為分析軟件應(yīng)運而生， 同時軟件著力重點解決了以上“痛點 ”。

二.產(chǎn)品介紹
SocialTrack AI 是我們使用人工智能 AI 算法的**款軟件，可以定量和定性地測量單個場地中多只動物的攻擊行為與社交行為。該軟件在開放場中捕獲并跟蹤這些動物（小鼠或大鼠） ，并自動確定它們之間的各種攻擊行為或社交互動行為。
該系統(tǒng)可以自動確定是否有任何兩只動物正在積極地接近對方，一只正在追逐另 一 只， 或者與另一 只在打架（攻擊） 。 另外， 當動物之間沒有直接互動時， SocialTrack AI 可以將動物視為不動，或獨立探索而不考慮其他動物。它還可以測量一只動物正在觀看或跟蹤另一只動物的動作的凝視事件。
SocialTrack AI 在分析兩只動物之間的攻擊性社會行為方面具有幾個獨特而重要 的功能。首先，當多只動物在顏色與個體大小沒有明顯差異的情況下，通過我們 強大的AI 功能即可實時準確區(qū)分動物的 ID 編號，知道他們誰是誰，系統(tǒng)就可以 區(qū)分兩種動物而無需人工著色（標記） 它們 。 即使兩只動物聚在一起然后分開， 系統(tǒng)也會自動確定誰是誰 。該系統(tǒng)即使在多動物接觸時也可以自動區(qū)分兩只動物，這是一個極其重要的功能。
SocialTrack AI 不僅在實時區(qū)分動物 ID 號上的表現(xiàn)**非凡， 它在標記識別每只 動物的關(guān)鍵體位點上的表現(xiàn)同樣驚人，可以同時且實時跟蹤多只老鼠的鼻尖、眼 睛（耳朵）、輪廓重心、后肢（四肢）及尾巴等，即使多只老鼠交互在一起的時候，也能盡可能的保持完整性。

三.應(yīng)用
?  攻擊性（ Aggression）
? 社交凝視/焦慮（Social Staring/Anxiety）
?  居民入侵者分析（Resident Intruder Analysis）

四.技術(shù)特點
1.能夠在同一場景下區(qū)分 2 只或者2 只以上動物的身份編號，4 只及以上需單獨訓(xùn)練模型；
2.可以自動識別動物骨骼關(guān)鍵點，包括但不限于鼻尖、眼睛（耳朵） 、輪廓重心、后肢（四肢）及尾巴；
3.軟件支持實時分析和離線分析 2種模式；
4.第三方信號觸發(fā)功能，可與光遺傳、鈣成像等實驗同步記錄；
5.全自動識別、分析功能，實驗過程不需用戶介入；
6.支持時間分段數(shù)據(jù)輸出；
7.同一場景下的多只動物無需染色標記、個體大小無差異，都能夠?qū)崟r跟蹤；
8.強大的排除干擾功能，對變化光照和非均勻光照自適應(yīng)，支持自適應(yīng)實驗場景的動物模型訓(xùn)練，可應(yīng)用于多場景；
9.提供已分析實驗的雙擊復(fù)驗、數(shù)據(jù)可視化及智能糾錯的功能，方面后期實驗校準；
10.批處理模式允許無需用戶介入連續(xù)處理多個視頻；
11.可免費訓(xùn)練個性化、定制化實驗場景的動物模型；

五.測試指標
常規(guī)指標 ：每只老鼠的運動路程、平均速度、靜止時間等指標
特色指標 ：反應(yīng)老鼠之間的攻擊行為和社交行為：Body Sniffing、Head Sniffing、 Anogenital Sniffing、Above (Crawling)、Following、Attack、WalkAlone、StandAlone、
StandTogether 等