【11】證書號數:I644285
【45】公告日: 中華民國 107 (2018) 年 12 月 11 日
【51】Int. Cl.: G06Q50/22 A61H39/02
(2018.01) (2006.01)
G06F3/01 (2006.01)
發明 全 8 頁
【54】名 稱:以 AR 技術實現穴道視覺化之中醫系統及其方法
【21】申請案號:106120651 【22】申請日: 中華民國 106 (2017) 年 06 月 20 日
【72】發 明 人: 藍崑展 (TW) LAN, KUN-CHAN;胡敏君 (TW) HU, MIN-CHUN;陳奕璋 (TW) CHEN, YI-ZHANG
【71】申 請 人: 國立成功大學 NATIONAL CHENG KUNG UNIVERSITY
臺南市東區大學路 1 號
【74】代 理 人: 廖鉦達
【56】參考文獻:
TW M361033 CN 106548008A
CN 105534694A US 2014/0039238A1 審查人員:廖國智
【57】申請專利範圍
1. 一種以 AR 技術實現穴道視覺化之中醫系統,其包括有:一處理單元;一輸入模組,與 該處理單元連接,該輸入模組包括有一症狀輸入單元以及一影像輸入單元,該症狀輸入 單元用以接收一症狀之描述,該影像輸入單元用以接收一輸入影像;一判斷模組,與該 處理單元連接,該判斷模組包括有一資料庫以及一判斷單元,該資料庫儲存有多筆病症 資料以及多筆與前述病症相關聯的穴道資料;該判斷單元用以根據該症狀之描述與該些 病症資料進行關聯性匹配,以取得對應該症狀之描述的穴道資料;一影像處理模組,與 該處理單元連接,用以將對應該穴道資料的預估穴道位置點附加於該輸入影像上,以形 成一輸出影像;以及一顯示模組,與處理單元連接,該顯示模組用以顯示該輸出影像;
其中該資料庫儲存有一基於人體部位的可形變模型,該可形變模型包括有依據人體部位 之特徵而遍布的多個第一標記以及多個穴道位置點;該影像處理模組係根據該輸入影像 上的人體部位特徵於該輸入影像上標示多個第二標記,並根據該可形變模型的該些第一 標記與該輸入影像的該些第二標記之座標資料的偏差程度,對該可形變模型進行擬合,
以調整該些第一標記的分布趨近該些第二標記的分布,並根據該些第一標記的座標變化 量調整對應該穴道資料的穴道位置點坐標,以取得該預估穴道位置點。
2. 如請求項 1 所述的以 AR 技術實現穴道視覺化之中醫系統,其中該輸入模組包括有一穴 道輸入單元,用以接收一穴道訊息;該判斷單元包括有根據該穴道訊息與該資料庫中所 儲存的多個穴道資料進行關聯性匹配,並取得對應該穴道訊息的穴道資料;該影像處理 模組係將對應該穴道資料的預估穴道位置點附加於該輸入影像上,以形成另一輸出影像。
3. 如請求項 1 所述的以 AR 技術實現穴道視覺化之中醫系統,其中該輸入影像為二維影 像,該可形變模型為三維可形變模型;該影像處理模組係將該三維可形變模型的該些第 一標記投影至平行於該輸入影像的二維平面,再於該二維平面上調整該第一標記的分布。
4. 一種以 AR 技術實現穴道視覺化之中醫系統,其包括有:一處理單元;一輸入模組,與 該處理單元連接,該輸入模組包括有一穴道輸入單元以及一影像輸入單元,該穴道輸入
理單元連接,該判斷模組包括有一資料庫以及一判斷單元,該資料庫儲存有多筆穴道資 料;該判斷單元用以根據該穴道訊息與該資料庫中所儲存的多個穴道資料進行關聯性匹 配,以取得對應該穴道訊息的穴道資料;一影像處理模組,與該處理單元連接,用以將 對應該穴道資料的預估穴道位置點附加於該輸入影像上,以形成一輸出影像;以及一顯 示模組,與處理單元連接,該顯示模組用以顯示該輸出影像;其中該資料庫儲存有一基 於人體部位的可形變模型,該可形變模型包括有依據人體部位之特徵而遍布的多個第一 標記以及多個穴道位置點;該影像處理模組係根據該輸入影像上的人體部位特徵於該輸 入影像上標示多個第二標記,並根據該可形變模型的該些第一標記與該輸入影像的該些 第二標記之座標資料的偏差程度,對該可形變模型進行擬合,以調整該些第一標記的分 布趨近該些第二標記的分布,並根據該些第一標記的座標變化量調整對應該穴道資料的 穴道位置點坐標,以取得該預估穴道位置點。
5. 如請求項 4 所述的以 AR 技術實現穴道視覺化之中醫系統,其中該輸入模組包括有一症 狀輸入單元,用以接收一症狀之描述;該資料庫中儲存有的多筆病症資料以及多筆與前 述病症相關聯的穴道資料;該判斷模組包括有根據該症狀之描述與該些病症資料進行關 聯性匹配,以取得對應該症狀之描述的穴道資料;該影像處理模組係將對應該穴道資料 的預估穴道位置點附加於該輸入影像上,以形成另一輸出影像。
6. 如請求項 4 所述的以 AR 技術實現穴道視覺化之中醫系統,其中該輸入影像為二維影 像,該可形變模型為三維可形變模型;該影像處理模組係將該三維可形變模型的該些第 一標記投影至平行於該輸入影像的二維平面,再於該二維平面上調整該第一標記的分布。
7. 一種以 AR 技術實現穴道視覺化之方法,其包括有以下步驟:A、提供一資料庫,該資 料庫儲存有多筆病症資料以及多筆與前述病症相關聯的穴道資料;B、接收一症狀之描 述或一穴道訊息;C、根據該症狀之描述或該穴道訊息,與該資料庫中所儲存的病症資 料或穴道資料進行關聯性匹配,以取得對應的穴道資料;D、接收一輸入影像,並依據 步驟 C 所取得的穴道資料將預估穴道位置點附加於該輸入影像上,以形成一輸出影像;
以及 E、顯示該輸出影像;其中該資料庫儲存有一基於人體部位的可形變模型,該可形 變模型包括有依據人體部位之特徵而遍布的多個第一標記以及多個穴道位置點;於步驟 D 中包括有:根據該輸入影像上的人體部位特徵於該輸入影像上標示多個第二標記,並 根據該可形變模型的該些第一標記與該輸入影像的該些第二標記之座標資料的偏差程 度,對該可形變模型進行擬合,以調整該些第一標記的分布趨近該些第二標記的分布,
並根據該些第一標記的座標變化量調整對應該穴道資料的穴道位置點坐標,以取得該預 估穴道位置點。
8. 如請求項 7 所述的以 AR 技術實現穴道視覺化之方法,其中於步驟 D 之前包括有根據匹 配後所取得之對應穴道資料,提示使用者提供對應匹配結果之特定人體部位特徵的輸入 影像。
9. 如請求項 7 所述的以 AR 技術實現穴道視覺化之方法,其中該輸入影像為二維影像,該 可形變模型為三維可形變模型;於步驟 D 中包括有:將該三維可形變模型的該些第一標 記投影至平行於該輸入影像的二維平面,再於該二維平面上調整該些第一標記的分布,
並儲存變形後之該三維可形變模型。
10. 如請求項 9 所述的以 AR 技術實現穴道視覺化之方法,其中該三維可形變模型包括有多 個頂點,該些頂點中具有該些第一標記,該些穴道位置點位於該些頂點之間;於步驟 D 中包括有:將變形後之該三維可形變模型的第一標記以及其穴道位置點的鄰近頂點投影 至一二維平面上,以及將初始的三維可形變模型的穴道位置點以及穴道位置點的鄰近頂 點投影至該二維平面上;透過以上兩組的鄰近頂點作為影像變形控制點,調整該初始的
- 6553 -
三維可形變模型的穴道位置點之座標以取得對應變形後之該三維可形變模型的穴道位置 點。
11. 如請求項 10 所述的以 AR 技術實現穴道視覺化之方法,其中於步驟 D 中包括有:將變形 後的該三維可形變模型的第一標記以及穴道位置點投影二維平面上,以該輸入影像的該 些第二標記作為控制點,調整變形後的該三維可形變模型的第一標記的分布趨近該些第 二標記的分布,並依據該些第一標記的變形量,調整該穴道位置點座標,以取得該至少 一預估穴道位置點。
12. 如請求項 9 所述的以 AR 技術實現穴道視覺化之方法,其中於步驟 D 中包括有:旋轉該 三維可形變模型,使該三維可形變模型與該輸入影像的角度一致後,再將該些第一標記 的分布投影至二維平面。
圖式簡單說明
圖 1 為本發明一實施例之以 AR 技術實現穴道視覺化之中醫系統的方塊圖。
圖 2 為本發明一實施例之以 AR 技術實現穴道視覺化之方法流程圖。
圖 3 為本發明一實施例之以 AR 技術實現穴道視覺化之中醫系統的情境示意圖。
圖 4 及圖 5 對輸入影像標記第二標記的示意圖。
圖 6 為比對輸入影像與可形變模型之偏差程度的示意圖。
圖 7 為平面座標示意圖,揭示移動穴道位置點以取得預估穴道位置點。
圖 8A 及圖 8B 分別為初始與變形後的三維可形變模型投影於二維平面的示意圖。
圖 9 為平面座標示意圖,揭示移動穴道位置點以取得預估穴道位置點。
- 6555 -
- 6557 -
- 6559 -