全國中小學科展

電腦科學與資訊工程

FVeinLite: 輕量化CNN手指靜脈辨識模型與醫療領域之應用

台灣少子化、老齡化問題迫切,醫療資源入不敷出,使得遠距醫療成為潛在的解決方案與趨勢。然而,遠距醫療的身份驗證安全性尚未完善。指靜脈辨識有非接觸、體內生物特徵等特性,其在衛生性和高安全性的優勢在醫學相關領域與醫療院所備受關注。若能夠開發出遠距醫療可用的指靜脈辨識,將有機會為遠距醫療產業的安全性貢獻一份心力。本研究主要分為兩階段:其一旨在優化指靜脈辨識技術,利用輕量化 CNN 指靜脈辨識模型,結合 Mini-RoI 技術, 使用 FV-USM 以及 PLUSVein-FV3 兩個資料集訓練我們開發的 FVeinLite 指靜脈辨識模型,並使用不同的 epoch 值訓練出最好的模型。而我們訓練的模型相較於其他指靜脈技術具有高辨識正確率、參數量更少、運算速度快等優勢。其二,我們將模型結合自製的低成本嵌入式裝置, 並製作 API 與並使用模擬的病患資料完整打造一個可使用於遠距醫療及醫療院所的指靜脈身分辨識系統。

基於對抗性機器學習技術的數位影像浮水印機制之研究

在高度數位化的社會,存在大量的數位影像資料,在不影響視覺品質之前提下如何標記持有者或資料來源是一重要課題,而不可視浮水印機制是可行的解決之道,本研究運用對抗性機器學習技術的概念及深度學習技術研發設計數位影像之浮水印機制,研製偵測器與註冊器。本研究設計研製之偵測器與註冊器可以處理任意大小的影像,經實驗分析具高度的保真性,並具可以承受 JPEG 中度品質(qlt=50)的失真壓縮攻擊,解壓縮還原之已嵌浮水印影像偵測器仍舊可以有效判定具浮水印。本機制可以結合網站、伺服器或影像設備為其提供的數位影像嵌入浮水印,在不影響視覺感官的前提下標記來源或持有者。

漫畫生成與預測

本研究探討了利用生成式人工智慧技術為漫畫創作帶來新可能性。在當今競爭激烈的漫畫產業中,創作者們需要不斷創新以吸引觀眾,而創作引人入勝的漫畫需要豐富的想像力和劇情結構。本研究希望能協助創作者製作草稿,並探索與AI當朋友的新型創作模式。在生成方面,提出了將漫畫劇情提取、劇情預測以及圖片生成三個步驟的生成流程,並使用了多種模型和技術,如 YOLO模型用於漫畫人臉檢測、文字生成模型用於劇情預測、LoRA技術用於模型微調等,為解決人物生成不連續的問題,我們也提出一種基於特徵提取與融合的解決辦法。本研究提供了一個全面的方案,旨在利用人工智慧技術幫助漫畫創作者創作出簡單的草稿。

惡意程式無所遁形—以自然語言處理模型實現惡意程式之識別

本研究旨在運用自然語言處理技術,建立辨識惡意程式的模型。首先在資料集方面,分為 PE資料集與 ELF資料集,均包含良性及惡意執行檔,且蒐集惡意程式時採用多種不同之惡意程式家族。接著對資料集進行反組譯及前處理。使用反組譯後的組合語言檔作為文本,訓練模型以區分良性和惡意程式。研究比較詞袋模型、序列模型、BERT 以及不同 n-gram對模型的影響。 研究結果顯示。詞袋模型以使用multi-hot編碼表現最佳,PE資料集之F1-score為96.87%;序列模型則是有位置編碼的 Transformerencoder 表現最優。在不同 n-gram 的比較,multi-hot詞袋模型與 TF-IDF 詞袋模型,分別在 2-gram 及 5-gram 有最高的 F1-score。

基於LLM的互動式口述影像系統

本研究旨在透過LLM 將影片內容轉為口述影像,探討及比較不同影片處理方式、LLM 對於圖片及影片的敘述,串接成一套自動化的口述影像系統。口述影像原本是為視障者製作的,現在本研究調整系統,讓有需求的一般大眾也能有效、容易及快速的了解影片內容。 本研究中的口述影像系統具有以下特點: (一)利用LLM 擅於處理視覺訊息及自然語言的優勢,將影片分為多張圖片,由LLM分別生成敘述後再整合為影片的整體敘述。 (二)運用LLM 會留存對話紀錄的特性,使用者可在系統中針對疑問與LLM進行問答。 (三)串接不同的 LLM,尋找製作口述影像的最佳組合。 藉由LLM 將影片轉換為口述影像,實現互動式的口述影像服務。除了可以滿足視障者的觀影需求,更重要的是當一般民眾沒有時間觀看影片時,也能透過口述影像系統了解影片內容。

基於高效可更新神經網絡的西洋棋人工智慧應用於嵌入式對弈棋盤

本研究以西洋棋為切入點,採用磁簧開關陣列來偵測棋子位置,並在設計中加入二極體以防止Ghosting效應,進而開發出一款以Arduino Uno開發板為基礎的智慧對弈棋盤。棋盤底部配備RGB LED燈,以便為使用者提供落子提示,並根據不同的落子類型呈現不同的燈光效果。 我們成功地透過簡潔的設計與高效的運算性能,實現了一個能夠識別棋手落子的智慧對弈棋盤,並能根據國際西洋棋規則提供正確的移動提示,讓完全沒有基礎的初學者也能在遊戲中學習並掌握西洋棋的所有規則。此外,我們還引入了基於Minimax演算法的輕量化AI和基於高效可更新神經網絡(NNUE)AI,並探討兩者之間的性能差異,從而使該智慧棋盤在節省運算資源的同時,可以在不連接電腦的前提下,具備一定的棋力,以支持棋手的技能提升與訓練。

漫畫生成與預測

本研究探討了利用生成式人工智慧技術為漫畫創作帶來新可能性。在當今競爭激烈的漫畫產業中,創作者們需要不斷創新以吸引觀眾,而創作引人入勝的漫畫需要豐富的想像力和劇情結構。本研究希望能協助創作者製作草稿,並探索與AI當朋友的新型創作模式。在生成方面,提出了將漫畫劇情提取、劇情預測以及圖片生成三個步驟的生成流程,並使用了多種模型和技術,如 YOLO模型用於漫畫人臉檢測、文字生成模型用於劇情預測、LoRA技術用於模型微調等,為解決人物生成不連續的問題,我們也提出一種基於特徵提取與融合的解決辦法。本研究提供了一個全面的方案,旨在利用人工智慧技術幫助漫畫創作者創作出簡單的草稿。

情感分析生成器—自動生成文字感染情緒

隨著網路技術不斷的進步,意見和情感分析逐漸成為人們日常生活中的一部分。儘管如此,目前人們缺乏一個方便且快速的情緒分析模型,供廣大大眾使用。 本研究旨在提供人們一個緩解憂鬱情緒的管道——當人們輸入一個需要被安慰的情境時,我們的系統將輸出安慰語句,以緩解該使用者之憂鬱情緒,達到安慰效果。為此,本研究訓練了BERT model以及 LLaMA model。BERT model能判斷使用者輸入的語句是否為需安慰語句。而LLaMA model則作為安慰語句之生成模型,以達到安慰之效果。

A Real-time Home Health Monitoring System with Motion Waveform Using Millimeter-wave FMCW Radar

本研究提出了一種基於毫米波FMCW雷達的即時居家健康監測系統,與RGB攝影機感測器方案相比,該系統更具成本效益並保護用戶隱私。對於居家健康監測系統來說,除了走、站、坐、臥四種常見的身體動作外,及時發現緊急情況也至關重要。因此,我們支持跌倒偵測以及兩種手勢的識別,一種用於頭痛,另一種用於緊急事件。然而,由於雷達點雲的稀疏和不規律特性,我們提出一種新的身體動作波形表示方式和一套處理程序用來平滑動作波形,利用雷達點雲的三度空間座標和速度在時間序列上的變化波形來表示動作特徵並作為神經網路的輸入,再搭配一輕量級的1D-CNN+LSTM神經網路來實現即時動作辨識。根據實驗結果,此方法可以達到30FPS的輸出效率和94%的辨識準確率。

基於高效可更新神經網絡的西洋棋人工智慧應用於嵌入式對弈棋盤

本研究以西洋棋為切入點,採用磁簧開關陣列來偵測棋子位置,並在設計中加入二極體以防止Ghosting效應,進而開發出一款以Arduino Uno開發板為基礎的智慧對弈棋盤。棋盤底部配備RGB LED燈,以便為使用者提供落子提示,並根據不同的落子類型呈現不同的燈光效果。 我們成功地透過簡潔的設計與高效的運算性能,實現了一個能夠識別棋手落子的智慧對弈棋盤,並能根據國際西洋棋規則提供正確的移動提示,讓完全沒有基礎的初學者也能在遊戲中學習並掌握西洋棋的所有規則。此外,我們還引入了基於Minimax演算法的輕量化AI和基於高效可更新神經網絡(NNUE)AI,並探討兩者之間的性能差異,從而使該智慧棋盤在節省運算資源的同時,可以在不連接電腦的前提下,具備一定的棋力,以支持棋手的技能提升與訓練。