
大型語言模型(LLM)是人工智能(AI)的前沿技術,已廣泛應用於會話互動等領域,但如何有效評估特定LLM的人格特徵仍是創科界一大挑戰。香港理工大學團隊成功研發出一套名為「語言模型人格評估」(LMLPA)的AI驅動系統,能透過語言分析對LLM人格特徵進行量化評估。團隊更已將研究成果轉化為AI驅動的企業合規應用平台,透過運用自然語言處理技術,分析和詮釋大量文本數據及審計報告,包括由LLM生成的內容;又可以AI實現自動化資料收集、分析並給予見解,大幅簡化企業合規的報告流程,展現出在商業和人類數據資料定性分析的應用潛力。
這項整合AI與計算語言學的創新跨學科研究,由理大工業及系統工程學系助理教授李力恒領導,成果已發表在期刊《計算語言學》上。LMLPA系統專為評估LLM的人格特徵而設計,透過分析其輸出內容中的語言模式、風格及其他與語言相關的特徵進行深入闡釋。
理大設計的系統,首先利用基於語言型人格評估理論而設計的改編版五大人格量表對LLM進行測試,隨後由AI評分器分析其回答內容,將文字答案轉換為可量化的人格特徵數值指標。此舉為AI對性格評估開展了實務框架,推動以人為本的AI及計算語言學發展,更能拓展應用至教育、製造業,又或企業合規,例如環境、社會及管治(ESG)報告、支持實踐可持續發展目標,以及提升法律服務等領域。
李力恒表示,為解決LLM在理解人類個性的認知和情感層面的局限,團隊成功研發出這項創新評估系統工具,能從語言學角度全面分析LLM的人格特徵,並能對準其功能特性及操作範式。研究開創了對AI的理解及與其互動的全新可能性。透過量化LLM的人格特徵,可根據特定應用需求,調整其溝通風格,進一步促進人機之間更個人化的互動體驗。●香港文匯報記者 高鈺
評論