Selectstarは11月17日、Shinhan Bankと共同開発した金融向け大規模言語モデル(LLM)評価ベンチマーク「K-BankEval」に関する論文が、国際学会「ICAIF 2026」のワークショップに採択されたと発表した。
ICAIF 2026は金融AI分野の国際学会で、11月14日からイタリア・ミラノで開催された。両社の研究チームは15日、金融AIのセキュリティ、安全性、プライバシーをテーマとするワークショップで研究成果を発表した。
K-BankEvalは、実際の銀行業務に適したAIモデルを選定するための評価体系だ。金融知識、検索拡張生成(RAG)、ツール呼び出し、金融推論、回答の安全性、AIエージェントの業務計画という6領域、計5000項目で構成する。
金融消費者保護の観点から回答の安全性を評価するほか、AIエージェントの業務遂行能力も検証する。汎用LLMの評価手法では捉えにくい銀行実務への適合性を補完する狙いがある。Shinhan Bankが実務に必要な評価基準を示し、Selectstarが評価技術の開発を担った。
Selectstarはこれに先立ち、金融保安院、韓国科学技術院(KAIST)と共同開発した金融AIの安全性評価体系「FinRED」に関する論文も、国際学会「IEEE ICDM 2026」に採択されている。FinREDは、ボイスフィッシングや資金洗浄といった金融リスクの場面を基に、AIの安全性を検証する技術という。
Selectstarのキム・セヨプ代表は「実際の銀行業務で求められるAIの能力を具体化し、客観的に評価できる体系を整えた」とした上で、「金融AIの業務適合性と安全性を検証する技術力を強化していく」と述べた。