日本データベース学会の皆様
奈良先端科学技術大学院大学の若宮と申します.
NTCIR-19(2026年12月8日~10日にNIIにて開催)では,自然言語処理,情報検索,
評価方法などに関わるタスクへの参加募集をしております.
現在,以下の14タスクが参加登録を受け付けています.
大規模テストコレクションを用いた検索,質問応答,自然言語処理などに関心のある
学生・研究者・企業の方々は,ぜひともご参加をご検討いただければ幸いです.
--------------------------------------------------
■ タスク参加登録
https://research.nii.ac.jp/ntcir/ntcir-19/howto-ja.html
■ タスク一覧
https://research.nii.ac.jp/ntcir/ntcir-19/tasks-ja.html
--------------------------------------------------
■ 参加登録締切(タスクによって異なるのでご注意ください)
- 2026年 4月17日
R2C2: RAG Responses Confident and Correct?
- 2026年 5月12日
Lifelog-7: Advancing Lifelog Analytics and Retrieval at NTCIR19
- 2026年 6月1日
AgenticInstruction: Instruction Generation for Agentic Search
DAGRI: Data Analytics for aGRicultural Information
FEHU: Fact-based Event-centric Human-value Understanding
ModelRetrieval: Pre-trained Model Retrieval
RegCom: Multinational, Multilingual, Multi-Industry Regulatory Compliance
Checking
SciClaimEval: Cross-modal Claim Verification in Scientific Papers
ToT: Tip-of-the-Tongue
- 2026年 7月1日
MedNLP-CALL: Medical Natural Language Processing for Emergency Call
- 2026年 7月10日
AEOLLM-2: Automatic Evaluation of LLMs 2
CAMEO: Composed Access to Multimodal E-commerce Objects
FinArg-3: Argument Quality Assessment of Financial Forward-Looking
Statements
HIDDEN-RAD2: Hidden Causal Reasoning in Radiology Report Generation
■□■───────────────────────────────────────────■□■
NTCIR-19 タスク参加募集
CALL FOR NTCIR-19 TASK PARTICIPATION
■□■───────────────────────────────────────────■□■
NTCIR-19では,共通のデータセットを用いて研究するタスクへの参加チーム
を募集中です.情報アクセス技術の評価には,研究者の協同作業の結果として
作成される「テストコレクション」に基づく評価が欠かせません.NTCIRは,
数多くの研究者の協力の下で,その評価基盤の形成に過去20年以上に渡って
取り組み,技術の発展に貢献してきました.そして日々開発される新しい技術
に対する評価手法を模索しつつ,活動を進めております.情報アクセス分野の
学生や若手研究者のみなさん,先生方,企業で研究をなさっている方,または
情報学に興味のある方々,大規模なテストコレクションを用いた検索,質問応答,
自然言語処理に関心のある研究グループは,どなたでも歓迎します.
どうぞ奮ってご参加ください.
--------------------------------------------------
■ NTCIRとは
--------------------------------------------------
NTCIR(エンティサイル, NII Testbeds and Community for Information
access Research)は,情報検索,質問応答,要約,テキストマイニング,機械翻訳など,
膨大な情報の中から所望の情報にアクセスし,情報の理解や活用を支援する技術の大規模な
評価基盤を,国内外の多数研究者が共有しつつその共通基盤の上でそれぞれの研究を進め,
検証,比較評価し,相互に学びあうフォーラムを形成するプロジェクトです.1998年から開始し,
より豊かな情報アクセス技術の実現と未来価値創生を標榜し,1年半を1サイクルとして,
毎回,いくつかのタスク(=研究部門)を選択して活動を進めています.
--------------------------------------------------
■ NTCIR-19 タスク一覧
(詳細:
https://research.nii.ac.jp/ntcir/ntcir-19/tasks-ja.html )
--------------------------------------------------
== コアタスク ==
- AEOLLM-2: Automatic Evaluation of LLMs 2
https://huggingface.co/spaces/THUIR/AEOLLM
- FinArg-3: Argument Quality Assessment of Financial Forward-Looking
Statements
https://sites.google.com/nlg.csie.ntu.edu.tw/finarg3/
- HIDDEN-RAD2: Hidden Causal Reasoning in Radiology Report Generation
https://sites.google.com/view/hidden-rad2/
- Lifelog-7: Advancing Lifelog Analytics and Retrieval at NTCIR19
https://lifelog-ntcir-project-bd9eae.gitlab.io/
- MedNLP-CALL: Medical Natural Language Processing for Emergency Call
https://sociocom.naist.jp/mednlp-call/
- ToT: Tip-of-the-Tongue
https://ntcir-tot.github.io/
== パイロットタスク ==
- AgenticInstruction: Instruction Generation for Agentic Search
https://geniie-lab.github.io/ntcir/
- CAMEO: Composed Access to Multimodal E-commerce Objects
https://sites.google.com/view/ntcir-cameo26/
- DAGRI: Data Analytics for aGRicultural Information
https://sites.google.com/view/dagri/
- FEHU: Fact-based Event-centric Human-value Understanding
https://sites.google.com/view/ntcir19fehu
- ModelRetrieval: Pre-trained Model Retrieval
https://pre-trained-model-retrieval.github.io/
- R2C2: RAG Responses Confident and Correct?
http://sakailab.com/r2c2/
- RegCom: Multinational, Multilingual, Multi-Industry Regulatory Compliance
Checking
https://sites.google.com/view/ntcir19regcom/
- SciClaimEval: Cross-modal Claim Verification in Scientific Papers
https://sciclaimeval.github.io/
--------------------------------------------------
■ スケジュール
--------------------------------------------------
2026年 1月~6月:予備テスト(Dry Run)*
2026年 3月~2026年 7月:本テスト(Formal Run)*
2026年 8月 1日:評価結果返送/タスク概要論文一部公開
2026年 9月 1日:タスク参加者論文 (ドラフト) 提出締切
2026年 11月 1日:最終論文提出
2026年 12月 8日 ~ 10日:NTCIR-19 カンファレンス(東京・NII)
(*の日程はタスクにより異なります.詳しくは各タスクのページをご確認ください.)
--------------------------------------------------
■ お問い合わせ
--------------------------------------------------
タスクの詳細については,NTCIR-19 Program Co-Chairs (ntc19-pcc(a)nii.ac.jp),
もしくは,各タスクのオーガナイザにお問い合わせください.
オンライン登録や過去のNTCIRテストコレクションについては,
NTCIR事務局 (ntc-secretariat(a)nii.ac.jp) までお問い合わせください.
みなさまのご参加を心よりお待ちしております.