日本データベース学会の皆様， （重複して受け取られた場合にはご容赦ください） （English Message follows Japanese one） 筑波大学の加藤と申します。 先日ご案内したSHINRA 2020 Multi-lingualタスクの参加登録締切、 および、Websiteに誤りがありました。お詫びして訂正いたします。 2020年12月のNTCIR-15に向けてタスク参加登録を行っています。 情報検索・自然言語処理などに関する様々な共有タスクが企画されております。 ぜひともご参加いただき、共通のデータセットを利用して、研究にご活用いただければと思います。 新型コロナウイルスの状況を鑑み、NTCIR-15カンファレンスは、「オンライン」、「Mixed（オンラインと現地開催）」、「延期」の可能性があります。 いずれの場合も、カンファレンスではオンラインでの発表が可能です。 現時点ではNTCIR-15カンファレンスの開催形式は確定していませんが、継続して状況を検討し、関係諸機関や参加団体の状況を踏まえて開催形式を決定してまいります。 (詳細は ntcir-covid19@nii.ac.jpにお問い合わせください) 参加登録： http://research.nii.ac.jp/ntcir/ntcir-15/howto-ja.html 参加登録締切（タスクによって異なるのでご注意ください）： - DialEval-1: 2020年 6月30日まで - FinNum-2: 2020年 6月30日まで - QA Lab-PoliInfo-2: 2020年 7月12日まで - SHINRA2020-ML: 2020年 7月31日まで - WWW-3: 2020年 5月4日まで *登録締切* - Data Search: 2020年 4月30日まで *登録締切* - MART: 2020年 6月30日まで _________________________________________________________ NTCIR-15 タスク参加募集 CALL FOR NTCIR-15 TASK PARTICIPATION (The English message follows the Japanese one) _________________________________________________________ 第15回目のNTCIR、NTCIR-15では共通のデータセットを用いて研究を行う、 7つの共有タスクへの参加チームを募集中です。情報アクセスに関する研究をされている大学の方、 企業で研究をなさっている方、または情報学に興味のある方、大規模なテストコレクションを用いた検索、 質問応答、自然言語処理に関心のある研究グループはどなたでも歓迎します。 どうぞ、奮ってご参加ください。 == NTCIRとは == 情報検索や自然言語処理、データベースなどの技術を中核とする情報アクセス技術の開発は、 ウェブへのアクセスやテキストデータ、様々なセンサーデータから得られるビッグデータの利活用のために、 その重要性を増しつつあります。情報アクセス技術の評価には、研究者の協同作業の結果として作成される 「テストコレクション」に基づく評価が欠かせません。NTCIRは、数多くの研究者の協力の下で、 その評価基盤の形成に過去20年以上に渡って取り組み、技術の発展に貢献してきました。 その評価タスク数はのべ80を超え、タスクへの総参加グループ数は、 国内・海外併せて1,000以上にものぼります。さらに、現在、4,600以上の研究グループが NTCIRテストコレクションを研究目的で利用しています。 NTCIRでは、日々開発される新しい技術に対する評価手法を模索しつつ、活動を進めております。 == NTCIR-15タスク == NTCIR-15では7つのタスクを採択いたしました。 各タスクの詳しい内容は、以下のページをご覧ください： タスク概要ページ： http://research.nii.ac.jp/ntcir/ntcir-15/tasks-ja.html -- コアタスク -- Dialogue Evaluation ("DialEval-1") "顧客・ヘルプデスク対話を入力とし、対話全体の品質を推定する and/or 顧客・ヘルプデスクの各ターンを分類する" Website: http://sakailab.com/dialeval1/ Numeral Attachment in Financial Tweets("FinNum-2") "Numeral attachment in financial tweets" Website: https://sites.google.com/nlg.csie.ntu.edu.tw/finnum2020 Question Answering Lab for Political Information ("QA Lab-PoliInfo-2") "地方議会会議録の要約、発話者のスタンス分類、同一条例の推定" Website: http://poliinfo2.net/ SHINRA 2020 Multi-lingual("SHINRA2020-ML") "30言語のWikipedia記事を拡張固有表現に分類する" Website: http://shinra-project.info/shinra2020ml/?lang=en We Want Web with CENTRE ("WWW-3") "アドホックWeb検索。複製可能性・再現可能性の検証も可" Website: http://sakailab.com/www3/ -- パイロットタスク -- Data Search ("Data Search") "統計データ検索" Website: https://ntcir.datasearch.jp/ Micro Activity Retrieval Task ("MART") "Detecting microactivities in a rich multi-modal lifelogging sensor streams" Website: http://ntcir-mart.computing.dcu.ie/ == NTCIR-15 参加登録方法 == 1. タスク参加の手引きをご確認ください： http://research.nii.ac.jp/ntcir/ntcir-15/howto-ja.html 2. 参加登録を行ってください： http://ntcir.nii.ac.jp/NTCIR15Regist/ == スケジュール == （各タスクによって異なる場合があります。詳しくは各タスクのページをご確認ください） 2020年 1月: データセット配布開始* 2020年 1-5月: 予備テスト (Dry Run) * 2020年 5-8月: 本テスト （Formal Run) * 2020年 8月20日: 評価結果の参加者への返送 2020年12月8-11日: NTCIR-15 カンファレンス（学術総合センター, 東京） == お問い合わせ == タスクの詳細については、NTCIR-15 Program Co-Chairs: ntc15-pcc@nii.ac.jp 、 もしくは、各タスクのオーガナイザにお問い合わせください。 オンライン登録や過去のNTCIRテストコレクションについては、 NTCIR事務局: ntc-secretariat@nii.ac.jp までお問い合わせください。 みなさまのご参加を心よりお待ちしています。 NTCIR-15 Program Co-Chairs: 神門 典子・加藤 誠・Yiqun Liu NTCIR-15 General Chairs: Charles L.A. Clarke・神門 典子 [English Message] Dear all, We apologize that the previous email contains wrong deadline and website URL for the SHINRA 2020 Multi-lingual task. __________________________________________________________ CALL FOR NTCIR-15 TASK PARTICIPATION Registration Due: - DialEval-1 : until June 30th, 2020 - FinNum-2 : until June 30th, 2020 - QA Lab-PoliInfo-2 : until July 12th, 2020 - SHINRA2020-ML : until July 31th, 2020 - WWW-3 : until May 4th, 2020 *CLOSED* - Data Search : until April 30th, 2020 *CLOSED* - MART : until June 30th, 2020 ____________________________________________________________ NTCIR-15 now calls for task participation of anyone interested in research on information access technologies and their evaluation, such as retrieval from a large amount of document collections, question answering and natural language processing. We welcome students, young researchers, professors who supervise students, researchers working for a company, and anyone who is interested in informatics. We are monitoring the COVID-19 situation closely. NTCIR-15 Conference may be go "online", "mixed (online + physical)", or "postponed" according to the situation. In any case, "online presentation" will be available at the NTCIR-15 Conference. So please do not hesitate to participate in the task(s) without fear of the travel. For more details, please consult "ntcir-covid19@nii.ac.jp". == What is NTCIR? == Development of Information Access technologies based on techniques of Information Retrieval, Natural Language Processing, and Database Management becomes increasingly more important for many applications, (e.g., providing effective access to Web resources and text archives, and analyzing big data obtained from various kinds of sensors). It is indispensable for developing such technologies to experimentally evaluate them by using test collections constructed under collaborations of many researchers. Over the past 20 years, NTCIR has been formulating the infrastructure for the evaluation, and contributing to development of the Information Access technologies. A total of over 80 "evaluation tasks" have been organized, attracting over 1,000 participant research groups worldwide so far. Furthermore, over 4,600 research groups have signed up to use the NTCIR test collections in their research. Consequently, NTCIR has been a major forum for researchers to intensively discuss the evaluation methodology of emerging information access technologies. == NTCIR-15 Tasks == NTCIR-15 Program Committee has selected seven tasks. For more details, please visit websites of each task: Task Overview page： http://research.nii.ac.jp/ntcir/ntcir-15/tasks.html -- Core tasks -- Dialogue Evaluation ("DialEval-1") "Given a customer-helpdesk dialogue, estimate the quality of the entire dialogue and/or classify each customer/helpdesk turn." Website: http://sakailab.com/dialeval1/ Numeral Attachment in Financial Tweets("FinNum-2") "Numeral attachment in financial tweets" Website: https://sites.google.com/nlg.csie.ntu.edu.tw/finnum2020 Question Answering Lab for Political Information ("QA Lab-PoliInfo-2") "Generating a summary of speeches in Japanese local assembly minutes, classifying a political stance of a speaker, and identifying a mention in a speech as the same real world entity" Website: http://poliinfo2.net/ SHINRA 2020 Multi-lingual("SHINRA2020-ML") "Categorizing 30 language Wikipedia into Extended Named Entity categories" Website: http://shinra-project.info/shinra2020ml/?lang=en We Want Web with CENTRE ("WWW-3") "Adhoc web search, with optional replicability and reproducibility runs" Website: http://sakailab.com/www3/ -- Pilot task -- Data Search ("Data Search") "Ad-hoc retrieval for statistical data" Website: https://ntcir.datasearch.jp/ Micro Activity Retrieval Task ("MART") "Detecting microactivities in a rich multi-modal lifelogging sensor streams" Website: http://ntcir-mart.computing.dcu.ie/ == How to Participate == 1. Please carefully read "How to Participate to NTCIR-15 Task(s)": http://research.nii.ac.jp/ntcir/ntcir-15/howto.html 2. Please register at http://ntcir.nii.ac.jp/NTCIR15Regist/ == Schedule == (Schedule can be slightly different in different tasks. Please visit webpages of each task for the details.) Jan 2020: Dataset release* Jan-May 2020: Dry run* May-Jul 2020: Formal run * Aug 20, 2020: Evaluation results return Dec 8-11, 2020: NTCIR-15 Conference in NII, Tokyo, Japan == Questions? == For information regarding the task specifications etc., please contact the NTCIR Program Chairs: ntc15-pcc@nii.ac.jp or task organizers. For information regarding the online registration and previous NTCIR test collections, please contact the NTCIR office: ntc-secretariat@nii.ac.jp We hope you will enjoy the tasks and to see you all in Tokyo next year. NTCIR-15 Program Chairs: Noriko Kando, Makoto P. Kato, and Yiqun Liu NTCIR-15 General Chairs: Charles L.A. Clarke and Noriko Kando