2025 国際大会(INLG 2025)
公式結果(表彰)
| 賞 | チーム |
|---|---|
| 5人村 勝率 1 位 | CanisLupus |
| 5人村 主観評価 1 位 | sunamelli |
| 5人村 主観評価 2 位 | yharada |
| 13人村 勝率上位 | sunamelli-c |
| 13人村 勝率上位 | kanolab-nw-B |
結果発表・表彰は AIWolfDial 2025 ワークショップ(2025年10月30日、INLG 2025、ハノイ)で行いました。
勝率
本戦で正常に終了した全ゲームのログから集計しています。「総合」は勝ち数 ÷ 試合数、役職別の欄はその役職で戦ったときの勝率と(勝ち数 / 試合数)です。「構成加重」は役職別勝率を村の役職構成で平均し直した値で、配役の偏りを打ち消した勝率です。
5人村 (120 試合)
| # | チーム | 試合 | 総合 | 村人 | 占い師 | 狂人 | 人狼 | 構成加重 |
|---|---|---|---|---|---|---|---|---|
| 1 | CanisLupus | 73 | 67.1% | 66.7% (18/27) | 81.2% (13/16) | 42.9% (6/14) | 75.0% (12/16) | 66.5% |
| 2 | kanolab-nw | 75 | 62.7% | 73.3% (22/30) | 60.0% (9/15) | 66.7% (10/15) | 40.0% (6/15) | 62.7% |
| 3 | sunamelli | 75 | 60.0% | 67.7% (21/31) | 66.7% (10/15) | 50.0% (7/14) | 46.7% (7/15) | 59.8% |
| 4 | CamelliaDragons | 75 | 53.3% | 61.3% (19/31) | 57.1% (8/14) | 37.5% (6/16) | 50.0% (7/14) | 53.4% |
| 5 | GPTaku | 77 | 46.8% | 53.3% (16/30) | 62.5% (10/16) | 33.3% (5/15) | 31.2% (5/16) | 46.8% |
| 6 | yharada | 74 | 46.0% | 50.0% (15/30) | 64.3% (9/14) | 37.5% (6/16) | 28.6% (4/14) | 46.1% |
| 7 | mille | 77 | 44.2% | 60.0% (18/30) | 33.3% (5/15) | 37.5% (6/16) | 31.2% (5/16) | 44.4% |
| 8 | Character-Lab | 74 | 35.1% | 41.9% (13/31) | 46.7% (7/15) | 21.4% (3/14) | 21.4% (3/14) | 34.7% |
13人村 (13 試合)
| # | チーム | 試合 | 総合 | 村人 | 占い師 | 騎士 | 霊媒師 | 狂人 | 人狼 | 構成加重 |
|---|---|---|---|---|---|---|---|---|---|---|
| 1 | kanolab-nw-B | 13 | 61.5% | 16.7% (1/6) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (3/3) | 61.5% |
| 2 | sunamelli-b | 13 | 61.5% | 33.3% (2/6) | 100.0% (1/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (3/3) | 61.5% |
| 3 | sunamelli-c | 13 | 61.5% | 42.9% (3/7) | - | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (3/3) | 63.1% |
| 4 | mille-B | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 5 | kanolab-nw-C | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (3/3) | 46.2% |
| 6 | kanolab-nw-A | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 7 | CanisLupus-A | 13 | 46.2% | 40.0% (2/5) | 50.0% (1/2) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 45.4% |
| 8 | CamelliaDragons | 13 | 46.2% | 50.0% (3/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 9 | CanisLupus-B | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 10 | Character-Lab-B | 13 | 30.8% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 66.7% (2/3) | 30.8% |
| 11 | sunamelli-a | 13 | 30.8% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 66.7% (2/3) | 30.8% |
| 12 | mille-A | 13 | 15.4% | 0.0% (0/6) | 100.0% (1/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 33.3% (1/3) | 15.4% |
| 13 | Character-Lab-A | 13 | 15.4% | 16.7% (1/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/3) | 15.4% |
ゲーム指標
ゲームログから機械的に計算した振る舞いの指標で、対話品質とは独立です。各値はランダムに行動した場合との比(1.00 = ランダム)です。「追放されやすさ」「占われやすさ」「守られやすさ」は他のプレイヤーから狙われた頻度の比で、追放・占いは低いほど疑われにくかったことを示します。「占い精度」「投票精度」は人狼を当てた頻度の比で、高いほど良い値です。「狂人の人狼回避」は狂人のときに人狼以外へ投票した割合です。
5人村
| チーム | 追放されやすさ | 占われやすさ | 占い精度 | 投票精度 | 狂人の人狼回避 |
|---|---|---|---|---|---|
| CanisLupus | 0.85 | 0.71 | 1.69 | 1.73 | 0.61 |
| kanolab-nw | 0.80 | 0.92 | 1.40 | 1.71 | 0.74 |
| sunamelli | 0.72 | 0.85 | 0.37 | 1.28 | 0.73 |
| CamelliaDragons | 1.04 | 1.03 | 1.35 | 1.20 | 0.58 |
| GPTaku | 1.39 | 1.09 | 1.20 | 1.13 | 0.60 |
| yharada | 0.92 | 0.85 | 1.88 | 1.20 | 0.71 |
| mille | 1.23 | 1.36 | 1.04 | 1.35 | 0.56 |
| Character-Lab | 1.14 | 1.23 | 0.97 | 0.60 | 0.70 |
13人村
| チーム | 追放されやすさ | 占われやすさ | 守られやすさ | 占い精度 | 投票精度 | 狂人の人狼回避 |
|---|---|---|---|---|---|---|
| kanolab-nw-B | 0.19 | 0.64 | 1.39 | 1.72 | 1.37 | - |
| sunamelli-b | 0.39 | 0.63 | 0.72 | 1.25 | 1.47 | 1.00 |
| sunamelli-c | 0.67 | 0.53 | 0.83 | - | 1.64 | 0.75 |
| mille-B | 2.89 | 1.50 | 1.96 | 4.00 | 0.92 | 1.00 |
| kanolab-nw-C | 0.58 | 0.57 | 0.76 | 1.84 | 1.39 | 1.00 |
| kanolab-nw-A | 0.72 | 1.61 | 2.08 | - | 1.38 | 1.00 |
| CanisLupus-A | 0.47 | 0.76 | - | 0.65 | 1.59 | 1.00 |
| CamelliaDragons | 3.45 | 0.93 | 2.45 | - | 1.34 | - |
| CanisLupus-B | 1.17 | 1.00 | 0.84 | - | 1.42 | 1.00 |
| Character-Lab-B | 0.56 | 1.64 | 0.91 | - | 0.74 | - |
| sunamelli-a | 0.67 | 1.08 | 0.34 | - | 1.03 | 0.50 |
| mille-A | 2.69 | 0.88 | 0.44 | 2.32 | 0.96 | - |
| Character-Lab-A | 1.30 | 1.40 | 1.63 | 0.70 | 0.20 | 1.00 |
人手評価(相対評価)
評価者が抽出した対戦ログを読み、ゲームごとにプレイヤーを評価項目別に評価した結果をチームごとに平均したものです。2024 冬季以降は順位付け(順位平均、低いほど良い)、2024 春季と 2024 国際大会は 5 点満点の評点(高いほど良い)です。13 人村ではエントリ(チーム-A、チーム-B など)ごとに評価しています。
5人村
抽出ログ 10 ゲーム。 順位平均(低いほど良い)。
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | 総合 |
|---|---|---|---|---|---|---|---|
| 1 | sunamelli | 2.17 | 2.08 | 2.00 | 2.25 | 2.54 | 2.21 |
| 2 | yharada | 2.12 | 2.25 | 2.38 | 3.33 | 2.58 | 2.53 |
| 3 | CanisLupus | 3.00 | 2.88 | 2.96 | 2.42 | 2.38 | 2.73 |
| 4 | kanolab-nw | 3.12 | 2.75 | 2.88 | 2.50 | 2.67 | 2.78 |
| 5 | GPTaku | 2.54 | 2.89 | 3.07 | 2.57 | 3.18 | 2.85 |
| 6 | CamelliaDragons | 3.12 | 3.08 | 2.88 | 3.04 | 3.12 | 3.05 |
| 7 | Character-Lab | 3.67 | 3.62 | 3.38 | 3.25 | 3.08 | 3.40 |
| 8 | mille | 4.14 | 4.25 | 4.25 | 4.36 | 4.32 | 4.26 |
13人村
抽出ログ 10 ゲーム。 順位平均(低いほど良い)。
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | チームプレイ | 総合 |
|---|---|---|---|---|---|---|---|---|
| 1 | sunamelli-b | 3.95 | 3.90 | 4.17 | 4.00 | 5.50 | 4.80 | 4.39 |
| 2 | sunamelli-c | 3.85 | 3.90 | 4.38 | 4.65 | 5.83 | 4.60 | 4.54 |
| 3 | sunamelli-a | 4.00 | 4.38 | 4.67 | 4.67 | 4.90 | 5.00 | 4.60 |
| 4 | CanisLupus-A | 6.08 | 5.00 | 4.88 | 4.28 | 5.17 | 4.55 | 4.99 |
| 5 | CanisLupus-B | 5.53 | 5.40 | 5.67 | 5.15 | 6.42 | 5.20 | 5.56 |
| 6 | kanolab-nw-A | 6.17 | 5.90 | 6.30 | 6.15 | 4.83 | 5.20 | 5.76 |
| 7 | kanolab-nw-C | 7.28 | 6.42 | 7.00 | 6.33 | 4.67 | 5.42 | 6.19 |
| 8 | kanolab-nw-B | 6.58 | 6.90 | 6.88 | 6.92 | 4.90 | 7.17 | 6.56 |
| 9 | Character-Lab-B | 6.75 | 6.80 | 6.72 | 7.30 | 7.17 | 7.00 | 6.96 |
| 10 | Character-Lab-A | 7.47 | 7.83 | 7.45 | 8.35 | 7.20 | 7.90 | 7.70 |
| 11 | mille-A | 10.45 | 10.72 | 10.35 | 10.05 | 10.82 | 10.40 | 10.46 |
| 12 | mille-B | 10.07 | 10.85 | 10.07 | 10.43 | 10.65 | 10.95 | 10.50 |
| 13 | CamelliaDragons | 10.82 | 12.88 | 11.82 | 12.72 | 12.80 | 12.75 | 12.30 |
LLM-as-a-Judge(相対評価)
LLM ジャッジがゲームごとにプレイヤーを評価項目別に順位付けし、チームごとに平均したものです(低いほど良い)。使用したモデルは大会ごとに異なり、各トラックの表の上に記載しています。ジャッジの実装は aiwolf-nlp-llm-judge として公開しています。
5人村
使用モデル: GPT-4o・GPT-5 の 2 モデル平均(本戦全ゲーム)
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | 総合 |
|---|---|---|---|---|---|---|---|
| 1 | sunamelli | 2.27 | 2.33 | 2.43 | 2.17 | 2.73 | 2.39 |
| 2 | yharada | 1.81 | 1.95 | 2.42 | 3.10 | 2.66 | 2.39 |
| 3 | Character-Lab | 3.16 | 2.29 | 2.71 | 2.99 | 2.24 | 2.68 |
| 4 | kanolab-nw | 3.01 | 2.97 | 3.23 | 2.75 | 2.15 | 2.82 |
| 5 | CamelliaDragons | 3.04 | 3.10 | 2.87 | 3.27 | 3.01 | 3.06 |
| 6 | CanisLupus | 3.54 | 3.53 | 3.05 | 2.75 | 3.10 | 3.19 |
| 7 | GPTaku | 3.06 | 3.45 | 3.55 | 3.01 | 3.44 | 3.30 |
| 8 | mille | 4.08 | 4.32 | 3.69 | 3.93 | 4.60 | 4.12 |
13人村
使用モデル: GPT-4o・GPT-5 の 2 モデル平均(本戦全ゲーム)
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | チームプレイ | 総合 |
|---|---|---|---|---|---|---|---|---|
| 1 | sunamelli-b | 4.08 | 4.38 | 5.46 | 5.42 | 6.23 | 5.77 | 5.22 |
| 2 | sunamelli-c | 4.31 | 4.81 | 5.50 | 5.73 | 6.12 | 5.38 | 5.31 |
| 3 | CanisLupus-A | 6.00 | 5.88 | 5.31 | 4.50 | 5.35 | 4.88 | 5.32 |
| 4 | sunamelli-a | 5.23 | 5.27 | 5.62 | 4.73 | 7.38 | 5.54 | 5.63 |
| 5 | kanolab-nw-B | 5.77 | 5.81 | 7.50 | 7.04 | 4.00 | 6.19 | 6.05 |
| 6 | kanolab-nw-A | 6.35 | 5.88 | 7.15 | 6.85 | 5.15 | 6.08 | 6.24 |
| 7 | CanisLupus-B | 6.50 | 6.08 | 6.50 | 6.12 | 6.46 | 6.19 | 6.31 |
| 8 | kanolab-nw-C | 6.73 | 7.12 | 7.23 | 6.42 | 4.96 | 5.77 | 6.37 |
| 9 | Character-Lab-B | 5.96 | 6.69 | 5.96 | 7.96 | 5.62 | 7.19 | 6.56 |
| 10 | Character-Lab-A | 7.08 | 6.81 | 7.23 | 8.19 | 6.77 | 6.50 | 7.10 |
| 11 | mille-B | 10.08 | 10.31 | 9.62 | 7.96 | 10.69 | 9.77 | 9.74 |
| 12 | mille-A | 10.96 | 10.04 | 9.42 | 9.08 | 10.19 | 10.04 | 9.96 |
| 13 | CamelliaDragons | 11.96 | 11.92 | 8.50 | 11.00 | 12.08 | 11.69 | 11.19 |
対戦ログ
本戦の対戦ログを公開しています。正常に終了したゲームのみを掲載しています。
| トラック | 試合 | ログ |
|---|---|---|
| 5人村 | 120 | ログ一覧 |
| 13人村 | 13 | ログ一覧 |
公式結果(表彰)
| 賞 | チーム |
|---|---|
| 5人村 勝率 1 位 | CanisLupus |
| 5人村 主観評価 1 位 | sunamelli |
| 5人村 主観評価 2 位 | yharada |
| 13人村 勝率上位 | sunamelli-c |
| 13人村 勝率上位 | kanolab-nw-B |
結果発表・表彰は AIWolfDial 2025 ワークショップ(2025年10月30日、INLG 2025、ハノイ)で行いました。
勝率
本戦で正常に終了した全ゲームのログから集計しています。「総合」は勝ち数 ÷ 試合数、役職別の欄はその役職で戦ったときの勝率と(勝ち数 / 試合数)です。「構成加重」は役職別勝率を村の役職構成で平均し直した値で、配役の偏りを打ち消した勝率です。
5人村 (120 試合)
| # | チーム | 試合 | 総合 | 村人 | 占い師 | 狂人 | 人狼 | 構成加重 |
|---|---|---|---|---|---|---|---|---|
| 1 | CanisLupus | 73 | 67.1% | 66.7% (18/27) | 81.2% (13/16) | 42.9% (6/14) | 75.0% (12/16) | 66.5% |
| 2 | kanolab-nw | 75 | 62.7% | 73.3% (22/30) | 60.0% (9/15) | 66.7% (10/15) | 40.0% (6/15) | 62.7% |
| 3 | sunamelli | 75 | 60.0% | 67.7% (21/31) | 66.7% (10/15) | 50.0% (7/14) | 46.7% (7/15) | 59.8% |
| 4 | CamelliaDragons | 75 | 53.3% | 61.3% (19/31) | 57.1% (8/14) | 37.5% (6/16) | 50.0% (7/14) | 53.4% |
| 5 | GPTaku | 77 | 46.8% | 53.3% (16/30) | 62.5% (10/16) | 33.3% (5/15) | 31.2% (5/16) | 46.8% |
| 6 | yharada | 74 | 46.0% | 50.0% (15/30) | 64.3% (9/14) | 37.5% (6/16) | 28.6% (4/14) | 46.1% |
| 7 | mille | 77 | 44.2% | 60.0% (18/30) | 33.3% (5/15) | 37.5% (6/16) | 31.2% (5/16) | 44.4% |
| 8 | Character-Lab | 74 | 35.1% | 41.9% (13/31) | 46.7% (7/15) | 21.4% (3/14) | 21.4% (3/14) | 34.7% |
13人村 (13 試合)
| # | チーム | 試合 | 総合 | 村人 | 占い師 | 騎士 | 霊媒師 | 狂人 | 人狼 | 構成加重 |
|---|---|---|---|---|---|---|---|---|---|---|
| 1 | kanolab-nw-B | 13 | 61.5% | 16.7% (1/6) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (1/1) | 100.0% (3/3) | 61.5% |
| 2 | sunamelli-b | 13 | 61.5% | 33.3% (2/6) | 100.0% (1/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (3/3) | 61.5% |
| 3 | sunamelli-c | 13 | 61.5% | 42.9% (3/7) | - | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (3/3) | 63.1% |
| 4 | mille-B | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 5 | kanolab-nw-C | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/1) | 100.0% (3/3) | 46.2% |
| 6 | kanolab-nw-A | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 7 | CanisLupus-A | 13 | 46.2% | 40.0% (2/5) | 50.0% (1/2) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 45.4% |
| 8 | CamelliaDragons | 13 | 46.2% | 50.0% (3/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 9 | CanisLupus-B | 13 | 46.2% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 100.0% (1/1) | 66.7% (2/3) | 46.2% |
| 10 | Character-Lab-B | 13 | 30.8% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 66.7% (2/3) | 30.8% |
| 11 | sunamelli-a | 13 | 30.8% | 33.3% (2/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 66.7% (2/3) | 30.8% |
| 12 | mille-A | 13 | 15.4% | 0.0% (0/6) | 100.0% (1/1) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 33.3% (1/3) | 15.4% |
| 13 | Character-Lab-A | 13 | 15.4% | 16.7% (1/6) | 0.0% (0/1) | 0.0% (0/1) | 0.0% (0/1) | 100.0% (1/1) | 0.0% (0/3) | 15.4% |
ゲーム指標
ゲームログから機械的に計算した振る舞いの指標で、対話品質とは独立です。各値はランダムに行動した場合との比(1.00 = ランダム)です。「追放されやすさ」「占われやすさ」「守られやすさ」は他のプレイヤーから狙われた頻度の比で、追放・占いは低いほど疑われにくかったことを示します。「占い精度」「投票精度」は人狼を当てた頻度の比で、高いほど良い値です。「狂人の人狼回避」は狂人のときに人狼以外へ投票した割合です。
5人村
| チーム | 追放されやすさ | 占われやすさ | 占い精度 | 投票精度 | 狂人の人狼回避 |
|---|---|---|---|---|---|
| CanisLupus | 0.85 | 0.71 | 1.69 | 1.73 | 0.61 |
| kanolab-nw | 0.80 | 0.92 | 1.40 | 1.71 | 0.74 |
| sunamelli | 0.72 | 0.85 | 0.37 | 1.28 | 0.73 |
| CamelliaDragons | 1.04 | 1.03 | 1.35 | 1.20 | 0.58 |
| GPTaku | 1.39 | 1.09 | 1.20 | 1.13 | 0.60 |
| yharada | 0.92 | 0.85 | 1.88 | 1.20 | 0.71 |
| mille | 1.23 | 1.36 | 1.04 | 1.35 | 0.56 |
| Character-Lab | 1.14 | 1.23 | 0.97 | 0.60 | 0.70 |
13人村
| チーム | 追放されやすさ | 占われやすさ | 守られやすさ | 占い精度 | 投票精度 | 狂人の人狼回避 |
|---|---|---|---|---|---|---|
| kanolab-nw-B | 0.19 | 0.64 | 1.39 | 1.72 | 1.37 | - |
| sunamelli-b | 0.39 | 0.63 | 0.72 | 1.25 | 1.47 | 1.00 |
| sunamelli-c | 0.67 | 0.53 | 0.83 | - | 1.64 | 0.75 |
| mille-B | 2.89 | 1.50 | 1.96 | 4.00 | 0.92 | 1.00 |
| kanolab-nw-C | 0.58 | 0.57 | 0.76 | 1.84 | 1.39 | 1.00 |
| kanolab-nw-A | 0.72 | 1.61 | 2.08 | - | 1.38 | 1.00 |
| CanisLupus-A | 0.47 | 0.76 | - | 0.65 | 1.59 | 1.00 |
| CamelliaDragons | 3.45 | 0.93 | 2.45 | - | 1.34 | - |
| CanisLupus-B | 1.17 | 1.00 | 0.84 | - | 1.42 | 1.00 |
| Character-Lab-B | 0.56 | 1.64 | 0.91 | - | 0.74 | - |
| sunamelli-a | 0.67 | 1.08 | 0.34 | - | 1.03 | 0.50 |
| mille-A | 2.69 | 0.88 | 0.44 | 2.32 | 0.96 | - |
| Character-Lab-A | 1.30 | 1.40 | 1.63 | 0.70 | 0.20 | 1.00 |
人手評価(相対評価)
評価者が抽出した対戦ログを読み、ゲームごとにプレイヤーを評価項目別に評価した結果をチームごとに平均したものです。2024 冬季以降は順位付け(順位平均、低いほど良い)、2024 春季と 2024 国際大会は 5 点満点の評点(高いほど良い)です。13 人村ではエントリ(チーム-A、チーム-B など)ごとに評価しています。
5人村
抽出ログ 10 ゲーム。 順位平均(低いほど良い)。
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | 総合 |
|---|---|---|---|---|---|---|---|
| 1 | sunamelli | 2.17 | 2.08 | 2.00 | 2.25 | 2.54 | 2.21 |
| 2 | yharada | 2.12 | 2.25 | 2.38 | 3.33 | 2.58 | 2.53 |
| 3 | CanisLupus | 3.00 | 2.88 | 2.96 | 2.42 | 2.38 | 2.73 |
| 4 | kanolab-nw | 3.12 | 2.75 | 2.88 | 2.50 | 2.67 | 2.78 |
| 5 | GPTaku | 2.54 | 2.89 | 3.07 | 2.57 | 3.18 | 2.85 |
| 6 | CamelliaDragons | 3.12 | 3.08 | 2.88 | 3.04 | 3.12 | 3.05 |
| 7 | Character-Lab | 3.67 | 3.62 | 3.38 | 3.25 | 3.08 | 3.40 |
| 8 | mille | 4.14 | 4.25 | 4.25 | 4.36 | 4.32 | 4.26 |
13人村
抽出ログ 10 ゲーム。 順位平均(低いほど良い)。
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | チームプレイ | 総合 |
|---|---|---|---|---|---|---|---|---|
| 1 | sunamelli-b | 3.95 | 3.90 | 4.17 | 4.00 | 5.50 | 4.80 | 4.39 |
| 2 | sunamelli-c | 3.85 | 3.90 | 4.38 | 4.65 | 5.83 | 4.60 | 4.54 |
| 3 | sunamelli-a | 4.00 | 4.38 | 4.67 | 4.67 | 4.90 | 5.00 | 4.60 |
| 4 | CanisLupus-A | 6.08 | 5.00 | 4.88 | 4.28 | 5.17 | 4.55 | 4.99 |
| 5 | CanisLupus-B | 5.53 | 5.40 | 5.67 | 5.15 | 6.42 | 5.20 | 5.56 |
| 6 | kanolab-nw-A | 6.17 | 5.90 | 6.30 | 6.15 | 4.83 | 5.20 | 5.76 |
| 7 | kanolab-nw-C | 7.28 | 6.42 | 7.00 | 6.33 | 4.67 | 5.42 | 6.19 |
| 8 | kanolab-nw-B | 6.58 | 6.90 | 6.88 | 6.92 | 4.90 | 7.17 | 6.56 |
| 9 | Character-Lab-B | 6.75 | 6.80 | 6.72 | 7.30 | 7.17 | 7.00 | 6.96 |
| 10 | Character-Lab-A | 7.47 | 7.83 | 7.45 | 8.35 | 7.20 | 7.90 | 7.70 |
| 11 | mille-A | 10.45 | 10.72 | 10.35 | 10.05 | 10.82 | 10.40 | 10.46 |
| 12 | mille-B | 10.07 | 10.85 | 10.07 | 10.43 | 10.65 | 10.95 | 10.50 |
| 13 | CamelliaDragons | 10.82 | 12.88 | 11.82 | 12.72 | 12.80 | 12.75 | 12.30 |
LLM-as-a-Judge(相対評価)
LLM ジャッジがゲームごとにプレイヤーを評価項目別に順位付けし、チームごとに平均したものです(低いほど良い)。使用したモデルは大会ごとに異なり、各トラックの表の上に記載しています。ジャッジの実装は aiwolf-nlp-llm-judge として公開しています。
5人村
使用モデル: GPT-4o・GPT-5 の 2 モデル平均(本戦全ゲーム)
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | 総合 |
|---|---|---|---|---|---|---|---|
| 1 | sunamelli | 2.27 | 2.33 | 2.43 | 2.17 | 2.73 | 2.39 |
| 2 | yharada | 1.81 | 1.95 | 2.42 | 3.10 | 2.66 | 2.39 |
| 3 | Character-Lab | 3.16 | 2.29 | 2.71 | 2.99 | 2.24 | 2.68 |
| 4 | kanolab-nw | 3.01 | 2.97 | 3.23 | 2.75 | 2.15 | 2.82 |
| 5 | CamelliaDragons | 3.04 | 3.10 | 2.87 | 3.27 | 3.01 | 3.06 |
| 6 | CanisLupus | 3.54 | 3.53 | 3.05 | 2.75 | 3.10 | 3.19 |
| 7 | GPTaku | 3.06 | 3.45 | 3.55 | 3.01 | 3.44 | 3.30 |
| 8 | mille | 4.08 | 4.32 | 3.69 | 3.93 | 4.60 | 4.12 |
13人村
使用モデル: GPT-4o・GPT-5 の 2 モデル平均(本戦全ゲーム)
| # | チーム | 発話表現の自然さ | 文脈を踏まえた対話 | 一貫性・論理 | 行動整合 | キャラクター性 | チームプレイ | 総合 |
|---|---|---|---|---|---|---|---|---|
| 1 | sunamelli-b | 4.08 | 4.38 | 5.46 | 5.42 | 6.23 | 5.77 | 5.22 |
| 2 | sunamelli-c | 4.31 | 4.81 | 5.50 | 5.73 | 6.12 | 5.38 | 5.31 |
| 3 | CanisLupus-A | 6.00 | 5.88 | 5.31 | 4.50 | 5.35 | 4.88 | 5.32 |
| 4 | sunamelli-a | 5.23 | 5.27 | 5.62 | 4.73 | 7.38 | 5.54 | 5.63 |
| 5 | kanolab-nw-B | 5.77 | 5.81 | 7.50 | 7.04 | 4.00 | 6.19 | 6.05 |
| 6 | kanolab-nw-A | 6.35 | 5.88 | 7.15 | 6.85 | 5.15 | 6.08 | 6.24 |
| 7 | CanisLupus-B | 6.50 | 6.08 | 6.50 | 6.12 | 6.46 | 6.19 | 6.31 |
| 8 | kanolab-nw-C | 6.73 | 7.12 | 7.23 | 6.42 | 4.96 | 5.77 | 6.37 |
| 9 | Character-Lab-B | 5.96 | 6.69 | 5.96 | 7.96 | 5.62 | 7.19 | 6.56 |
| 10 | Character-Lab-A | 7.08 | 6.81 | 7.23 | 8.19 | 6.77 | 6.50 | 7.10 |
| 11 | mille-B | 10.08 | 10.31 | 9.62 | 7.96 | 10.69 | 9.77 | 9.74 |
| 12 | mille-A | 10.96 | 10.04 | 9.42 | 9.08 | 10.19 | 10.04 | 9.96 |
| 13 | CamelliaDragons | 11.96 | 11.92 | 8.50 | 11.00 | 12.08 | 11.69 | 11.19 |
対戦ログ
本戦の対戦ログを公開しています。正常に終了したゲームのみを掲載しています。
| トラック | 試合 | ログ |
|---|---|---|
| 5人村 | 120 | ログ一覧 |
| 13人村 | 13 | ログ一覧 |
ログの見方
「ログ一覧」を開くと、正常に終了したゲームのログ(.log ファイル)が一覧で表示されます。ファイル名の先頭はゲーム開始時刻、続く部分は参加チーム名です。
- ブラウザで閲覧する: 見たいログの行にある「viewerで見る」列の「▶ 開く」を押すと、aiwolf-nlp-viewer がそのログを読み込んで開きます。
- ファイルを保存する: 「ダウンロード」列の「⬇ 保存」を押すと、ログファイルをダウンロードできます。ファイル名をクリックした場合は、ログの本文がそのままテキストで表示されます。
- フォルダごとまとめて保存する: 一覧の「Parent directory/」で一つ上の階層に移動し、フォルダ(
successなど)の行にある「⬇ zip」を押すと、そのフォルダの全ファイルをブラウザ内で zip にまとめてダウンロードできます(ファイル数の確認ダイアログが出ます)。
viewer の使い方はリンクページの「ログ閲覧ツール」にまとめています。