『Jev』はビッグモーターと旧日本軍を見分けられるか
こんばんは。
Lif技術部、面白サービス紹介担当のとらちゃんです。
時に皆さん、日常で判断に迷うことはありませんか？
今日の夕飯はカレーにするか、肉じゃがにするか。
気になる人を遊びに誘うか、いつものメンバーで遊ぶか。
今日は会社に行くか、やめておくか。
このように大小あれど、我々人類は日々さまざまな判断を迫られています。
こうした判断を全部AIに任せられたらいいのにと考えたことのある方も少なくないのではないでしょうか。
ということで今回は判断に特化したAI Jevをご紹介します。
Jevとは？
JevはTypeSafe AIが提供している、文章を生成するのではなく判断結果を返すことに特化したAIモデルです。
2026年9月15日に発表され、直後から大きな注目を集めたサービスで、9月下旬には需要急増を受けて新規登録が一時停止されていたほど。
もう使ってるよという情報感度の高い方も多いかもしれませんね。
ChatGPTなどの一般的なLLMに「この問い合わせは緊急ですか？」と聞けば、「はい、緊急性が高いと考えられます。なぜなら～」と文章で返してくれます。
一方Jevでは、「YESである確率は何％か」「AとBならどちらか」「5段階ならどの程度か」といった形で判断結果を返します。
主な判断方法は、YES/NOを判定するNoul、複数の候補から選ぶChoice、程度を評価するScoreの3種類。
例えばChoiceを使う場合、問い合わせ内容を読み込ませて
「営業・技術・請求のどこに振り分けるべきか？」
といった判断をプログラムの中に組み込めるわけです。
また答えと併せて、Confidenceというどれくらいその判断に自信があるのかを示す指標も取得できます。
なかなか面白そうな匂いがします。
入力100万トークンあたり0.042米ドルという破格の安さも魅力で、大変気軽に試しやすいのがうれしいところ。
せっかくなのでなるべく難しい判断をお願いしてみたいですよね。
ビッグモーターか旧日本軍か
というわけで今回使うのはこちら。
ネット上で公開されている、文章を読んで「旧ビッグモーター由来」なのか「旧日本軍由来」なのかを当てる全10問のクイズです。
※本記事では当該クイズで設定されている正解を正答として扱います。また「ビッグモーター」は旧株式会社ビッグモーターおよび当時の経営体制を指します。
例えば
いかなる格闘技にも勝る激しい闘争心が必要
この一文だけを見て、ビッグモーターと旧日本軍、どちらの発言か判断できるでしょうか？
……正直ちょっと難しいですよね。
そこで今回はJevのChoiceを使い
BIGMOTOR
JAPANESE_ARMY
の二択で10問すべて回答させてみました。
以下は実装イメージです。
実際にはAPIキーの設定や、10問を解かせるためのループ処理なども用意していますが、コア部分はこれだけです。
この文章を読んで、BIGMOTORかJAPANESE_ARMYのどちらか選んでくださいとJevにお願いしています。
$body = @{
model = "jev-latest"
# Jevに判断させたい文章
state = "執行責任を持つ幹部には、目標達成に必要な部下の生殺与奪権を与える"
# 何を判断させるか
questions = @{
origin = @{
type = "choice"
instructions = "この文章の出典として、より可能性が高いものを選んでください。"
# 選択肢
criteria = @{
BIGMOTOR = "旧ビッグモーターに由来する"
JAPANESE_ARMY = "旧日本軍に由来する"
}
}
}
} | ConvertTo-Json -Depth 10
$result = Invoke-RestMethod `
-Uri "https://api.typesafe.ai/v1/systemone" `
-Method Post `
-Headers $headers `
-ContentType "application/json" `
-Body $body結果
結果は10問中6問正解。正答率60％でした。
……判断に特化したAIにしては、何とも言えない結果になってしまいましたね。
回答内容を確認すると1問目から9問目まで全部BIGMOTORと回答しています。
Jevにとっては旧日本軍とビッグモーターは四捨五入したら同じようです。
陣地は死すとも敵に委ねてはならない
という問題ですら
BIGMOTOR 61％ / JAPANESE_ARMY 39％
という判定。
6：4でビッグモーター寄りだと思っていることが分かります。
続いて回答にどれだけ自信があるかを示すConfidenceも見てみましょう。
今回の10問では、ほとんどの問題でConfidenceがかなり低く、平均すると約0.09。
Confidenceは最大値が1.00なので、回答はしたものの全然自信ないよ……というJevの悲痛な気持ちが伝わってきます。
さすがに若干の申し訳なさを感じますね。
中にはBIGMOTORと回答しながら
BIGMOTOR 50％ / JAPANESE_ARMY 50％ / Confidence 0.01
という問題までありました。
これは要するに、コイントスで答えるのと変わらないと判断されているわけです。
アテにならないじゃないかとお怒りの方、少し落ち着いてください。
このように分からないことを分からないと言えるのがJevの面白いところです。
判断を丸投げするためのAIではない
例えば実務で
「この問い合わせは緊急か？」
という判定をJevに大量に処理させるとします。
Confidenceが高いものだけ自動で処理し、低いものは人間にエスカレーションさせる。
こうすれば、AIに最終判断を丸投げするのではなく、判断の一次仕分けだけを大量に任せることができます。
問い合わせの振り分けだけでなく、不正利用の検知、人間による確認が必要かどうかの判定等々。
明確なルールにはしづらいが、人間なら比較的容易に判断できるような業務の負担を軽減するといった方向性なら、なかなか活用の余地がありそうです。
今回のクイズについては、旧日本軍と旧ビッグモーターの判別はJevにとって少々荷が重かったようですが、それもConfidenceを見ることで把握できました。
ということで、日常で判断に迷ったときはJevに聞いてみるのも一つの手かもしれませんよ。
ただし、JevがConfidence 0.99で
「今日は会社に行かなくていい」
と判断したとしても、最終判断はご自身の責任でお願いいたします。
Jevを使って株式会社Lifに入社すべきかどうかを判断してみようと思ったあなた。
株式会社Lifでは、そんな遊び心にあふれた仲間をいつでも歓迎しています。
少しでも興味を持っていただけましたら、以下のリンクからお気軽にご連絡ください。
