通常チャットの推移

線に乗せると前の label との差。クリックでその prompt に絞る。 一覧の列見出しは Excel と同じく値で絞れる。トップ

一覧

labelprompt説明mode精度total_msllm_mstool_countツール内訳tool_msoverhead_ms落ちた観点
8/7リリース版GDPR_正当な利益_標準GDPR案件での、legitimate interestsに対する反応standard100%(1/1)16299116871search_laws×18203792
8/7リリース版GDPR_注意点_標準GDPR案件で、注意点を聞いて、個人データ移転が許められる場合の基準(GDPR44条以下)に言及できるかどうかstandard100%(1/1)2009016073004017
8/7リリース版sヒアリング事項_検討_標準ヒアリングショートカットが返す内容standard100%(1/1)14298100722get_document×28603366
8/7リリース版s過去案件_参考探索_標準「類似案件を探して」で過去のロック社の案件が少なくとも1つ探せるかstandard100%(1/1)802457391search_matters×12522033
8/7リリース版s法律相談_初期分析_高速GDPR案件で「法的論点を洗い出して」fast66.7%(2/3)32599256738search_matters×4 / search_incomplete_matters×2 / search_laws×217285198個人データ移転の適法性(GDPR)
8/7リリース版s法律相談_初期分析_思考GDPR案件で「法的論点を洗い出して」thinking100%(3/3)30474240086search_laws×3 / get_law_text×2 / search_matters×121904276
8/7リリース版s法律相談_初期分析_標準GDPR案件で「法的論点を洗い出して」standard66.7%(2/3)28846236678search_laws×3 / get_law_text×2 / search_matters×2 / search_incomplete_matters×123032876個人データ移転の適法性(GDPR)
8/7リリース版ヒアリング_ロック社参考_標準ロック社とのLLM技術に関する開発委託契約書の締結において、過去論点を踏まえて損害賠償の話をヒアリング事項にできるかstandard100%(1/1)14062101411search_matters×11153806
8/7リリース版ヒアリング案_メール文案_標準事業部向けの平易なメール文面依頼standard100%(3/3)60254712001313
8/7リリース版ヒアリング案_作成_標準ロック社とのLLM技術に関する開発委託契約書の締結において、単純に損害賠償の話をヒアリング事項にできるかstandard100%(1/1)6021558000441
8/7リリース版過去案件_ロック社LLM_標準ロック社のLLM技術案件、という指定されたお題で残らず探せるかstandard100%(1/1)802549881search_matters×11112926
8/7リリース版法律相談_ヒアリング案_標準GDPR案件で法的論点洗い出し後のヒアリング文作成依頼standard100%(1/1)80346991001043
8/7リリース版法律相談_英語化_標準GDPR案件でのヒアリング文面の英訳standard100%(1/1)80356653001382
8/7リリース版論点整理_解決経緯_標準ロック社とのLLM技術に関する開発委託契約書の締結において、損害賠償の話を過去経緯から探せるかstandard100%(2/2)18054139653get_document×38073282
8/21リリース版(思考モード導入)GDPR_正当な利益_標準GDPR案件での、legitimate interestsに対する反応standard100%(1/1)22083186001search_laws×18772606
8/21リリース版(思考モード導入)GDPR_注意点_標準GDPR案件で、注意点を聞いて、個人データ移転が許められる場合の基準(GDPR44条以下)に言及できるかどうかstandard100%(1/1)28105259881search_matters×11191998
8/21リリース版(思考モード導入)sヒアリング事項_検討_標準ヒアリングショートカットが返す内容standard100%(1/1)34140289076get_document×2 / search_documents×2 / get_matter_timelines×1 / search_matters×112184015
8/21リリース版(思考モード導入)s過去案件_参考探索_標準「類似案件を探して」で過去のロック社の案件が少なくとも1つ探せるかstandard100%(1/1)20069162991search_matters×11123658
8/21リリース版(思考モード導入)s法律相談_初期分析_高速GDPR案件で「法的論点を洗い出して」fast100%(3/3)404753562912get_law_text×5 / search_matters×3 / search_documents×2 / search_incomplete_matters×1 / search_laws×117343112
8/21リリース版(思考モード導入)s法律相談_初期分析_思考GDPR案件で「法的論点を洗い出して」thinking100%(3/3)906678502018get_law_text×10 / search_incomplete_matters×3 / search_matters×3 / search_laws×221673480
8/21リリース版(思考モード導入)s法律相談_初期分析_標準GDPR案件で「法的論点を洗い出して」standard66.7%(2/3)525204855413get_law_text×5 / search_matters×3 / search_incomplete_matters×2 / search_laws×2 / search_documents×115342432個人データ移転の適法性(GDPR)
8/21リリース版(思考モード導入)ヒアリング_ロック社参考_標準ロック社とのLLM技術に関する開発委託契約書の締結において、過去論点を踏まえて損害賠償の話をヒアリング事項にできるかstandard100%(1/1)30168273413get_document×2 / search_matters×16072220
8/21リリース版(思考モード導入)ヒアリング案_メール文案_標準事業部向けの平易なメール文面依頼standard100%(3/3)1409712210001887
8/21リリース版(思考モード導入)ヒアリング案_作成_標準ロック社とのLLM技術に関する開発委託契約書の締結において、単純に損害賠償の話をヒアリング事項にできるかstandard100%(1/1)1608714044002043
8/21リリース版(思考モード導入)過去案件_ロック社LLM_標準ロック社のLLM技術案件、という指定されたお題で残らず探せるかstandard100%(1/1)1238596021search_matters×1962687
8/21リリース版(思考モード導入)法律相談_ヒアリング案_標準GDPR案件で法的論点洗い出し後のヒアリング文作成依頼standard100%(1/1)120411123600805
8/21リリース版(思考モード導入)法律相談_英語化_標準GDPR案件でのヒアリング文面の英訳standard100%(1/1)10045922100824
8/21リリース版(思考モード導入)論点整理_解決経緯_標準ロック社とのLLM技術に関する開発委託契約書の締結において、損害賠償の話を過去経緯から探せるかstandard100%(2/2)42148349457get_document×6 / get_matter_timelines×122394964
9/7リリース版GDPR_正当な利益_標準GDPR案件での、legitimate interestsに対する反応standard100%(1/1)1811116121001990
9/7リリース版GDPR_注意点_標準GDPR案件で、注意点を聞いて、個人データ移転が許められる場合の基準(GDPR44条以下)に言及できるかどうかstandard100%(1/1)3216529330002835
9/7リリース版sヒアリング事項_検討_標準ヒアリングショートカットが返す内容standard100%(1/1)38200317896get_document×2 / search_documents×2 / get_matter_timelines×1 / search_matters×133053106
9/7リリース版s過去案件_参考探索_標準「類似案件を探して」で過去のロック社の案件が少なくとも1つ探せるかstandard100%(1/1)16106147971search_matters×11081201
9/7リリース版s法律相談_初期分析_高速GDPR案件で「法的論点を洗い出して」fast100%(3/3)34169298597get_law_text×2 / search_incomplete_matters×2 / search_matters×2 / search_laws×114222888
9/7リリース版s法律相談_初期分析_思考GDPR案件で「法的論点を洗い出して」thinking66.7%(2/3)11568910408523get_law_text×11 / search_matters×4 / search_laws×3 / search_documents×2 / search_incomplete_matters×2 / get_matter×140607544個人データ移転の適法性(GDPR)
9/7リリース版s法律相談_初期分析_標準GDPR案件で「法的論点を洗い出して」standard100%(3/3)688026177713get_law_text×4 / search_matters×3 / search_documents×2 / search_incomplete_matters×2 / search_laws×217605265
9/7リリース版ヒアリング_ロック社参考_標準ロック社とのLLM技術に関する開発委託契約書の締結において、過去論点を踏まえて損害賠償の話をヒアリング事項にできるかstandard100%(1/1)30108268113get_document×2 / search_matters×16632634
9/7リリース版ヒアリング案_メール文案_標準事業部向けの平易なメール文面依頼standard100%(3/3)1410112206001895
9/7リリース版ヒアリング案_作成_標準ロック社とのLLM技術に関する開発委託契約書の締結において、単純に損害賠償の話をヒアリング事項にできるかstandard100%(1/1)1407712060002017
9/7リリース版過去案件_ロック社LLM_標準ロック社のLLM技術案件、という指定されたお題で残らず探せるかstandard100%(1/1)18117172291search_matters×1105783
9/7リリース版法律相談_ヒアリング案_標準GDPR案件で法的論点洗い出し後のヒアリング文作成依頼standard100%(1/1)120601133400726
9/7リリース版法律相談_英語化_標準GDPR案件でのヒアリング文面の英訳standard100%(1/1)10051928600765
9/7リリース版論点整理_解決経緯_標準ロック社とのLLM技術に関する開発委託契約書の締結において、損害賠償の話を過去経緯から探せるかstandard100%(2/2)46551391069get_document×8 / get_matter_timelines×145982847
9/8develop(Gemini3.8)GDPR_正当な利益_標準GDPR案件での、legitimate interestsに対する反応standard100%(1/1)28221252691search_laws×17912161
9/8develop(Gemini3.8)GDPR_注意点_標準GDPR案件で、注意点を聞いて、個人データ移転が許められる場合の基準(GDPR44条以下)に言及できるかどうかstandard100%(1/1)281442715300991
9/8develop(Gemini3.8)sヒアリング事項_検討_標準ヒアリングショートカットが返す内容standard100%(1/1)32152290786get_document×2 / search_documents×2 / get_matter×1 / search_matters×114431631
9/8develop(Gemini3.8)s過去案件_参考探索_標準「類似案件を探して」で過去のロック社の案件が少なくとも1つ探せるかstandard100%(1/1)22112199511search_matters×11002061
9/8develop(Gemini3.8)s法律相談_初期分析_高速GDPR案件で「法的論点を洗い出して」fast100%(3/3)48199417078search_matters×3 / search_incomplete_matters×2 / search_laws×2 / get_matter×119514541
9/8develop(Gemini3.8)s法律相談_初期分析_思考GDPR案件で「法的論点を洗い出して」thinking100%(3/3)16094115272616get_law_text×7 / search_incomplete_matters×3 / search_matters×3 / search_laws×2 / get_matter×139044311
9/8develop(Gemini3.8)s法律相談_初期分析_標準GDPR案件で「法的論点を洗い出して」standard100%(3/3)683756289012get_law_text×4 / search_laws×3 / search_matters×3 / get_matter×1 / search_incomplete_matters×128772608
9/8develop(Gemini3.8)ヒアリング_ロック社参考_標準ロック社とのLLM技術に関する開発委託契約書の締結において、過去論点を踏まえて損害賠償の話をヒアリング事項にできるかstandard100%(1/1)24147226851search_matters×1861376
9/8develop(Gemini3.8)ヒアリング案_メール文案_標準事業部向けの平易なメール文面依頼standard100%(3/3)120599928002131
9/8develop(Gemini3.8)ヒアリング案_作成_標準ロック社とのLLM技術に関する開発委託契約書の締結において、単純に損害賠償の話をヒアリング事項にできるかstandard100%(1/1)1406712389001678
9/8develop(Gemini3.8)過去案件_ロック社LLM_標準ロック社のLLM技術案件、という指定されたお題で残らず探せるかstandard100%(1/1)14066127941search_matters×1921180
9/8develop(Gemini3.8)法律相談_ヒアリング案_標準GDPR案件で法的論点洗い出し後のヒアリング文作成依頼standard100%(1/1)1406611730002336
9/8develop(Gemini3.8)法律相談_英語化_標準GDPR案件でのヒアリング文面の英訳standard100%(1/1)100568829001227
9/8develop(Gemini3.8)論点整理_解決経緯_標準ロック社とのLLM技術に関する開発委託契約書の締結において、損害賠償の話を過去経緯から探せるかstandard100%(2/2)40195340046get_document×5 / get_matter_timelines×128703321
cursor/slim-system-instruction-e055GDPR_正当な利益_標準GDPR案件での、legitimate interestsに対する反応standard100%(1/1)2410222944001158
cursor/slim-system-instruction-e055GDPR_注意点_標準GDPR案件で、注意点を聞いて、個人データ移転が許められる場合の基準(GDPR44条以下)に言及できるかどうかstandard100%(1/1)30130281132search_documents×1 / search_matters×16571360
cursor/slim-system-instruction-e055sヒアリング事項_検討_標準ヒアリングショートカットが返す内容standard100%(1/1)281432525810get_document×6 / search_documents×2 / get_matter_timelines×1 / search_matters×115211364
cursor/slim-system-instruction-e055s過去案件_参考探索_標準「類似案件を探して」で過去のロック社の案件が少なくとも1つ探せるかstandard100%(1/1)18070167641search_matters×1791227
cursor/slim-system-instruction-e055s法律相談_初期分析_高速GDPR案件で「法的論点を洗い出して」fast100%(3/3)26550220816get_law_text×2 / search_incomplete_matters×2 / search_laws×1 / search_matters×112593210
cursor/slim-system-instruction-e055s法律相談_初期分析_思考GDPR案件で「法的論点を洗い出して」thinking100%(3/3)16317015836723get_law_text×11 / search_incomplete_matters×4 / search_matters×4 / search_documents×2 / search_laws×220792724
cursor/slim-system-instruction-e055s法律相談_初期分析_標準GDPR案件で「法的論点を洗い出して」standard66.7%(2/3)667876276915get_law_text×7 / search_laws×3 / search_matters×3 / search_incomplete_matters×219212097個人データ移転の適法性(GDPR)
cursor/slim-system-instruction-e055ヒアリング_ロック社参考_標準ロック社とのLLM技術に関する開発委託契約書の締結において、過去論点を踏まえて損害賠償の話をヒアリング事項にできるかstandard100%(1/1)32180297376get_document×4 / search_matters×28111632
cursor/slim-system-instruction-e055ヒアリング案_メール文案_標準事業部向けの平易なメール文面依頼standard100%(3/3)1208010011002069
cursor/slim-system-instruction-e055ヒアリング案_作成_標準ロック社とのLLM技術に関する開発委託契約書の締結において、単純に損害賠償の話をヒアリング事項にできるかstandard100%(1/1)1608213989002093
cursor/slim-system-instruction-e055過去案件_ロック社LLM_標準ロック社のLLM技術案件、という指定されたお題で残らず探せるかstandard0%(0/1)18082151753search_incomplete_matters×1 / search_matters×1 / suggest_keywords×15672340ロック社LLM案件の参照
cursor/slim-system-instruction-e055法律相談_ヒアリング案_標準GDPR案件で法的論点洗い出し後のヒアリング文作成依頼standard100%(1/1)140601342600634
cursor/slim-system-instruction-e055法律相談_英語化_標準GDPR案件でのヒアリング文面の英訳standard100%(1/1)100328719001313
cursor/slim-system-instruction-e055論点整理_解決経緯_標準ロック社とのLLM技術に関する開発委託契約書の締結において、損害賠償の話を過去経緯から探せるかstandard100%(2/2)401773628612get_document×10 / get_matter_timelines×1 / search_matters×121921699

生データ

試行ごとの ALL 集計と、質問CSV・answers.tsv・judgements.tsv。質問CSVはダウンロードできる。

labelrun_idALL 精度ALL total_msファイル
8/7リリース版chat/20260807_release91.3%(21/23)15635local_regression.csv / answers.tsv / judgements.tsv / summary.tsv
8/21リリース版(思考モード導入)chat/20260821_release95.7%(22/23)30359local_regression.csv / answers.tsv / judgements.tsv / summary.tsv
9/7リリース版chat/20260907_release95.7%(22/23)33450local_regression.csv / answers.tsv / judgements.tsv / summary.tsv
9/8develop(Gemini3.8)chat/20260908_develop100%(23/23)36914local_regression.csv / answers.tsv / judgements.tsv / summary.tsv
cursor/slim-system-instruction-e055chat/20260910_slim91.3%(21/23)35689local_regression.csv / answers.tsv / judgements.tsv / summary.tsv