シナリオ一覧測り方カタログ

Apple M5 Max / メモリ128GB

測定 73件

この機材で基準を満たすシナリオと同時本数

タスク定義が変わる前に測った結果が 1件ある。投げた仕事が別物なので、この表には入れていない（下の実測には残してある）。

シナリオモデル同時本数測定日
policy-lookup-jaornith-ai/Ornith-1.5-35B-A3B-GGUF1本2026-08-30測定を見る
long-report-jaornith-1.5-35b-a3b1本2026-08-28測定を見る
policy-lookup-jaornith-1.5-35b-a3b1本2026-08-28測定を見る
contract-type-jaornith-1.5-35b-a3b1本2026-08-28測定を見る
contract-terms-json-jaornith-1.5-35b-a3b1本2026-08-28測定を見る

下は、応答時間は基準内で、正答率の95%区間が基準をまたいでいる構成。件数が足りず、満たしたとも割ったとも言えないので上の表には数えていない。

シナリオモデル同時本数測定日
payslip-json-jaornith-1.5-35b-a3b1本2026-08-30測定を見る

参考: 実務ではコードでやる仕事

基準を満たしたものはまだありません。

実測

README「表の読み方」・METHOD.md「測っている値」より

p95 は補間せず、実際に測れた値をそのまま使います。補間すると、測っていない値が表に出てしまうためです。

シナリオモデル測定日基準を満たす最大本数
pii-masking-jagoogle/gemma-4-12b-qat2026-08-30なし測定を見る
payslip-json-jagoogle/gemma-4-12b-qat2026-08-30なし測定を見る
pii-masking-jaornith-1.5-35b-a3b2026-08-30なし測定を見る
payslip-json-jaornith-1.5-35b-a3b2026-08-30なし測定を見る
policy-lookup-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
bank-statement-json-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
contract-type-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
expense-category-total-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
contract-renewal-due-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
contract-terms-json-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
memo-actions-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
expense-account-code-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
line-total-audit-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
company-name-normalize-jalmstudio-community/gemma-4-12B-it-QAT-GGUF2026-08-30なし測定を見る
policy-lookup-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-301本測定を見る
bank-statement-json-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
contract-type-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
expense-category-total-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
contract-renewal-due-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
contract-terms-json-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
memo-actions-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
expense-account-code-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
line-total-audit-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
company-name-normalize-jaornith-ai/Ornith-1.5-35B-A3B-GGUF2026-08-30なし測定を見る
policy-lookup-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
bank-statement-json-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
contract-type-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
expense-category-total-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
contract-renewal-due-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
contract-terms-json-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
memo-actions-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
expense-account-code-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
line-total-audit-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
company-name-normalize-jalmstudio-community/gemma-4-31B-it-QAT-GGUF2026-08-30なし測定を見る
contract-terms-json-japoolside/laguna-s-2.12026-08-29なし測定を見る
memo-actions-japoolside/laguna-s-2.12026-08-29なし測定を見る
expense-account-code-japoolside/laguna-s-2.12026-08-29なし測定を見る
line-total-audit-japoolside/laguna-s-2.12026-08-29なし測定を見る
company-name-normalize-japoolside/laguna-s-2.12026-08-29なし測定を見る
policy-lookup-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
contract-type-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
expense-category-total-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
contract-terms-json-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
memo-actions-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
expense-account-code-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
line-total-audit-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
company-name-normalize-jagoogle/gemma-4-31b-qat2026-08-29なし測定を見る
policy-lookup-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
contract-type-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
expense-category-total-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
contract-terms-json-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
memo-actions-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
expense-account-code-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
line-total-audit-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
company-name-normalize-jaqwen/qwen3.8-27b2026-08-29なし測定を見る
long-report-jaornith-1.5-35b-a3b2026-08-281本測定を見る
invoice-json-jaornith-1.5-35b-a3b2026-08-281本測定を見る
policy-lookup-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
contract-type-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
expense-category-total-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
contract-terms-json-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
memo-actions-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
expense-account-code-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
line-total-audit-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
company-name-normalize-jagoogle/gemma-4-12b-qat2026-08-28なし測定を見る
policy-lookup-jaornith-1.5-35b-a3b2026-08-281本測定を見る
contract-type-jaornith-1.5-35b-a3b2026-08-281本測定を見る
expense-category-total-jaornith-1.5-35b-a3b2026-08-28なし測定を見る
contract-terms-json-jaornith-1.5-35b-a3b2026-08-281本測定を見る
memo-actions-jaornith-1.5-35b-a3b2026-08-28なし測定を見る
expense-account-code-jaornith-1.5-35b-a3b2026-08-28なし測定を見る
line-total-audit-jaornith-1.5-35b-a3b2026-08-28なし測定を見る
company-name-normalize-jaornith-1.5-35b-a3b2026-08-28なし測定を見る