LLM-as-a-judgeによる自動採点システムの運用で直面した、スコアの信頼性問題とその解決策の模索。人間による人手採点との突き合わせ運用で判明した、運用の継続困難という課題と、改善に向けた考察。