Claude로 평가 업무를 자동화하는 법 — 프롬프트 하나로 평가 시트 생성부터 평가 데이터 분석까지
Claude Desktop에 evaluate.club MCP 서버를 연결하면 자연어 프롬프트 하나로 (1) 평가 시트 생성, (2) 심사위원 편향 분석, (3) 결과 요약까지 자동화할 수 있습니다. MCP(Model Context Protocol)는 Anthropic이 2025년 공개한 개방형 표준으로, AI 챗봇이 실제 업무 시스템에 안전하게 연결되도록 설계되었습니다. 5분 설치 후 실전 프롬프트 4가지만 익히면 평가 관리 시간을 최대 90%까지 줄일 수 있습니다.
왜 지금 Claude + MCP인가?
AI가 평가 시스템을 바꾸는 4가지 방식에서 소개한 "채점 자동화, 편향 감지, 지속적 피드백, 투명성 확보"는 더 이상 먼 미래 이야기가 아닙니다. 문제는 "개념은 알았는데 실제로 뭘 써야 하지?"였습니다. 2026년 현재 그 공백을 채우는 가장 실용적인 도구가 MCP입니다.
MCP가 기존 챗봇과 다른 점은 단순 대화가 아니라 실제 시스템을 조작한다는 것입니다. Claude가 evaluate.club에 직접 폼을 생성하고, 채점 결과를 조회하고, 편향 지표를 계산합니다. 권한은 OAuth 2.1로 제한되므로 "AI에게 모든 데이터를 넘긴다"는 걱정은 없습니다.
Step 1 — Claude Desktop에 MCP 연결 (2분)
Claude Desktop을 실행한 뒤 설정 → 커넥터 → 커스텀 커넥터 추가 버튼을 클릭합니다. 이름 필드에는 원하는 이름(예: evaluate.club)을 입력하고, URL 필드에는 아래 주소를 붙여넣은 뒤 저장합니다.
https://mcp.evaluate.club/mcp
저장한 커넥터를 처음 호출하면 브라우저가 열리며 evaluate.club 계정으로 로그인하고 권한에 동의하면 연결이 완료됩니다. 토큰은 1시간마다 자동 갱신되므로 재로그인은 필요 없습니다.
Step 2 — 프롬프트로 평가 시트 만들기
연결이 끝났다면 바로 시트를 만들어봅니다. 예를 들어 다음과 같이 요청하면 됩니다.
스타트업 피치 대회 평가 시트를 만들어줘. 항목은 팀 역량, 시장성, 기술 완성도, 발표력으로 하고 가중치는 2:3:3:2, 100점 만점으로 해줘.
Claude는 evaluate.club MCP의 create_form 도구를 호출해 실제 폼을 생성하고, 대시보드 링크를 반환합니다. 항목 문구와 가중치가 원하는 대로 나오지 않았다면 "발표력을 IR 설득력으로 바꾸고 가중치는 3으로 올려줘" 같은 후속 요청으로 update_form 툴이 자동 호출되어 기존 폼을 수정합니다. 기존에 평가 양식 빌더에서 드래그로 작업하던 과정을 대화형으로 치환하는 셈입니다.
기존 폼을 수정하는 프롬프트 예시:
지난주에 만든 "하반기 공모전" 평가 시트를 열어서, 팀 역량 섹션의 배점을 2에서 3으로 올리고 "사업 지속 가능성" 질문을 하나 추가해줘.
Step 3 — 결과를 자연어로 분석하기
평가가 끝난 뒤에는 Claude에게 결과 요약과 편향 분석을 맡길 수 있습니다. 실제로 자주 쓰이는 프롬프트 3가지입니다.
(1) 상위 팀 요약
방금 끝난 피치 대회에서 상위 10팀을 총점 순으로 요약해줘. 팀명, 총점, 두드러진 항목을 한 줄로.
(2) 편향 감지
심사위원별 평균 점수와 표준편차를 뽑고, 다른 심사위원 대비 점수가 유독 후하거나 박한 사람이 있으면 알려줘.
(3) 패턴 분석
'발표력' 항목에서 점수가 낮게 나온 팀들의 공통점이 뭐야? 심사위원 코멘트도 같이 참고해서 알려줘.
Claude는 MCP로 원본 점수를 가져오고, 자체 추론으로 편향 지표(절사 평균 대비 편차)를 계산합니다. 심사 점수 오기 대처법에서 다룬 이상치 탐지와 같은 원리이지만, 담당자가 스크립트를 직접 짜지 않아도 됩니다.
사람이 놓치면 안 되는 것
MCP가 자동화하는 것은 "집계, 요약, 편향 탐지" 같은 관리 업무입니다. 최종 수상자 결정이나 정성적 판단은 여전히 심사위원의 영역입니다. 공정한 심사 기준 만드는 3가지 방법에서 다룬 것처럼 명확한 루브릭이 없다면 AI 요약도 신뢰하기 어렵습니다.
민감한 평가(인사·성과)에서는 OAuth 권한 범위를 읽기 전용(evaluate:read)으로 제한하는 것을 권장합니다. evaluate.club MCP는 쓰기 권한을 선택적으로 허용하므로, 분석 목적에만 사용하고 싶다면 폼 생성·수정 권한을 제외하고 연결할 수 있습니다.
evaluate.club MCP로 지금 시작하기
MCP 연결 자체에는 비용이 들지 않습니다. 실제 폼을 생성할 때만 기존 이용권 크레딧이 차감되므로, 무료 크레딧으로 프롬프트 실험부터 해볼 수 있습니다. 평가 자동화를 "비전"에서 "내일 아침 업무"로 바꾸는 가장 빠른 길입니다.
자주 묻는 질문 (FAQ)
Q1: MCP가 정확히 무엇인가요?
MCP(Model Context Protocol)는 Anthropic이 2025년 공개한 개방형 표준으로, AI 챗봇이 외부 시스템·데이터에 안전하게 연결되는 방법을 규정합니다. evaluate.club MCP는 이 표준에 따라 폼 생성, 결과 조회, 편향 분석 같은 기능을 Claude 같은 AI가 호출할 수 있도록 제공합니다.
Q2: 제가 입력한 평가 데이터가 AI 학습에 사용되나요?
아니오. MCP는 Claude가 요청할 때마다 evaluate.club에 일회성 호출을 보내고, 응답을 그 대화에만 사용합니다. Anthropic의 기본 정책상 Claude Desktop 대화는 모델 학습에 재사용되지 않으며, OAuth 토큰은 사용자 계정에 종속됩니다.
Q3: Claude Pro 계정이 꼭 필요한가요?
Claude Desktop은 무료 플랜도 MCP 연결을 지원합니다. 다만 대량 프롬프트를 반복 실행하거나 긴 결과를 한 번에 분석하려면 Pro 플랜이 더 쾌적합니다.
Q4: ChatGPT나 다른 AI에서도 쓸 수 있나요?
현재 evaluate.club MCP는 Claude Desktop을 공식 지원합니다. MCP는 개방형 표준이라 다른 AI 클라이언트의 지원이 확대되고 있지만, 2026년 4월 기준 가장 안정적인 경험은 Claude Desktop에서 제공됩니다.
Q5: 프롬프트 엔지니어링을 잘 몰라도 되나요?
평범한 한국어 요청으로 충분합니다. "가중치를 바꿔줘", "상위 5팀만 보여줘" 같은 일상 문장이면 됩니다. 오히려 과도하게 구조화된 프롬프트보다 맥락을 자연스럽게 설명하는 쪽이 더 정확한 결과를 냅니다.