PROMPTS
[ ] 안에 내 업무를 붙여 넣고 복사하세요. 문장 전체가 그대로 복사돼요.
새 업무를 AI로 바꿀지 처음 검토할 때
아래 업무 설명을 읽고, 단계별로 나눠 표로 정리해 줘. 각 단계마다 다음 열을 채워 줘. - 단계 이름 - 분류: 대체(AI가 수행, 사람은 표본 감사) / 보강(AI가 초안, 사람이 결정) / 제외(룰·사람) - 근거: 결정성, 오류 비용, 감사 추적, 빈도, 롤백 중 무엇 때문인지 한 줄 확신이 없는 단계는 분류하지 말고 "질문"이라고 적고, 무엇을 알아야 정할 수 있는지 써 줘. [업무 설명]
1차 매핑을 끝낸 뒤 근거를 단단하게 만들 때
아래는 내가 업무별로 정한 분류와 근거야. 정답을 알려 주지 말고, 반박만 해 줘. 규칙 - 반박마다 강도(강·중·약)와 어느 축(결정성·오류 비용·감사 추적·빈도·롤백)을 건드리는지 표시 - "대체"로 정한 항목은 실패했을 때 되돌릴 수 있는지 꼭 따져 줘 - 반박할 게 없으면 억지로 만들지 말고 "반박 없음"이라고 적어 줘 나는 반박마다 수용/기각과 사유를 남길 거야. [내 분류표]
에이전트에게 일을 맡기기 전 요구사항을 정리할 때
아래 한 줄 요청을 에이전트가 그대로 실행할 수 있는 Spec으로 바꿔 줘. 반드시 들어갈 항목 1. 목적: 이 일이 끝나면 무엇이 달라지는가 2. 입력: 무엇을 받고, 어디서 가져오는가 3. 출력: 결과물의 형식과 예시 한 개 4. 완료 조건: 사람이 무엇을 보고 "끝났다"고 판단하는가 5. 하면 안 되는 것: 쓰기·삭제·외부 발송 등 금지 행동 6. 막혔을 때: 멈추고 사람에게 물어야 하는 상황 빈 칸으로 남길 수밖에 없는 항목은 지어내지 말고 "확인 필요"라고 적어 줘. [한 줄 요청]
에이전트가 쓸 도구 목록을 정한 뒤
아래 도구 목록을 보고, 사람이 승인해야 실행되는 도구를 골라 줘. 도구마다 다음을 표로 정리해 줘. - 읽기(R)인지 쓰기(W)인지 - 잘못 실행됐을 때 영향 범위: 나 혼자 / 팀 / 고객 - 되돌리기: 쉬움 / 어려움 / 불가 - 권장 승인 수준: 자동 실행 / 사후 검토 / 실행 전 승인 / 2인 승인 - 승인자가 화면에서 꼭 확인해야 할 값 두세 가지 [도구 목록]
eval 결과에서 judge와 정답 비교가 다르게 나왔을 때
아래는 같은 케이스를 자동 채점(judge)과 정답 비교(L1)로 각각 판정한 결과야. 두 판정이 갈린 케이스만 골라서 원인을 분류해 줘. 분류 - judge가 너그러움: 형식은 맞지만 내용이 틀렸는데 통과시킴 - judge가 엄격함: 표현만 다르고 내용은 맞는데 떨어뜨림 - 정답 자체가 애매함: 사람이 다시 라벨링해야 함 마지막에 "judge 기준을 어떻게 고치면 이 갈림이 줄어드는지" 한두 줄로 제안해 줘. [eval 결과]