왜 프롬프트 수정이 중요한가?

AI 심의 품질은 프롬프트의 품질에서 시작됩니다

여러분은 매일 콘텐츠 심의 업무를 합니다. 최근 MISO라는 AI 플랫폼을 통해 이 업무에 AI가 투입되었죠. 그런데 AI가 내놓는 판단이 늘 만족스럽지는 않을 겁니다. 어떤 콘텐츠는 잡아야 하는데 통과됐고, 어떤 콘텐츠는 괜찮은데 걸렸습니다.

그 차이를 만드는 핵심 변수가 바로 프롬프트입니다. AI에게 "어떻게 심의하라"고 알려주는 지시문입니다. 이 지시문을 여러분이 직접 수정할 수 있다면 어떨까요?

오늘의 학습 목표

MISO란?

GS리테일의 내부 AI 플랫폼 — 심의 업무의 AI 파트너

MISO에서 프롬프트를 수정할 수 있다는 것의 의미

프롬프트 수정 사이클

4단계로 돌아가는 반복 개선 루프

Step 1 — 평가셋 확인: 어디서 틀렸는가?

평가셋은 여러분이 이미 정답을 알고 있는 케이스 모음입니다. AI의 결과와 정답을 비교해서 어떤 유형의 오류가 발생하는지 파악합니다.

평가셋 읽는 법

AI의 응답과 정답 레이블을 나란히 놓고 아래 질문을 해보세요.

• 어떤 유형의 콘텐츠에서 오류가 집중되는가?
• 오류가 된 콘텐츠에는 공통적인 특징이 있는가?
• AI가 헷갈리는 이유를 현재 프롬프트에서 찾을 수 있는가?

Step 2 — 프롬프트 수정: 지시를 어떻게 바꿀까?

오류 패턴을 파악했다면 이제 프롬프트를 수정합니다. AI에게 무엇을 추가로 알려줘야 할지 생각해보세요.

아래 홈쇼핑 방송 스크립트를 검토하고
심의 기준에 맞는지 판단하세요.

문제가 있으면 "부적합", 없으면 "적합"으로
답하세요.

당신은 홈쇼핑 방송 심의 전문가입니다.
아래 방송 스크립트가 다음 기준을 위반하는지
각각 확인하세요:

1. 효능·효과 과장 표현 (예: "완치", "치료")
2. 최상급 비교 표현 (예: "국내 최초", "업계 1위")
3. 허위·과장 가격 비교 표현

위반 항목이 하나라도 있으면 "부적합 — [위반 항목]"
모두 없으면 "적합"으로 답하세요.

Step 3 — 결과 비교: 실제로 나아졌는가?

프롬프트를 수정했다고 해서 무조건 좋아지지는 않습니다. 반드시 평가셋을 다시 돌려서 비교하세요.

Step 4 — 개선 반복: 더 개선할 곳은?

한 사이클로 완벽해지지 않습니다. 개선된 결과를 다시 검토하고, 남아있는 오류 패턴을 찾아 다음 수정을 준비합니다.

프롬프트 수정 5가지 원칙

좋은 프롬프트가 갖춰야 할 조건들

다음 방송 스크립트를 검토하세요.

당신은 홈쇼핑 방송 심의 전문가로,
방심위 심의 규정과 표시광고법을
15년간 적용해온 담당자입니다.

당신은 홈쇼핑 방송 심의 전문가입니다.
방송법, 표시광고법, 방심위 심의 규정에 따라
콘텐츠의 적합성을 판단합니다.
심의 경험을 바탕으로 명확하고 일관된 기준을 적용하세요.

아래 기준에 따라 심의하세요:

[부적합 판정 기준]
- 효능·효과를 과장하거나 허위로 서술하는 표현
  예: "완치", "치료", "100% 효과 보장"
- 근거 없는 최상급 비교 표현
  예: "국내 최초", "세계 최고", "업계 유일"
- 의약품으로 오인할 수 있는 표현
  예: "약처럼 효과", "의사도 추천"

[적합 판정 기준]
- 기능성을 사실 기반으로 서술한 경우
- 개인차가 있음을 명시한 경우
- 인증 사실을 정확하게 표기한 경우

다음 형식으로만 답하세요. 다른 설명은 추가하지 마세요.

판정: [적합 / 부적합 / 주의]
위반 항목: [해당 없음 / 위반 기준 이름]
위반 문구: [해당 없음 / 원문 그대로]
수정 제안: [해당 없음 / 수정된 표현]

아래 예시를 참고해서 심의하세요:

[예시 1 — 부적합]
스크립트: "이 제품을 드시면 관절 통증이 완전히 사라집니다."
판정: 부적합
이유: "완전히 사라집니다"는 치료 효과를 확정하는 허위 표현

[예시 2 — 적합]
스크립트: "일부 사용자에게서 관절 불편감 완화에 도움이 됐다는 후기가 있습니다."
판정: 적합
이유: 개인차를 인정하고, 후기를 근거로 명시함

[예시 3 — 주의]
스크립트: "국내에서 많은 분들이 찾는 제품입니다."
판정: 주의
이유: 모호한 인기 표현으로 오해 소지 있으나 직접적 위반은 아님. 수정 권고.

[예외 처리 규칙]
아래 경우는 일반 기준의 예외로 처리합니다:

1. 공인 인증 언급:
   식품의약품안전처, 방심위 등 공인 기관의 인증 사실을
   정확하게 인용한 경우 → 적합

2. 고객 후기 인용:
   "개인 경험이며 결과는 다를 수 있다"는 고지가 있고
   효과를 확정하지 않는 경우 → 적합

3. 카테고리 구분:
   건강기능식품(식약처 기능성 인정 제품)은 기능성 표현 허용.
   일반식품은 기능성 표현 불가.

실습 가이드

지금부터 20분. 실제 수정 사이클을 한 바퀴 돌아봅니다

실습 시나리오

아래는 현재 MISO에서 사용 중인 프롬프트로 돌린 평가셋 결과입니다. 어떤 문제가 보이시나요?

실습 3단계

Action 2: Claude로 프롬프트 수정 도움받기

프롬프트를 어떻게 고쳐야 할지 막막하다면 Claude에게 도움을 요청하세요. 아래 프롬프트를 복사해서 Claude.ai 또는 MISO 일반 대화창에 붙여넣으세요.

📋 복사해서 붙여넣기 — Claude에게 프롬프트 수정 요청

나는 홈쇼핑 방송 심의팀 담당자입니다.
MISO AI 플랫폼에서 사용하는 심의 프롬프트를 개선하고 싶습니다.

[현재 프롬프트]
(여기에 현재 MISO 프롬프트 붙여넣기)

[발견한 오류]
- 식약처 인증 언급 콘텐츠를 AI가 부적합으로 잘못 판정함
- 개인차 고지가 있는 고객 후기를 AI가 부적합으로 잘못 판정함
- "업계 최초" 같은 근거 없는 최상급 표현을 AI가 통과시킴

위 오류를 해결하도록 프롬프트를 수정해줘.
수정 시 다음을 지켜줘:
1. 기존 판단 기준은 그대로 유지할 것
2. 새 규칙은 명확하고 짧게 추가할 것
3. 수정 전/후를 나란히 보여줄 것

Action 3: 수정 프롬프트를 MISO에 적용하고 재검증

1. MISO에서 해당 심의 AI 설정 화면으로 이동
2. 프롬프트 편집 창에 수정된 프롬프트 입력
3. 저장 후 평가셋 5개 케이스를 순서대로 다시 실행
4. 결과를 아래 표에 기록하고 개선 여부 확인

프롬프트는 살아있는 문서입니다

오늘 배운 것 최종 체크리스트

• 평가셋에서 오류 패턴을 찾을 수 있다
• 거짓 양성 vs 거짓 음성의 차이를 안다
• 프롬프트에 역할(Role)을 명시할 수 있다
• 금지/허용 기준을 프롬프트에 구체적으로 담을 수 있다
• 출력 형식을 고정하는 지시를 쓸 수 있다
• Few-shot 예시를 프롬프트에 포함할 수 있다
• 엣지 케이스 예외 처리 규칙을 추가할 수 있다
• 수정 후 평가셋으로 반드시 검증한다는 것을 안다