AI 모델 단가표만 보고 예산을 짜면 왜 틀릴까요?

저희가 잰 값에서 이 일이 그대로 나왔어요. 한 모델은 벤더 공식 단가가 다른 모델보다 입력·출력 양쪽 다 낮은데, 같은 수업자료 과제 100건에서 1.6배가 더 나왔어요. 답을 3.1배 길게 썼기 때문이에요.

교과·학년·단원과 성취기준을 넣으면 한 차시 수업 초안이 나오게 하는 과제를 정하고, 네 곳의 AI 회사가 만든 모델 아홉 개에 똑같이 시켰어요. 단가는 발행 직전에 각 벤더 공식 요금 페이지와 한 번 더 대조했어요. 학습목표 2개와 도입·전개·정리 활동, 평가문항 3개가 다 들어 있을 때만 완료로 셌고, 조건을 못 채웠거나 중간에 잘린 답은 값에서 뺐어요. 스무 개 조합 전부 여섯 번씩 완료했습니다.

1. 1

   완료 조건을 먼저 글로 적는다

   무엇이 들어 있어야 완료인지 정하지 않으면, 짧게 답한 모델이 그냥 싼 모델로 보여요. 길이는 완료 조건이 아니에요.

2. 2

   같은 입력을 여러 번 돌린다

   한 번만 돌리면 그날 운이 값이 돼요. 여러 번 돌려 가운데 값을 보세요.

3. 3

   실패한 호출을 따로 센다

   실패를 0원으로 섞으면 제일 많이 실패한 모델이 제일 싼 모델이 됩니다.

4. 4

   실제로 쓸 과제로 잰다

   남의 벤치마크 점수가 아니라 우리 학교가 실제로 시킬 일로 재야 예산이 맞아요.

직접 재보시는 게 가장 정확하지만, 자릿수 감각만 먼저 잡고 싶다면 예산 계산기에 예산과 인원을 넣어보세요. 한 사람에게 얼마가 돌아가고 한 달 한도를 얼마로 걸면 예산을 안 넘는지 나와요. 모델별 단가와 실측 비용은 같은 숫자를 모델 단위로 볼 수 있는 화면이에요.

저희가 재보고 나서 가장 크게 바뀐 생각은, 예산에서 신경 써야 할 대상이 금액이 아니라 사용 방식이라는 거예요. 위 표처럼 질문하고 답을 받는 방식은 한 건당 비용을 재서 곱해볼 수 있어요. 반면 스스로 파일을 열고 고치고 다시 돌리는 자동 코딩 도구는 한 번 돌릴 때 그런 질문을 아주 많이 하게 돼서, 얼마가 될지 저희도 숫자로 약속하지 않아요. 그래서 이 둘은 예산 칸을 나눠서 잡으셔야 해요.

1. 1

   쓸 사람 수와 기간을 센다

   한 학기인지 일 년인지에 따라 나눌 금액이 달라져요.

2. 2

   사람마다 한 달 한도를 건다

   총액이 아니라 한도가 예산을 지켜요. 한 사람이 다 쓰는 일이 안 생겨요.

3. 3

   가벼운 모델로 시작한다

   부족하다고 느껴질 때 올리면 되고, 반대 방향보다 훨씬 쌉니다.

4. 4

   자동 코딩 도구는 따로 잡는다

   채팅형과 같은 칸에 넣으면 예산이 한 번에 어긋나요.

저희가 학교와 기관에 계정을 발급하면서 한도를 같이 걸어두는 이유가 여기 있어요. 총액만 정해두면 한 사람이 며칠 만에 다 쓸 수 있거든요. 저희는 공식 판매 파트너가 아니라 학교가 번거로운 절차 없이 쓰도록 돕는 구매대행이고, 선불 크레딧이라 충전해둔 금액을 넘겨 청구되지 않아요.