모델 종류와 생성 제어
관련 기초 개념
개요
업무 제약으로 모델 후보와 설정을 좁힌다.
먼저 토큰·문맥·Transformer의 핵심 개념을 확인하세요.
핵심 개요
모델은 텍스트·이미지·음성 등 지원 입력과 작업, 실행 환경을 기준으로 선택합니다. 기반 모델과 지시를 따르도록 조정된 모델, 큰 모델과 작은 모델의 구분은 후보를 좁히지만 실제 품질을 결정하지는 않습니다.
생성 제어는 출력 길이·형식·샘플링에 영향을 줍니다. 낮은 temperature가 모든 환경에서 동일한 출력이나 사실성을 보장하지 않으며, 모델마다 지원 매개변수가 다를 수 있습니다.
필요한 용어
- Temperature: 지원되는 모델에서 출력 샘플링 분포를 조절하는 매개변수
- 기반 모델: 넓은 자료에서 사전 학습한 모델로 작업용 조정의 출발점이 될 수 있는 모델
작동 과정
- 필수 입력 종류·출력 계약·지역·배포 제약을 정합니다.
- 지원되는 생성 설정을 문서와 최소 호출로 확인합니다.
- 같은 업무 요청으로 품질·지연·비용을 비교합니다.
풀이 예제
아래 입력과 기록은 직접 만든 교육용 가상 자료입니다.
입력·조건
영수증 사진에서 품목을 추출해야 하는데 텍스트 전용 모델과 이미지 입력 모델 두 후보가 있습니다.
판단·결과
이미지 입력 모델 또는 OCR 후 텍스트 처리 흐름을 비교합니다. 모델의 이름이나 크기보다 필요한 입력 지원 여부를 먼저 검사합니다.
이렇게 판단한 이유
지원하지 않는 입력은 프롬프트를 바꾸어도 직접 처리되지 않습니다. OCR을 추가하면 글자·레이아웃 누락이라는 다른 실패 경로도 생깁니다.
흔한 실패와 복구
큰 모델을 먼저 확정한 뒤 요구사항을 맞추지 않습니다. 입력 지원·실행 제약을 통과한 후보끼리 측정합니다.
확인 문제
Temperature를 낮춘 후에도 필요한 검증은?
- 사실 확인을 생략하는 것
- 모든 실행의 결과가 같다고 가정하는 것
- 업무 정답과 근거·출력 계약을 대조하는 검증
풀이 기록 기능을 불러오는 중…
해설 보기
정답: C. 업무 정답과 근거·출력 계약을 대조하는 검증
업무 정답과 근거·출력 계약을 대조하는 검증 큰 모델을 먼저 확정한 뒤 요구사항을 맞추지 않습니다. 입력 지원·실행 제약을 통과한 후보끼리 측정합니다.
참고 자료
- Google ML Crash Course — 학습 방식·회귀·분류·손실·평가의 기초.
- NVIDIA: NCA-AMAD exam topics — 모델·데이터·추론·맞춤화·에이전트·운영 범위.
자료 확인: 2026-10-21. 사례·문항·실습은 자체 제작했습니다. 외부 서비스 호출과 실제 모델 품질 측정은 학습자가 별도 환경에서 수행합니다.
직접 적용하기
교육용 가상 상황
단말기에서 짧은 분류 결과가 필요합니다. 큰 원격 모델과 작은 로컬 모델을 비교할 실험과 temperature를 낮춘 뒤 남는 검증을 설계하세요.
업무 제약으로 모델 후보와 설정을 좁힌다. 판단 근거와 검증할 결과를 적으세요.
답안 저장 기능을 불러오는 중…
검증 기준과 해설 보기
- 오프라인·메모리·지연 제약을 명시한다
- 같은 분류셋으로 품질과 실행 자원을 비교한다
- 낮은 temperature를 정확성 보장으로 해석하지 않는다
단말기 메모리와 응답 지연, 네트워크 사용 가능 조건을 먼저 적습니다. 같은 라벨 자료로 분류 오류와 지연 분포를 측정하고 실패 시 처리도 검증합니다. 생성 설정을 낮춰도 근거 부족·오분류는 남으므로 정답 자료와 대조합니다.
복습하기
- 모델 크기만으로 선택할 수 있나요?
- 생성 설정은 어디서 확인하나요?
- 이미지 입력을 지원하지 않으면 대안은 무엇인가요?
답변 확인 기준
- 모델 크기만으로 선택할 수 있나요?
입력 지원·자원·품질을 함께 봐야 합니다.
- 생성 설정은 어디서 확인하나요?
선택 모델과 API의 공식 계약에서 확인합니다.
- 이미지 입력을 지원하지 않으면 대안은 무엇인가요?
OCR 같은 별도 처리 흐름을 구성하고 누락을 검증합니다.