생성형 AI 종류 정리: 도구 이름보다 먼저 알아야 할 6가지 지도
생성형 AI는 결과물 기준으로 6가지로 나뉩니다. 분류표와 4단계 선택법으로 내 업무에 맞는 도구를 고르는 법을 정리했습니다.
생성형 AI 종류 정리부터 하면 답은 간단합니다. 결과물 기준으로 텍스트·이미지·영상·음성·코드·문서, 6가지로 나뉩니다. 도구 이름은 매달 바뀌어도 이 분류는 잘 바뀌지 않습니다. 그래서 분류부터 잡아 두면 새 서비스가 나와도 흔들리지 않습니다.
3명 중 1명
인터넷 이용자의 생성형 AI 경험 (과기정통부 2024 인터넷이용실태조사)
약 2배
2023년 대비 생성형 AI 이용률 증가 (같은 조사)
6가지
실무 기준 생성형 AI 분류
월요일 아침, 주간보고를 앞둔 마케터를 떠올려 봅니다. 성과 요약은 챗봇에, 썸네일은 이미지 AI에, 회의 녹음은 음성 AI에 맡기고 싶습니다. 그런데 탭만 열 개 띄워 놓고 정작 보고서는 그대로입니다.
문제는 도구가 부족해서가 아닙니다. 무엇을 어디에 써야 하는지 지도가 없어서입니다.
생성형 AI 종류 정리: 결과물 기준 6가지 분류
생성형 AI는 사람이 입력한 지시(프롬프트)를 받아 새로운 콘텐츠를 만들어 내는 AI입니다. 기존 AI가 '분류하고 예측'했다면, 생성형 AI는 '만들어' 냅니다. 아래 표는 실무자가 가장 많이 묻는 기준으로 정리한 것입니다.
| 종류 | 대표 서비스(예) | 실무 용도 | 입문 난이도 |
|---|---|---|---|
| 텍스트 생성 | ChatGPT, Claude, Gemini | 요약·초안·기획·번역 | 하 |
| 이미지 생성 | Midjourney, DALL·E, Stable Diffusion | 썸네일·시안·컨셉 이미지 | 중 |
| 영상 생성 | Sora, Runway | 숏폼·광고 시안·스토리보드 | 상 |
| 음성·오디오 생성 | ElevenLabs, Suno | 내레이션·음성 변환·배경음악 | 중 |
| 코드 생성 | GitHub Copilot | 스크립트·자동화·데이터 처리 | 중 |
| 문서·기획서 생성 | 오피스 내장 AI, 슬라이드 생성 도구 | 보고서·PPT 초안 | 하 |
난이도는 '첫 결과물을 업무에 쓸 수 있을 때까지 걸리는 수고'를 기준으로 한 상대 비교입니다. 서비스 이름은 예시일 뿐입니다. 같은 칸 안의 도구는 서로 바꿔 써도 큰 차이가 없는 경우가 많습니다.
최근에는 경계도 흐려지고 있습니다. 하나의 챗봇이 글을 쓰고, 이미지를 읽고, 그림까지 그려 주는 '멀티모달'이 기본이 되었기 때문입니다. 그래도 분류는 여전히 유효합니다. 내가 원하는 결과물이 무엇인지 먼저 정해야 지시가 선명해집니다.
텍스트 생성 AI는 왜 모든 업무의 출발점일까
직장인의 업무 대부분은 결국 글입니다. 메일, 보고서, 회의록, 기획안. 그래서 텍스트 생성 AI 하나만 제대로 써도 체감 변화가 가장 큽니다.
위 그림은 실측치가 아닌 가상 시나리오입니다. 다만 본인의 한 주를 이렇게 쪼개 보면, 텍스트 AI가 관여할 수 있는 칸이 얼마나 넓은지 금방 보입니다.
처음이라면 텍스트 AI 하나로 시작합니다
여러 도구를 동시에 배우면 어느 것도 손에 익지 않습니다. 매일 쓰는 글 업무 하나를 정해 2주간 같은 도구로 반복하는 편이 훨씬 빠릅니다.
텍스트 AI의 품질은 모델보다 지시문에서 더 크게 갈립니다. 역할, 목적, 형식, 분량을 정해 주면 결과가 달라집니다. 바로 써 볼 수 있는 문장 틀은 무료 프롬프트에 정리해 두었습니다.
이미지·영상·음성 AI, 실무에서 어디까지 쓸 수 있나
이미지 AI는 이미 실무에 깊이 들어왔습니다. 디자이너에게 넘기기 전 시안을 여러 장 뽑아 방향을 맞추는 용도로 특히 쓸모가 있습니다. 완성본보다 '대화의 재료'로 쓸 때 효율이 큽니다.
영상과 음성은 속도가 빠른 분야입니다. 짧은 클립, 내레이션, 회의 녹음 요약은 지금도 충분히 실용적입니다. 반면 긴 영상의 일관성이나 세밀한 연출은 아직 사람 손이 많이 갑니다.
시각·음성 AI 결과물을 쓰기 전 점검
- 서비스 약관에서 상업적 이용 가능 여부를 확인했다
- 실존 인물·브랜드 로고와 닮은 요소가 없다
- 타인의 목소리를 동의 없이 복제하지 않았다
- 사내 미공개 자료를 업로드하지 않았다
- AI 생성물임을 표기해야 하는 채널인지 확인했다
화려한 결과물일수록 이 점검이 더 중요합니다. 한 번의 저작권·보안 문제가 수십 시간의 절약을 지워 버립니다.
코드·문서 생성 AI, 비개발자에게도 필요한 이유
코드 생성 AI는 개발자 전용이라는 인식이 많습니다. 실제로는 엑셀 반복 작업에 지친 비개발자에게 더 극적인 도구일 수 있습니다. "이 폴더의 파일 이름을 날짜순으로 바꿔 줘" 같은 일을 짧은 스크립트로 해결하기 때문입니다.
이전 방식
- 매주 같은 엑셀 정리를 손으로 반복
- 개발팀 요청 후 며칠씩 대기
- 실수가 나도 원인을 모름
바뀐 방식
- AI에게 작업을 말로 설명하고 스크립트를 받음
- 작은 자동화는 직접 해결
- 코드 설명을 함께 받아 수정 가능
문서 생성 AI는 오피스 도구 안에 들어오면서 진입 장벽이 가장 낮아졌습니다. 다만 초안은 AI가, 판단과 숫자 검증은 사람이 맡는다는 원칙을 지켜야 합니다. AI는 그럴듯한 오류를 자신 있게 쓰기도 합니다.
반복 업무를 자동화 흐름으로 묶는 방법은 AI 강의·전자책에서 단계별로 다룹니다.
내 업무에 맞는 생성형 AI 종류 고르는 4단계
도구 비교표를 오래 보는 것보다, 내 업무에서 출발하는 편이 빠릅니다. 아래 순서를 따르면 '무엇을 써야 하나'라는 고민이 대부분 정리됩니다.
- 1
결과물 정하기
글·이미지·영상·음성·코드·문서 중 무엇이 필요한지 하나로 좁힌다
- 2
반복 업무 고르기
매주 2회 이상 하는 일 중 하나를 골라 실험 대상으로 삼는다
- 3
도구 하나만 쓰기
같은 분류의 대표 도구 하나로 2주간 반복한다
- 4
보안 기준 확인
회사 정책상 입력 가능한 정보 범위를 먼저 확인한다
생성형 AI 경험자
달리 말하면 아직 셋 중 둘은 본격적으로 쓰지 않는다는 뜻이기도 합니다. 지금 익혀 두는 것만으로 팀 안에서 충분한 차이가 납니다.
1개
처음 2주간 집중할 도구 수
분류를 이해했다면 도구는 하나로 충분합니다
자주 묻는 질문
생성형 AI는 몇 가지 종류로 나뉘나요?
결과물 기준으로 텍스트, 이미지, 영상, 음성·오디오, 코드, 문서 생성의 6가지로 나누는 것이 실무에서 가장 쓰기 편합니다. 최근에는 한 서비스가 여러 종류를 함께 처리하는 멀티모달이 늘고 있습니다.
입문자는 어떤 종류부터 시작해야 하나요?
텍스트 생성 AI가 가장 좋습니다. 업무 대부분이 글이고, 결과를 바로 검토할 수 있어 학습 효과가 큽니다.
무료 버전만으로도 업무에 쓸 수 있나요?
요약·초안 같은 기본 업무는 무료 버전으로도 충분히 시작할 수 있습니다. 다만 사내 자료를 다룬다면 회사의 보안 정책과 유료·기업용 요금제의 데이터 처리 방식을 먼저 확인해야 합니다.
AI가 만든 이미지나 글을 그대로 써도 되나요?
서비스 약관과 저작권, 사실 관계를 확인한 뒤 쓰는 것이 안전합니다. 특히 수치와 고유명사는 반드시 사람이 검증합니다.
생성형 AI 종류를 아는 것은 출발점일 뿐입니다. 차이는 그다음, 내 업무에 어떻게 연결하느냐에서 생깁니다. 지금 내가 어느 단계에 있는지 궁금하다면 1분 AI 진단으로 가볍게 확인해 볼 수 있습니다.
송승환 · 초사고 AI 대표
프롬프트 설계부터 업무 자동화까지, 도구가 바뀌어도 남는 실력을 만드는 실전 AI 교육을 만듭니다. 현장에서 확인한 것만 씁니다.