가입하면 어디까지 배웠는지 기억해 드려요.
인공지능은 어떻게 만들어질까요?
코드를 몰라도 괜찮아요. 데이터를 넣으면 인공지능이 토큰화 → 벡터화 → 학습 → 생성으로 만들어지는 과정을 눈으로 볼 수 있어요. 원하면 진짜 파이썬 코드로도 만들 수 있답니다.
바로 앞 단어만 보는 교육용 단어 바이그램 모형이에요. 임베딩·attention·사실을 학습하지 않아요. 단어 분할기도 실제 LLM 토크나이저가 아닌 수업용 예제예요.
- 준비 데이터 준비
- 1 ① 토큰화
- 2 ② ID와 원핫 벡터
- 3 ③ 트레이닝(학습)
- 4 ④ 생성
데이터 준비
짧은 예문을 모아 보세요. 반복하면 횟수가 바뀌지만 자료는 목적에 맞아야 도움이 돼요. 각 문장은 따로 끝나요.
문장 준비 완료 · 단어 10개