Custom model 생성 및 safetensors 저장 방법 – 나만의 모델 만들기 #4
오늘은 드디어 GPT-2 구조를 기반으로 한국어 전용 Custom Model을 생성해 보겠습니다. 지난 글에서 한국어 토크나이저를 직접 제작하고 Hugging face 환경에서 wrapping까지 완료했으므로, 오늘은 그것에 이어서 바로 기초 언어 모델을 생성하는 …
오늘은 드디어 GPT-2 구조를 기반으로 한국어 전용 Custom Model을 생성해 보겠습니다. 지난 글에서 한국어 토크나이저를 직접 제작하고 Hugging face 환경에서 wrapping까지 완료했으므로, 오늘은 그것에 이어서 바로 기초 언어 모델을 생성하는 …
오늘은 오랜만에 다시 “나만의 한국어 AI 만들기”의 3번째 이야기로 SentencePiece 토크나이저를 정의하고 Hugging face 라이브러리로 wrapping하는 방법까지 살펴 보겠습니다. 나만의 AI 만들기 프로젝트는 지난 7월 초에 시작했어요. 오늘이 9월 3일인데, …
반복적인 복사/붙여 넣기 작업에 지치셨나요? Gemini CLI와 쉘 스크립트를 활용해 회의록, 이메일 등 비정형 텍스트를 깔끔한 JSON 데이터로 코드 구현 없이 자동 변환하는 방법을 정리해 보겠습니다. 혹시 Gemini CLI 설치가 …
오늘은 ComfyUI 사용법에 대해 간단하게 살펴보겠습니다. 요즘은 너무나 다양한 이미지 생성 AI가 있죠. 너무나도 유명한 미드저니(Midjourney)에서부터 구글이나 OpenAI는 물론 xAI까지 거의 대부분 멀티모달을 지원하는 생성형 AI 서비스 기업에서는 모두 이미지 …
드디어 GPT-5가 오픈되었네요. 작년부터 나온다 안나온다 하다가 느닥없이 GPT-4.5가 나오곤 했는데요, 드디어 우리나라에도 8월 8일 새벽에 오픈되었습니다. 이번 글에서는 새롭게 등작한 GPT-5가 기존 GPT 버전과 무엇이 다른지 간단하게 정리해 보도록 …