AI Study

AI 관련 공부한 내용을 적었습니다.

Stable Diffusion로 txt2img 파인튜닝해보기(3)

본 글은 keras 공식 홈페이지의 스테이블 디퓨전 파인튜닝 예시 코드를 기반으로 작성됐습니다. 함께 학습한 [안효주님의 블로그 바로가기]() 이제 학습이 완료된 모델을 기반으로 서버를 열어 api 통신으로 ui를 통해 캐릭터 이미지를 생성할 계획이다 # import 웹 서버를 열기위해 파이썬의 flask를 사용할 것이다. ```pyt...

Stable Diffusion로 txt2img 파인튜닝해보기(2)

본 글은 keras 공식 홈페이지의 스테이블 디퓨전 파인튜닝 예시 코드를 기반으로 작성됐습니다. 함께 학습한 [안효주님의 블로그 바로가기]() 코드를 단락별로 설명해볼게요! # import 텐서플로우와 keras를 사용합니다. ```python from textwrap import wrap import os import keras_cv...

Stable Diffusion로 txt2img 파인튜닝해보기(1)

본 글은 keras 공식 홈페이지의 스테이블 디퓨전 파인튜닝 예시 코드를 기반으로 작성됐습니다. 함께 학습한 [안효주님의 블로그 바로가기]() # 데이터 구조 실제 사람 사진 1장과 유사한 얼굴을 띈 메이플스토리 캐릭터 사진 1장 한 묶음으로 준비가 돼 있습니다. 파일명은 다음과 같습니다. ```bash data/man_1.jpg # 메이플 ...

T5 파인튜닝으로 친근한 대화형 챗봇 만들기

본 포스트는 paust-team의 깃허브를 기반으로 작성된 글 입니다. # T5 모델 ![이미지 설명](../assets/images/aistudy/9/1.png) T5(Traitement avec des Transformateurs pour les Exemples)는 딥 러닝 모델 중 하나로, 텍스트 데이터를 처리하고 다양한 자연어 처리(NL...

GPT2 파인튜닝으로 친근한 대화형 챗봇 만들기

# GPT2 모델 ![이미지 설명](../assets/images/aistudy/8/1.png) GPT-2는 "Generative Pre-trained Transformer 2"의 약자로, 트랜스포머 아키텍처를 기반인 생성형 AI 모델이다. 2019년도에 출시 됐기 때문에 현 시점에서 GPT-2보다 좋은 모델은 당연히 존재한다. 하지만 조금... ...

autotrain-advanced을 활용한 Llama2 모델 학습

# Llama2 모델을 내 실제 데이터로 학습하기 ![이미지 설명](../assets/images/aistudy/6/1.png) 라마2는 오픈AI에서 개발한 대규모 언어 모델(LLM)이다. 2023년 6월 30일에 공개되었으며, 1370억 개의 파라미터를 가지고 있다. 라마2는 텍스트 생성, 언어 번역, 질문에 대한 답변과 같은 다양한 작업에서...

GPT-4 리포트 리뷰 - "GPT-4 Technical Report"

# Language Models are Few-Shot Learners ![이미지 설명](../assets/images/aistudy/5/1.png) # Review 본 포스트는 정하연, 홍순빈님과 함께 학습 후 정리하며 작성된 글 입니다. ## [정하연님의 블로그](https://hayeon.hashnode.dev/) 가기 ## [홍순빈님...

GPT-3 논문 리뷰 - "Language Models are Few-Shot Learners"

# Language Models are Few-Shot Learners ![이미지 설명](../assets/images/aistudy/4/1.png) # Review 본 포스트는 함께 GPT를 학습한 정하연님의 도움을 받아 작성된 글 입니다. 더 자세한 gpt3 논문리뷰는 추후 업로드 될 정하연님 블로그에서 보실 수 있습니다. ## [정하연님...

GPT-2 논문 리뷰 - "Language Models are Unsupervised Multitask Learners"

# Language Models are Unsupervised Multitask Learners ![이미지 설명](../assets/images/aistudy/3/1.png) # Review Abstract ![이미지 설명](../assets/images/aistudy/3/2.jpeg) 웹 상의 방대한 텍스트 자료를 활용한 학습은 ...

GPT-1 논문 리뷰 - "Improving Language Understanding by Generative Pre-Training"

# Improving Language Understanding by Generative Pre-Training ![이미지 설명](../assets/images/aistudy/2/1.png) # Review Abstract ![이미지 설명](../assets/images/aistudy/2/2.jpeg) 자연어의 이해에 관한 내용과 현...

Transformer 구현

# Transformer 아키텍처 ![이미지 설명](../assets/images/aistudy/1/1.png) # 기능 별 구현 Tokenizer 구현 ```python class Tokenizer: def __init__(self, token_dict): self.token_dict = token_dict ...

Transformer 논문 리뷰 - "Attention Is All You Need"

# Transformer 아키텍처 ![이미지 설명](../assets/images/aistudy/7/0.png) # 기능 별 구현 Abstract ![이미지 설명](../assets/images/aistudy/7/1.png) 기존 시퀀스 모델의 복잡한 순환과 합성곱 기반 모델링에서 완전히 새로운 아키텍쳐를 제시한다. 오직 어텐션 메...