최근 AI 분야에서 각광을 받는 LLM에 대해서 포스팅을 해보려고 합니다. 이론적인 지식뿐만 아니라 실무적인 코드도 다룰 예정입니다. 첫 시작은 사전 학습 (Transfer Learning)에 대해서 알아보는 것으로 하려고 합니다. 전이학습 (Transfer Learning)이란? 전이학습은 다음과 같이 정의하며, 다음과 같은 특징을 가지고 있습니다. 이미 학습된 모델을 다른 문제에 적용하는 기술 특정 Task를 학습한 모델을 다른 Task 수행에 재사용하는 기법 이미 학습된 모델의 지식을 활용하여 새로운 데이터에 대한 학습을 빠르게 진행할 수 있음 학습 데이터가 부족한 분야에서도 높은 성능을 발휘할 수 있음 사전학습(Pretraining)과 미세조정(Fine-tuning) 전이학습은 사전학습과 미세조정..

한빛미디어 리뷰어 활동으로 제공받은 딥러닝의 정석 (Fundamentals of Deep Learning) 책을 읽었습니다. 목차 CHAPTER 1 딥러닝을 위한 선형대수학 기초 CHAPTER 2 확률 기초 CHAPTER 3 신경망 CHAPTER 4 순방향 신경망 훈련 CHAPTER 5 PyTorch 기반 신경망 구현 CHAPTER 6 경사하강법 CHAPTER 7 합성곱 신경망 CHAPTER 8 임베딩과 표현 학습 CHAPTER 9 시퀀스 분석 모델 CHAPTER 10 생성 모델 CHAPTER 11 해석 가능성 방법론 CHAPTER 12 메모리 증강 신경망 CHAPTER 13 강화 학습 목차를 보면 알 수 있듯이 굉장이 기초적인 딥러닝 서적 입니다. 그러나 제가 읽어 보니 초급자를 위한 책이 아닌 어느 ..

우분투에서 도커로 파이토치를 설치하는 방법 입니다. 우분투에서 도커 설치 하는 방법은 아래 링크를 참고하세요. [Linux] 우분투(Ubuntu)에서 도커(Docker) 설치 하기 가상화 플랫폼인 Docker를 Ubuntu에서 설치하는 방법을 알아보겠습니다. 도커 공식 홈페이지에도 설치 방법이 자세히 나와 있습니다. https://docs.docker.com/engine/install/ubuntu/ Install Docker Engine on Ubuntu docs jkim83.tistory.com 파이토치 도커 이미지 다운로드 우선 도커 허브에서 파이토치 이미지를 확인합니다. $ docker search pytorch 도커 허브 사이트에서 확인해도 됩니다. https://hub.docker.com/sea..

트랜스포머를 활용한 자연어 처리 책을 읽고 있습니다. 이 책은 자연어 처리(NLP) 작업에서 트랜스포머 모델의 사용에 초점을 맞춘 Delip Rao와 Brian McMahan의 저서입니다. 이 책은 트랜스포머 모델을 사용하여 실제 NLP 문제를 해결하는 방법을 배우려는 관련 실무자, 연구원 및 학생을 대상으로 하는 중급서로 개념적인 설명보다는 코드 위주로 소개하고 있는 책입니다. 트랜스포머를 활용한 자연어 처리 목차 CHAPTER 1 트랜스포머 소개 CHAPTER 2 텍스트 분류 CHAPTER 3 트랜스포머 파헤치기 CHAPTER 4 다중 언어 개체명 인식 CHAPTER 5 텍스트 생성 CHAPTER 6 요약 CHAPTER 7 질문 답변 CHAPTER 8 효율적인 트랜스포머 구축 CHAPTER 9 레이블..

ChatGPT 생산성 향상 시켜주는 확장 프로그램들

Chat GPT를 활용사례와 팁에 대해서 나와 있는 보고서 입니다