전체 글

LLM 생성 원리

간단하게 LLM 생성 원리를 리마인드하고자하는 글이다. LLM(Large Language Model)의 생성 원리LLM은 자연어 이해와 생성 능력을 보여주며, 다양한 언어 관련 작업을 수행할 수 있다. 핵심 내용- 트랜스포머 구조를 기반으로 대규모 텍스트 데이터를 자기지도 학습 방식으로 처리- 모델은 문장의 일부를 가리고 다음 단어를 예측하는 방식으로 언어 패턴 학습- 자연어 이해와 생성 능력을 통해 다양한 언어 작업 수행결론- 자기지도 학습과 트랜스포머 구조가 LLM의 핵심 작동 원리위는 LLM의 근간이 되는 트랜스포머 구조이다. 특히, GPT는 오른쪽 부분만 활용하였다. 특히, 여기서 중요하게 생각되는 부분은 어텐션 메커니즘이다. 트랜스포머 구조의 핵심- 어텐션 메커니즘이 이 입력 텍스트 간의 관계를..

Poetry 소개 및 간단한 사용법

Introduction해당 글에서는 Poetry에 대해서 알아보도록 한다. 우선, Poetry 문서에서는 이렇게 소개한다.Poetry is a tool for dependency management and packaging in Python. It allows you to declare the libraries your project depends on and it will manage (install/update) them for you. Poetry offers a lockfile to ensure repeatable installs, and can build your project for distribution. Poetry는 파이썬에서 종속성 관리와 패키징을 위한 도구입니다.이를 통해 프로젝트가 ..

[프로그래머스] [PCCP 기출문제] 1번 / 동영상 재생기

문제 설명https://school.programmers.co.kr/learn/courses/30/lessons/340213 프로그래머스SW개발자를 위한 평가, 교육, 채용까지 Total Solution을 제공하는 개발자 성장을 위한 베이스캠프programmers.co.kr 당신은 동영상 재생기를 만들고 있습니다. 당신의 동영상 재생기는 10초 전으로 이동, 10초 후로 이동, 오프닝 건너뛰기 3가지 기능을 지원합니다. 각 기능이 수행하는 작업은 다음과 같습니다.10초 전으로 이동: 사용자가 "prev" 명령을 입력할 경우 동영상의 재생 위치를 현재 위치에서 10초 전으로 이동합니다. 현재 위치가 10초 미만인 경우 영상의 처음 위치로 이동합니다. 영상의 처음 위치는 0분 0초입니다.10초 후로 이동: ..