NLP | LLM 4

[세미나] VESSL AI - 2024 MLOps Now — LLM in Production

VESSL AI 의 MLOps 관련 세미나 현장 참여는 못하고 유튜브로 확인했다.연사분은 총 세분이셨고, 각각 VESSL AI CEO분, Pinecone, Sionic CEO분이 발표를 하셨는데 유익했어서 포스팅을 남겨두려함. (내가 들은 순)실제 업계에서 어떤 이야기들을 하고 고민들을 하는지 들을 수 있는 기회였다.VESSL AI에서 MLOps Now 시리즈로 몇번 더 세미나 자료가 올라와있는 것 같아서 재밌어 보이는 것들 확인하려고 한다. 세미나 링크는 아래. https://www.youtube.com/playlist?list=PL8MX6vEO4aqYXbulhI0_daiVwZPduf9_q 2024 MLOps Now — LLM in Production by VESSL AI www.youtube.com ..

NLP | LLM 2024.05.16

[NLP] 자연어처리 기본 개념

* 코드잇의 자연어 처리 강의를 참고하여 작성함 1. 자연어처리 (Natural Language Processing)자연어처리 (Natural Language Processing)은 컴퓨터가 인간이 사용하는 자연어를 이해하고 처리하는 분야이다.언어는 인공어(프로그래밍 언어 등) 와 자연어(한글, 영어, 불어 등) 로 분류 가능하며, 사람이 쓰는 일상어는 모두 자연어라 볼 수 있다.자연어처리는 언어의 다양한 차원에서 이루어질 수 있고 주요 단계는 아래와 같다.어휘 분석 (Lexical Analysis) : 텍스트를 문장을 구성하는 토큰(token)이라는 최소 의미단위로 구분하여 분석.구문 분석 (Syntactic Analysis) : 텍스트를 구문 단위로 구분하여 문장의 구조를 분석. 각 토큰의 역할, 문..

NLP | LLM 2024.05.01