가끔 보자, 하늘.

LLM 관련해서 흥미있게 보고 있는데, NLP 개발자가 아니라 LLM 관련 용어들이 꽤 생소하여 관련 글을 보면서 이해가 안되는 부분이 꽤 있더군요. 그래서 ChatGPT를 중심으로 LLM에서 주로 사용되는 용어들을 가능한 쉽게 정리해 봤습니다. 일부는 ChatGPT에게, 일부는 구글링하면서 정리했습니다. 혹시 잘못된 부분이 있다면 댓글 부탁드립니다. LLM의 최근 역사 2017년 구글에서 발표한 Transformer 모델은 순차 데이터를 학습할 수 있는 신경망으로 LLM이 대두하는 계기가 되었습니다. 2018년 말 구글에서 발표한 BERT(Pre-traning of Deep Bidirectional Encoder Representations from Transformers)는 NLP 벤치마크에서 신기록..

pip install git+https://github.com/hwchase17/langchain.git@master python 3.10 이상에서 git의 최신 버전을 설치하는게 좋다. 계속 바뀌고 있어서 공식 문서도 이전 내용이 많도 인터넷의 예제들도 제대로 작동하지 않는 경우가 많다.

최근 오래된 시스템에 nodejs 를 사용할 일이 있어 들어갔더니 버전이 무려... 10.x -_-a 심지어 OS는 CentOS 7. 최근 바빠서 어떤 OS로 갈아탈지 정하지도 못한 상태. 각설하고.. yum 에서 계속 "Could not resolve host: mirrors.iuscommunity.org ... " 같은 에러를 출력하는 상태. 구글링 해보니 이미 거의 2년 전에 IUS의 서버 이동이 있었네. 참고링크 : https://github.com/iusrepo/infrastructure/issues/14#issuecomment-572276277 참고링크를 따라 ius repo 정보를 갱신하고, 없던 Daum로 repo도 추가해두자. yum erase ius-release rm /etc/yum...

PyMuPDFLoader를 사용하는 중에 아래와 같은 에러가 발생. import error: unsupported operand type(s) for |: ‘dict’ and ‘dict’ 해결책은 여기! 3.8을 3.11로 업그레이드 하면서 해결. 그런데 PyFR의 정의는 an open-source flow solver that uses the high-order flux reconstruction method 라고 되어 있는데... 찾아보니 Advection-Diffusion type problems 해결하기 위한 수치해석 방법 중 하나라고.. (어렵다 어려워...-_-) 이걸 좀 더 찾아보면 유체 역학 이야기가 나오네 -_-;; chatGPT 소환! 더보기 LLM은 "Large Language Mod..