여기서는 다양한 LLM 모델들의 흐름을 보고자 한다.
2017년 구글의 Transformer (Attention is All You Need)이후 많은 모델들이 등장했다.
구글, 구글 딥마인드, OpenAI, 허깅페이스, 메타(페이스북), 아마존, 마이크로소프트, 화웨이, 바이두 등
다양한 빅테크 기업들의 LLM 개발의 큰 흐름을 파악하기 좋다.
보다 자세한 내용은 아래 레퍼런스에서 확인 할 수 있다.
위 그림은 LLM을 기반으로 한 실제 산업에서의 응용이나 사업 분야를 나타낸다.
연구 이외의 취업이나 사업 등을 생각하는 사람들에게 중요해 보인다.
References:
https://wandb.ai/vincenttu/blog_posts/reports/A-Survey-of-Large-Language-Models--VmlldzozOTY2MDM1
https://medium.com/@justinmilner/a-timeline-recap-of-llms-part-1-4ebb9e0768e3
'NLP' 카테고리의 다른 글
LSTM 모델 설명과 PyTorch Implementation (0) | 2024.04.09 |
---|---|
딥러닝 기반 NLP 모델들 (0) | 2024.03.06 |
GLUE, SuperGLUE, KLUE, Huggingface LB (0) | 2024.03.04 |
자연어처리 (NLP) 기초 (0) | 2024.02.29 |
눈여겨 볼만한 NLP 모델들 (0) | 2024.01.31 |