셀렉트스타의 NLP 연구원이 직접 말해주는 <LLM 평가 3부작>의 마지막 레터입니다. 앞선 편지에서 LLM 평가에 대한 정의와 의미, 그리고 구체적인 예시를 살펴보았는데요. 오늘은 실제로 모모잼의 안전성을 평가한 방법을 자세히 공개합니다. 1️⃣ [1] LLM 평가란 무엇인지 (무엇을, 어떤 데이터로, 어떻게?)2️⃣ [2] LLM 안전성 평가 &...

지난 12일, 세상을 뜨겁게 달군 소식이 있습니다. 바로 OpenAI가 새롭게 발표한 OpenAI o1인데요. 이전 모델에 비해서 무엇이 달라졌는지, OpenAI가 공개한 기술 보고서를 기반으로 알아보도록 하겠습니다. 추론에 강한 o1 논리, 수학 문제 풀이 등의 추론(Reasoning) 능력은 이전 모델의 약점으로 꼽혔습니다. 심지어...

셀렉트스타의 NLP 연구원이 직접 말해주는 <LLM 평가 3부작>의 두번째 콘텐츠입니다!  1️⃣ LLM 평가란 무엇인지 (무엇을, 어떤 데이터로, 어떻게?)2️⃣ LLM 안전성 평가 & 구체적인 예시3️⃣ 특정 모델의 안전성 평가 결과 1편 LLM 평가란 무엇인가?에 이어, 오늘은 수많은 평가지표 중에서 무엇을 평가할지에 대해 자세한...

ChatGPT(2022년 11월 30일) [1] 등장 이후 수 많은 대규모 언어 모델(Large Language Model, LLM)이 마치 경쟁이라도 하듯이 생겨났습니다. 2024년만 해도 Gemini 1.5 pro(2월 15일) [2], LLaMA 3(4월 18일) [3], GPT-4o(5월 13일) [4], Claude 3.5 Sonnet(6월 21일) [5], LLaMA 3.1(6월 23일)...