본문 바로가기

Ai2

Chatbot Arena LLM 평가 비교 오픈 플랫폼 챗봇 아레나란?Chatbot Arena는 대규모 언어 모델(LLM)을 평가하고 비교할 수 있는 오픈 플랫폼이다.사용자 선호도를 기반으로 모델의 성능을 측정한다. 이 플랫폼은 두 개의 익명 모델을 무작위로 선택해 사용자 질문에 대한 답변을 나란히 제공하며, 사용자가 어느 답변이 더 나은지 투표하는 방식으로 운영된다. 이런 "대결" 형식을 통해 수집된 데이터를 바탕으로 모델의 순위를 매기는데, 주로 Elo 등급 시스템을 사용한다.Elo 시스템은 원래 체스와 같은 경쟁 게임에서 사용되던 방식으로, 모델 간의 상대적인 성능을 수치화한다. 챗봇 아레나의 특징Chatbot Arena의 특징은 크라우드소싱을 통해 다양한 사용자로부터 데이터를 수집하고, 이를 통해 실생활에서 LLM이 어떻게 활용되는지를 반영한 평가가 .. 2025. 3. 26.
[돈이야기] 에스피소프트 +4% 익절 2024년 2월 21일 단타 내역 에스피소프트 단타로 +4.00% 수익을 냈다. 매매는 9시30분~10시 사이에 끝났다. 시가 14,600에서 시작해서 오름세가 심상치 않아 보였다. 1만5천 초반에 매수 걸려고 버튼을 누른 사이 현재가가 엄청 출렁거렸다. 15,640원에 사서 16,300원에 매도했다. 종일 주가창을 볼 수가 없게 만드는 오늘의 을씨년스런 날씨를 핑계로 오늘 매매는 접었다. 이후 두어번 창만 여러봤는데, 고가 18,680원를 찍었다. 지긋하게 뒀다가 더 높은 가격에 팔았으면 하는 생각도 들지만, 그런 생각을 할때 만다 욕심은 금물이라고 단도리친다. 에스피소프트는 오늘 혼돈의 도가니였고 VI 변동성 완화장치가 걸리기도 했다. VI는 주가가 급등락하는 종목에 대해 변동성을 완화하기 위해 발동.. 2024. 2. 21.