OpenAI의 금융 AI, 69.9% 득점. 자체 문서용 50개 질문 평가 도구 구축하세요.

(dev.to)
Dev.to AIAI 모델
OpenAI의 금융 AI, 69.9% 득점. 자체 문서용 50개 질문 평가 도구 구축하세요.

금융 서비스용 ChatGPT는 9월 10일, 벤치마크 점수와 함께 출시되었습니다. OpenAI에서 보고한 바에 따르면, 상당한 양의 재무 보고서에서 정확도가 70% 미만입니다. 솔직히 강한 수치입니다. 하지만 이는 귀사의 문서에 대해 거의 아무것도 알려주지 않습니다. 이는 벤더에 대한 불만이 아닙니다. 벤치마크가 그러한 의미를 가지기 때문입니다. 점수는 특정 데이터 집합에 대한 평균일 뿐이며, 귀사의 데이터 집합은 다른 데이터 집합입니다. "이 제품을 출시할 수 있습니까?"라는 질문에 답해야 하는 엔지니어라면, 숫자 기반의 판단이 필요합니다.

원문 보기 →

댓글

아직 댓글이 없습니다. 첫 댓글을 남겨보세요.