Data Scientist의 복수
(hamel.dev)
LLM API의 보편화로 데이터 과학자의 역할 축소 우려가 제기되고 있으나, 이들은 AI 시스템의 평가와 디버깅을 담당하는 '하네스 엔지니어링'을 통해 신뢰할 수 있는 AI 제품 구현에 핵심적인 역할을 수행하며 그 가치를 재정립할 것입니다.
이 글의 핵심 포인트
- 1하버드 비즈니스 리뷰는 데이터 과학자를 '21세기 가장 섹시한 직업'으로 칭했으나, LLM API의 등장으로 그 역할에 대한 재평가가 이루어지고 있음.
- 2LLM API는 기존 데이터 과학자/MLE 없이도 AI를 통합할 수 있게 되어, 일부는 이들의 역할이 축소될 것이라 우려함.
- 3핵심은 '하네스 엔지니어링'으로, AI가 보지 못한 데이터에 대한 일반화 테스트, 확률적 시스템 디버깅, 좋은 지표 설계 등이 여전히 데이터 과학자의 중요한 역할임.