AI 모델 (LLM·GPT·Claude·Gemini)
GPT, Claude, Gemini, Llama 등 AI 모델(LLM) 출시·벤치마크·API 변경사항을 모읍니다.
최신 업데이트
AI 모델 관련 글 — 3 페이지
- 0
Ray LLM 딥러닝 컨테이너를 사용하여 멀티 노드 추론 워크로드를 실행하기
AWS는 Amazon EKS에서 Ray LLM DLC를 사용하여 Prefill과 Decode 노드를 분리하는 멀티 노드 추론 워크로드를 구현하는 방법을 소개합니다. 이 방식은 연산 집약적인 Prefill과 메모리 대역폭 중심의 Decode 단계를 별도 노드에서 처리함으로써, 대규모 모델의 추론 지연 시간을 줄이고 처리량을 높이는 데 기여합니다.
Run multi-node inference workloads using Ray LLM Deep Learning Containers↗aws.amazon.com
- 3
Show HN: Atticus – macOS용 홀드-투-토크 음성 어시스턴트, Claude-p 기반
Atticus는 macOS 사용자를 위한 'Hold-to-talk' 방식의 음성 어시스턴트로, Claude Code를 기반으로 작동하여 별도의 추가 비용 없이 기존 Claude 구독을 활용합니다. 단순 명령은 AI를 거치지 않고 즉각 실행하며, 사용자의 명령을 학습하여 점진적으로 개인화된 자동화 워크플로우를 구축합니다.
Show HN: Atticus – Hold-to-talk voice assistant for macOS that runs on Claude -p↗github.com





















