프롬프트 엔지니어링 뉴스
LLM 프롬프트 설계, 시스템 프롬프트, 컨텍스트 엔지니어링, 프롬프트 인젝션 방어 등에 관한 글.
총 2,081건·최신 업데이트
- 941
보안 연구원들, 프롬프트 인젝션으로 역할 모델 악용해 LLM에게 코카인 레시피를 얻어냈다
최근 연구에 따르면 LLM은 사용자 입력과 시스템 명령을 구분하기 위해 '역할(Role)' 태적을 사용하지만, 이는 스타일 기반의 불완전한 식별 방식이라 프롬프트 인젝션에 매우 취약합니다. 특히 공격자가 모델의 내부 추론 과정인 <think> 모드를 흉내 내는 'CoT Forgery' 기법을 사용할 경우, 안전 가드레일을 우회하여 유해한 정보를 생성할 확률이 급격히 높아집니다.
Security researchers tricked LLMs into giving them cocaine recipes by abusing role models for prompt injection↗theregister.com
- 942
컨텍스트 워프 드라이브: 장기 실행 LLM 에이전트를 위한 결정론적 폴딩
Context Warp Drive는 장기 실행 LLM 에이전트가 컨텍스트 제한에 도달했을 때, 기존의 비결정론적인 요약 방식 대신 과거 데이터를 안정적인 아티팩트로 압축하는 '결정론적 폴딩' 기술을 제공합니다. 이를 통해 프롬프트 캐싱을 최적화하여 비용과 지연 시간을 줄이면서도 에이전트의 일관된 상태를 유지할 수 있게 돕습니다.
Context Warp Drive: deterministic folding for long-running LLM agents↗dev.to
- 943
메타 AI, 60개의 프로덕션 레디 에이전트 블루프린트가 담긴 AgentKits 첫 공개
Meta AI가 60개의 프로덕션 레디(production-ready) AI 에이전트 블루프린트를 담은 'AgentKits'를 공개했습니다. 이 키트는 보안, 인사, 금융 등 30개 카테고리의 워크플로우와 프롬프트를 포함하며, 누구나 쉽게 활용할 수 있는 오픈 소스 형태입니다. 다만, 이러한 설계의 개방성이 공격자들에게 정교한 공격 패턴을 학습시킬 수 있다는 보안 우려도 제기되고 있습니다.
First Look: Meta AI Releases AgentKits with 60 Production-Ready Agent Blueprints↗dev.to
- 946
멀티 테넌트 LLM 분석, 로우 레벨 보안으로 구축한 안전한 에이전트: AWS에서의 구축 방법
LLM을 활용한 데이터 분석 에이전트 구축 시 발생할 수 있는 테넌트 간 데이터 노출 문제를 해결하기 위해, 프롬프트 기반의 필터링 대신 아키텍처 수준의 보안 계층을 도입했습니다. AWS SigV4 서명, 세만틱 검증, Split-Plane SQL을 통해 LLM의 오류와 상관없이 결정론적인 데이터 격리를 구현한 것이 핵심입니다.
Multi-tenant LLM analytics with row-level security: How we built a secure agent on AWS↗aws.amazon.com
- 949
클로드 코드, 페이블 5에서 오퍼스로 전환하는 이유 – 그리고 잘못된 결과 방지를 위한 워크스페이스 위생
Claude Fable 5 사용 중 보안 관련 키워드가 포함된 프로젝트 문서(CLAUDE.md 등)로 인해 모델이 자동으로 Opus로 전환되는 문제가 보고되었습니다. 이는 안전 분류기가 컨텍스트 전체를 검사하기 때문이며, 이를 해결하려면 문서를 아키텍처 중심으로 간결하게 유지하는 '워크스페이스 위생'이 필요합니다.
Why Claude Code switches from Fable 5 to Opus — and the workspace hygiene that stops false positives↗dev.to
- 950
마노-CUA 2.0: 4B GUI 에이전트 구축 후 발견한 병목 현상은 모델 크기가 아니었다
오픈소스 GUI 에이전트 Mano-P 2.0은 중국어 UI 데이터 확충을 통해 특정 앱에서의 성능을 대폭 개선했으나, 이로 인해 영어 웹 작업 성능은 다소 하락하는 트레이드오프를 보였습니다. 또한, 10단계 이상의 장기 작업 수행 능력은 여전히 모델의 컨텍스트 유지 한계로 인해 정체된 상태입니다.
Mano-CUA 2.0: After a Year of Building a 4B GUI Agent, We Found the Bottleneck Was Never Model Size↗dev.to
- 952
오늘의 오픈 소스 프로젝트 (#109): Trellis - 프로젝트 사양, 작업 및 메모리를 저장소에 영구 보존하세요
Trellis는 AI 코딩 세션마다 반복되는 컨텍스트 재설명 문제를 해결하기 위해 설계되었습니다. .trellis 디렉토리를 통해 프로젝트 규약, 작업 단위(PRD), 개발자별 세션 저널을 저장소에 직접 기록하여 팀 전체가 AI의 맥락을 공유할 수 있게 합니다.
Open Source Project of the Day (#109): Trellis — Persist Project Specs, Tasks, and Memory Into Your Repository↗dev.to
- 955
Lyto 가이드: 이 AI 브라우저 에이전트 사용법 - 최고의 프롬프트 및 활용 사례 (2026)
Lyto는 크롬 확장 프로그램 형태의 AI 에이엇트로, 브라우저 내 탭 간의 작업 문맥을 기억하고 직접 클릭, 스크롤, 양식 채우기 등의 액션을 수행합니다. 구글 워크스페이스 및 메신저(WhatsApp, Telegram)와의 연동을 통해 원격으로도 복잡한 업무 자동화를 실행할 수 있는 것이 특징입니다.
Lyto Guide: How to Use This AI Browser Agent — Best Prompts & Use Cases (2026)↗dev.to
- 958
프롬프트 인젝션이 에이전트, RAG 파이프라인 및 모델 라우터를 노려 기업 AI의 가장 큰 설계 결함을 악용
사이버 범죄자들이 LLM의 작동 특성과 실제 구현 방식 간의 차이를 이용해 프롬프트 인젝션 공격을 강화하고 있습니다. 특히 에이전트, RAG 파이프라인, 모델 라우터와 같은 기업용 AI 아키텍처의 구조적 취약점이 주요 타겟이 되고 있습니다.
Prompt injection is exploiting enterprise AI's biggest design flaws by targeting agents, RAG pipelines and model routers↗venturebeat.com
- 960
랜딩 페이지 URL을 알려주세요. 제가 퍼거슨(Ferguson)을 통해 방문자가 왜 이탈하는지 알려드리겠습니다.
Ferguson은 창업자가 인지하지 못하는 랜딩 페이지의 문제점을 '낯선 이의 시각'으로 분석하여 브랜드 보이스에 맞는 수정 리스트를 제공하는 AI 도구입니다. 단순한 텍엔 생성 프롬프트를 넘어, 동일 카테고리 내 다른 페이지들과의 비교 데이터를 통해 객관적인 성능 지표를 제시합니다.
Drop your landing page URL. I'll use Ferguson to tell you why visitors might be leaving↗indiehackers.com








