langgraph2 Agent 실험 2 - 졌잘싸 with Agent Test 프롬프트Agent 를 어떻게 발전시킬 수 있을까?Agent의 품질을 확보하려면, 현재 Agent 품질이 어느정도 보장되는지 먼저 확인해야한다고 생각했다. LangStudio 의 DataSet을 이용하면, Agent 를 쉽게 평가할 수 있다. LangStudio 의 DataSet?DataSet 의 구성은 입력과 출력으로 이루어져있다. 각각 TDD 의 given 과 then 이라고 생각하면 된다. LangStudio 에 DataSet 을 등록해놓은 후, Prompt 버전이 변경될 때마다 테스트를 돌리면 된다. 테스트 결과를 수집하고, 품질 메트릭으로 평가를 자동화할 수도 있고, 이전 실행이나 버전과 비교할 수 있다. 내가 이전 포스팅해서 진행했던 프롬프트 수정 → 평가 → 수정 → 평가의 과정이 덜 수고.. 2025. 5. 15. Prompt With Engineering AI 서비스를 만들 때, 개발자는 어디까지 개입할 수 있을까? AI 는 어느 부분에서 부족할까? 소설을 추천하여 매일 메일링을 해주는 서비스가 있다고 치자. 사용자 연령에 따라 소설 추천이 달라져야 할 수도, 번역판이 존재하지 않는다면 원작을 추천해야 할 수도 있다. AI 가 적재적소의 답변을 하도록 가이드를 줘야한다. 그게 프롬프트 Prompt 다.프롬프트는 LLM 을 사용할 때 입력으로 주어지는 명령이나 질문을 뜻한다. 프롬프트는 어떻게 가져가냐에 따라 응답 품질이 아예 달라지기 때문에 매우 매우 중요하다. 지금까지 살펴본 DL 의 주요 개념과 프롬프트는 어떻게 연결되는지 궁리해보았다. 연결이 조금 더 복잡해졌지만, 연두색만 집중해서 살펴보면된다. LLM 은 DL 의 Transformer 아키텍.. 2025. 3. 21. 이전 1 다음
