Record_llm_feedback_event(Python 에이전트 API)

통사론

newrelic.agent.record_llm_feedback_event(trace_id, rating, category=None, message=None, metadata=None)

AI 플러그인 버전(LLM)에 대한 사용자 정의 피드백 이벤트를 기록합니다.

요구 사항

Python 에이전트 버전 9.8.0 이상.

설명

이 API 뉴렐릭 UI 에서 조회 및 쿼리할 수 있는 피드백 이벤트 LlmFeedbackMessage 를 기록합니다. 피드백 이벤트는 AI가 생성한 메시지와 최종 사용자가 이에 대해 제출한 피드백 사이의 트레이스 ID를 연관시킵니다. 메시지를 피드백과 연관시키려면 AI 메시지를 생성하는 호출 직후에 current_trace_id 에 대한 호출을 통해 활성 프로세서의 트레이스 ID를 얻을 수 있습니다. 나중에 사용자가 피드백을 제공할 때 트레이스 ID를 피드백 호출에 전달합니다.

많은 경우 AI 메시지의 엔드포인트는 피드백 엔드포인트와 다른 위치에 기록됩니다. 이러한 현상은 다른 데스크탑에서 발생할 수 있습니다. 다음 사항이 중요합니다.

1. AI 메시지를 생성하는 헤드포인트 내부에 트레이스 ID가 캡쳐되어 있는지 확인하세요.
2. 피드백을 기록하는 PointPoint 내부에 해당 트레이스 ID를 전달합니다.

매개변수

반환 값

없음.

예

트레이스 ID 획득 및 피드백 기록

피드백 이벤트 기록의 예:

import newrelic.agent

def get_message(request):
    trace_id = newrelic.agent.current_trace_id()

def post_feedback(request):
    newrelic.agent.record_llm_feedback_event(trace_id=request.trace_id, rating=request.rating, metadata= {"my_key": "my_val"})