목차
AI 어시스턴트가 명확한 계획을 제시했지만, 그 계획이 복도에서 나눈 대화나 전화 통화에서 합의한 내용과 충돌할 수 있습니다. 그렇다고 해서 어시스턴트의 추론에 반드시 문제가 있었다는 뜻은 아닙니다. 그 대화가 채팅이나 어시스턴트가 접근할 수 있는 다른 출처에 전혀 포함되지 않았을 수 있습니다. 몇 가지 단서를 살펴보면 맥락의 공백과 추론 문제를 구분하는 데 도움이 됩니다.
요약
- 채팅 외부에서 논의한 합의, 제약 또는 변경 사항처럼 구체적으로 빠진 정보가 있는지 살펴보세요.
- 그 정보가 어시스턴트가 접근할 수 있는 곳에 기록되어 있었는지 확인하세요. 그렇지 않았다면 어시스턴트가 그 정보를 활용할 수 없었습니다.
- 관련 정보가 이용 가능했다면, 원인을 맥락 누락으로 단정하기 전에 어시스턴트가 그 정보를 어떻게 해석했는지 살펴보세요.
답변에 대화 외부의 맥락이 빠졌을 수 있다는 신호
맥락의 공백이 있다면 보통 답변과 다른 대화에서 알고 있는 구체적인 사실이 서로 맞지 않는 모습으로 드러납니다. 예를 들어, 동료가 복도에서 이미 특정 날짜에 자리를 비울 것이라고 말했는데도 계획에 그날의 업무가 배정될 수 있습니다.
다음과 같은 단서를 살펴보세요.
- 알고 있는 합의 내용이 빠져 있습니다. 어시스턴트가 전달받지 못한 대화에서 한 약속과 충돌하는 다음 단계를 제안합니다.
- 제약을 고려하지 않은 것 같습니다. 답변은 작성된 요청에는 부합하지만, 시간 제한이나 다른 팀을 참여시켜야 한다는 요구처럼 다른 곳에서 논의된 제약을 놓칩니다.
- 답변은 그럴듯하지만 불완전합니다. 채팅에 있는 정보는 다루지만, 논의했던 중요한 우려 사항, 결정 또는 변경 사항이 빠져 있습니다.
이런 단서는 증거가 아니라 징후입니다. 어시스턴트가 정보를 전달받고도 잘못 이해했을 수 있고, 사용자의 기억이 불완전할 수도 있습니다. 답변 전체를 “맥락이 없다”고 규정하기보다는, 먼저 정확히 어떤 정보가 빠졌는지 확인하세요.
맥락을 빠르게 점검하기
답변에서 빠진 중요한 세부 정보 하나를 골라 다음을 확인하세요.
- 그 내용이 현재 채팅에서 언급되었나요? 그렇다면 문제는 외부 출처가 아니라 해석, 주의 또는 추론에 있을 수 있습니다.
- 채팅에서 언급되지 않았다면, 그 내용은 어딘가에 기록되어 있었나요? CRM, 메모, 대화 기록 또는 저장된 대화에 있을 수 있습니다. 한 번도 기록되지 않은 대화는 이용 가능한 기록에서 찾지 못할 수 있습니다.
- 이 작업에서 어시스턴트가 그 기록에 접근할 수 있었나요? 정보가 어딘가에 존재한다고 해서 그 정보가 채팅에 포함되었거나 연결된 출처를 통해 이용 가능했다는 뜻은 아닙니다.
그 내용이 채팅에도 없고 어시스턴트가 접근할 수 있는 출처에도 없었다면, 맥락 누락이 타당한 설명일 수 있습니다. 정보가 이용 가능했다면 답변이 그 내용을 놓쳤는지, 잘못 해석했는지, 아니면 오래된 정보를 사용했는지 살펴보세요. 해당 정보가 어디에 기록되어 있었는지 또는 어시스턴트가 무엇에 접근할 수 있었는지 확인할 수 없다면 원인을 단정하지 마세요.
맥락의 공백과 다른 문제 구분하기
| 관찰한 내용 | 의미할 수 있는 것 | 다음에 살펴볼 사항 |
|---|---|---|
| 다른 대화에서 특정 사실이 언급되었지만 어시스턴트는 그 내용에 접근할 수 없었습니다 | 맥락 누락 | 해당 대화가 기록되어 어시스턴트가 이용할 수 있었는지 확인하세요. |
| 그 사실이 채팅이나 접근 가능한 출처에 있지만 답변이 이를 부정합니다 | 해석 또는 추론 오류일 가능성 | 실제 문구와 관련 조건을 답변과 비교하세요. |
| 답변은 이전 계획과 일치하지만 더 최근 계획과는 다릅니다 | 오래된 맥락일 가능성 | 최신 정보가 기록되어 제공되었거나 어시스턴트가 접근할 수 있었는지 확인하세요. |
| 대화를 기억하지만 기록을 찾을 수 없습니다 | 이용 가능한 기록만으로는 어떤 내용이 오갔는지 확인할 수 없습니다 | 다른 출처를 확인하거나 대화에 참여한 사람들에게 설명을 요청하세요. |
어시스턴트의 답변만으로는 어떤 설명이 맞는지 알 수 없습니다. 빠진 정보가 하나 있다고 해서 도구가 모든 정보를 가져오는 데 실패했다는 뜻도 아닙니다. 출처가 없거나, 접근할 수 없거나, 모호하거나, 요청의 표현과 관련이 없었을 수도 있습니다.
Hemory를 활용하는 방법
대화가 Hemory에 저장되어 있다면 기본 제공 Q&A를 통해 여러 대화에 걸친 대화 기록 기반 질문을 포함해 기억에 관한 질문을 할 수 있습니다. 이렇게 하면 기억에만 의존하거나 메모를 일일이 모으는 대신, 누락이 의심되는 내용의 근거가 된 대화를 찾아볼 수 있습니다. Hemory는 저장되어 해당 기능에서 이용할 수 있는 대화에 대해서만 도움을 줄 수 있으며, 한 번도 기록되지 않은 대화 내용을 제공할 수는 없습니다.
유용하게 확인하려면 빠진 내용에 초점을 맞추세요. 어떤 합의나 제약을 찾으려는지, 어떤 주제나 사람이 해당 대화를 찾는 데 도움이 될지 생각해 보세요. 관련 결과가 있다면 AI 답변과 비교하세요. 출처가 최신인지, 그리고 내리는 결론을 뒷받침하는지는 여전히 직접 판단해야 합니다.
실용적인 다음 단계
답변에서 중요한 내용이 빠진 것 같다면, 정확히 무엇이 누락되었는지 밝히고 그 정보의 출처를 추적하세요. 해당 정보가 실제로 존재했는지, 기록되었는지, 그리고 어시스턴트가 접근할 수 있었는지 확인하세요. 이렇게 하면 모든 불일치를 추론 오류로 취급하거나 기억하는 모든 대화를 AI가 이용할 수 있었다고 가정하는 것보다 원인을 더 유용하게 파악할 수 있습니다.
자주 묻는 질문
AI가 채팅 외부에서 제가 나눈 대화를 알 수 있나요?
그 정보가 채팅에 포함되어 있거나 어시스턴트가 접근할 수 있는 출처를 통해 제공된 경우에만 알 수 있습니다. 어시스턴트에 제공되지도 않고 다른 곳에 저장되지도 않은 대화를 자동으로 알 수는 없습니다.
세부 정보가 빠졌다면 AI가 실수한 건가요?
반드시 그렇지는 않습니다. 해당 세부 정보를 이용할 수 없었을 수 있습니다. 그 정보가 채팅이나 접근 가능한 출처에 있었다면, 어시스턴트가 이를 놓쳤거나 잘못 해석했을 수 있습니다. 답변만으로는 원인을 확정할 수 없습니다.
대화를 기억하지만 기록을 찾을 수 없다면 어떻게 해야 하나요?
이용 가능한 기록으로 확인되지 않은 내용으로 간주하세요. 어시스턴트나 검색이 모든 것을 찾았다고 가정하기보다는 다른 출처를 확인하거나 대화에 참여한 사람에게 설명을 요청하세요.

