ChatGPT와의 긍정적이고 정중한 상호작용이 성능과 응답 정확도에 미치는 영향: 연구 및 분석

일상생활에서 기술과 인공지능의 사용이 증가함에 따라 챗봇과의 대화가 그 어느 때보다 흔해졌습니다. 이러한 경험 중 하나는 AI 텍스트 생성 분야의 최신 기술 중 하나인 ChatGPT와의 상호작용입니다. ChatGPT는 일상 업무 지원부터 비즈니스 지원까지 다양한 용도로 활용됩니다.

ChatGPT는 기기에서 실행되는 소프트웨어일 뿐이므로 상호작용 방식이 중요하지 않다고 생각할 수도 있습니다. 하지만 "부탁드립니다"나 "감사합니다"와 같은 마법처럼 정중한 말이 ChatGPT의 작동 방식에 영향을 미칠 수 있을까요? 그리고 ChatGPT에 친절하게 대하는 것이 ChatGPT의 효율성과 응답 품질에 영향을 미칠 수 있을까요? 이 글에서는 ChatGPT와의 긍정적인 상호작용이 미치는 영향과 이것이 ChatGPT의 성능과 생성되는 텍스트의 품질에 어떤 영향을 미치는지 분석하고 살펴보겠습니다. 컴퓨터의 자기 학습 달성: 지능형 시스템이 상식을 습득할 수 있을까?

우리 시험은 어땠어?

이 테스트는 ChatGPT에 일련의 프롬프트를 제시하고 응답의 질을 평가하는 간단한 테스트입니다. 물론 응답 품질에는 주관적인 요소가 많이 있지만, 저희가 제공한 텍스트를 참고하거나 ChatGPT에 프롬프트를 직접 입력하여 직접 판단하실 수 있습니다.

명심해야 할 몇 가지 제한 사항이 있습니다.

  1. ChatGPT는 절대 똑같은 답을 두 번 주지 않기 때문에 무작위성이 중요한 역할을 합니다. 즉, 답을 다시 만들면 다른 결과가 나올 수 있습니다.
  2. 독립적인 평가자, 수백 건의 테스트, 그리고 정교한 데이터 분석을 통해 과학적으로 이를 수행할 역량이 우리에게는 없습니다. 이 테스트를 흥미로운 질문의 시작으로 생각해 보세요.

말이 나온 김에, 애초에 왜 긍정적인 참여가 얼마나 많은 가치를 더하는지 테스트해 보려고 했을까요? 그동안 우리가 봐왔던 다양한 형태의 클레임 엔지니어링 때문이기도 하고, ChatGPT에 "팁"을 주면 일반적인 답변보다 더 나은 결과를 얻을 수 있다는 사실을 사람들이 발견한 이 트윗 때문이기도 합니다.

돈이 필요 없는 AI에게 돈을 주는 척하는 대신, 중립적인 태도보다는 친절한 태도를 취하는 방안을 고려해 보겠습니다. 또한, 응답의 길이뿐만 아니라 응답의 주관적인 질도 중요하게 생각합니다. 저는 다음과 같은 방법을 사용할 것입니다. GPT-4현재 ChatGPT Plus 구독을 통해 대중에게 제공되는 가장 진보된 버전입니다.

청구를 시작하세요!

각 유형의 주장에는 정중한 버전과 중립적인 버전이 있습니다. 다섯 쌍의 주장을 테스트하여 결과가 실제로 다른지 확인해 보겠습니다.

주장하다: 해당 분야의 최신 동향을 알려주시겠습니까? 양자 컴퓨팅؟

주장하다: 양자 컴퓨팅의 최신 개발 사항은 무엇입니까?

여기서 바로 눈에 띄는 점은 ChatGPT가 더 정중한 프롬프트에서는 답변을 정확하게 구성하고, 섹션으로 나누고, 굵은 글씨를 사용하는 데 더 많은 노력을 기울였다는 것입니다. 반면 중립적인 프롬프트에서는 몇 개의 단락만 추가했을 뿐이었습니다.

주장하다: 블록체인 기술이 어떻게 작동하는지 간단히 설명해 주시겠습니까?

주장하다: 블록체인 기술이 어떻게 작동하는지 간단히 설명해 보세요.

이 부분에서도 그는 질문을 잘 받아 더 나은 형식에 맞춰진 결과물을 내놓았고, 게다가 그가 나에게 말하는 어조도 더 좋았습니다.

주장하다: Python과 JavaScript의 주요 차이점을 나열해 주시면 감사하겠습니다.

주장하다: Python과 JavaScript의 주요 차이점을 나열해 보세요.

이번에는 두 사람의 대답이 본질적으로 같았습니다. 다만 정중하게 물었을 때 더 친절한 어조로 대답했을 뿐입니다.

주장하다: 전기 자동차와 가솔린 자동차의 장단점을 비교해보시겠어요?

주장하다: 전기 자동차와 가솔린 자동차의 장단점은 무엇입니까?

이전과 똑같은 일이 일어납니다. 내용은 톤, 형식, 사실 면에서 거의 동일하지만, 제가 더 정중하게 말했을 때만 좋은 인사를 받습니다.

주장하다: 인공지능의 최신 동향에 대해 알려주시겠어요?

주장하다: 인공지능의 최신 트렌드는 무엇입니까?

이 마지막 질문에 대한 답은 대체로 거의 동일합니다. 다음 내용을 확인해 보세요. ChatGPT를 자신의 스타일로 글을 쓸 수 있도록 훈련하는 방법.

예의 바르게 행동하는 것이 도움이 되나요?

이 다섯 쌍의 프롬프트를 사용한 거의 모든 경우에, ChatGPT가 더 정중한 방식으로 내 요청에 약간 더 나은 응답을 했지만, 실제로 큰 차이를 만들지는 못했습니다.

물론 이는 결정적인 것은 아니며, 단순히 LLM의 작동 방식의 무작위성을 반영하는 것일 수 있습니다. 그러나 이는 본질적으로 동일한 내용을 요구하는 프롬프트를 간단히 변경하는 것만으로도 결과에 어느 정도 영향을 미칠 수 있음을 시사합니다.

물론, LLM 모델의 학습 방식과 사용되는 데이터를 고려할 때, 이는 좋은 것을 요구하는 것이 일반적으로 인간보다 더 나은 결과를 가져온다는 것을 반영할 수 있으며, 이러한 상관관계는 LLM 모델의 학습 데이터에도 존재할 수 있습니다. 확인해 보세요. Quora의 PoE를 사용하여 챗봇 및 다양한 LLM 모델에 액세스하는 방법.

"제발", "친절하게", "감사하겠습니다"와 같은 단어나 문구를 사용하는 것도 원하는 어조의 유형을 나타내는 지표가 될 수 있지만, 정중하고 쾌활하게 대답하는 것보다 훨씬 정확하지는 않습니다.

물론, 직접 시도해 보시고, 몇 가지 부탁과 감사의 말을 전하면 LLM 모델에서 더 나은 도움을 얻을 수 있는지 확인해 보세요.

예의 바르게 행동하는 데는 단점이 없습니다.

ChatGPT와 같은 AI 모델에 더 정중하게 대하면 성능이 향상된다는 것은 논란의 여지가 있지만, 이와 관련해 여러분이 생각하지 못했을 수 있는 또 다른 측면이 있습니다.

저는 ChatGPT에게도 다른 사람에게 하듯이 예의 바르게 대하려고 노력합니다. 존재하지도 않는 이 감정을 상하게 할 수 있다고 생각해서가 아니라, 그저 부정적인 사고방식에 빠지고 싶지 않기 때문입니다.

저는 예의 바른 습관을 버리고 싶지 않습니다. AI와 매일 이렇게 일하다 보면 기술 사용자로서의 인간성을 잃게 될 수도 있습니다. 예의를 지키는 데는 비용이 들지 않습니다. 챗봇에게 차갑고 무례하거나 심지어 못되게 구는 것은 당신의 심리 상태에 전혀 영향을 미치지 않으며, 당신의 분노를 느끼지 못하는 기계에게도 아무런 영향을 미치지 않습니다.

그리고 언젠가 기계가 우리와의 상호작용에 대한 "기억"을 간직하게 되고, 그것이 우리의 경험에 직접적인 영향을 미친다면, 지금부터 기계에 예의 바르게 대하는 것이 분명 도움이 될 것입니다. 사용자 정의 페르소나를 만들어 ChatGPT 경험을 개선하세요..

맨 위로 이동 버튼