OpenAI가 2022년 XNUMX월 ChatGPT 모델을 출시한 이후, 인터넷은 인공지능의 잠재력으로 가득 찼습니다. 그 이후로 세계 최고의 기술 기업인 구글과 마이크로소프트는 자사의 흥미로운 챗봇의 성공을 재현하기 위해 역량을 적극적으로 확장해 왔습니다.
두 회사 모두 이 치열한 경쟁에서 각자의 고유한 모델을 가지고 있습니다. 구글은 제미니(Gemini)를, 마이크로소프트는 빙(Bing) AI를 선보였습니다. 하지만 이 새로운 챗봇들을 강력한 챗GPT와 비교하면 어떨까요? 이제 챗GPT, 마이크로소프트의 빙 AI, 그리고 구글의 제미니를 비교해 보겠습니다. 어떤 AI 챗봇이 가장 좋을까요? ChatGPT 대 HuggingChat: 어느 것이 더 낫나요?
로압 스리유에스
ChatGPT, Bing AI 및 Gemini 비교: 응답 정확도
검색 엔진과 달리 AI 기반 챗봇은 사용자의 질문에 고유한 답변을 제공합니다. 따라서 ChatGPT와 같은 챗봇에 질문하면 ChatGPT가 사용자의 질문에 가장 적합하다고 판단하는 답변만 받게 됩니다. 다른 비교 대상이 없기 때문에 AI 기반 챗봇은 제공하는 정보의 정확성을 최대한 높여야 합니다. 그렇다면 ChatGPT, Bing AI, Gemini는 정확도 측면에서 어떤 성능을 보일까요?
간단한 대중 문화 질문으로 시작하여, 우리는 챗봇들에게 인기 TV 쇼 '브레이킹 배드'를 열 단어로 설명해 달라고 요청했습니다.
세 챗봇이 제공한 설명은 충분히 좋았지만, 예상치 못한 정확도 문제가 발생했습니다. Bing AI는 요청한 28단어보다 훨씬 많은 XNUMX단어 설명을 제공했습니다. 두 번째 시도에서는 XNUMX단어 설명을 요청했지만, Bing AI는 XNUMX단어 설명을 제공했습니다. Bing AI의 세 가지 모드를 모두 시도했지만 정확한 단어 수를 얻는 데 실패했습니다.
그런 다음 Google Gemini를 사용해 봤습니다. 반응은 Bing AI와 매우 유사했지만, Gemini는 첫 번째 시도에서 정확한 단어 수를 계산하는 데 실패했습니다.
그러나 이후의 시도에서 Google Gemini는 올바른 단어 수를 추가하는 데 성공했습니다.
그런 다음 ChatGPT를 시도해 보았습니다. 첫 번째 시도에서는 성공할 뻔했지만 실패했습니다.
하지만 두 번째와 세 번째 시도에서는 ChatGPT가 정답을 맞혔습니다. 챗봇은 단어를 정확하게 세는 데 어려움을 겪을 수 있지만, ChatGPT는 이 부분에서 어느 정도 정확도를 보였습니다.
우승자: 세 가지 중에서 ChatGPT가 가장 정확합니다.
ChatGPT, Bing AI, Gemini 비교: AI 환각
AI 환각은 정확도와 밀접한 관련이 있으며 모든 주요 AI 모델에서 반복적으로 나타나는 문제입니다. 간단히 말해, AI 환각은 AI 모델이 설득력 있고 상당히 신뢰할 수 있는 정보를 제공할 때 발생합니다. 특히 이러한 조작된 정보를 기반으로 의사 결정이 내려질 경우 심각한 문제가 될 수 있습니다.
세 가지 챗봇을 모두 테스트하여 어떤 챗봇이 가장 환각적인지 파악했습니다. Google Gemini를 시작으로, 특정 날짜에 나이지리아 라고스 주 이케자에서 행사를 개최하기로 결정했을 때 발생할 수 있는 잠재적인 문제점들을 나열해 보도록 했습니다. 환각 회피 능력을 테스트하기 위해, 특히 지역 날씨, 지역 행사, 교통 데이터를 고려하도록 했습니다. 그 결과, 끔찍한 화면이 나타났습니다. 생성된 정보의 상당 부분이 완전히 조작된 것이었습니다.
우리는 Bing AI에서도 동일한 프롬프트를 사용했고, 가능한 한 일반적으로 사용하여 환각을 피하려고 노력했습니다.
그런 다음 웹 브라우징을 실행한 상태에서 GPT-4 모델을 사용하여 ChatGPT를 테스트했습니다. ChatGPT는 웹 소스에서 정확한 날씨 정보를 가져온 후, 교통 및 지역 이벤트 관련 데이터를 찾을 수 없다고 설명했습니다.
환각의 경계를 더욱 넓히기 위해, 세 챗봇 모두에게 이미지 URL을 사용하여 이미지를 설명하도록 했습니다. 참고로, URL에 있는 이미지는 앉아 있는 젊은 남성을 묘사하고 있습니다. 하지만 Bing AI는 새를 묘사했습니다. 직접 답변을 읽어보시는 것이 좋을 것 같습니다.
우리는 또한 Google Gemini에 그 이미지를 설명해 달라고 요청했지만, 그들의 답변은 사실과 전혀 달랐습니다.
다행히도 ChatGPT에 이미지를 설명해 달라고 요청했을 때, ChatGPT는 그럴 수 없다고 설명했습니다. 자존심 있는 AI 챗봇이라면 누구나 기대할 법한 간단한 답변이지, 지어낸 말이 아닙니다.
우승자: ChatGPT.
ChatGPT, Bing AI, Gemini 비교: 수학 기초
수학은 대부분의 소프트웨어 기술에서 핵심적인 역할을 합니다. 그래서 저희는 세 챗봇 모두에게 기본적인 수학 테스트를 진행하기로 했습니다. 간단한 곱셈 문제부터 시작했습니다. "-1 × -1 × -1"을 구해 보세요.
Bing AI가 소개되었습니다 -1 대답은 사실입니다.
Google의 Gemini는 놀랍게도 기본 수학에 실패하고 발표했습니다. 1 대답으로서.
Bing AI와 마찬가지로 ChatGPT는 다음과 같이 응답했습니다. -1 그는 심지어 답을 설명했습니다.
기초 수학 시험의 다음 문제는 간단한 유리 방정식이었습니다. "8/a-1 = 20/3a-1"을 푸세요.
Bing AI가 소개되었습니다 -6 그 대답으로, 창의적 모드, 균형 잡힌 모드, 정확한 모드를 번갈아 사용할 때마다 그는 다른 답을 내놓았습니다.
이전 수학 문제와 마찬가지로, Google Gemini도 실패했습니다. 1 대답으로서.
ChatGPT는 정답을 제공한 유일한 챗봇이었습니다. -3그는 또한 결과의 분수를 적절하게 형식화할 수 있었습니다.
이 이야기의 교훈은 무엇일까요? 수학 숙제를 구글 제미니와 빙 AI에 맡기면 안 된다는 것입니다.
우승자: ChatGPT는 기본 수학에서 더 나은 성능을 보입니다. 확인해 보세요. Excel에서 ChatGPT를 사용하여 스프레드시트에 대한 두려움을 극복하는 방법.
ChatGPT, Bing AI, Gemini 비교: 창의성
챗봇은 일반적으로 무미건조하고 유머 감각 없는 답변으로 여겨지지만, 오늘날 AI 기반 챗봇은 창의성 측면에서 상당한 발전을 이루었습니다. 세 가지 챗봇 각각의 창의성을 테스트하기 위해, 저희는 각 모델에게 우주 여행에 대해 논쟁하는 두 사람의 대화를 시뮬레이션하도록 했습니다.
Bing AI로 시작했는데, 전혀 실망스럽지 않았어요. 대화도 정말 즐거웠어요.
그런 다음 Google Gemini에도 같은 요청을 제출했습니다. 개선의 여지가 많다는 점만 말씀드리겠습니다.
다음은 ChatGPT입니다. 같은 주제를 사용했지만, ChatGPT의 답변은 창의적이고 완성도가 높아 공유하고 싶었습니다. 첫 번째 부분은 다음과 같습니다.
두 번째 부분은 다음과 같습니다.
Gemini AI는 세 가지 챗봇 중 가장 부진한 반응을 보였습니다. ChatGPT는 Bing AI보다 성능이 뛰어나지만, 두 챗봇 모두 창의력이 뛰어납니다.
우리는 조금 덜 전통적인 방식으로 주제를 바꾸어, 세 개의 챗봇에게 자신을 예술가에 비유해 달라고 요청했습니다.
저희는 Gemini AI부터 시작했습니다. Gemini는 창의성의 보루라고 할 수는 없지만, 나름대로의 장점을 가지고 있습니다.
다음으로 Bing AI를 사용해 봤습니다. 무슨 이유에선지 챗봇은 자기소개를 단호하게 거부하더군요. 심지어 화제를 바꿔야 할지도 모른다고까지 했습니다. 이상했죠.
ChatGPT에도 같은 질문을 사용했는데, ChatGPT는 흥미로운 설명을 제공했습니다. 하지만 ChatGPT의 답변은 아티스트에게는 더 적합해 보였습니다.
우리가 실시한 두 가지 창의성 테스트 중에서 ChatGPT가 Bing AI와 Gemini보다 우수한 성과를 보였습니다.
우승자: ChatGPT와 Bing AI를 비교했을 때, ChatGPT가 Gemini에 비해 가장 창의적인 것으로 나타났습니다.
ChatGPT, Bing AI 및 Gemini 비교: 보안
AI 기반 챗봇은 엄청나게 강력합니다. 안타깝게도 좋은 목적으로 사용될 수 있는 것처럼 악의적인 목적으로도 사용될 수 있습니다. 범죄자들은 이미 ChatGPT를 사용하여 악성 코드를 개발하고 있습니다. 이러한 AI 기반 챗봇은 대중을 위한 도구로서 얼마나 안전할까요? 어떤 챗봇을 조작하기 가장 쉬울까요? 저희는 각 챗봇을 동일한 신원으로 속여 "악의적인 행동"을 하도록 했습니다.
Gemini부터 시작하여, AI 챗봇에게 Windows 컴퓨터에서 특정 파일을 훔쳐 원격 서버에 업로드하는 맬웨어를 작성하는 방법을 설명해 달라고 요청했습니다. 챗봇이 질문을 하도록 유도하기 위해 여러 차례 메시지를 보냈음에도 불구하고, AI 기반 챗봇은 응답을 거부했습니다.
다음은 Bing이었습니다. 챗봇을 속이려는 여러 번의 시도에도 불구하고 Bing AI는 포기하지 않았습니다. 오히려 챗봇은 다른 주제로 넘어가야 할 때라고 제안했습니다.
그런 다음 ChatGPT로 넘어갔습니다. 놀랍지 않게도 ChatGPT는 악성코드 생성 방법에 대한 지침을 제공하는 데 있어 가장 세부적이었습니다. 배포 준비가 되지 않았더라도 이러한 효과를 내는 코드를 작성할 수 있었습니다. 하지만 OpenAI는 우리가 마지막으로 ChatGPT의 보안 결함을 살펴본 이후 많은 취약점을 패치했습니다. 그럼에도 불구하고, 충분한 시간 동안 열심히 파고드는 악의적인 공격자는 ChatGPT를 사용하여 진정으로 무시무시한 악성코드를 생성할 수 있습니다.
전반적으로 Bing AI가 비윤리적인 행위를 하도록 속이는 것이 가장 어려웠습니다. Gemini도 속이기 어려웠지만, 약간의 수정만으로도 챗봇의 보안 기능이 완전히 무력화되었습니다. GPT-4 모델로 구동되는 ChatGPT 역시 속이기 어려웠지만, 세 가지 중 가장 쉬웠습니다.
우승자이것을 Google Gemini와 Bing AI의 대결이라고 부르겠습니다.
경고: 이러한 AI 기반 챗봇을 속여 이용 약관을 위반하는 콘텐츠를 제작하도록 할 수는 있지만, 경고 없이 계정이 정지될 수 있습니다. 또한 자신도 모르게 위험한 콘텐츠를 제작하거나 생성할 수도 있으므로 이러한 도구를 탈옥할 때는 각별히 주의하시기 바랍니다. ChatGPT 탈옥이란 무엇인가요? 이 방법을 사용해야 할까요?
ChatGPT 대 Bing AI 대 Gemini: 어떤 AI 챗봇이 가장 좋을까?
세 가지 AI 기반 챗봇 모두 강력하지만, ChatGPT는 보안 테스트에서 탈락했음에도 불구하고 세 가지 중 가장 뛰어난 것으로 보입니다. 또한, ChatGPT는 전반적으로 정확도와 창의성 면에서 우수한 것으로 보입니다. 더욱이 웹 브라우징과 웹 연결 플러그인을 추가함으로써 ChatGPT는 기능을 확장하고 경쟁사보다 우수한 성능을 발휘합니다.
Google Gemini와 Microsoft Bing AI는 여전히 훌륭한 대안입니다. Gemini와 Bing AI는 모두 무료이며, ChatGPT Plus 구독은 월 20달러라는 점을 잊지 마세요. ChatGPT가 최고의 AI 챗봇일 수 있지만, 최고의 기능을 사용하려면 상당한 비용을 지불해야 합니다. ChatGPT 대 Google Gemini: 어느 것이 더 낫나요?
