오늘은 생성형 AI를 글쓰기 도구로 활용할때 Claude 3 Opus와 ChatGPT-4의 성능을 비교해 보는 흥미로운 실험을 진행해 보았습니다.
요즘 생성형AI 기술의 발전으로 글쓰기에 AI를 활용하는 사례가 늘고 있는데요, 과연 어떤 AI 도구가 더 우수한 글쓰기 능력을 보여줄까요? 이번 실험에서는 동일한 프롬프트를 사용하여 두 AI 모델의 응답을 비교해 보았습니다.
실험 결과, 간단한 질문에 대해서는 두 모델 모두 큰 차이를 보이지 않았습니다. 하지만 복잡한 자연어 질문에 대해서는 질문 이해도와 응답의 품질에서 차이를 나타냈는데요.
ChatGPT-4에게 두 모델의 응답을 비교하도록 요청한 결과, 다음과 같은 피드백을 받았습니다:
"종합적으로 볼 때, 응답 A(Claude 3 Opus)가 사용자의 질문 의도를 더 잘 이해하고 있으며, 생성형 AI를 활용한 에세이 작성에 대한 실질적이고 구체적인 가이드를 제공하고 있습니다. 이를 통해 사용자는 AI와 협업하여 에세이를 효과적으로 작성할 수 있는 방법을 더 잘 이해할 수 있을 것입니다."
위 결과는 제가 아래와 같은 예시문을 Claude 3 Opus (A)와 ChatGPT-4 (B)에게 똑같이 질문을 한 응답 결과를 가지고, ChatGPT-4에게 이 두개의 결과(A와 B로 지칭하여) 를 비교하여 어느 응답이 더 사용자 질문의 의도에 맞는지 물어본 결과입니다.
실험 순서
1. 아래 프롬프트를 Claude 3 Opus 와 ChatGPT-4에게 동시에 질문을 해봄
'당신은 실용문중에서 에세이 전문 작가로서 베스트셀러 작가입니다. 일반인이 에세이를 쓰려고 할때 생성형 AI 프롬프트 기술을 적용하는 방법을 알아 내려고 합니다. 이떄 에세이를 쓰고자하는 사람들이 처음에 알아야 할 사항이 무엇이지 어떻게 하면 프롬프트 기법을 잘 활용할 수 있을지 안내 해주세요'
Claude3 Opus 응답 | ChatGPT-4 응답 |
에세이 작성에 생성형 AI 프롬프트 기술을 활용하고자 하는 분들을 위해 다음과 같은 안내를 드리고자 합니다. 1. 주제 선정 및 아웃라인 작성 - 에세이의 주제와 전달하고자 하는 메시지를 명확히 정립합니다. - 주제에 맞는 적절한 소제목을 선정하고, 전체적인 흐름을 고려하여 아웃라인을 작성합니다. - 이 단계에서 AI에게 주제와 소제목을 제시하고, 관련 아이디어나 키워드를 생성해 달라고 요청할 수 있습니다. 2. 섹션별 콘텐츠 생성 - 아웃라인에 따라 각 섹션별로 AI에게 콘텐츠 생성을 요청합니다. - 이때 AI에게 제공하는 프롬프트는 최대한 상세하고 구체적으로 작성하는 것이 좋습니다. - 예를 들어, "서론 부분에서 독자의 관심을 끌 수 있는 흥미로운 도입부를 작성해 주세요."와 같이 요청할 수 있습니다. 3. 생성된 콘텐츠 검토 및 수정 - AI가 생성한 콘텐츠를 꼼꼼히 검토하고, 필요한 부분은 직접 수정하거나 추가 작성합니다. - 생성된 콘텐츠가 원하는 방향과 다소 다를 경우, 추가 프롬프트를 제공하여 재생성을 요청할 수 있습니다. - 예를 들어, "앞서 생성된 내용에서 더 감성적인 어조로 바꿔 주세요."라고 요청할 수 있습니다. 4. 전체 에세이 완성 및 교정 - 각 섹션별로 생성 및 수정된 콘텐츠를 하나의 완성된 에세이로 연결합니다. - 문장 간 연결, 문법, 맞춤법 등을 꼼꼼히 검토하고 교정합니다. - 필요한 경우 AI에게 전체 에세이의 문체 통일이나 오탈자 검사를 요청할 수 있습니다. 5. 피드백 및 추가 수정 - 완성된 에세이를 trusted readers에게 공유하고 피드백을 받습니다. - 피드백을 바탕으로 에세이를 추가 수정 및 보완합니다. - 수정 과정에서도 필요한 부분은 AI의 도움을 받을 수 있습니다. 가장 중요한 점은 AI를 유용한 도구로 활용하되, 최종 책임은 인간 작가에게 있다는 사실을 인지하는 것입니다. AI에게 의존하기보다는 협력하는 마음가짐으로 창의적인 에세이 작성에 도전해 보시기 바랍니다. 초반에는 다소 어려움이 있을 수 있지만, 점차 요령이 느껴지실 겁니다. 멋진 에세이 꼭 완성하시길 응원하겠습니다! | 생성형 AI 프롬프트 기술을 에세이 작성에 활용하는 것은 매우 효과적인 방법일 수 있습니다. 여기에는 몇 가지 주요 단계와 팁이 있으며, 이를 통해 에세이 작성을 시작하는 사람들이 이 기술을 잘 활용할 수 있도록 도와드리겠습니다. ### 1. 목적과 주제 정하기 - **목적 결정**: 에세이를 쓰고자 하는 목적을 명확히 합니다. 예를 들어, 의견을 표현하고 싶은지, 정보를 제공하고 싶은지, 아니면 독자를 설득하고 싶은지 등입니다. - **주제 선정**: 관심 있는 주제를 선택하고, 그 주제에 대해 충분히 알고 있는지 확인합니다. AI를 사용하여 주제에 대한 추가 정보를 수집하고 분석할 수도 있습니다. ### 2. 프롬프트 생성 기술 이해 - **기초 지식 습득**: 생성형 AI의 작동 원리를 이해합니다. AI는 주어진 프롬프트를 바탕으로 텍스트를 생성하기 때문에, 프롬프트의 질이 결과의 질을 결정합니다. - **프롬프트 작성 연습**: 명확하고, 구체적이며, 직접적인 프롬프트 작성을 연습합니다. 예를 들어, “고대 로마의 정치적 구조에 대해 설명해줘”와 같은 프롬프트는 구체적이고 정보를 요구하는 좋은 예입니다. ### 3. AI를 사용한 초안 작성 - **프롬프트 사용**: 선택한 주제에 대한 프롬프트를 생성형 AI에 입력합니다. 처음에는 넓은 범위에서 시작하여 점차 세부적인 요소로 좁혀가는 것이 좋습니다. - **초안 검토**: AI가 생성한 내용을 검토하고, 주제에 맞는지, 논리적인지, 그리고 원하는 목적에 부합하는지 확인합니다. ### 4. 수정 및 개선 - **인간의 감성 추가**: AI가 생성한 텍스트는 때로 무미건조할 수 있습니다. 자신의 개성과 감성을 추가하여 독자와의 연결을 강화합니다. - **구조와 흐름 점검**: 전체적인 에세이의 구조와 흐름이 자연스러운지 점검합니다. 필요한 경우, 주제 문장이나 결론 부분을 재작성하여 글의 완성도를 높입니다. ### 5. 피드백과 수정 - **피드백 수집**: 다른 사람들로부터의 피드백을 받습니다. 이는 글의 명확성, 설득력, 그리고 독창성을 향상시키는 데 도움이 될 수 있습니다. - **최종 수정**: 피드백을 바탕으로 최종적인 수정을 진행합니다. 문법 오류, 맞춤법, 그리고 문장 흐름 등을 최종 검토합니다. 생성형 AI를 활용하여 에세이를 작성하는 것은 효과적인 방법이 될 수 있으며, 위의 단계를 통해 기술의 이해와 활용 능력을 개발할 수 있습니다. 이 과정을 통해, 당신의 에세이 작성 능력뿐만 아니라 AI 기술을 다루는 법도 함께 향상될 것입니다. |
2. 위 두개의 결과를 익명 (A와 B로 지칭)으로 해서 ChatGPT-4에게 다음 (A)는A의 답변이고, 다음 (B)는B의 답변입니다. 객관적으로 이 두 답변이 질문한 내용에대해서 어느것이 더 질문한 사람의 의도를 이해하고 잘 답변을 하였는지 비교 분석을 해주세요” 라고 질문한 결과 입니다.
프롬프트
'당신은 실용문중에서 에세이 전문 작가로서 베스트셀러 작가입니다. 일반인이 에세이를 쓰려고 할때 생성형 AI 프롬프트 기술을 적용하는 방법을 알아 내려고 합니다. 이떄 에세이를 쓰고자하는 사람들이 처음에 알아야 할 사항이 무엇이지 어떻게 하면 프롬프트 기법을 잘 활용할 수 있을지 안내 해주세요' 라고 프롬프트 명령어를 작성하여 '생성형AI-A' 와 "생성형AI-B' 에게 동일한 질문한 결과를 비교해주세요. 다음 (A)는A의 답변이고, 다음 (B)는B의 답변입니다. 객관적으로 이 두 답변이 질문한 내용에대해서 어느것이 더 질문한 사람의 의도를 이해하고 잘 답변을 하였는지 비교 분석을 해주세요:[A. 응답문][B. 응답문]"
ChatGPT-4 대답
두 AI 모델(A와 B)의 답변을 비교해 본 결과, 두 모델 모두 에세이 작성에 생성형 AI 프롬프트 기술을 적용하는 방법을 잘 설명하고 있습니다. 그러나 각각의 접근 방식과 제공하는 정보의 세부적인 차이가 있습니다.
1). 응답의 구조와 상세성 :
- 응답 A : 단계별 접근 방식을 세세하게 설명하고 있으며, 각 단계에서 구체적인 예시를 제공하여 사용자가 AI와 어떻게 상호작용해야 할지 명확하게 안내합니다. 또한, AI와의 협력을 강조하면서도 최종적인 책임이 인간 작가에게 있음을 명시하여, AI 도구 사용의 균형을 잘 설명하고 있습니다.
- 응답 B : 각 단계를 명확하게 정의하고 설명하는 데 집중하고 있습니다. B의 응답은 프롬프트 작성의 중요성과 AI의 초기 초안 사용에서 개인의 감성 추가까지의 과정을 잘 설명하고 있습니다. 이 접근 방식은 AI와 인간 작업의 조화를 강조하며, 사용자에게 AI 사용의 기술적 측면에 대한 이해를 제공합니다.
2). 사용자 가이드의 명확성 :
- 응답 A : 사용자가 에세이를 작성할 때 필요한 특정 도구 사용에 초점을 맞추고 있으며, AI를 활용한 글쓰기의 실용적인 측면을 강조합니다. 이는 사용자가 실제 작업 환경에서 AI를 어떻게 활용할 수 있는지에 대한 구체적인 안내를 제공합니다.
- 응답 B : 프롬프트 작성 기술의 기초부터 시작하여, AI를 사용한 초안 작성 및 개선까지의 과정을 포괄적으로 다루고 있습니다. 이는 사용자가 AI를 활용하는 데 있어 필요한 기본적인 이해를 높이는 데 초점을 맞추고 있습니다.
3). 질문 의도의 이해 :
- 두 응답 모두 질문의 의도를 잘 이해하고 있으며, 사용자가 에세이 작성에 생성형 AI를 효과적으로 적용할 수 있도록 유용한 정보를 제공합니다. 그러나 응답 A는 AI 활용의 전체 과정을 더욱 상세하게 설명하고 사용자가 실제 상황에서 적용할 수 있는 실질적인 팁을 제공하는 점에서 더 우수합니다.
종합적으로 볼 때, 응답 A 가 사용자의 질문 의도를 더 잘 이해하고 있으며, 생성형 AI를 활용한 에세이 작성에 대한 실질적이고 구체적인 가이드를 제공하고 있습니다. 이를 통해 사용자는 AI와 협업하여 에세이를 효과적으로 작성할 수 있는 방법을 더 잘 이해할 수 있을 것입니다.
물론 Claude 3 에게 같은 비교 질문을 해도 같은 결과입니다. A(Claude)가 더 사용자 질문 의도에 더 잘 이해한다는 답변입니다.
** 위 실험은 이번에 Claude 3 Opus 로 책을 쓰면서 책 내용에 삽입한 내용의 일부를 발췌한 것입니다. **
여러분도 글쓰기에 AI를 활용해 보면서, 인간과 AI가 협력하는 새로운 글쓰기 방식을 경험해 보시는 것은 어떨까요? 다양한 실험을 통해 AI 글쓰기의 가능성과 한계를 탐구해 보는 것도 흥미로울 것 같습니다.
댓글
댓글 쓰기