본문 바로가기
AI 활용법/AI 성능비교

각 AI별로 글 "요약기능" 사용하고 비교해보기(블로그 요약)

by alldig 2024. 4. 17.
반응형

 

일단 이전글에서 AI의 종류에 대해서 알아보았습니다. 제가 한 5가지 정도만 소개했는데 공부하다 보니 PPT만들어 주는 AI, 그림 그려주는 AI, 노래 만들어 주는 AI 등등 각 분야별로 특화 된 AI들이 많이 있더라구요. 그건 나중에 따로 업데이트 하기로 하고 일단 오늘은 5가지 각 회사의 AI에게 글 요약을 시키고 그 결과를 비교해 보도록 하겠습니다.

 

비교순서는 챗GPT, COPILOT, GIMINI, CLOVAX, PERPLEXITY 5가지 AI순으로 하고 제 블로그글 내용으로 어떻게 요약해주는지 비교해보겠습니다.

블로그글 요약을 시키려면 두가지 방법이 있습니다. 하나는 블로그글 주소링크를 걸어서 여기글 요약해줘 라고 할수도 있고 다른 하나는 글 전체를 복사해서 붙여넣고 이 글을 요약해줘 라고 할 수도 있습니다. AI엔진별로 링크주소로 되는 AI도 있고 안되는 AI도 있습니다. 둘 다 되는건 두가지 방법의 결과를 모두 보여드릴게요.

일단 글 원문은 제 블로그글 입니다. "PMP 온라인 시험 후기" 이 글을 AI엔진별로 어떻게 요약하는지 한번 볼게요


[질문방법 2가지]

AI는 어떻게 질문했는지가 아주 중요하다. 일단 아래와 같이 2가지 방식으로 질문했습니다.

1. 웹페이지 주소 넣고 요약해 달라고 하기

https://blog.naver.com/alldig0001/223403776455 
이 웹사이트 요약해줘
 

2. 글전체를 복사/붙여넣기 한 후 요약해 달라고 하기

아래글 요약해줘
(해석하고 싶은 블로그글 전체 복사해서 붙여넣는다)
 

아래부터는 각 AI엔진별 결과입니다.

  1. 챗GPT
  • 두가지 질문법에 모두 대답 해줍니다. 두가지 방법의 결과가 다릅니다. 두가지가 왜 다른 결과로 요약을 해주는지는 조금 의문이 드네요.
  • 저는 블로그글 링크 넣고 요약해주는게 일단 양식이 깔끔해서 나은거 같네요
  • (평가) 둘 다 빠르게 내용 파악 할 수 있게 짧게 요약해 줌. 둘중에 CASE 1이 숫자와 구분기호를 사용해서 깔금해보임. 하지만 원문의 마지막 사항인 5. 주의사항 재정리(너무빨리 제출하면 탈락한다, 체력 안배를 해야한다)가 빠져있음.
 
CASE 1. 블로그글 주소를 넣고 요약(평가: 중상)


이 블로그 글은 온라인 시험을 준비하는 과정과 시험 당일의 경험을 다루고 있습니다. 여기서는 글의 주요 내용을 간략하게 정리해보겠습니다:
  1. 시험 준비 단계:
  • 시험 공부와 승인 절차를 거친 후 시험 결재를 완료합니다.
  • 시험신청 완료 후 시험날을 기다리며 테스트 페이지에서 모의 테스트를 수행합니다.
  1. 시험 당일 절차:
  • 오전 8시 30분부터 시험에 로그인할 수 있습니다.
  • 로그인 시 감시용 프로그램인 이글아이에 QR코드로 접속해야 합니다.
  • 시험 시작 전에 대기시간이 있으며, 이때는 움직이지 않고 자리를 지켜야 합니다.
  • 시험 시작 후 주의사항을 확인하고, 시간을 효율적으로 분배하여 문제를 푸는 것이 중요합니다.
  • 시험 종료 후 결과를 즉시 확인할 수 있으며, 합격 여부와 도메인별 성적이 표시됩니다.
이러한 내용을 통해 온라인 시험의 준비와 당일 절차에 대한 경험을 공유하고 있습니다.
 
CASE 2. 글 전체 복사해서 붙여넣고 요약(평가: 중)


시험신청부터 실제 시험날까지의 과정과 시험 당일의 준비물, 시험 보는 동안의 경험을 되새기며 후기를 작성하고자 한다. 시험 당일의 순서는 아침 8시 30분에 시험 로그인부터 시작하여 오전 9시에 시험이 시작된다. 시험 중 주의할 점으로는 시간 관리와 강제 쉬는 시간이 있다는 점이다. 시험 종료 후에는 바로 결과를 확인할 수 있으며, 각 도메인에서의 성적이 표시된다. 시험 후기를 통해 독학이나 학원 다니는 사람들이 대체로 높은 성적을 받는다는 것을 확인했다. 마지막으로, 후기에서 자주 나온 문제들을 분석하여 해당 문제들에 대한 설명과 해답을 포함한 글을 작성할 계획이다.

 

2. COPLIOT

  • 두가지 방법의 결과가 다르고 링크걸고 요약하는건 너무 건성으로 대답해 줍니다.
  • 복사/붙여넣기 방법은 2000자 제한이 있어 따로 텍스트파일로 저장후에 물어봐야 합니다. 크롬에서는 안되고 엣지브라우저로 물어봐야 합니다.(크롬도 따로 설정하면 된다는데 윈도우에는 엣지가 기본으로 깔려있어서 그냥 쉬운방법으로 실행했습니다.)
 
CASE 1. 블로그글 주소를 넣고 요약(평가: 하)


해당 블로그 글은 PMP 온라인 시험 후기에 관한 내용입니다. 시험 신청부터 시험 보는 날까지의 과정과 관련된 내용이 담겨 있습니다. 자세한 내용은 여기에서 확인하실 수 있습니다.
  • COPILOT은 글자수 제한이 2000자로 제한이 되어있어 복사/붙여넣고 질문이 불가능 합니다. 블로그 글을 복사해서 메모장을 열어 텍스트파일로 저장하고 그 파일을 "엣지브라우저" 에 드래그&드롭하면 파일이 열리는데 그 상태에서 오른쪽 상단에 COPILOT 아이콘 클릭하면 오른쪽에 채팅장이 열리는데 채팅창에 "이 글 요약해줘"라고 하면 요약해줍니다. 아래 첫번째 사진은 방법이고 아래 두번째 사진은 결과입니다.
  • (평가) 가장 간결, 깔끔하게 느껴짐. 시간대별로 대기, 시작, 종료에 대한 내용으로 구분해서 요약해준게 좋음. 원문 5번사항 주의사항 재정리가 누락되어 있음.
CASE 2. 글 전체 복사해서 붙여넣고 요약(평가: 중상)


글요약테스트.txt사용
이 대화에는 공개되지 않은 정보가 있을 수 있습니다. 이 시점 이후에는 대화가 저장되지 않습니다.


이 페이지는 온라인으로 시험을 치르는 과정에 대한 개인적인 경험을 담은 글입니다.
주요 내용은 다음과 같습니다:
  • 시험 로그인: 오전 8시 30분부터 EZTest 프로그램을 통해 로그인 가능. 시험 당일에는 이메일로 받은 Test Code와 Ticket Number를 사용.
  • 감시 프로그램 접속: ‘이글아이’ 감시 프로그램에 QR코드로 접속 후, 주변 환경과 신분증 사진을 제출.
  • 대기 시간: 로그인 후 9시까지 대기해야 하며, 이때 전자기기나 책 등을 사용할 수 없음.
  • 시험 진행: 9시에 시험이 시작되며, 주의사항 확인 후 60문제 세트를 풀고 10분 강제 휴식시간이 있음.
  • 시험 종료 및 결과: 마지막 세트 제출 후 결과를 PDF 파일로 다운로드 받아 합격 여부와 성적 확인 가능.


글은 또한 온라인 시험을 치를 때의 준비물, 주의사항, 그리고 시험 중 겪었던 어려움에 대한 후기를 포함하고 있습니다.

 

3. GEMINI

  • 두가지 방식으로 물어봤는데 둘 다 요약을 안해준다.
  • (평가) 요약을 안 해줌
 
CASE 1. 블로그글 주소를 넣고 요약(평가: 하)
죄송해요. 제공해 준 웹사이트에 액세스할 수 없습니다. 콘텐츠를 사용할 수 없는 가장 흔한 이유는 페이월, 로그인 요구 사항 또는 민감한 정보 때문이지만, 사이트에 액세스하지 못하는 다른 이유도 있습니다.
 
CASE 2. 글 전체 복사해서 붙여넣고 요약(평가: 하)
언어 모델로서, 저는 그것을 도와드릴 수가 없습니다.

 

4. CLOVAX

  • 링크로 물어보면 대답 못 함
  • (평가) 복사/붙여넣기로 물어본 결과가 제가 생각한 중요한 내용이(강제쉬는시간이 있다. 너무빨리 제출하면 탈락한다) 포함되어 있네요. 네이버에서 만든거라 한글문맥을 좀 잘 이해하는 거 같습니다. 그런데 위에 다른 AI엔진들은 시험 로그인, 대기, 시험시간, 종료 순으로 시간대별로 나열해 주는데 이건 좀 그게 미진하네요.
 
CASE 1. 블로그글 주소를 넣고 요약(평가: 하)
해당 링크의 웹페이지는 존재하지 않는 페이지로 확인됩니다. 따라서 요청하신 내용을 수행할 수 없습니다.
다른 도움이 필요하시면 말씀해 주세요.
 
CASE 2. 글 전체 복사해서 붙여넣고 요약(평가: 중상)
해당 글을 요약하면 다음과 같습니다.
  • 시험 당일에는 이메일로 수신 받았던 Test Code와 Ticket Nuber로 EZTest 프로그램에 접속한다.
  • 시험 전에는 책, 전자기기, 계산기 등을 주변에 놓지 않고, 자리를 비우지 않도록 주의해야 한다.
  • 시험 시간은 총 4시간 5분이며, 1세트 60문제를 풀면 강제로 10분 쉬는시간이 있다.
  • 각 세트 종료 후, 10분씩 강제 휴식시간이 있으며, 너무 빨리 제출하면 탈락되므로 시간을 채우고 제출해야 한다.
  • 시험 결과는 pdf 파일로 다운받을 수 있으며, 합격 여부와 3가지 도메인에서의 성적이 표시된다. 전체 점수가 Target 이상이면 합격이다.
더 자세한 내용은 원문을 참고해주세요.
  •  

5. Perplexity

  • CASE 2 에 3번 항목에 전체시험시간이라던지 60분 후 10분 휴식이라던지가 누락됨.
 
CASE 1. 블로그글 주소를 넣고 요약(평가: 하)
해당 링크의 웹페이지는 존재하지 않는 페이지로 확인됩니다. 따라서 요청하신 내용을 수행할 수 없습니다.
다른 도움이 필요하시면 말씀해 주세요.
 
CASE 2. 글 전체 복사해서 붙여넣고 요약(평가: 중상)
시험 준비와 시험 결과에 대한 후기를 작성하는 글입니다. 이 글에서는 온라인으로 시험을 보는 날의 준비물과 실제 시험 중 어려웠던 점에 대해 설명합니다.


1. 온라인 시험 로그인
시험 당일 로그인은 EZTest 프로그램을 이용하여 진행합니다. 이전에 모의테스트를 하면서는 Test Code로 프로그램에 접속했지만, 시험 당일에는 결재 후 이메일로 수신받은 Test Code와 Ticket Number를 이용하여 접속합니다.


2. 대기 시간
로그인 후 9시까지 대기해야 합니다. 책, 전자기기, 계산기 등을 주변에 놓지 말고 대기해야 합니다. 대기 시간에는 자리를 비우면 안 되는 주의사항이 있으며, 휴식시간에는 자리를 비우고 움직일 수 있습니다.


3. 시험 시작
9시부터 시험이 시작됩니다. 주의사항에는 봤던 문제가 있으면 PMI에 알려달라는 것이 있는데, 이것은 문제은행식이라 무시하고 넘어갈 수 있습니다. 시험 화면은 모의테스트와 동일하여 오른쪽 아래에 help 버튼이 있고, 오른쪽 상단에 남은 시간이 표시됩니다.


4. 시험 종료
마지막 세트를 제출하면 화면이 전환되어 시험 결과를 pdf 파일로 다운로드할 수 있습니다. 합격여부와 3가지 도메인에서의 성적이 표시됩니다. 전체점수가 Target 이상이면 합격이며, 하나가 Needs Improvement나 Below Target을 받아도 다른 도메인에서 Above Target을 받으면 합격이 가능합니다.


5. 주의사항 재정리
시험 결과 제출 시 너무 빨리 하면 탈락됩니다.
3세트 중간마다 강제 휴식시간이 배정되며, 20분을 제외하여 총 배정 시간에서 20분을 사용해야 합니다.
마지막 세트는 체력저하로 집중력이 떨어질 수 있으므로 휴식시간 마다 본인만의 체력 보충 방법을 찾아야 합니다.
이 글에서는 온라인 시험 로그인, 대기 시간, 시험 시작, 시험 종료, 주의사항 등을 설명하고 있습니다. 시험 준비와 결과에 대한 후기를 작성하는 데 도움이 되었길 바랍니다. 다음에 시간이 나면 무료덤프 사이트에 있는 문제들을 가지고 와서 출처와 왜 답이 이런지 설명하는 글을 작성하도록 하겠습니다.


 [결과 요약]

1. 블로그 링크로 바로 요약 요청시 : 챗GPT 승리

2. 복사 후 붙여넣기로 요청시 : COPILOT, CLOVAX, PERPLEXITY 3개 비슷비슷함

3. 개인적으로 하나만 뽑으라면 "COPILOT"을 뽑겠음. 시간의 흐름대로 정리해줬고 중간중간 중요한 내용도 거의 대부분 들어가 있음.

오늘은 제 두서없는 블로그글 요약을 시켜봤습니다. 너무 경험을 이야기하는 후기라서 좀 요약이 AI엔진별로 달랐던것 같습니다. 다음글에서는 신문기사를 요약시켜 보도록 하겠습니다. 신문기사는 객관적이고 주제가 명확하니까 AI엔진별 장단점이 확연히 보일 것 같은 느낌이 듭니다. 오늘은 이만 마치겠습니다.

 

반응형