ChatGPT는 스텔라 블레이드의 숫자 퍼즐을 풀 수 있을까?

ChatGPT 4.0을 이용하여 스텔라 블레이드의 숫자 퍼즐을 풀어보았다.

퀴즈

요~ 제법이군. 그럼 이 퍼즐도 풀 수 있을까?

37#21 = 928
77#44 = 3993
123#17 = 14840
71#6 = ?

정답

참고로 정답은 a#b = (a+b)(a-b) = a^2 - b^2, 따라서 71#6 = 5005 이다.

ChatGPT 4.0

시도1 (실패)

입력한 프롬프트는 다음과 같다.

Quiz
37#21 = 928
77#44 = 3993
123#17 = 14840
71#6 = ?

위와 같이 프롬프트를 입력하니 답을 실수(Real) 값으로 내서 실패했다. 

https://chat.openai.com/share/1025af95-de0e-4bd4-bfb1-1f1ec5af6f59

시도2 (실패)

입력한 프롬프트는 다음과 같다.

Riddle.
37#21 = 928
77#44 = 3993
123#17 = 14840
Then 71#6 = ?
The answer must be integer.

프롬프트에 "답은 정수"라는 힌트를 추가로 주고 시도해보았다. 뭔가 숫자 패턴을 만들어보려는 시도는 계속 하는데, 계속 시도해보라고 해도 정확한 답은 내지 못했다.

https://chat.openai.com/share/e56bd0c0-b74e-406a-a721-8c5c644af337

시도3 (성공)

입력한 프롬프트는 다음과 같다.

Riddle.
37#21 = 928
77#44 = 3993
123#17 = 14840
Then 71#6 = ?

The answer must be integer.
To give you a hint, this is a riddle that is calculated as a combination of two numbers.
Create 10 patterns and test them.

프롬프트에 "답은 두 숫자의 조합"이라는 힌트를 추가로 주었다. 그리고 이전 시도들에서 패턴을 두세개씩 감질나게 만들길래 한번에 10개씩 테스트 해보라고 명령했다. 그랬더니...

https://chat.openai.com/share/74c30bbd-e7a2-41d9-9e4f-e670fb5b73c3

처음 패턴을 10개 만들고 실패한 후에 알아서 10개를 더 만들어서 시도하더니, 와!! 정답을 맞췄다!!!!!! 정답은 위에서 언급한 것처럼 (a+b)*(a-b) = a^2 - b^2 = 5005 이다.

ChatGPT 4.0o

[2024년 7월1 일 추가] ChatGPT 4.0o 는 더 똑똑해져서 가장 간단한 프롬프트 입력만으로도 답을 얻을 수 있게 되었다. 여러번 재시도 해봤음에도 거의 매번 답을 잘 내준다. ChatGPT 4.0 시절에는 여러번 재시도 했음에도 불가능했던 것이다.

https://chatgpt.com/share/1fdca757-45a5-4ca4-9da6-b0e2c3ee0cd7

클로드(Claude) 는 어떨까?

Claude 3 Sonnet 모델이긴 했지만 여러번 시도해봤는데도 무언가 숫자 패턴을 만들어보려는 시도 조차도 하지 않아서 의미가 없는 수준이었다.

[2024년 7월 1일 추가] Claude 3.5 Sonnet 모델도 여전히 문제를 제대로 풀지 못했다. 여러번 재시도 해봐도 답을 내질 못하고있다.

Gemini 1.5 Pro

[2024년 7월 1일 추가] Google AI Studio 로 Gemini 1.5 Pro 모델을 테스트 해봤는데 여러번 재시도 해봐도 답을 내질 못하고있다. 클로드보다도 더 멍청한 답을 내준다.

결론

마더 스피어가 지구를 통치할 날이 머지 않았다.