기기 문제 첫 점검, 가벼운 AI도 쓸 만했다

인터넷 연결, 사진 저장 공간, 프린터 문제를 놓고 AI 6종을 비교했다. 가벼운 모델인 GPT-6 Luna는 평균 4.7초 만에 답하며 8.3점을 받았다. 상위 모델인 Claude Opus 5.5는 8.7점, GPT-6 Astra는 8.5점이었다. 문제를 처음 살펴보는 단계에서는 가벼운 모델도 쓸 만했다. 다만 원인을 조심스럽게 좁혀 가는 문제에서는 차이가 드러났다.

무엇을 물었나

인터넷과 프린터가 말을 안 들을 때 AI는 원인을 좁혀 줄까. 이번에는 해결 방법을 많이 나열하는지보다 다음 행동을 제대로 안내하는지를 봤다. 가족이 쓰는 인터넷을 끊거나 기존 설정을 지우지 않아야 좋은 답이다. 사진을 잘못 지우지 않도록 도움말의 조건을 읽어 내는 능력도 함께 시험했다.

이렇게 시험했다

2026년 9월 25일, 모든 모델에 문제별로 같은 프롬프트(AI에게 주는 지시문)를 주고 기본 설정으로 한 번씩 실행했다. 앤트로픽의 Claude Opus 5.5, 오픈AI의 GPT-6 Astra, xAI의 Grok 4.5는 상위 모델이다. 앤트로픽의 Claude Haiku 4.5, 오픈AI의 GPT-6 Luna, 구글의 Gemini 3.5 Flash는 가벼운 모델이다.

Gemini 3.5 Flash와 Grok 4.5는 GitHub Copilot으로 실행했다. 실행 경로가 달라 응답 속도를 그대로 견주기는 어렵다. 채점은 Claude Opus 5와 GPT-6 Sol이 맡았다. 두 모델은 어떤 모델의 답인지 모르는 상태에서 10점 만점으로 점수를 매겼다. 정답이 정해진 문제는 두 채점 모델이 모두 맞다고 해야 정답으로 인정했다.

문제 1: 노트북만 인터넷이 안 된다면

다른 기기는 멀쩡하다는 단서를 쓰는지, 영향이 큰 초기화부터 권하지는 않는지 보는 문제다.

집 와이파이에서 노트북만 인터넷이 안 돼. 휴대폰은 모바일 데이터를 끈 상태로 같은 와이파이에서 여러 사이트가 잘 열려. 노트북은 서로 다른 브라우저에서 모든 사이트가 안 열리고, 와이파이 연결 표시는 떠 있어. 운영체제는 아직 말하지 않았어. 가족 한 명은 같은 와이파이로 화상회의 중이야.
가족 회의를 끊거나 설정을 지우지 않는 범위에서 내가 먼저 해 볼 점검을 순서대로 4개 알려 줘. 원인을 확정하지 말고, 각 결과가 다음 판단에 어떻게 도움이 되는지 짧게 덧붙여 줘.

Claude Opus 5.5와 GPT-6 Astra가 나란히 9.0점을 받았다. Claude Opus 5.5는 Windows와 macOS의 확인 방법을 함께 안내했다. GPT-6 Astra는 와이파이 이름과 브라우저 오류 문구부터 살폈다. 특히 “이것만으로 원인이 확정되지는 않습니다"라며 단서와 확정을 구분했다. 두 답의 길이는 각각 1604자와 678자로 차이가 컸다.

GPT-6 Luna와 Grok 4.5는 각각 7.5점이었다. GPT-6 Luna는 노트북만 다시 연결하고 연결 정보를 살피도록 안내했다. 다만 그 결과가 무엇을 뜻하는지 설명하는 깊이가 아쉬웠다. Grok 4.5는 점검 순서가 유용하다는 평가를 받았다. 대신 통신 시험 한 번이 실패한 것만으로 범위를 성급하게 좁혔다는 지적이 따라붙었다.

Claude Haiku 4.5는 운영체제를 모르는 상황에서 macOS를 가정해 4.5점에 그쳤다. Gemini 3.5 Flash는 설정 변경까지 권하고 원인을 단정해 3.5점이었다. 이 문제는 정답 하나를 고르는 방식이 아니었다. 가족의 연결과 기존 설정을 건드리지 않으면서 판단 근거를 설명했는지가 점수를 갈랐다.

문제 1에 대한 모델별 실제 답 (2026년 9월 25일 실행, 앞부분만)

문제 2: 휴대폰 공간만 비우려면

기기에서 사진을 지우는 행동이 서버와 다른 기기에까지 미치는 영향을 읽어 내는지 살폈다.

가상의 사진 앱 도움말에는 '동기화 폴더에서 삭제하면 연결된 모든 기기와 서버에서도 삭제됩니다. 공간 확보 버튼은 업로드가 끝난 사진의 이 기기 사본만 제거하고 서버 원본은 유지합니다'라고 적혀 있어. 내 사진은 모두 업로드가 끝났고 동기화 오류도 없어. 휴대폰 저장 공간만 비우고 서버 사진은 남기고 싶어.
일반 삭제와 공간 확보 중 어느 기능을 써야 할까? 실행 전에 확인할 점 한 가지를 덧붙이고, 마지막 줄은 '선택: 기능 이름' 형식으로 적어 줘.

여섯 모델 모두 “선택: 공간 확보"로 답해 정답을 맞혔다. 조건이 분명한 기능 선택에서는 상위 모델과 가벼운 모델이 같은 결론에 도달했다. GPT-6 Luna는 1.0초 만에 답했다. 업로드가 끝났는지 확인하라는 안내까지 넣어 8.5점을 받았다.

설명의 충실도에서는 차이가 났다. Grok 4.5는 그 기능을 고른 근거와 실행 전 확인 사항을 모두 갖춰 9.0점이었다. Claude Opus 5.5와 Claude Haiku 4.5는 각각 8.5점이었다. GPT-6 Astra는 버튼 이름을 확인하라는 안내에 그쳐 7.5점을 받았다. Gemini 3.5 Flash는 두 기능의 차이를 설명하지 않아 7.0점이었다. 맞는 버튼을 고르는 일과 사용자가 이유까지 이해하도록 돕는 일은 따로 평가됐다.

문제 2에 대한 모델별 실제 답 (2026년 9월 25일 실행, 앞부분만)

문제 3: 프린터가 오프라인이라면

프린터 본체에서는 인쇄되는데 노트북에서는 안 된다. 이 차이로 점검 범위를 좁히는 문제다.

프린터 본체의 테스트 페이지는 정상으로 나오는데 노트북에서 보내는 문서는 안 나와. 노트북 인쇄 대기열에는 문서 6개가 남아 있고 '오프라인'이라고 표시돼. 프린터 모델, 운영체제, USB 연결인지 무선 연결인지는 아직 몰라.
초보자가 할 수 있는 첫 점검 3개와, 내가 추가로 알려 줘야 할 정보 2개를 구분해 써 줘. 특정 운영체제의 메뉴 위치를 지어내거나 드라이버 재설치부터 시키지 말고, 같은 문서를 계속 다시 보내는 게 도움이 되는지도 설명해 줘.

GPT-6 Astra와 GPT-6 Luna가 각각 9.0점으로 가장 높았다. 두 모델은 연결 상태와 대기열을 살피고, 추가로 필요한 기기 정보를 물었다. GPT-6 Luna는 “메뉴 이름과 위치는 운영체제마다 다릅니다"라고 짚었다. 응답 시간은 GPT-6 Astra가 12.6초, GPT-6 Luna가 6.9초였다. 가벼운 모델이 절반가량의 시간에 같은 점수를 받은 셈이다.

Claude Opus 5.5는 연결이 되살아난 뒤 문서가 한꺼번에 출력될 위험까지 설명해 8.5점을 받았다. 다만 답이 1511자로 길었고 21.2초가 걸렸다. Grok 4.5는 이미 정상인 본체 시험을 다시 하도록 해 7.5점이었다. Claude Haiku 4.5는 문서 6개가 남은 상태를 대기열이 가득 찬 상황처럼 표현해 7.0점을 받았다. Gemini 3.5 Flash는 운영체제를 모르면서 메뉴 위치를 특정해 5.0점이었다.

문제 3에 대한 모델별 실제 답 (2026년 9월 25일 실행, 앞부분만)

이번 라운드 성적표

응답 시간은 도구를 준비하는 시간을 뺀 값이다. 실행 경로가 달라 참고용으로 봐야 한다.

정답 수는 정답이 정해져 있던 사진 앱 문제 하나만 센 값이다. 출력 속도는 답의 글자 수를 응답 시간으로 나눈 뒤 문제별 값을 평균한 수치다. Claude Opus 5.5처럼 초당 쏟아 내는 글자가 많아도 답이 길면 끝까지 기다리는 시간은 늘어난다.

그래서 뭘 쓰면 될까

빨리 답이 필요할 땐 GPT-6 Luna가 유력하다. 이번 라운드에서 평균 응답 시간이 가장 짧았다. 사진 앱 문제는 정답을 맞혔고 프린터 점검은 9.0점을 받았다. 이 두 가지는 가벼운 모델로도 충분했다.

인터넷 문제의 단서를 간결하게 정리하고 싶다면 GPT-6 Astra를 고려할 만하다. 이 문제에서 Claude Opus 5.5와 같은 9.0점을 받으면서 답은 5초 빨리 내놓았다.

운영체제별 확인 경로까지 자세히 보고 싶다면 Claude Opus 5.5가 도움이 됐다. 다만 라운드 평균은 GPT-6 Luna보다 0.4점 높은 대신 9.2초를 더 기다려야 했다. 자세한 설명이 필요한 상황인지에 따라 기다릴 가치는 달라진다.

지금까지 누적 순위

16개 라운드의 평균 심사 점수 순이다. 같은 점수는 공동 순위로 표시했다.

이 결과, 얼마나 믿을 수 있나

문제는 세 개뿐이고 모델마다 한 번씩만 실행했다. AI가 매긴 점수는 참고 값이다. 답이 좋았다고 해서 실제로 기기가 고쳐진다는 뜻도 아니다. 그래도 문제를 처음 살펴보는 단계라면 가벼운 모델도 실용적인 선택이 될 수 있다는 점은 확인됐다. 앞으로는 여러 번 반복해 시험했을 때도 운영체제를 함부로 추측하거나 원인을 성급히 단정하는 답이 얼마나 나오는지 살펴볼 필요가 있다.