진단 점수는 왜 도구마다 다른가
01WHY
왜 갈리나
도구가 다른 것을 재서가 아닙니다. 같은 사실을 다르게 세기 때문입니다.
-
01
무엇을 항목으로 세는가
어떤 도구는 헤더 다섯을 각각 한 항목으로 세고, 어떤 도구는 「보안 헤더」 하나로 묶습니다. 같은 사이트에서 실패 개수가 달라지고, 그러면 비율도 달라집니다.
-
02
각 항목에 몇 점을 주는가
치명적인 것과 사소한 것을 같은 무게로 세는 도구가 있고, 갈라 세는 도구가 있습니다. 저희는 갈라 셉니다 — 그 표를 아래에 공개합니다.
-
03
영역을 어떻게 나누고 얼마씩 주는가
보안과 검색 노출과 성능에 몇 대 몇을 줄지는 판단입니다. 측정이 아닙니다. 그 판단이 다르면 같은 실패 목록에서 다른 종합 점수가 나옵니다.
-
04
몇 장을 보는가
홈 한 장만 보는 것과 사이트를 따라 들어가는 것은 결과가 다릅니다. 홈은 대개 가장 손을 많이 본 페이지라, 한 장만 보면 점수가 좋게 나오는 쪽으로 치우칩니다.
★ 네 가지 다 판단이지 측정이 아닙니다. 그래서 점수에는 옳고 그름이 없고, 항목에는 있습니다 — «이 헤더가 없다»는 어느 자로 재도 없는 것입니다.
02OUR SCALE
저희 배점표
감출 이유가 없습니다. 저희가 정한 값이고, 그것을 보여 드리는 것이 «왜 점수가 다른가»에 대한 가장 짧은 답입니다.
☆ 배점과 항목 수를 같이 보셔야 합니다. 배점이 같아도 항목이 적으면 한 항목이 종합을 더 크게 움직입니다 — 눈금이 굵다는 뜻입니다. 저희는 그 눈금을 재서 한 항목이 종합을 움직이는 폭에 상한을 두고 있습니다.
항목 하나하나가 어느 영역에 어느 심각도로 들어 있는지는 점검 항목 전체에서 보실 수 있습니다. 목록을 감추지 않습니다.
03WE CUT THE LINE
자가 바뀌면 선을 끊는다
저희도 항목을 더하고 판정을 고칩니다. 그때 지난 점수와 오늘 점수는 다른 자로 잰 값이 됩니다.
그래서 저희 점수 이력 화면은 그 지점에서 선을 끊습니다. 이어 붙이면 «점수가 떨어졌다»로 읽히는데 사이트는 그대로일 수 있습니다. 끊긴 선은 보기에 예쁘지 않습니다 — 그래도 이어 붙인 선이 거짓말을 하는 것보다 낫습니다.
★ 같은 이유로 지난 결과 페이지를 다시 여시면 「당시 기준으로는 몇 점이었다」를 같이 적습니다. 그 화면은 저장된 판정을 오늘의 자로 다시 매기기 때문입니다 — 사이트가 달라진 것이 아니라 자가 달라진 것이고, 그 차이는 통째로 저희 것입니다.
04WE HOLD THE GRADE
못 잰 것이 많으면 등급을 안 낸다
사이트에 닿지 못하거나 판정하지 못한 항목이 많으면 등급을 발표하지 않습니다.
기준은 전체 항목의 67% 입니다. 그 아래면 점수 자리에 «보류»가 나옵니다 — 몇 개만 보고 매긴 등급은 그 사이트를 말하는 것이 아니기 때문입니다.
☆ 이 규칙이 없으면 못 잰 사이트일수록 점수가 좋게 나옵니다. 판정하지 못한 항목은 분모에서 빠지고, 남은 몇 개가 우연히 통과하면 백 점이 됩니다. 가장 조용한 거짓말이라 규칙으로 막아 두었습니다.
05HOW TO READ
어떻게 읽으시면 되나
-
01
점수는 안에서만 비교하십시오
같은 도구로 잰 지난달과 이번 달은 비교할 수 있습니다. 다른 도구의 점수와는 비교하실 수 없습니다 — 자가 다릅니다.
-
02
항목 목록을 보십시오
어떤 항목이 왜 실패했는지는 도구가 달라도 사실이 같습니다. 두 도구가 같은 항목을 실패로 적었다면 그것은 진짜입니다.
-
03
한 도구에만 있는 항목을 보십시오
다른 도구가 안 보는 것을 이 도구가 본다면, 그 항목이 무엇이고 왜 보는지 읽어 보십시오. 납득이 되면 그 도구를 쓰시면 됩니다.
-
04
재는 쪽이 자기 한계를 적는지 보십시오
표본이 몇 개인지, 무엇을 못 보는지, 언제 등급을 안 내는지를 적어 두었는지 보십시오. 안 적혀 있으면 그 점수가 무엇을 뜻하는지 알 수 없습니다.
저희가 무엇을 어떻게 재는지는 진단 방법론에 적어 두었습니다. 못 하는 일도 같이 적혀 있습니다.
06FAQ
자주 묻는 질문
같은 사이트인데 왜 점수가 다른가요?
- 도구마다 무엇을 항목으로 세는지, 각 항목에 몇 점을 주는지가 다르기 때문입니다. 점수는 공인된 값이 아니라 재는 쪽이 정한 항목과 배점의 결과입니다. 저희 점수도 저희가 정한 항목과 배점에서 나옵니다.
그러면 어느 점수를 믿어야 하나요?
- 점수보다 항목을 보십시오. 어떤 항목이 왜 실패했는지는 도구가 달라도 사실이 같습니다. «이 헤더가 없다»는 어느 자로 재도 없는 것입니다. 갈리는 것은 그 사실에 몇 점을 매기느냐이고, 그것은 판단이지 측정이 아닙니다.
점수가 갑자기 떨어졌는데 사이트는 그대로입니다
- 저희가 항목을 더하거나 판정을 고치면 그럴 수 있습니다. 그래서 저희 이력 화면은 판정 기준이 바뀐 지점에서 선을 끊습니다 — 다른 자로 잰 두 수를 한 선으로 이으면 그 선이 거짓말을 합니다.
판정하지 못한 항목이 많으면 어떻게 되나요?
- 일정 비율에 못 미치면 등급을 발표하지 않습니다. 몇 개만 보고 매긴 등급은 그 사이트를 말하는 것이 아니기 때문입니다. 그때는 점수 자리에 «보류»가 나옵니다.
점수를 올리려면 무엇을 해야 하나요?
- 실패한 항목을 고치는 것 말고는 없습니다. 저희는 점수를 올려 주는 작업을 따로 팔지 않습니다 — 그런 것이 있다면 그것은 점수를 고치는 일이지 사이트를 고치는 일이 아닙니다.