방법 전체

SI Ready가 사이트를 채점하는 방법

SI Ready는 100점짜리 공개 항목 24개로 사이트를 채점합니다. 사이트 항목은 한 번만 세고, 페이지 항목은 읽은 페이지 중 통과한 비율로 셉니다. 80점 이상이면서 홈페이지가 HTTPS로 제공되고 llms.txt가 있으면 통과입니다. 아래에 모든 항목, 배점, 찾는 크롤러, 출처가 있으며 채점기는 이 숫자를 그대로 씁니다.

항목배점왜 중요한가수정 방법
크롤러 접근
답변 엔진 크롤러16검색과 답변 크롤러는 robots.txt가 들여보내야 사이트를 찾고 답변에 인용할 수 있습니다.robots.txt에서 다음 크롤러를 허용하세요: OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot, Perplexity-User, Googlebot, Bingbot.
학습 크롤러10이 크롤러들은 페이지가 앞으로의 모델에 쓰일 수 있는지를 정합니다. 막는 것은 선택이며, SI Ready는 알려 드리려고 셉니다.모델이 내 페이지에서 배우게 하려면 robots.txt에서 허용하세요: GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot. 막아 두는 것이 선택이라면 그대로 두세요.
HTTPS4답변 엔진과 브라우저는 HTTPS로 제공되는 페이지를 신뢰합니다.사이트를 HTTPS로 제공하고 http를 https로 보내세요.
llms.txt
llms.txt6/llms.txt는 언어 모델을 위한 사이트의 짧은 Markdown 지도로, llmstxt.org에서 제안되었습니다./llms.txt를 게시하세요. 아래에서 SI Ready가 내 페이지로 만든 파일부터 시작하세요.
llms.txt 형식6제안은 이름이 적힌 H1, 인용 블록의 짧은 요약, 링크 섹션을 요구합니다./llms.txt에 H1(# 이름), 요약 줄(> ...), 그리고 - [제목](주소) 링크가 있는 ## 섹션을 하나 이상 넣으세요.
llms-full.txt3/llms-full.txt는 주요 페이지의 본문을 한 파일에 담아 모든 것을 한 번에 읽는 도구에 제공합니다.주요 페이지의 본문으로 /llms-full.txt를 게시하세요.
robots.txt의 llms 파일2robots.txt에 llms.txt와 llms-full.txt를 가리키는 줄이 있으면 크롤러가 찾기 쉽습니다.robots.txt에 주석 두 줄을 추가하세요: # LLM summary: https://example.com/llms.txt 와 # Full text for LLMs: https://example.com/llms-full.txt
사이트맵과 상태
XML 사이트맵5사이트맵은 모든 페이지를 나열해 크롤러가 하나도 놓치지 않게 합니다./sitemap.xml에 유효한 XML 사이트맵을 게시하세요.
robots.txt의 사이트맵2대부분의 크롤러는 robots.txt의 Sitemap 줄로 사이트맵을 찾습니다.robots.txt에 한 줄을 추가하세요: Sitemap: https://example.com/sitemap.xml
사이트맵 날짜2주소마다 붙은 lastmod 날짜는 무엇이 언제 바뀌었는지 크롤러에 알려 줍니다.사이트맵의 모든 주소에 lastmod 날짜를 넣으세요.
페이지가 200으로 응답4사이트맵에 나온 페이지는 리디렉션이나 오류 없이 바로 응답해야 합니다.사이트맵에는 최종 주소만 넣고 다음 페이지를 고치세요.
페이지 신호
H1 하나3주 제목 하나가 페이지의 내용을 말해 줍니다.페이지마다 H1을 정확히 하나만 두세요.
제목 길이310자에서 60자 사이의 제목은 결과와 답변에 잘리지 않고 나옵니다.10자에서 60자 사이의 제목을 쓰세요.
메타 설명350자에서 160자 사이의 설명은 엔진이 보여 주고 인용하는 요약입니다.50자에서 160자 사이의 메타 설명을 쓰세요.
정식 주소3canonical 링크는 어느 주소가 진짜인지 엔진에 알려 줍니다.페이지 전체 주소로 canonical 링크를 추가하세요.
색인 가능2robots 메타 태그나 X-Robots-Tag 헤더의 noindex는 페이지를 모든 색인에서 빼 버립니다.찾아져야 할 페이지에서 noindex를 지우세요.
Open Graph3og:title, og:description, og:image가 페이지를 공유할 때 보이는 카드를 만듭니다.og:title, og:description, og:image를 추가하세요.
X 카드2twitter:card는 X에서 공유된 링크가 어떻게 보일지 정합니다.twitter:card 메타 태그를 추가하세요. 예: summary_large_image.
구조화 데이터와 답변
JSON-LD5JSON-LD 구조화 데이터는 페이지가 무엇인지 엔진에 정확히 알려 줍니다. 파싱되어야 합니다.모든 페이지에 JSON-LD를 넣고 유효한 JSON인지 확인하세요.
이동 경로3BreadcrumbList 데이터는 하위 페이지가 사이트 어디에 있는지 보여 줍니다.하위 페이지의 JSON-LD에 BreadcrumbList를 추가하세요.
FAQ 데이터2질문하고 답하는 페이지는 FAQPage 데이터로 그 사실을 알릴 수 있습니다.질문이 두 개 이상인 페이지에 FAQPage JSON-LD를 추가하세요.
언어 버전3hreflang 링크는 페이지 자신을 포함하고 양방향으로 연결되어야 엔진이 무시하지 않습니다.모든 hreflang 링크가 상대 페이지에서 되돌아오게 하고, 페이지 자신의 언어도 적으세요.
답부터5명확한 답으로 시작하는 페이지는 인용하기 쉽습니다.H1 바로 다음에 20단어 이상의 문단으로 시작하고, 첫 문장은 40단어 이하로 쓰세요.
이미지 대체 텍스트3대체 텍스트는 엔진과 이미지를 볼 수 없는 사람에게 이미지를 설명합니다.모든 이미지에 alt 속성을 넣으세요(장식용이면 비워 둠).
합계100

기준

80점 이상, HTTPS로 제공되는 홈페이지, 그리고 llms.txt. 읽은 어느 페이지에도 해당하지 않는 항목(이미지 없음, 질문 없음, 단일 언어)은 만점으로 계산합니다.

페이지 항목

SI Ready는 홈페이지, 붙여 넣은 주소, 사이트맵 전체에 고르게 퍼진 최대 20개 페이지를 읽고, 서로 되돌아 연결되는지 보려고 언어 버전을 최대 5개 더 읽습니다. 페이지 항목은 그중 통과한 페이지의 비율로 채점합니다.

크롤러 접근

SI Ready가 찾는 크롤러 13개

각 이름은 회사가 문서에 적은 robots.txt 토큰입니다. SI Ready는 크롤러마다 규칙을 읽고, 자체 규칙이 없으면 * 규칙을 읽어 홈페이지를 읽을 수 있는지 확인합니다.

robots.txt 토큰회사종류문서
OAI-SearchBotOpenAI검색과 답변OpenAI
ChatGPT-UserOpenAI사용자 요청 시 가져오기OpenAI
GPTBotOpenAI학습OpenAI
Claude-SearchBotAnthropic검색과 답변Anthropic
Claude-UserAnthropic사용자 요청 시 가져오기Anthropic
ClaudeBotAnthropic학습Anthropic
PerplexityBotPerplexity검색과 답변Perplexity
Perplexity-UserPerplexity사용자 요청 시 가져오기Perplexity
GooglebotGoogle검색과 답변Google
Google-ExtendedGoogle학습Google
BingbotMicrosoft Bing검색과 답변Microsoft Bing
Applebot-ExtendedApple학습Apple
CCBotCommon Crawl학습Common Crawl
읽는 방식

조심스러운 크롤러

자기 이름을 밝힘

모든 요청이 SIReadyBot/1.0 (+https://sicto.si/ready/)을 밝히므로 사이트 소유자가 누가 요청했는지 알 수 있습니다.

robots.txt 먼저

홈페이지와 표준 파일 외에는 robots.txt가 SIReadyBot에 허용한 것만 읽고, 자체 규칙이 없으면 * 규칙을 따릅니다.

일부러 작고 느리게

최대 25개 페이지, 페이지당 2 MB와 8초, 리디렉션 최대 3회, 동시 요청 6개, 도메인당 하루 한 번 검사.

공개 주소만

표준 포트의 http와 https만 씁니다. 이름이 가리키는 모든 주소가 공개 주소여야 하고, 리디렉션마다 다시 확인합니다.

결과만 보관

페이지 본문은 저장하지 않습니다: 점수, 수정 목록, 제목과 설명으로 만든 llms.txt만 남깁니다.

모두에게 같은 규칙

SI 사이트 6곳도 같은 방법으로 채점되며, 실제로 통과해야만 목록에 오릅니다.

질문

방법에 대해

학습 크롤러를 막으면 왜 감점되나요?

SI Ready는 사이트가 무엇을 들여보내는지 알려 주기 때문입니다. 학습 크롤러는 100점 중 10점이며 검색과 답변 크롤러와 따로 채점하므로, 선택에 따라 막아도 통과할 수 있습니다.

llms.txt는 표준인가요?

2024년 llmstxt.org에 발표된 제안이며 웹 표준은 아닙니다. 답변 엔진 도구가 읽기 때문에 SI Ready가 검사하고, 내 페이지로 만든 파일도 드립니다.

답부터 말하기는 어떻게 측정하나요?

H1 다음 첫 두 문단 중 하나가 20단어 이상이고, 그 첫 문장이 40단어 이하이면 됩니다. 중국어, 일본어, 한국어는 대략 두 글자를 한 단어로 셉니다.

방법이 바뀌나요?

엔진이 읽는 것을 바꿀 때 바뀝니다. 모든 변경은 이 페이지와 sicto.si 변경 기록에 날짜와 함께 남고, 예전 결과는 채점된 그대로 유지됩니다.

SI Ready

사이트 검사

80점 이상, HTTPS로 제공되는 홈페이지, 그리고 llms.txt. 읽은 어느 페이지에도 해당하지 않는 항목(이미지 없음, 질문 없음, 단일 언어)은 만점으로 계산합니다.