WordPress Robots.txt를 쉽게 최적화하는 방법은 무엇입니까?

소개

웹사이트의 SEO를 높이는 데는 다양한 기술이 있습니다. WordPress Robots.txt를 최적화하는 것이 가장 좋은 방법 중 하나입니다. 검색 엔진이 귀하의 웹사이트를 스캔할 수 있도록 허용하기 때문에 Robots.txt 파일은 강력한 SEO 도구로 잘 알려져 있습니다. 결과적으로 Robots.txt 파일을 조정하여 사이트의 SEO를 자유롭게 개선할 수 있습니다. 오늘 이 블로그 게시물에서 이 주제에 대해 WordPress Robots.txt를 최적화하는 몇 가지 접근 방식을 명확하게 소개합니다.

Robots.txt 파일의 정의

다음은 WordPress의 Robots.txt 파일 요약입니다.

이제 Robot.txt 파일의 기본 구조를 살펴보겠습니다.

Robots.txt 파일에 사용된 용어를 정의해 보겠습니다.

• User-agent: 크롤러의 이름
• 금지: 웹 사이트의 페이지, 폴더 또는 파일이 크롤링되는 것을 방지합니다.
• 허용: 디렉터리, 파일 및 페이지 크롤링 활성화
• 사이트맵(제공된 경우): 사이트맵의 위치 표시: 숫자 또는 문자를 나타냅니다.
• *: 숫자 또는 문자를 나타냅니다.
• $: 줄 끝까지 서서 특정 확장자를 포함하는 웹 페이지를 제한하는 데 사용할 수 있습니다.

이해를 돕기 위해 다음 그림을 살펴보겠습니다.

검색 엔진이 Robot.txt 예제의 WordPress 업로드 폴더에 있는 파일을 크롤링하도록 허용합니다.

그러나 로그인, 카드 및 사진 폴더에 대한 검색 엔진의 액세스를 제한합니다.

마지막으로 사이트맵의 URL을 제공합니다.

WordPress 웹사이트용으로 Robots.txt 파일을 생성해야 하는 이유는 무엇입니까?

Robots.txt 파일이 없으면 검색 엔진은 여전히 ​​웹 사이트의 모든 페이지를 크롤링하고 색인을 생성합니다. 그럼에도 불구하고 그들은 귀하가 지정한 폴더나 페이지가 아닌 귀하의 웹사이트에 있는 모든 자료를 크롤링합니다.

두 가지 중요한 이유로 웹사이트용 Robots.txt 파일을 만들어야 합니다. 우선, 웹사이트의 도움을 받아 웹사이트의 모든 정보를 손쉽게 관리할 수 있습니다. 페이지나 디렉터리를 크롤링할지 색인을 생성할지 여부는 사용자에게 달려 있습니다. 이는 플러그인 파일, 관리 페이지 또는 테마 디렉토리와 같은 페이지가 검색 엔진에 의해 크롤링되지 않음을 의미합니다. 결과적으로 웹사이트의 색인 로딩 속도에 도움이 됩니다.

불필요한 게시물이나 페이지가 검색 엔진에 의해 인덱싱되는 것을 방지하기 위한 요구 사항은 또 다른 정당성입니다. 따라서 WordPress 페이지 또는 게시물이 검색 결과에 표시되지 않도록 쉽고 편리하게 방지할 수 있습니다.

WordPress Robots.txt를 보다 효율적으로 최적화하는 방법

이 교육 블로그에서는 두 가지 방법을 사용하여 WordPress 웹 사이트에서 Robots.txt 파일을 만들고 개선하는 방법을 보여줍니다.

• 플러그인을 사용하여 Robots.txt 파일 변경: All in One SEO
• FTP를 사용하여 Robots.txt 파일 수동 편집

Robots.txt 파일을 보다 효과적으로 만들려면 All in One SEO 플러그인을 사용하십시오.

워드프레스 시장에서 이 문제를 해결하는 데 도움이 되는 여러 워드프레스 SEO 플러그인을 사용할 수 있습니다. 하지만 이 기사에서는 사용자를 돕기 위해 2백만 명 이상의 사용자가 사용하는 인기 플러그인인 All in One SEO를 사용하기로 했습니다.

Plugins -> Add New 를 선택하여 먼저 설치하자. 그런 다음 플러그인 이름을 찾아 설치 하고 활성화합니다 .

몇 가지 간단한 단계를 완료하면 관리자 대시보드로 돌아갑니다. 지금 바로 All in one SEO -> 도구 로 이동하세요.

Robots.txt Editor 섹션에서 Enable Custome Robots.txt 버튼을 토글하여 활성화해 보겠습니다. 따라서 이를 켠 후 WordPress에서 기본 Robots.txt 파일을 편집할 수 있습니다.

아래로 스크롤하면 이 플러그인이 Robots.txt 파일의 미리보기가 있는 상자를 표시하는 것을 알 수 있습니다. 이것은 WordPress의 기본 규칙입니다.

규칙 추가 버튼을 선택하면 웹사이트의 SEO에 도움이 되는 특정 규칙을 추가할 수 있습니다.

새 규칙을 추가하기 위해 User-Agent 필드에 *를 입력하여 모든 사용자 에이전트에 규칙을 적용해 보겠습니다.

다음 단계에서 검색 봇이 크롤링하려면 허용 또는 허용 안 함을 선택하기만 하면 됩니다.

그런 다음 디렉토리 경로 필드에 파일 이름이나 디렉토리 경로를 입력하는 것을 잊지 마십시오.

기본 설정을 모두 마쳤으면 변경 사항 저장 버튼을 누르십시오.

이미 추가한 모든 추가 규칙은 이제 Robots.txt 파일에 즉시 적용됩니다.

FTP를 사용하여 WordPress Robots.txt 수동 수정 및 최적화

이것은 당신이 즐길 수 있는 WordPress Robots.txt 최적화에 대한 다른 접근 방식입니다. 이를 위해서는 FTP 클라이언트를 사용하여 Robots.txt 파일을 편집해야 합니다.

FPT 클라이언트를 편리하게 사용하기 위해 먼저 WordPress 호스팅 계정에 대한 연결을 설정합니다. 액세스할 때 사이트의 루트 폴더에서 Robots.txt 파일을 쉽게 확인할 수 있습니다. 마우스 오른쪽 버튼을 클릭하여 보기/편집을 선택하겠습니다.

반면에, 당신이 그것을 찾을 수 없다면 당신은 아마 아무것도 가지고 있지 않을 것입니다. 먼저 마우스 오른쪽 버튼으로 새 파일 만들기를 선택하여 웹사이트용 Robots.txt 파일을 만들어 보겠습니다.

Robots.txt 파일은 일반 텍스트 파일이므로 다운로드하여 메모장이나 TextEdit 등과 같은 일반 텍스트 편집기를 사용하여 편집할 수 있습니다. 그런 다음 웹사이트의 루트 폴더에 다시 업로드하기만 하면 됩니다. 쉬워보이지 않나요?

WordPress 사이트의 Robots.txt 파일이 작동하는지 확인하세요.

모든 문제를 식별하고 보고할 수 있도록 이미 준비하고 구성한 후 Robots.txt 파일을 테스트해야 합니다. 따라서 Robots.txt 테스터 도구를 사용하여 테스트해야 합니다. 적극 권장하는 Google Search Console을 사용해 보세요.

이 서비스를 사용하려면 웹사이트가 Google Search Console에 연결되어 있는지 확인해야 합니다. 그런 다음 선택 목록에서 속성을 선택하여 Robots Testing Tool을 사용할 수 있습니다. 이제 웹사이트의 Robots.txt 파일이 자동으로 추가됩니다. 실수가 있으면 경고합니다.

결론

전반적으로 Robots.txt 파일을 최적화하는 주요 목표는 플러그인 폴더 또는 관리자 폴더를 포함하여 일반 대중에게 필요하지 않은 페이지에 검색 봇이 액세스하지 못하도록 하는 것입니다. 결과적으로 WordPress 태그, 카테고리 또는 아카이브 페이지를 차단해도 SEO에 도움이 되지 않습니다. 즉, WordPress 사이트에 대한 완벽한 Robots.txt 파일을 생성하려면 아래 패턴을 준수해야 합니다.

오늘 블로그 게시물이 WordPress Robots.txt를 최적화하는 데 도움이 되기를 바랍니다. 지인과 다른 웹마스터에게 전달하는 것을 잊지 마십시오. 또한 질문이 있으시면 아래에 의견을 남겨주십시오. 따라서 가능한 한 빨리 답변해 드리겠습니다. WordPress Robots.txt를 최적화할 때입니다. 미래의 블로그까지, 조심하세요.

그건 그렇고, 이 유용한 기능을 완벽하게 지원하는 수많은 현대적이고 매력적인 무료 WordPress 테마가 있습니다. 그들을 만나러 가서 그들 중 한 명에게 웹사이트를 재설계하도록 요청합시다.