Feccle 의 IT자료 모음

Ⅰ. robots.txt 란? 웹사이트 소유자가 검색 엔진 크롤러(봇)에게 특정 웹 페이지를 크롤링하거나 특정 웹 페이지를 크롤링 하지 않도록 설정하기 위해 사용하는 텍스트 파일입니다. robots.txt 파일은 웹사이트의 루트 디렉터리에 위치하며, 검색 엔진은 일반적으로 이 파일을 읽고 해당 사이트에서 크롤링 가능한 영역과 금지된 영역을 결정하는 역할을 합니다. Ⅱ. robots.txt 구성 요소ⅰ. User-agent: 특정 검색 엔진 크롤러를 지정합니다. 예: Googlebot, Bingbot ⅱ. Disallow/Allow: 크롤링을 허용하거나 금지할 경로를 지정합니다. ⅲ. Sitemap: 사이트맵의 위치를 검색 엔진에 알림. ⅳ. 파일 위치: 항상 웹사이트의 루트 디렉터리 Ⅲ. robots.t..

Ⅰ. DNS 캐시 (DNS Cache)란? 도메인 이름을 IP 주소로 변환하는 과정(DNS 조회)을 효율적으로 수행하기 위해 조회 결과를 로컬에 저장하는 메커니즘입니다. 이는 DNS 서버와 클라이언트(사용자 디바이스) 모두에서 구현되며, 인터넷 사용 속도를 높이고 네트워크 트래픽을 줄이는 데 중요한 역할을 합니다. Ⅱ. DNS 캐시 (DNS Cache) 원리 ⅰ. DNS 조회 과정    1) 사용자가 A(www.test.com)사이트에 접속합니다.   2) 브라우저는 로컬 DNS 캐시를 확인하여 이전에 조회한 결과가 있는지 찾습니다.    3) 캐시에 결과가 없으면 네트워크 상의 DNS 서버에 요청을 보냅니다.    4) 응답받은 IP 주소를 DNS 캐시에 저장합니다.  ⅱ. 캐시 데이터 캐시에 저장된 ..