서버에러중에 robots.txt화일을 찾을 수 없다거 하거든여. 검색엔진에서 오는것 같은데요.. robots.txt를 어떻게 만들어야 되는지 알려주세요~~ 그럼 수고하세요.~
robots.txt 는 웹 사이트 루트에 두는 텍스트 파일입니다. 검색 엔진에게 수집을 허용하거나 막는 규칙을 적습니다. 예: User-agent: * 와 Disallow:항목을 쓰고, 파일이 없으면 404 가 나오는 것이 정상입니다.