SEO 봇 · 크롤러 User-Agent
SEO 분류에 속하는 봇·크롤러가 실제 요청에서 사용하는 대표 User-Agent입니다.
| AhrefsBot | Mozilla/5.0 (compatible; AhrefsBot/7.0; +http://ahrefs.com/robot/) |
|---|---|
| SemrushBot | Mozilla/5.0 (compatible; SemrushBot/7~bl; +http://www.semrush.com/bot.html) |
봇 User-Agent는 시간이 지나며 바뀔 수 있고 위조도 가능합니다. 접근 제어는 UA 문자열만으로 판단하지 말고 역DNS 조회나 공식 IP 대역 검증을 함께 사용하세요.