网页抓取时应遵守站点 robots.txt 与条款，避免对小站点高频请求。