AspiegelBot是华为旗下的一款搜索引擎爬虫,主要用于模拟安卓设备进行网页抓取。AspiegelBot的User-Agent标识符为“Mozilla/5.0 (Linux; Android 7.0;) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; AspiegelBot)”。...详情>>
华为移动搜索AspiegelBot爬虫近日被站长发现开始高频抓爬网站信息,这个AspiegelBot爬虫主要模拟安卓机进行抓爬 , UA标识符里也没有标注爬虫所属公司信息,显然不想让人发现,后面有站长