法律分析：如果遵守 Robots 协议，不能造成对方服务器瘫痪，不非法获利，是合法的。如果涉及个人隐私则是不合法的。
法律依据：《中华人民共和国刑法》
第二百八十五条第二款 犯非法获取计算机信息系统数据、非法控制计算机信息系统罪的，处三年以下有期徒刑或者拘役，并处或者单处罚金;情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。
第二百五十三条 侵犯公民个人信息罪违反国家有关规定，向他人出售或者提供公民个人信息，情节严重的，处三年以下有期徒刑或者拘役，并处或者单处罚金;情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。