百度小程序做淘宝客优惠券服务器被蜘蛛爬死了怎么办？

一般淘客用的都是低配的云服务器，几十块钱买的阿里云、腾讯云 1核心2G1M那种，做了百度小程序后如果发现服务器cpu和内存经常100%。

这时候就需要排查服务器的日志了，看看是不是百度的蜘蛛过渡的抓取页面导致的。

怎么看服务器日志见《推券客cms使用技巧之nginx拦截爬虫的方法》这篇文章。

百度抓取频次过高，导致小程序服务器压力过大怎么办？
不要急百度官方也给出了相应的解决办法。
可以在百度小程序平台设置每天的总抓取频次，抓取频次是搜索引擎在单位时间内（天级）对服务器抓取的总次数，如果抓取频次过高，很有可能造成服务器不稳定，BaiduSpider会根据网站内容的更新频率和服务器压力等因素自动调整抓取频次。具体的设置方法如下：
1. 登录百度小程序平台
找到下图 自然搜索，然后点击右侧上限设置

2. 在下图位置，填写抓取上限。
咱们可以先设置1万次每天，如果服务器还是负载不了，再适当的降低。
同理，如果可以负载也可以提高这个上限值。