做了几个爬虫,在本地的mongo做测试,但是没办法实行实施的监控,想挂在阿里云上,但是mongodb的远程链接很少,有的要么写得很复杂看不懂 要么就写得很简单不知道怎么操作~
本人是新手,虽然我也很鄙视伸手党,不过有些问题也是没办法~
有没有比较系统的答案?比如1,2,3,4 这样,不要太复杂,本人基础不好~
mongodb的远程链接很少是什么意思？ 你可以自己在服务器安装个mongodb
爬虫主要是下行带宽要求很高，其实用外网服务器并不是很好选择，一旦被封IP也没法换了。
我之前是用内网的几台机器进行爬取，然后在内网做了端口映射，可以在外部查看状态。
最后爬取完成索引入库后再同步到外网。