Katana爬虫有什么用

拍摄些爬虫简单容易啊，一个星期就能学成拿高薪，很多培训机构呢都会这样忽悠人。但是千万要注意了啊，爬虫是简单容易啊，工资不一定高，但是呢风险极大， 你在爬取别人信息网站的同时呢，你的 ip 同样也被别人监控着。呃，尤其是不能爬取一些敏感的信息，特别是政府里的网站，稍有不慎呢，可能就进去了。 一来呢信息敏感，已出发了红线。二来呢这类网站呢大多比较脆弱，估计也没有做集群啊，高频引发缓存， 爬虫比较凶猛的，根本就挡不住，几次轮寻下来呢，可能就把服务器给干趴了。那信息中心的人呢，也很简单啊，他不会做任何的技术分析，不会做一些主动访， 不会去增加一些服务器。他有一个屡试不爽的办法呢，就是直接报警啊。那通过访问的 ip 呢，很容易就能找到你。写爬虫的公司和程序员其实差不多十年前。呃，我经常写爬虫啊，在生死的这个边缘风华试探啊。 当时呢，主要是做这个门户网站，爬的是新闻，但是我觉得爬的是腾讯吧，腾讯和新郎都有。 一开始呢，其实还好啊，基本所有的猛虎晚阵呢都能爬下来啊，各类新闻呢，体育赛事啊，娱乐新闻等等啊，还是挺容易的。 但是后来就不让爬了啊，对方去限制你的这个 ip 啊。呃，限制你的爬取速度啊，还在这个爬取的反馈信息中给你警告。那后来没办法呢，就转向了一些这个二三线的 这个蒙古的平台，具体什么晚上我就不说了。呃，当时呢还用的是这个点亮特写的啊，不会用拍摄，但是确实呢挺容易的啊。挺容易实现，也就差不多两三天吧就搞定了。 哦，其实你想想十年前啊，才刚毕业啊，实习生写爬虫啊，你要说去这个拿高薪啊，真的不至于啊，而且呢，还有风险，还是要谨慎一点。