求一个队友维护一个 Java 爬虫项目

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

This topic created in 3866 days ago, the information mentioned may be changed or developed.

这是一个雪球网的股票爬虫项目，个人由于快找工作了，没时间管理，希望有朋友能够帮忙打理一下。主要是修复一些 bug ： https://github.com/decaywood/XueQiuSuperSpider

爬虫

雪球网

Java

打理

27 replies • 2016-04-14 19:45:19 +08:00

root787

Apr 11, 2016

看了一眼，看到 Java ，顿时没了兴趣。

cs4814751

Apr 11, 2016

Java 菜鸟可以吗？(⊙﹏⊙)

weizhixiang

Apr 11, 2016 via Android

看不懂，刚学会用 python 的 Yahoo 接口获取数据画 k 线图

Apr 11, 2016 via Android

都抓哪些东西，有空我看看。

decaywood

Apr 11, 2016

@ob 基本上都可以抓，架构为开放式设计的

decaywood

Apr 11, 2016

@cs4814751 可以，按照约定开发即可

zhtsuc

Apr 11, 2016

java 多年，不知道咋打理

Bryan0Z

Apr 11, 2016 via Android

菜鸟来凑个热闹

273579540

Apr 11, 2016

我有兴趣，不过技术还不到家，多谢提供这么好我项目学习。

reeco

Apr 11, 2016

已 star

gxz1989611

Apr 12, 2016

似乎是要升级到 java8 才能编译啊？我这 java7 编译失败了诶~

sunfanteng

Apr 12, 2016

我也是做 Java 的，一起学习吧。

zjxzhqq

Apr 12, 2016

没做过爬虫，想试试

decaywood

Apr 12, 2016

@gxz1989611 项目核心就是 Java8 的并行流，所以拓展性几乎没有限制

decaywood

Apr 12, 2016

@zhtsuc 如果炒股的话，可以根据自己需要提供一些模块，以及修复一些可能的 bug ，虽然运行这么久鲜有 bug

libiao5320

Apr 12, 2016

Mapper: Network busy Retrying -> 2 times
Mapper: Network busy Retrying -> 2 times
Mapper: Network busy Retrying -> 3 times
Mapper: Network busy Retrying -> 3 times
Mapper: Network busy Retrying -> 3 times
Mapper: Network busy Retrying -> 3 times
Mapper: Network busy Retrying -> 3 times
Mapper: Network busy Retrying -> 4 times
Mapper: Network busy Retrying -> 4 times
Mapper: Network busy Retrying -> 4 times
Mapper: Network busy Retrying -> 4 times
Mapper: Network busy Retrying -> 4 times
Mapper: Network busy Retrying -> 5 times
Mapper: Network busy Retrying -> 5 times
Mapper: Network busy Retrying -> 5 times
Mapper: Network busy Retrying -> 5 times
Mapper: Network busy Retrying -> 5 times

楼主为什么会出现这种情况？

decaywood

Apr 12, 2016

@libiao5320 两种情况，一：你抓取太频繁，被限制了。二：雪球网 cookie 机制有变化，这个问题需要经常维护的，你看看是那个模块出的问题