https://github.com/zdsiyan/slowspider
脚手架搭的7788了, 再丰富一些使用方法就可以发布了, 现在也能凑合用, 只是没定时。
测试时试了几个带目录的方案, 都非常复杂, 要不就必须调用本地方法,考虑到以后嵌入微服务,尽量不做那么重的调用, 就做了简单的html模板。 目录略假, 凑合看。
kindle上最好看的应该是calibre+gitbook-cli, java本地调用的话坑略多,如果在开发机而不是服务器上跑,倒是很适合这个方案。
定时爬数据的功能准备以后放在web项目里, 不在这个爬虫项目里写,方便不同的扩展目标。