在线时间:8:00-16:00
迪恩网络APP
随时随地掌握行业动态
扫描二维码
关注迪恩网络微信公众号
开源软件名称:辣鸡采集 laji-collect开源软件地址:https://gitee.com/echo_yjl_lyc/laji-collect开源软件介绍:辣鸡采集 laji-collect介绍辣鸡采集,采集世界上所有辣鸡数据 欢迎大家来采集 基于fesiong万能采集器底层开发开发语言golang 官网案例为什么会有这个辣鸡文章采集器
辣鸡文章采集器能采集哪些内容本采集器可以采集到的的内容有:文章标题、文章关键词、文章描述、文章详情内容、文章作者、文章发布时间、文章浏览量。 什么时候需要使用到辣鸡文章采集器当我们需要给网站采集文章的时候,本采集器就可以派上用场了,本采集器不需要有人值守,24小时不间断运行,每隔10分钟就会自动遍历一遍采集列表,抓取包含有文章的连接,随时将文字抓取回来,还可以设置自动发布,自动发布到指定文章表中。 辣鸡文章采集器可用在哪里运行本采集器可用运行在 Windows系统、Mac 系统、Linux系统(Centos、Ubuntu等),可用下载编译好的程序直接执行,也可以下载源码自己编译。 辣鸡文章采集器可用伪原创吗本采集器暂时还不支持伪原创功能,后期会增加适当的伪原创选项。 如何安装使用
go env -w GOPROXY=https://goproxy.cn,direct 最后执行下面命令 go mod tidygo mod vendorgo run main.go 编译结束后,运行编译出来的文件,然后双击运行可执行文件,在打开的浏览器中的可视化界面,填写数据库信息,完成初始化配置,添加采集源,即可开始采集之旅。 开发计划
官网微信交流群协助完善欢迎有能力有贡献精神的个人或团体参与到本采集器的开发完善工作中来,共同完善采集功能。请fork一个分支,然后在上面修改,修改完了提交pull request合并请求。 版权声明© echo_yjl_lyc,[email protected] Released under the MIT License |
请发表评论