finndycloud 特色功能安装说明开发文档版权信息 介绍
发源地开源云采集引擎
发源地云采集引擎是由发源地研发团队开发的一套开源分布式云采集工具化引擎,致力于让用户快捷挖掘大数据矿山背后的价值!
发源地云采集引擎完全基于云端,集数据采集、清洗、去重、加工于一体的互联网WEB/APP数据采集引擎,支持本地化私有部署,可以快速搭建属于自己的大数据云采集爬虫系统。用户可以低成本、高效率完成网页中文本,图片等资源信息的采集,并进行过滤加工,挖掘出精准所需的数据,让数据以结构化的文件包、采集规则算法或API接口方式输出,同时可以选择发布到发源地大数据交易平台进行交易,或导出为Excel、CSV、sql等格式的文件保存在本地。
特色功能
-
国内首款开源云采集引擎:无需安装任何软件程序、浏览器插件
-
海量免费规则:机器学习并覆盖90%网站及APP内数据采集规则
-
数据/规则交易:支持源规则及数据的交易,让数据更有价值
-
开放API接口:云端标准化服务API输出,助您大数据轻松落地
-
工具化平台:数据采集、数据存储及数据应用的完整闭环
-
分布式采集:开源分布式采集系统,有效提升云采集效率
-
私有化部署:支持多服务器私有/本地部署,数据本地化存储
-
全球高匿名节点:5000+高匿名节点IP,采集不再受到IP访问限制
安装说明
Nginx下配置www主机域名主目录设置为[根目录]或[public目录](推荐配置后者)。
以下目录须设置为可写操作权限
-
runtime/
-
data/
-
app/
开发文档
版权信息
本系统遵循Apache2开源协议发布,并提供免费使用。
本项目包含的第三方源码或二进制文件遵循原版权标注。
finndycloud 特色功能安装说明开发文档版权信息 官网
https://github.com/finndy/finndycloud/
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。