农业多元异构大数据库管理与一站式分析系统

1、支持多模式数据手动导入与自动导入数据库

1.1结构化数据：指关系模型数据，即以关系数据库表形式管理的数据，结合到典型场景中更容易理解，例如传感器数据与硬件设备数据。

1.2半结构化数据：指非关系模型的、有基本固定结构模式的数据，例如日志文件、XML文档、JSON文档、等；

1.3非结构化数据：指数据结构不规则或不完整，没有预定义的数据模型，不方便用数据库二维逻辑表来表现的数据。例如各种格式的图片、视频等

2、数据源接入需要支持各种主流数据库链接器，并且可以扩展更多

3、数据存储采用高效的列式数据存储，生成数据血缘关系图

4、支持多种方式创建中间表，包括使用SQL语句创建数据视图，简洁明了的数据资产看板，数仓资产所见即所得

5、可弹性伸缩的内存计算能力，亿级数据秒级响应，实现通用数据建模与语义数据建模等多种建模方式

6、开放式API架构，支持调用外部AI算法，建模算法，可扩展架构体系，满足日后升级需求

技术参数：

1、数据库存储采用双机热备方式，故障切换时间＜100毫秒，并提供异地灾备接口

2、100万条数据单词检索时间≤500毫秒，非结构化数据检索时间≤1000毫秒

3、提供多种导入导出以及下载方式

4、可动态定义缓存大小，缓存位置

5、具有多维度数据抓取能力，能够通过ETL或数据流组件方式收集处理实时数据

6、平台具备离线复杂计算功能，可以进行多步骤计算任务，以及可以通过外边编程调用业务计算，完成更复杂的计算功能

7、完善的数据自动加解密算法，保障数据传输过程中安全可靠