python一般用哪个软件,Python软件有哪些
大数据基础支撑平台APP应用软件
EAC云数据平台
EAC云数据平台产品架构
英达数据平台由Apache Hadoop、Elastic Search、Spark、Storm、DataX和Manager管理服务组成。
EACyundataplatform(edp)是企业级一站式大数据集成平台。
基于分布式存储、分布式计算、交互式查询、系统容灾等技术,集数据存储、分析计算、数据可视化、资源管理、安全管理于一体,具有图形化管理界面,便于管理提供安全访问控制、监控、报警等综合服务,提供一站式大数据集成平台,具有标准化的访问接口。
1.系统平台和管理组件
生态基础系统
为大数据APP应用定制的云操作系统。支持EDP一键部署,通过与其他服务器共享集群资源,提供集群CPU、内存、存储、网络资源的利用。
Eacyun经理
Manager是一个用于集群安装、配置、管理和传输的图形化工具,并提供安全管理服务。经理提供预警、监控和体检服务。用户可以很容易地看到每个服务的状态,一旦出现警告信息和警告消息,会立即做出反应。此外,Manager还集成了软件堆栈升级等服务。
Hadoop和其他组件
基于Apache Hadoop 2.7.1,HDFS是文件系统,YARN是资源管理平台。每个组件和Spark、Storm和ElasticSearch的性能和安全性都经过优化,以提高稳定性并提供24小时不间断服务。
2.核心数据产品
实时流处理引擎
将SparkStreaming与Storm结合,进行了大量的优化,提供了实时计算产品。为复杂事件处理和复杂实时计算服务提供稳定可靠的支持。
分布式数据库
在Apache Hbase的基础上进行性能优化,并集成到MongoDB数据库中。支持全局索引和二级索引,提供快速非主键查询,支持原生JSON/BSON格式。
企业数据仓库
用于批处理和分析的数据库支持SQL标准。处理速度和效率高于Apache Hadoop,具有优秀的大数据分析性能。
搜索引擎
用于构建基于ElasticSearch的企业业务全文搜索引擎。它为海量数据提供低延迟搜索功能,内置近实时搜索和多租户支持,为构建自己的搜索业务提供高效工具。
数据挖掘和机器学习工具包
一个分布式机器学习平台,它提供了丰富的机器学习算法库。提供多语言支持,R,Python和SQL接口,帮助算法工程师和数据科学家构建自己的数据挖掘算法和数据模型。使用Zepplin实现交互式数据分析有效地支持了数据挖掘算法的开发和数据模型的建立。
深度学习
一个整合了Spark深度学习和Tensorflow的深度学习框架,由一群数据科学家和算法工程师组成,由卷积神经网络(CNN)和递归神经网络(RNN)组成。
数据可视化
结合Echarts和D3.js,提供丰富的拖拽图表控件。帮助用户构建自己的数据可视化服务。通过与其他产品的合作,有效搭建数据分析和数据挖掘APP。
-EAC云数据平台产品特性-
-一键式部署和集成管理大数据集群
-大数据组件的全生命周期管理
-支持多种存储类型,具有大量存储功能。
-提供丰富的数据挖掘算法数据库
-提供离线处理和实时处理引擎。
-提供数据备份和恢复模块。
-配备日志审计功能
-提供数据安全模块
提供标准化的访问接口。
-客户利益-
-让用户只关注业务发展。
-快速部署、集中配置和统一管理。
-丰富的数据挖掘算法数据库和灵活的分析模板。
-高效、稳定和安全的处理引擎。
-强大的数据灾难恢复和备份机制。
可扩展性强,用户可以通过增加集群节点的数量来线性提升系统的处理能力。
郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。