APACHE火花

Apache火花是高性能的, 分布式数据处理引擎已经成为广泛采用的机器学习框架, 流处理, 批处理, ETL, 复杂的分析, 以及其他大数据项目. 自2014年以来,Qubole一直支持Apache火花-as-a-服务,并贡献了几个主要项目(SparkLens)和优化(RubiX)回到开源社区.

Apache火花

Qubole

Qubole结合了Spark最大的优点:可伸缩性, 处理速度, and flexibility of languages; with an enterprise-ready data platform built to handle petabyte scale. 有了quole,你可以使用你选择的界面——笔记本, Web控制台, SDK, 或API -使用Scala构建应用程序, Java, Python, 或者R. Qubole Spark运行着一些最大和最高效的集群 ,从10个节点扩展到1000个节点,并在几分钟内恢复.

Apache spark on quhole

成本效率

先进的成本控制使quhole的成本降低了50%

提升的性能

性能优化和智能管理工具,提高Spark处理效率

易用性

Qubole通过自动化后端配置和其他日常流程,使Spark更易于使用

企业级

企业级安全, 到企业数据源的JDBC/ODBC连接器, 第三方集成.

Apache火花在quole vs ..
开源Apache火花

 

可伸缩性

Apache火花 on quoleApache火花
现货招标
优雅的定点关机
点再平衡
Workload-Aware自动定量
积极缩小规模,优雅退役
容器包装
异构集群
每秒计费
先进的多租户

性能

Apache火花 on quoleApache火花
快读
快写
计算连接和过滤器的优化
计算资源故障隔离
S3直接写优化
S3清单优化
元数据缓存
Rubix(分布式缓存)

工作区

Apache火花 on quoleApache火花
多种语言(PySpark, Spark SQL, Scala等)
多个数据源(S3、Redshift、Snowflake)
版本控制
调度
仪表盘
协作和共享

调试和分析

Apache火花 on quoleApache火花
分析(SparkLens)
监控(Ganglia, DataDog等)
智能日志接入

安全

Apache火花 on quoleApache火花
对笔记本、集群、作业、结构化数据的访问控制
审计终端用户活动日志
使用SAML 2的SSO.0支持
数据加密(静态和动态)
符合HIPAA, SOC2 Type2, ISO-27001的环境

集成

Apache火花 on quoleApache火花
使用经过认证的ODBC/JDBC (Tableau, Looker等)连接BI工具.)
REST API (Talent, Informatica, RStudio等,气流, Oozie)
数据源连接器(Snowflake, Redshift, Kafka, Kinesis)

服务 & 支持

Apache火花 on quoleApache火花
权威推荐全球最大网赌正规平台的Spark专家提供全天候支持
运行多个版本的Apache火花
友情链接: 1 2 3 4 5 6 7 8 9 10