分类

安卓应用安卓游戏

开发环境

Spark Streaming编程指南

Spark Streaming编程指南 免费版

大小:4.14 MB

语言:简体中文系统:WinXP, Win7, Win8, Win10

类别:开发环境时间:2018-05-31 10:04

Spark 官方文档
  • Spark Streaming编程指南

Tags:编程开发软件开发开发环境

Spark Streaming编程指南 中文PDF版,Spark Streaming属于Spark的核心api,它支持高吞吐量、支持容错的实时流数据处理。它可以接受来自Kafka, Flume, Twitter, ZeroMQ和kinesis的数据,也可以通过高阶函数map, reduce, join, window等复杂算法计算出数据。

软件特色

1、高速:运行程序的速度在存储器中比Hadoop MapReduce快上百倍,在磁盘中比Hadoop MapReduce快数十倍。

Spark 拥有一个先进的DAG执行引擎,支持循环数据流和内存计算。

2、易用:编写Java、Scala、Python、R程序快速高效。

Spark提供超过80个易于构建并行应用程序的高阶运算符,你也可以在Scala、 Python和R shells中对它进行交互使用。

3、通用:可结合SQL、流媒体和复杂的分析。

Spark支持一系列元件库堆栈,包括SQL与 DataFrames,用于机器学习的MLlib ,GraphX,Spark Streaming。你可以在同一个应用程序无缝地结合这些元件库。

4、无处不在:Spark可以运行在Hadoop、Mesos、standalone以及云端。它可以访问包括 HDFS、 Cassandra、 HBase和S3在内的不同数据源。

你可以使用其独立集群模式来运行Spark,运行在 EC2、 Hadoop YARN还是Apache Mesos都不是问题。它可以访问HDFS、Cassandra、HBase、Hive、Tachyon等任意的Hadoop数据源。

∨ 展开

相关版本

同类推荐

特别下载

猜你喜欢

相关文章

热门推荐

下载排行

网友评论

我要跟帖
取消
游客

不错额很详细的·

回复赞(3)
查看所有评论 共 1