Spark: SchemaRDD隐式转换

　　SchemaRDD在Spark SQL中已经被我们使用到，这篇文章简单地介绍一下如果将标准的RDD(org.apache.spark.rdd.RDD)转换成SchemaRDD，并进行SQL相关的操作。[code lang="scala"]scala> val sqlContext = new org.apache.spark.sql.SQLContext(sc)sqlContext: org.apache.spark.sql.SQLContext = org.apache.spark.sql.SQLContext@6edd421fscala> case class Person(name: String, age:Int)defined class Perso

w397090770 10年前 (2014-12-16) 21248℃ 0评论20喜欢

Spark

Spark:Yarn-cluster和Yarn-client区别与联系

　　《Spark on YARN集群模式作业运行全过程分析》　　《Spark on YARN客户端模式作业运行全过程分析》　　《Spark:Yarn-cluster和Yarn-client区别与联系》　　《Spark和Hadoop作业之间的区别》　　《Spark Standalone模式作业运行全过程分析》（未发布）　　我们都知道Spark支持在yarn上运行，但是Spark on yarn有分为两种模式yarn-cluster和yarn-cl

w397090770 10年前 (2014-12-15) 58342℃ 4评论94喜欢

Akka

Akka学习笔记：Actor生命周期

　　Akka学习笔记系列文章：　　《Akka学习笔记：ACTORS介绍》　　《Akka学习笔记：Actor消息传递(1)》　　《Akka学习笔记：Actor消息传递(2)》　　　　《Akka学习笔记：日志》　　《Akka学习笔记：测试Actors》　　《Akka学习笔记：Actor消息处理-请求和响应(1) 》　　《Akka学习笔记：Actor消息处理-请求和响应(2) 》　　《Akka学

w397090770 10年前 (2014-12-12) 10180℃ 1评论5喜欢

Spark

Spark学习书籍收集[持续更新]

目前关于Spark方面的书籍已经有好几本了，这里列出了下面关于Spark 的书籍。部分书目前还没有发布，所以无法提供下载地址。如果想及时了解Spark、Hadoop或者Hbase相关的文章，欢迎关注微信公共帐号：iteblog_hadoop如果你要找Hadoop相关书籍，可以看这里《精心收集的Hadoop学习资料(持续更新)》　　1、大数据技术丛书:Spark快速

w397090770 10年前 (2014-12-08) 36144℃ 3评论58喜欢

Spark

Spark北京Meetup第四次活动（SparkSQL专题）

　　这是Spark北京Meetup第四次活动，主要是SparkSQL专题。可以在这里报名，活动免费。如果想及时了解Spark、Hadoop或者Hbase相关的文章，欢迎关注微信公共帐号：iteblog_hadoop活动时间　　12月13日下午14:00活动地点　　地址：淀区中关村软件园二期，西北旺东路10号院东区，亚信大厦一层会议室　　时间：13:20-13:40活动内容:

w397090770 10年前 (2014-12-02) 5031℃ 0评论3喜欢