您当前的位置: 首页 >  大数据

段智华

暂无认证

  • 3浏览

    0关注

    1232博文

    0收益

  • 0浏览

    0点赞

    0打赏

    0留言

私信
关注
热门博文

大数据Spark “蘑菇云”行动第71课: 基于Spark 2.0.1项目开发分析与实战

段智华 发布时间:2016-11-01 21:33:10 ,浏览量:3

大数据Spark “蘑菇云”行动第71课: 基于Spark 2.0.1项目开发分析与实战

 

 

package com.dt.spark200

import org.apache.spark.sql.SparkSession

object UserBehaviorsAnalysis {   def main(args: Array[String]): Unit = {

    val spark = SparkSession       .builder()       .appName("UserBehaviorsAnalysis")       .master("local")       .config("spark.sql.warehouse.dir", "file:///G:/IMFBigDataSpark2016/IMFScalaWorkspace_spark200/Spark200/spark-warehouse")       .getOrCreate()

    import spark.implicits._     import org.apache.spark.sql.types._     import org.apache.spark.sql.functions._

    val userInfo = spark.read.format("parquet").parquet("G:\\IMFBigDataSpark2016\\spark-2.0.0-bin-hadoop2.6\\examples\\src\\main\\resources\\userparquet")     val userLog = spark.read.format("parquet").pa

关注
打赏
1659361485
查看更多评论
立即登录/注册

微信扫码登录

0.1191s