scala 版本
注意本例中,使用的指定schema
创建Row 使用Row(values*), 例如Row(productId, productName, extendInfo)
, 和java通过RowFactory.create
不一样, 如果scala使用RowFactory.crate
创建row, 会报错
Result type of an implicit conversion must be more specific than AnyRef
而且会错误, 类型不匹配
package com.chb.shop.analysis
import java.time.LocalDate
import java.util
import com.chb.shop.analysis.utils.StrUtil
import org.apache.spark.sql.types._
import org.apache.spark.sql.{Row, SparkSession}
import scala.collection.mutable.ArrayBuffer
import scala.util.Random
/**
* Created by chb on 2019/3/11.
*/
class MockData extends Serializable {
val spark = SparkSession.builder()
.appName("MockData")
.master("local[*]")
.getOrCreate()
val random = new Random()
import spark.implicits._
import spark.sql
/**
*
*/
def mockProductStatus() = {
val rows = new ArrayBuffer[Row]()
val pStatus = Array[Int](1, 2)
for (i
关注
打赏
最近更新
- 深拷贝和浅拷贝的区别(重点)
- 【Vue】走进Vue框架世界
- 【云服务器】项目部署—搭建网站—vue电商后台管理系统
- 【React介绍】 一文带你深入React
- 【React】React组件实例的三大属性之state,props,refs(你学废了吗)
- 【脚手架VueCLI】从零开始,创建一个VUE项目
- 【React】深入理解React组件生命周期----图文详解(含代码)
- 【React】DOM的Diffing算法是什么?以及DOM中key的作用----经典面试题
- 【React】1_使用React脚手架创建项目步骤--------详解(含项目结构说明)
- 【React】2_如何使用react脚手架写一个简单的页面?