Spark使用Java开发遇到的那些类型错误
Spark使用Java开发其实比较方便的，JAVA8的lambda表达式使得编写体验并不比Scala差很多，但 … 继续阅读Spark使用Java开发遇到的那些类型错误
分类：spark
Spark使用word2vec训练item2vec实现内容相关推荐
之前使用spark als训练协同过滤，然后导出itemvectors做相似度计算，后来学到了可以用word2 … 继续阅读Spark使用word2vec训练item2vec实现内容相关推荐
Spark使用JAVA编写自定义函数修改DataFrame
本文的代码涉及几个知识点，都是比较有用： 1、Spark用JAVA编写代码的方式； 2、Spark读取MySQ … 继续阅读Spark使用JAVA编写自定义函数修改DataFrame
Spark数据倾斜解决方法
1、避免shuffle，改reduce join为map join，适用于JOIN的时候有一个表是小表的情况， … 继续阅读Spark数据倾斜解决方法