💎一站式轻松地调用各大LLM模型接口,
支持GPT4、智谱、星火、月之暗面
及文生图
广告
Transformer转化器通过方法 `transform()`,在原始数据上增加一列或者多列来将一个 DataFrame 转为另一个 DataFrame。 <br/> (1)一个特征转换器输入一个 DataFrame,读取一个文本列,将其映射为新的特征向量列。输出一个新的带有特征向量列的 DataFrame。 (2)一个学习模型转换器输入一个 DataFrame,读取包括特征向量的列,预测每一个特征向量的标签。输出一个新的带有预测标签列的 DataFrame。
Spark MLib
Spark MLib是什么?
Spark MLib与Spark ML
Spark MLib数据类型
本地向量
向量标签
本地矩阵
分布式矩阵
Spark MLib常用算法
分类算法
回归算法
聚类算法
协同过滤
Spark ML
Spark ML是什么
Pipeline概念
DataFrame
Transformer
Estimator
Parameters
Pipeline
ML使用案例
推测模型案例
随机森林
项目代码实现