GBase 8a MPP库内挖掘技术

65 阅读 0 评论 43 点赞

我是靠谱客的博主典雅马里奥，最近开发中收集的这篇文章主要介绍GBase 8a MPP库内挖掘技术，觉得挺不错的，现在分享给大家，希望可以做个参考。

GBMLLib是GBase8a的数据挖掘和机器学习扩展库，以插件的形式添加到GBase8a中。通过其提供的机器学习算法，GBase8a可以对用户数据进行深层次的分析和挖掘，将用户数据转化为用户价值。

GBMLLib提供了基于SQL的机器学习算法，目前包括的算法有：回归算法(线性回归)、分类算法(Logistic回归、支持向量机)和聚类算法(K-Means)。同时也提供了一些数组操作和线性代数计算的基本函数。

GBMLLib具备以下技术特征：

SQL接口：GBMLLib提供了SQL方式的数据挖掘算法，模型的训练、评估和预测都通过SQL语句来执行，使得数据分析师非常容易掌握，并与其现有技能结合，充分发挥其创造力、提高工作效率。
In-database分析：不同于其他分析工具需要通过api或odbc把数据从数据库搬移到分析节点进行处理的方式，GBMLLib的分析算法以数据库udf/udaf的形式运行在GBase8a的线程内部，通过GBase8a的执行计划进行调度，最大程度的减少数据的搬移、提升运行速度。

方便扩展：GBMLLib以插件的形式添加到GBase8a中，并采用弹性灵活的软件架构，方便后续添加新的数据挖掘和机器学习算法。