程序员人生 网站导航

R+ODPS

栏目:服务器时间:2016-10-17 15:44:01

阿里的数加平台最近推出了机器学习数据实验室,由因而基于ODPS创建,运算方面丝绝不是问题,继承了ODPS的大数据计算能力。
算法方面,常见的2分类、多分类、线性回归、聚类、图计算等都有提供,纯图形的操作方式也很简单。
计费方式同ODPS差不多,按IO和计算量计费,起步门坎很低。
有兴趣可以玩1玩:https://data.aliyun.com/product/learn

老码农玩了1段时间,觉得唯1的遗憾就是数据处理方式提供的比较少,不过在这方面R倒是个不错的补充,阿里云也提供了RODPS这个R包供使用。这里简单描写下使用步骤。

1、使用R进行数据处理之前,先需要对ODPS项目中的大数据做抽样。这个阿里云机器学习实验室提供了分层、随机、加权几种抽样方式。
2、将抽样数据写到ODPS项目中,在R中使用RODPS连接并获得数据,存储到data frame中。
3、接下来用R针对样本做处理,如特点选择,统计检验等。最后把处理结果输出报表,或同步到ODPS项目中,使用阿里云提供的在线报表生成报表。

------分隔线----------------------------
------分隔线----------------------------

最新技术推荐