欢迎来到魔据教育大数据学院,专注大数据工程师培养!
当前位置:赛车彩票 > 学习资料 > 讲师博文 > sparkR安装文档

海南环岛动车时刻表: sparkR安装文档

时间:2017-08-16 09:11:45作者:[!--zuozhe--]

赛车彩票 www.d6sa.cn  

sparkR安装文档
R是用于统计分析、绘图的语言和操作环境。R属于GNU系统的一个自由、免费、源代码开放的软件,它是一个广泛应用于统计计算和统计制图的优秀编程语言,但是其交互式使用通常局限于一台机器。为了能够使用R语言分析大规模分布式的数据,spark1.4开始推出sparkR,sparkR就是用R语言进行编程建模,计算分析依赖于Spark等大数据平台。它可以允许数据科学家分析大规模的数据集,并通过R shell交互式的在sparkR上运行作业。
具体安装整合操作如下:
安装环境准备:
CentOs6.5及以上版本
JDK    1.7/1.8
HDP    2.6(社区版)
R      3.3.3  
1.先安装spark,我们使用的是社区版HDP2.6,具体安装过程参考https://jinshuju.net/f/Ebi2Au,安装过程中注意勾选livy server(后面连接spark时会使用到)服务,界面如下:

2.安装R语言环境,执行以下命令安装
su root
yum -y install epel-release
yum -y update
yum -y install curl curl-devel
yum -y install libxml2 libxml2-devel openssl-devel.x86_64
yum -y install gcc glibc-headers gcc-c++ gcc-gfortran readline-devel
libXt-devel
yum install gnutls-devel.x86_64
yum -y install libcurl libcurl-devel
yum -y install R
ü 安装截图如下:

ü 安装完成,输入R命令进入shell操作界面,如下图:

ü 安装完成R语言,要在R语言中添加sparkR的包,在R脚本执行以下命令:
install.packages("sparklyr")
安装过程中会出现源选择,建议选择China(beijing)
ü 安装完成即可通过library(sparklyr)加载sparkR的包即可使用。
ü  

更多大数据相关资讯敬请关注魔据教育,为您分享最及时的大数据资讯。
学习大数据敬请关注魔据教育微信二维码。
魔据教育微信二维码

【版权与免责声明】如发现内容存在版权问题,烦请提供相关信息发邮件至[email protected],我们将及时沟通与处理。本站内容除非来源注明魔据教育,否则均为网友转载,涉及言论、版权与本站无关。

全国咨询热线:18501996998,值班手机:18501996998(7*24小时)

在线咨询:张老师QQ 320169340

企业合作服务专线:010-82340234-821, 院校合作洽谈专线:010-82340234

Copyright 2001-2019 魔据教育 - 北京华育兴业科技有限公司 版权所有,京ICP备17018991号-2

免费在线咨询赛车彩票

免费索取技术资料立即索取

大数据技术交流QQ:226594285

电话咨询010-82340234

  • 把过去私有制基础上的“阶级分析”生搬硬套到现代公有制和私有制并存的无阶级社会,是张冠李戴、睁着眼睛说瞎话。 2019-03-19
  • 致敬!他们是不为人知的城市猎鹰 2019-03-08
  • 尧都农商银行全力推进服务“三农”工作 2019-03-08
  • 股权质押“利剑”高悬 上市公司急寻脱困之道 2019-02-14
  • 墨西哥地震与球队进球民众跳跃啥关系?专家:无关 2019-02-14
  • 王东峰主持召开河北雄安新区规划建设工作领导小组会议 2018-12-05
  • 买买买!吃吃吃!端午消费火爆,总额超70亿元 2018-12-05
  • 热巴窦骁携手演绎经典神话 2018-09-16
  • 人民日报人民论坛:表达当守正,修辞立其诚 2018-09-16
  • 韩中国文化院相关新闻 2018-09-11
  • 多彩课堂熔铸红色魂——甘祖昌干部学院教学素描 2018-09-11
  • 小朱婷15分横扫韩国晋级四强 教练誓灭泰国一雪前耻 2018-08-22
  • 死人当被告被判偿还5万债务?原判决被中止执行 2018-08-08
  • 建好欧美同学会 助力伟大中国梦 2018-07-18
  • 509| 463| 656| 741| 928| 705| 195| 266| 95| 172|