欢迎来到魔据教育大数据学院,专注大数据工程师培养!
当前位置:赛车彩票 > 学习资料 > 讲师博文 > sparkR安装文档

75秒极速赛车彩票开奖: sparkR安装文档

时间:2017-08-16 09:11:45作者:[!--zuozhe--]

赛车彩票 www.d6sa.cn  

sparkR安装文档
R是用于统计分析、绘图的语言和操作环境。R属于GNU系统的一个自由、免费、源代码开放的软件,它是一个广泛应用于统计计算和统计制图的优秀编程语言,但是其交互式使用通常局限于一台机器。为了能够使用R语言分析大规模分布式的数据,spark1.4开始推出sparkR,sparkR就是用R语言进行编程建模,计算分析依赖于Spark等大数据平台。它可以允许数据科学家分析大规模的数据集,并通过R shell交互式的在sparkR上运行作业。
具体安装整合操作如下:
安装环境准备:
CentOs6.5及以上版本
JDK    1.7/1.8
HDP    2.6(社区版)
R      3.3.3  
1.先安装spark,我们使用的是社区版HDP2.6,具体安装过程参考https://jinshuju.net/f/Ebi2Au,安装过程中注意勾选livy server(后面连接spark时会使用到)服务,界面如下:

2.安装R语言环境,执行以下命令安装
su root
yum -y install epel-release
yum -y update
yum -y install curl curl-devel
yum -y install libxml2 libxml2-devel openssl-devel.x86_64
yum -y install gcc glibc-headers gcc-c++ gcc-gfortran readline-devel
libXt-devel
yum install gnutls-devel.x86_64
yum -y install libcurl libcurl-devel
yum -y install R
ü 安装截图如下:

ü 安装完成,输入R命令进入shell操作界面,如下图:

ü 安装完成R语言,要在R语言中添加sparkR的包,在R脚本执行以下命令:
install.packages("sparklyr")
安装过程中会出现源选择,建议选择China(beijing)
ü 安装完成即可通过library(sparklyr)加载sparkR的包即可使用。
ü  

更多大数据相关资讯敬请关注魔据教育,为您分享最及时的大数据资讯。
学习大数据敬请关注魔据教育微信二维码。
魔据教育微信二维码

【版权与免责声明】如发现内容存在版权问题,烦请提供相关信息发邮件至[email protected],我们将及时沟通与处理。本站内容除非来源注明魔据教育,否则均为网友转载,涉及言论、版权与本站无关。

全国咨询热线:18501996998,值班手机:18501996998(7*24小时)

在线咨询:张老师QQ 320169340

企业合作服务专线:010-82340234-821, 院校合作洽谈专线:010-82340234

Copyright 2001-2019 魔据教育 - 北京华育兴业科技有限公司 版权所有,京ICP备17018991号-2

免费在线咨询赛车彩票

免费索取技术资料立即索取

大数据技术交流QQ:226594285

电话咨询010-82340234

  • 互联网基金违规销售乱象:巧立名目送红包、送份额 2019-05-22
  • 2018国际产学研用合作会议在南昌举行 2019-05-22
  • QFII政策调整引增量资金入场 “成长+大消费”或成布局重点 2019-05-12
  • 广东金林村:农民爱写诗 2019-05-11
  • 二哈冲进轻轨“调戏”乘客 工作人员急追 2019-05-11
  • 南方电网首座500千伏智能变电站投运 2019-04-28
  • 为什么说一直辛苦劳作的农民没有富起来?而不说一直勤劳的农民没有富起来? 2019-04-28
  • 东博会16个国家企业参展 国际展区人气旺 2019-04-12
  • 走路开车看手机是把生命当儿戏(社会观察) 2019-04-05
  • 广西壮族自治区东兰县“七民一站一阵地工作法”维护群众权益 2019-04-05
  • 这是全国精气最为集中的地方 被称为中国丹田所在 ——凤凰网房产 2019-04-04
  • [大笑]大家都不玩了,咱就不相信光靠房地产商和金融资本两方能把房价通过左手倒右手右手倒左手炒上天! 2019-03-25
  • 世界杯开幕式小旗手来自中国贵州丹寨--旅游频道 2019-03-25
  • 把过去私有制基础上的“阶级分析”生搬硬套到现代公有制和私有制并存的无阶级社会,是张冠李戴、睁着眼睛说瞎话。 2019-03-19
  • 致敬!他们是不为人知的城市猎鹰 2019-03-08
  • 825| 322| 562| 427| 394| 490| 998| 199| 357| 303|