Linux64位操作系统(CentOS6.6)上如何编译spark1.3
发表于:2026-10-31 作者:千家信息网编辑
千家信息网最后更新 2026年10月31日,1.在官网下载1.3.0源码后执行如下命令:./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=
千家信息网最后更新 2026年10月31日Linux64位操作系统(CentOS6.6)上如何编译spark1.3
1.在官网下载1.3.0源码后执行如下命令:
./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=2.4.0 -Djava.version=1.7 -Dprotobuf.version=2.5.0 -Pyarn -Phive -Phive-thriftserver
2.参数说明:
--tgz 生成部署包;
--skip-java-test 滤过测试阶段;
--with-tachyon 感觉tachyon是趋势,所以加上tachyon的支持;
-Dhadoop.version 指定hadoop的版本,默认为1.0.4;
-Djava.version 指定java版本,默认是1.6;
-Dprotobuf.version 指定protobuf的版本,默认是2.4.1;这里指定是因为hadoop使用的2.5.0,不修改的话搭配的时候会出问题;
-Pyarn -Phive -Pthriftserver 分别加入yarn、hive的支持。
3.一个多小时后出现BUILD SUCCESS,即编译成功,可在spark-1.3.0文件夹中找到编译的文件。
版本
编译
文件
支持
成功
参数
可在
命令
小时
感觉
文件夹
时候
源码
趋势
问题
阶段
测试
生成
操作系统
系统
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
互联网科技产业
互联网公司 科技公司
互联网 科技创业
沃里互联网科技
互联网 视角下的科技创新
猫创互联网科技
互联网金融 科技创新
互联网科技生活的内容
山东吉时兔互联网科技有限公司
深圳国际航运科技和互联网
互联网教育科技公司vipkid
移动互联网科技股
互联网科技项目计划书材料类
互联网经济与金融科技
科技互联网大厂
996高科技互联网公司
北京市互联网新科技
上海互联网科技公司ppt
互联网科技创新方面的资料
互联网科技创业有什么好项目
博彦科技互联网金融
互联网为科技
互联网 的科技创新
长亮科技互联网金融
广西拼得多互联网科技有限公司
创业天下互联网科技有限公司
宁夏科技产业互联网案例
富国互联网金融科技混合基金
新氧科技和美国互联网有关系吗
科技互联网公司两年变化