Linux64位操作系统(CentOS6.6)上如何编译spark1.3
发表于:2025-12-02 作者:千家信息网编辑
千家信息网最后更新 2025年12月02日,1.在官网下载1.3.0源码后执行如下命令:./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=
千家信息网最后更新 2025年12月02日Linux64位操作系统(CentOS6.6)上如何编译spark1.3
1.在官网下载1.3.0源码后执行如下命令:
./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=2.4.0 -Djava.version=1.7 -Dprotobuf.version=2.5.0 -Pyarn -Phive -Phive-thriftserver
2.参数说明:
--tgz 生成部署包;
--skip-java-test 滤过测试阶段;
--with-tachyon 感觉tachyon是趋势,所以加上tachyon的支持;
-Dhadoop.version 指定hadoop的版本,默认为1.0.4;
-Djava.version 指定java版本,默认是1.6;
-Dprotobuf.version 指定protobuf的版本,默认是2.4.1;这里指定是因为hadoop使用的2.5.0,不修改的话搭配的时候会出问题;
-Pyarn -Phive -Pthriftserver 分别加入yarn、hive的支持。
3.一个多小时后出现BUILD SUCCESS,即编译成功,可在spark-1.3.0文件夹中找到编译的文件。
版本
编译
文件
支持
成功
参数
可在
命令
小时
感觉
文件夹
时候
源码
趋势
问题
阶段
测试
生成
操作系统
系统
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
天津环保软件开发规定
开发网络安全武器
彩票软件开发有限公司
河北定制网络技术开发哪个正规
美萍软件开发平台
外卖侠服务器配置
王牌竞速区分服务器吗
软件开发可行性计划研究
天姬变怎么找到以前的服务器
手机软件开发龙头股
湖南hp服务器维修调试价格
数据库技术应用案例
铁路网络安全知识竞赛
办公用品管理系统服务器版
服务器构建内部局域网华为
数据库表中照片的类型
攀枝花软件开发成交价
威海智慧医养软件开发系统
网络安全行业全景图2022
企业用的编程软件开发
庭智服务器超级管理员号
酒店用本地服务器还是云服务器
软件开发 咨询 合同模板
软件开发与维护是什么专业
刀片服务器网卡
计算机系统集成包括软件开发么
无法连接到浮动许可证服务器
数据库压缩和修复
丝路传说90数据库
数据库的e-r