Ambari+Bigtop大数据平台安装部署指南(Centos7)二

前言

上篇文章已经完成ambari界面化操作前的所有操作,本篇将从ambari界面化安装bigtop大数据组件开始。

要注意的是本篇操作都依赖于上篇基础环境,建议先按上篇步骤配置基础环境再执行本篇安装教程。

一 启动ambari

启动命令:ambari-server start

启动后可以看到命令行出现successfully

 

 二 登录ambari

浏览器打开http://${ambari.server.ip}:8080就可以看到ambari登录界面;

默认账号密码admin/admin

 三 创建集群

点击"LAUNCH INSTALL WIZARD"进入创建集群界面

 四 设置集群名称

根据自己实际情况设置集群名称,此处用"demo"作为集群名称;

点击"NEXT"进入下一步

 五 设置内网镜像源

此处选择本地数据源;并填写本地数据源url(上篇已搭建);

点击"NEXT"进入下一步

 六 配置集群服务器信息

第一个输入框填写主机名称,每行一个;

第二个输入框填写免密密钥信息;

点击"REGISTER AND CONFIRM"进行注册并进入信息确认弹窗;

确认部署主机信息,点击"CONTINUE"进行下一步

密钥获取方式

进入ambariserver所在主机,执行cat ~/.ssh/id_rsa命令获取免密密钥信息(上篇已做免密)

 七 ambari-agent安装

这一步会执行ambari-agent的安装操作;

agent安装完成后会执行服务器配置检查操作;

点击"Click here to see the check results"可看到检查结果;

点击"NEXT"进入下一步

 

八  组件安装选择

此处默认所有组件全选(演示全部组件安装),大家可以根据实际情况选择性勾选需要的组件;

点击"NEXT"进入下一步

 

 九 设置组件主服务安装规划

此处根据自己实际规划设置各类主服务的安装主机(演示采用默认分配),右侧可以看到整体规划;

点击"NEXT"进入下一步

 十 设置从服务和客户端安装规划

此处根据自己实际规划勾选各主机需要安装的从服务和客户端(演示全选);

点击"NEXT"进入下一步

 

十一  设置密码

这里需要配置grafana和hive的密码

grafana登录密码自行设置

hive元数据库密码上篇文章设置了ambari123

点击"NEXT"进入下一步

 十二 设置数据库信息

这里需要配置hive元数据库相关信息

数据库类型选择已存在的mysql

按提示的命令在ambari-server服务器上注册mysql驱动

确认JDBC的url,尤其是主机ip

点击"TEST CONNECTION"进行数据库连通性测试

点击"NEXT"进入下一步

MySQL驱动注册方式

(上篇已安装驱动jar)

 

 十三 配置各组件文件夹路径

这里有全部待安装组件的文件夹路径配置信息,根据实际情况逐一配置相关路径(演示采用默认路径);

点击"NEXT"进入下一步

十四  配置组件安装账号

这里的会列出每个组件安装时在linux上创建的用户和用户组,采用默认即可;

点击"NEXT"进入下一步

 十五 配置组件详细参数

这里会列出所有组件的所有参数,可以根据实际情况修改,需要注意的是hdfs有个必填参数,kafka的zk链接信息建议加上"kafka"的znode;

设置完成后,点击"NEXT"进入下一步

hdfs

 

kafka

 

 十六 确认部署配置信息

这里会展示所有配置信息方便进行检查确认;

确认无误后,点击"DEPLOY"进行安装部署

十七 执行安装部署操作

这里会显示全部安装部署进度 ,包括主服务、从服务、客户端安装,还包括所有服务的测试检查,安装耗时较长,与机器性能强关联;

安装完成后,点击"NEXT"进入下一步

 

十八  查看安装部署总结

这里会展示安装部署操作的总结;

点击"COMPLETE"完成所有安装动作

十九 查看集群

 

 至此,ambari2.8.0+bigtop3.2.0的安装部署已完成

 

泽芯
关注 关注
  • 4
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
bigtop_Apache Bigtop安装Hadoop
danpu0978的博客
05-10 3025
bigtop 啊!! 这个名字随处可见,随风而来。 Apache Hadoop !! 大数据处理平台! 我们都知道一开始它也可能是多么陌生! ew! :o 根据我的亲身经历,在将近11个月之前,我试图安装HBase时,我遇到的问题很少! 问题是版本兼容性。 例如:“ HBase some x.version”和“ Hadoop some y.version”。 这是一个实...
Ambari+Metrics+Bigtop 全家桶编译部署攻略——Ambari系列(ambari 2.8.0+centos 7.9 +bigtop 3.3.0)
success could be revenge的博客
03-23 2941
1、源码已经完成Ambari+Metrics+Bigtop 最新版的编译及部署,后续会放魔改包和一件部署脚本2、时间有限,我会尽快更新完毕所有内容,包括分享中间才得坑,50条3、编译的难度不在代码本身,而在于网络。后续将分享,及踩坑时的逆向思维。关于Ambari 编译报错可以直达(最后一次更新时间:2024年3月24日20:41分)
Apache Bigtop:构建和测试Hadoop生态系统的强大工具
gitblog_00056的博客
08-06 838
Apache Bigtop:构建和测试Hadoop生态系统的强大工具 项目地址:https://gitcode.com/gh_mirrors/bigt/bigtop 项目介绍 Apache Bigtop 是一个致力于开发 Hadoop 生态系统打包和测试的项目。其主要目标是围绕 Apache Hadoop 相关项目的打包和互操作性测试构建社区。Bigtop 包括对各种级别的测试(如打包、平台、运行...
Bigtop】利用Bigtop3.2.0编译大数据组件RPM包
Meepoljd的博客
08-26 885
Bigtop 从0开始参考了上述的博文自己尝试了编译组件,过程还是遇到很多问题,一一记录,方便后人
Ambari 安装bigtop 3.2.0集群部署
qq_37158969的博客
10-20 797
bigtop集群部署手册部署环境信息主机名 IP 系统基础环境优化。
Ambari3.0.0+BigTop3.2.0 SNAPSHOT初体验
m0_48319997的博客
11-23 3762
当前版本还在开发中,已经基本可用,功能还在不断完善,相信正式版本发布的时候,体验会更好。
Ambari2.7.5部署安装BigTop3.2.0
hbsnail的博客
05-30 545
从搜集资料开始,先总结分析,再操作实现,再添加自己的记录。
ambari2.8.0+bigtop3.2.0发行版大数据平台编译指南
m0_48319997的博客
04-09 6437
ambaribigtop联合的第一个发行版终于出来了!!!这是在HDP、CDH大数据平台闭源后的第一个开源免费发行版的大数据平台。下面为大家详细介绍Centos7下的编译方法。
202x年ambari搭建大数据平台安装手册(专业完整版).pdf
05-19
本文档主要介绍了使用 Ambari 搭建大数据平台安装手册,对于大数据安装和配置进行了详细的介绍。 大数据平台的基本概念: * 大数据是指无法在一定时间内用传统处理方式处理的巨量数据,包括结构化、非结构化和...
大数据平台安装
hellowangxiansheng的博客
03-28 798
安装部署分为以下五个大步骤1.资源准备2.操作系统配置3.数据库配置4.ambari配置5.bigtop组件安装
Bigtop-Manager 是一个用于管理 Bigtop 组件的平台
02-27
**大标题:Bigtop-Manager:管理Bigtop组件的高效平台** **一、Bigtop-Manager简介** Bigtop-Manager是专为管理Bigtop组件设计的一款现代化、易上手的Web应用程序。它借鉴了Apache Ambari和Cloudera Manager等流行...
基于Ambari大数据平台搭建
热门推荐
数据一哥,公众号:数据社
08-19 1万+
同CDH部署类似,步骤分为ambari部署和hdp的部署,先以1台为例(内存>6G,磁盘划分/至少40G,/data/10G),后续节点可以通过扩容方式加入集群,可参考:http...
Ambari+Bigtop 一站式编译和部署解决方案
最新发布
TTBIGDATA的博客
09-16 1463
本项目旨在提供一个一站式解决方案,从编译到部署 Ambari+Bigtop。通过本项目,用户可以轻松地在各种环境中安装和配置 AmbariBigtop,简化大数据平台的搭建过程。🌐。
BigtopAmbari2.8.0编译及安装
Meepoljd的博客
08-29 692
编译Ambari并通过Ambari部署BigTop堆栈
Ambari2.8.0部署安装BigTop3.2.0
hbsnail的博客
06-25 999
我是如何系统的学习一门IT技术
ambari+bigtop一键部署大数据集群坏境
weixin_56786688的博客
08-06 1816
搭坏境嘛,最头疼的就是明明按照别人一模一样的步骤,别人就可以成功,而我的就遇到各种奇奇怪怪的问题。结果折腾了半天到头来才发现几秒钟就解决了。最后面会补充我自己遇到的问题。
Ambari+Bigtop大数据平台安装部署指南(Centos7)一
m0_48319997的博客
04-10 3838
安装部署分为以下五个大步骤1.资源准备2.操作系统配置3.数据库配置4.ambari配置5.bigtop组件安装
ambari2.8.0与bigtop编译与制作镜像源
qq_42896460的博客
09-18 1031
ambari2.8.0与bigtop3.2.0的编译安装使用
ambari+bigtop大数据平台安装部署指南
07-27
Ambari是Apache软件基金会下的一个子项目,是一个开源的管理和监控Hadoop集群的工具。而Bigtop是一个Apache软件基金会下的开源项目,主要用于构建,测试和部署大数据平台Ambari Bigtop大数据平台安装部署指南主要包括以下几个步骤: 1. 准备工作:在开始安装之前,需要确保系统已经安装了合适的操作系统和相关的依赖软件,如Java、SSH等。此外,还需要确定网络环境是否能够正常访问所需的软件源和资源。 2. 下载和安装Ambari:从Ambari官方网站上下载适用于目标操作系统的Ambari软件包。安装Ambari时,需要注意选择合适的数据库和用户认证方式。 3. 配置Ambari服务器:根据实际需求,对Ambari服务器进行配置。一般需要设置主机名和端口号等基本信息,并选择适当的安装选项。 4. 启动Ambari服务器:启动Ambari服务器后,可以通过浏览器访问Ambari web界面,并使用默认的用户名和密码登录。登录成功后,可以进行集群的配置和管理。 5. 创建集群:使用Ambari web界面创建新的集群。在创建集群时,需要指定集群的名称,选择合适的Hadoop分发版本和相应的服务组件。 6. 配置集群:根据需要,配置集群中各个节点的主机名、IP地址、SSH访问等信息,并为各个服务组件分配合适的角色。 7. 安装集群:在配置完成后,可以开始安装集群。Ambari会自动根据所选的服务组件和配置要求,安装相应的软件包并启动服务。 8. 部署集群:安装完成后,可以对集群进行进一步的配置和优化。可以为各个服务组件设置参数,并在需要时添加额外的节点和组件。 9. 监控和管理:Ambari提供了丰富的监控和管理功能,可以用于实时监控集群的运行状态、性能参数等。还可以进行服务的启停、组件的升级等操作。 10. 测试和维护:在部署完成后,还需要进行一些测试和维护工作。可以运行一些测试工具对集群进行测试,以确保其正常运行。同时,定期进行安全和性能优化等维护工作也是非常重要的。 通过遵循Ambari Bigtop大数据平台安装部署指南,用户可以快速搭建和部署大数据平台,实现集群的管理和监控,为大数据处理提供便利和支持。
写文章

热门文章

  • ambari2.8.0+bigtop3.2.0发行版大数据平台编译指南 6437
  • BigTop3.2.0 大数据组件编译--组件编译 5188
  • BigTop3.2.0 大数据组件编译--基础环境准备 3893
  • Ambari+Bigtop大数据平台安装部署指南(Centos7)一 3836
  • Ambari3.0.0+BigTop3.2.0 SNAPSHOT初体验 3758

最新评论

  • Ambari+Bigtop大数据平台安装部署指南(Centos7)二

    小群攻城狮: 您好 stack version这个是怎么弄的啊

  • ambari2.8.0+bigtop3.2.0发行版大数据平台编译指南

    wlg_linux: 使用bigtop如何集成其他的组件?比如将redis集成进去?谢谢

  • CentOS内网yum源构建&使用最佳实践

    G3-平头哥: 这个本地源是用来安装ambari-server的吧

  • BigTop3.2.0 大数据组件编译--组件编译

    G3-平头哥: 这个适配是啥意思,我本地搭建了一个apache 的 hadoop集群测试了一下,版本没啥问题, 如果bigtop 修改版本,直接改配置文件就可以吗, 然后按照你的编译方式翻译

  • ambari2.8.0+bigtop3.2.0发行版大数据平台编译指南

    wbbzj2006: 会报下面这些错误,是什么问题呢? [INFO] yarn install v0.23.2 [ERROR] warning Ambari@2.4.0: No license field [INFO] [1/4] Resolving packages... [ERROR] warning phantomjs@2.1.7: Package renamed to phantomjs-prebuilt. Please update 'phantomjs' package references to 'phantomjs-prebuilt' [ERROR] warning phantomjs > extract-zip > mkdirp@0.5.0: Legacy versions of mkdirp are no longer supported. Please update to mkdirp 1.x. (Note that the API surface has changed to use Promises in 1.x.) [ERROR] warning phantomjs > request@2.67.0: request has been deprecated, see https://github.com/request/request/issues/3142 [ERROR] warning phantomjs > request > node-uuid@1.4.8: Use uuid module instead [ERROR] warning phantomjs > request > tough-cookie@2.2.2: ReDoS vulnerability parsing Set-Cookie https://nodesecurity.io/advisories/130 [ERROR] warning phantomjs > request > hawk@3.1

大家在看

  • 基于nodejs+vue基于Springboot的助学金管理系统设计与实现[开题+源码+程序+论文]计算机毕业设计
  • 基于nodejs+vue基于Springboot的中点游戏分享网站[开题+源码+程序+论文]计算机毕业设计
  • 基于nodejs+vue基于Springboot的专业技能认证系统[开题+源码+程序+论文]计算机毕业设计

最新文章

  • Ambari+Bigtop大数据平台安装部署指南(Centos7)一
  • ambari2.8.0+bigtop3.2.0发行版大数据平台编译指南
  • BigTop3.2.0 大数据组件编译--组件编译
2023年3篇
2022年4篇

目录

目录

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

深圳坪山网站建设公司安康网站优化荔湾网站关键词优化哪家好安丘网站优化推广多少钱建材行业网站优化推广怎么样南阳市网站怎么优化新乡郑州智能网站优化广东律师网站优化铜川网站优化重庆网站建设和优化服务青海网站排名优化公司南充什么叫网站优化外贸网站优化在线推广郑州网站排名的优化南充网站制作优化政务网站优化郑州网站权重优化软件西安网站优化哪家好网站优化到期怎么办泊头网站优化去哪学服装网站seo优化咨询贵州湖南网站优化推广网站建设优化哪家好广告流量网站优化 看什么书网站优化价目表seo网站优化案例南雄网站关键词优化软件网站备案对优化的作用中文网站优化多少钱翠竹论坛网站优化德州自适应网站优化香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声卫健委通报少年有偿捐血浆16次猝死汪小菲曝离婚始末何赛飞追着代拍打雅江山火三名扑火人员牺牲系谣言男子被猫抓伤后确诊“猫抓病”周杰伦一审败诉网易中国拥有亿元资产的家庭达13.3万户315晚会后胖东来又人满为患了高校汽车撞人致3死16伤 司机系学生张家界的山上“长”满了韩国人?张立群任西安交通大学校长手机成瘾是影响睡眠质量重要因素网友洛杉矶偶遇贾玲“重生之我在北大当嫡校长”单亲妈妈陷入热恋 14岁儿子报警倪萍分享减重40斤方法杨倩无缘巴黎奥运考生莫言也上北大硕士复试名单了许家印被限制高消费奥巴马现身唐宁街 黑色着装引猜测专访95后高颜值猪保姆男孩8年未见母亲被告知被遗忘七年后宇文玥被薅头发捞上岸郑州一火锅店爆改成麻辣烫店西双版纳热带植物园回应蜉蝣大爆发沉迷短剧的人就像掉进了杀猪盘当地回应沈阳致3死车祸车主疑毒驾开除党籍5年后 原水城县长再被查凯特王妃现身!外出购物视频曝光初中生遭15人围殴自卫刺伤3人判无罪事业单位女子向同事水杯投不明物质男子被流浪猫绊倒 投喂者赔24万外国人感慨凌晨的中国很安全路边卖淀粉肠阿姨主动出示声明书胖东来员工每周单休无小长假王树国卸任西安交大校长 师生送别小米汽车超级工厂正式揭幕黑马情侣提车了妈妈回应孩子在校撞护栏坠楼校方回应护栏损坏小学生课间坠楼房客欠租失踪 房东直发愁专家建议不必谈骨泥色变老人退休金被冒领16年 金额超20万西藏招商引资投资者子女可当地高考特朗普无法缴纳4.54亿美元罚金浙江一高校内汽车冲撞行人 多人受伤

深圳坪山网站建设公司 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化