平台认证数据工程师
培训
焊锡培训资料ppt免费下载焊接培训教程 ppt 下载特设培训下载班长管理培训下载培训时间表下载
课堂实验一、实验信息文档编号文档版本1.0实验名称TDH平台的安装与配置第8讲星环大数据产品介绍所属课程第9讲大数据平台软硬件环境要求认证等级数据工程师(初级)第10讲集群角色分配授课形式上机实验实验批次第1次/共11次二、实验目的实践TDH平台的安装。实践TDH平台的初始配置。初步了解TDHManager的使用方法。三、实验准备为每组学员分配三台虚拟服务器,用于安装TDH平台。每组选一名代表来安装平台。四、实验内容第一步:准备Docker盘任务:格式化Docker盘,并挂载到指定目录下。步骤Linux:/*将Docker盘(/dev/sdd)格式化成XFS格式(XFS一种高性能的日志文件系统),命令中必须加上-nftype=1*/1.mkfs.xfs-f-nftype=1/dev/sdd//创建Docker盘的挂载目录/var/lib/docker1平台认证数据工程师培训2.mkdir/var/lib/docker//将Docker盘挂载到/var/lib/docker目录下3.mount/dev/sdd/var/lib/docker//查看磁盘挂载情况4.df-lh//获取Docker盘的UUID(UUID=b194c9ec-fada-4241-909a-3eef607f150f)5.blkid/dev/sdd/*设置Docker盘开机自动挂载:编辑etc/fstab文件,将“UUID=b194c9ec-fada-4241-909a-3eef607f150f/var/lib/dockerxfsdefaults00”写入文件*/6.vim/etc/fstab/*为三台服务设置IP-Hostname映射:分别登录三台服务器,编辑etc/hosts文件,将“172.16.140.85tdh-85172.16.140.86tdh-86172.16.140.87tdh-87”写入文件*/7.vim/etc/hosts第二步:复制TDH安装包任务:登录文件服务器,将TDH相关安装包拷贝到集群的第一台服务器中(IP最小的服务器)。步骤Linux://登录文件服务器1.sshroot@172.16.140.111//进入安装包存储目录2.cd/mnt/disk1/de_traning//拷贝TDH5.1.2安装包3.scpTDH-Basic-Component-Transwarp-5.1.2-final.tar.gz172.16.140.85:/mnt/disk1//拷贝TDH5.1.2授权包4.scpTDH-Image-Registry-Transwarp-5.1.2-final.tar.gz172.16.140.85:/mnt/disk1//拷贝CentOS7安装包5.scpCentOS-7-x86_64-DVD-1511.iso172.16.140.85:/mnt/disk1第三步:解压TDH安装包,并授权任务:登录TDH集群的第一台服务器,解压TDH安装包和授权包,并完成授权。2平台认证数据工程师培训步骤Linux://登录TDH集群的第一台服务器1.sshroot@172.16.140.85//进入安装包存储目录2.cd/mnt/disk1//将TDH5.1.2安装包解压到transwarp文件夹2.tar-xzvfTDH-Basic-Component-Transwarp-5.1.2-final.tar.gz//将TDH5.1.2授权包解压到registry文件夹3.tar-xzvfTDH-Image-Registry-Transwarp-5.1.2-final.tar.gz//将registry移动到transwarp下,完成授权4.mvregistrytranswarp第四步:安装TDH平台任务:安装TDH平台,包括命令行安装、Web安装两个阶段。步骤Linux://进入TDH安装目录1.cd/mnt/disk1/transwarp//执行install脚本,开始命令行安装2../installWeb:3.浏览器中输入http://tdh-85:8179,进入TranswarpManager安装向导,基本上采用默认配置,点击下一步即可完成安装3平台认证数据工程师培训配置网络:采用默认配置4平台认证数据工程师培训选择CentOS操作系统安装包(/mnt/disk1/CentOS-7-x86_64-DVD-1511.iso)5平台认证数据工程师培训第五步:配置TDH平台任务:对TDH平台进行初始配置。步骤Web:1.登录TDHManager,进入平台配置向导(网址:http://172.16.140.85:8180,用户名:admin,密码:admin)6平台认证数据工程师培训设置集群名称:tdh85-87设置NTP服务器:采用默认选项(内部NTP服务器作为独立NTP服务器)添加机柜:不添加,使用缺省机柜default-rack7平台认证数据工程师培训添加节点:按格式要求输入集群IP地址,如:172.16.140[85-87]设置访问权限:输入root密码,缺省为1234568平台认证数据工程师培训选择需安装的服务:(1)课程前三天安装:ZooKeeper、HDFS、YARN、Kafka、TXSQL、Inceptor、Hyperbase、Slipstream(2)课程第四天安装:Search(开销比较大)(3)其他服务不要安装,否则会因资源开销过大,导致集群瘫痪9平台认证数据工程师培训分配角色:采用默认配置Inceptor参数配置:(1)修改inceptor.executor.memory为4096(2)修改inceptor.executor.cores为210平台认证数据工程师培训如果下一步过不去,请参见以下帖子:http://support.transwarp.cn/t/tdh-5-1-config-tabletserver-store-datadirs-of-shiva1-was-empty/1815。平台配置成功11平台认证数据工程师培训12