当前位置: 首页 > news >正文

网站建设的学习/seo研究中心vip课程

网站建设的学习,seo研究中心vip课程,什么是网络营销促销,自己的商标名称可以做网站名称吗前言 最近由于工作需要,要部署一套ozone。我自己对hadoop这套体系不是很熟悉,所以过程磕磕碰碰,好不容易勉强搭起来,所以记录一下部署方式 准备 三台主机,主机均已安装jdk、hdfs,相关的安装配置就不另外写…

前言

最近由于工作需要,要部署一套ozone。我自己对hadoop这套体系不是很熟悉,所以过程磕磕碰碰,好不容易勉强搭起来,所以记录一下部署方式

准备

三台主机,主机均已安装jdk、hdfs,相关的安装配置就不另外写了,网上很多教程。

本次安装部署版本为当前最新的ozone-1.3.0版

部署步骤

1、ozone官网下载安装包,ozone有多种安装方式(docker、二进制包、源码编译等)。这里用二进制包安装方式。下载地址:Apache Ozone。这里下载了1.3.0版。ozone-1.3.0.tar.gz

2、上传到服务器:

部分服务器没有szrz命令的,可以通过scp命令进行复制:

scp ozone-1.3.0.tar.gz username@remote_ip:~/

解压

tar zxvf ozone-1.3.0.tar.gz

3、生成配置文件

进入ozone目录

cd  ozone

生成配置文件ozone-site.xml到etc/hadoop目录下

bin/ozone genconf etc/hadoop

PS:如果生成配置文件前/etc/hadoop已存在ozone-site.xml,则先行删除。

4、规划各机器职责并完成配置文件的配置

规划ozone的Ozone Manager(OM)、Storage Container Manager(SCM)、Datanodes服务分别部署在哪些机器上。假设在a主机上启动OM、SCM服务,a、b、c上启动Datanodes服务。

在ab、c主机上创建元数据存储文件夹

mkdir -p 自定义目录/ozonedata/meta

在a、b、c主机上分别创建数据存储文件夹

mkdir -p 自定义目录/ozonedata/data

配置etc/hadoop/ozone-site.xml

<?xml version="1.0" encoding="UTF-8" standalone="yes"?>
<configuration><property><name>ozone.om.address</name><value>A主机ip</value><tag>OM, REQUIRED</tag></property><property><name>ozone.metadata.dirs</name><value>用户目录/ozonedata/meta</value><tag>OZONE, OM, SCM, CONTAINER, STORAGE, REQUIRED</tag></property><property><name>ozone.scm.client.address</name><value>A主机ip:9860</value><tag>OZONE, SCM, REQUIRED</tag></property><property><name>ozone.scm.names</name><value>A主机ip</value><tag>OZONE, REQUIRED</tag></property><property><name>ozone.scm.datanode.id.dir</name><value>用户目录/ozonedata/data</value></property><property><name>ozone.enabled</name><value>true</value></property><property><name>ozone.scm.datanode.id</name><value>用户目录/ozonedata/data/datanode.id</value></property>
</configuration>

配置etc/hadoop/core-site.xml

<configuration><property><name>fs.AbstractFileSystem.o3fs.impl</name><value>org.apache.hadoop.fs.ozone.OzFs</value></property><property><name>fs.defaultFS</name><value>o3fs://bucket.volume</value></property>
</configuration>

在A主机上启动OM、SCM和datanode

到ozone-1.3.0/bin目录下执行

./ozone --daemon start scm
./ozone --daemon start om
./ozone --daemon start datanode

B、C主机下启动datanode

到ozone-1.3.0/bin目录下执行

./ozone --daemon start datanode

可以到ozone-1.3.0/logs目录下查看是否启动成功。由于datanode使用ratis协议,所以至少要部署3个节点,否则写入数据的时候会报:

INTERNAL_ERROR Allocated 0 blocks. Requested 1 blocks

验证

尝试创建一个卷(volume):

./ozone sh volume create volume

在卷下面创建一个桶(bucket):

./ozone sh bucket create volume/bucket

在桶下面往key写入一个文件:

./ozone sh key put volume/bucket/mykey1 用户目录/ozone-1.3.0/etc/hadoop/ozone-site.xml

之后通过查看桶下面的key,以及myKey1下的文件内容,验证是否写入成功

./ozone sh key ls volume/bucket
./ozone sh key cat volume/bucket/mykey1

小结

本文主要介绍了ozone的基本部署。ozone还有很多高可用、安全性等等的配置值得深入研究,因为笔者还没有需要使用,所以暂时没有去研究,有兴趣的读者也可以参考官网文档:https://ozone.apache.org/docs/1.3.0/zh/index.html

 

http://www.ho-use.cn/article/385.html

相关文章:

  • 手机wap网站制作免费/网络广告形式
  • 做网站是什么专业什么工作/南宁网站关键词推广
  • 设计新闻发布网站模板/免费b2b网站推广有哪些
  • 网站gbk网站seo文章
  • 想自己做网站需要会什么软件/长沙优化科技
  • 移动app做的好的网站/热门网站排名
  • 做美女网站/广州网站优化软件
  • 网站打开速度慢优化/网站流量排名
  • 泾川县门户网站留言/广州网站制作实力乐云seo
  • 电子商务网站建设实训心得体会/竞价外包运营
  • 蛋糕网站制作答辩/百度一下百度知道
  • 做设计兼职网站/网络营销软文案例
  • 佛山专业网站制作/企点
  • 化工网站制作/黑龙江网络推广好做吗
  • 品牌设计公司网站/游戏优化
  • 东安网站建设/安年软文网
  • 自己开公司 自己做网站/免费收录网站推广
  • 长沙建设银行招聘网站/网址解析ip地址
  • 东莞市传送机技术支持 网站建设/湖南网站建设推广优化
  • 建设的网站服务器/哪家公司建设网站好
  • 制作网页时要综合考虑哪些因素/哈尔滨seo推广
  • 吴江网站建设/网络推广方案的内容
  • 新能源课件网站开发新能源/如何自建网站?
  • 专业做网站的公司哪家好/app运营
  • 中国空间站即将建成/360应用商店
  • 安徽建设工程信息网怎么打不开了/福建seo优化
  • 怎么看网站是哪个平台做的/站长工具网
  • 我是新手如何做跨境电商/成都官网seo服务
  • 网站突然显示 建设中/提高工作效率
  • 天津河北区做网站/百度权重4网站值多少钱