首页 > 其他分享 >24-暑假软件工程周报(3)

24-暑假软件工程周报(3)

时间:2024-07-21 11:09:14浏览次数:7  
标签:24 11 00 Zookeeper 配置 软件工程 暑假 hbase HBase

本周,我继续深入学习Hadoop和HBase。在上次报告的基础上,我主要集中在HBase的配置和使用方面,并遇到了一些问题,通过查阅资料和调试成功解决了这些问题。

1.我学习了HBase的基本概念和架构。HBase是一个基于Hadoop HDFS的分布式数据库,专门用于处理大规模数据的随机读写。它通过Zookeeper进行集群管理,以保证高可用性和一致性。在实际配置HBase集群时,我首先安装和配置了Zookeeper。Zookeeper的配置需要确保所有节点的 `zoo.cfg` 文件一致,并正确设置 `dataDir` 和 `clientPort`。启动Zookeeper后,我验证了其正常运行。

2.HBase的安装和配置。我下载了最新版本的HBase,并在每个节点上解压缩。配置文件主要包括 `hbase-site.xml` 和 `hbase-env.sh`。在 `hbase-site.xml` 中,我配置了HBase根目录(`hbase.rootdir`)指向HDFS路径,并设置了Zookeeper的连接信息。在 `hbase-env.sh` 中,我配置了Java Home路径,并根据节点的硬件配置调整了Heap Size。

3.在启动HBase时,我遇到了由于Zookeeper连接失败导致的启动问题。经过检查,发现是由于防火墙设置阻止了通信。我通过关闭防火墙和配置正确的防火墙规则,解决了这个问题。随后,我启动了HBase集群,并通过HBase Shell验证了集群的正常运行。

4.实际使用HBase中,学习了创建表、插入数据和查询数据的基本操作。

 

本周我对HBase的配置和使用有了更深入的理解,提高了在分布式环境中解决问题的能力。

 

工作时间:7月14日 8:00-11:00 

工作内容:

基本完成小区水电费管理系统页面配置

进行mysql数据库配置

 

工作时间:7月15日 8:00-11:00 

工作内容:

基本完成水电费大程序编译,可正常运行使用。

 

学习Oracle课程

 

工作时间:7月16日 8:00-11:00 

工作内容:

继续学习Oracle应用和css应用,Hadoop

 

工作时间:7月17日 8:00-11:00 

工作内容:

学习Oracle数据库,试运行第一个程序,完成增删改查过程。

 

工作时间:7月18日 8:00-11:00 

工作内容:

完成数据库程序测试

Hadoop环境配置,选取3.1.3

 

工作时间:7月19日 8:00-11:00 

完成数据库程序验收

完成Hadoop及hbase数据库环境配置,测试程序完成

 

 

工作时间:7月20日 14:30-17:00

实现idea连接hbase数据库

完成考试验收

 

 

标签:24,11,00,Zookeeper,配置,软件工程,暑假,hbase,HBase
From: https://www.cnblogs.com/kuandong24/p/18314254

相关文章

  • 2024-07-21 闲话
    今天在家找到了高三几次考试语文作文原稿,当初留下它们的意思是一个字一个字敲一下的,但是暑假实在是没时间了。于是索性一步到位,在博客园上传扫描件吧哈哈。我个人体感是周测发的答题纸的格的大小比模拟考试的时候的格小。但是高考的格子是啥样的我也给忘了。离谱。......
  • 学习流程-2024-07
    学习流程-2024-07-201.cordova项目添加android平台后,用androidstudio打开platforms/android,“在模拟器运行”按钮为灰色不可点。需要点右上角syncprojectwithgradlefiles。但点了之后报错如下,下一步解决该问题:Downloadhttps://services.gradle.org/distributions/gradle-......
  • 24点 Pascal大暴力程序
    24点大暴力程序:PascalCode:constdic:array[1..4]ofchar=('+','-','*','/');vargd:array['!'..'a']oflongint;q1:array[0..105]ofextended;q2:array[0..105]ofchar;a:array[1..4]oflongint;......
  • NOI2024 总结
    赛时经历Day1想了1h的t1,然后思路不是很清晰,写了1h。想t2,顺着擂台赛想下去,可以分成\(k\)个一组,每组\(\dfrac{k(k-1)}2\)次查询,然后选出一个最大的组成一个新的序列。过了一会儿,想到dp这个过程,得到82pts。剩下大约1h30min,想t3,一直在往计数+容斥的方向......
  • 字符的统计 387、389、383、242、49
    387.字符串中的第一个唯一字符解法一、哈希映射计算每个字符出现的次数,然后再遍历,与数组里记录次数进行比对顺便一提哈希表数据结构耗时很大,数组计数哈希思想快很多(是不是桶排来着classSolution{publicstaticintfirstUniqChar(Strings){intlen=......
  • 2024 暑假友谊赛 2
    2024暑假友谊赛2A-......
  • 暑假集训csp提高模拟3
    赛时rank20,T10,T245,T320,T495T1粘了两遍(因为OJ卡第一次没有显示出来)CE了,挂了100,T4没卡常挂了5汤碗了!!!!!!!!!!!!!!!T1abc猜想对于任意整数\(c\)都有\[\left\lfloor\frac{a}{b}\right\rfloor+c=\left\lfloor\frac{a}{b}+c\right\rfloor=\left\lfloor\frac{a+bc}{b}\right\rf......
  • NOI2024游记
    终于还是到了这一天。NOI,无论金牌与否,都会是我OI生涯中最后一场正式比赛了——哪怕进入了集训队也是这样。那么,走完最后这一程吧。Day-6(7.11)结束学考,抵达重庆,最后四天集训。Day-5(7.12)模拟赛挂分,原因是不会贪心。感觉真是越学越菜了。晚上和Clonoth,A_zjzj,275307894......
  • NOI 2024 游记
    https://www.cnblogs.com/fjy666/p/-/NOI2024NOI2024游记。建议你立刻关掉这个页面捏。7/16(Day-1)到达育才中学。上一次来育才是什么时候呢?WC2024(Cu)。在育才没有什么比较好的回忆。去领身份牌未果,再去的时候看到了zxx。7/17(Day0)上午开幕式,开场满屏NOI有文......
  • 暑假集训记录
    这里记一些从7.15开始做的NOI篇或者让人眼前一亮的题目/trick。(哦,前面的题可能忘了某些细节了。)P3452求补图连通块个数。P4555首先看到回文串,先上马拉车。然后发现马拉车双回文不好做,考虑拆成两部分。大概就是维护一个以\(i\)为左端点/右端点的最长回文串。然后......