首页 > 其他分享 >假期第二周总结

假期第二周总结

时间:2023-07-22 21:23:23浏览次数:30  
标签:总结 假期 虚拟机 配置 Hadoop 应用程序 第二周 Spark 安装

本周花在学习上的时间大约有四五天的时间,每天将近半天,先从安装Spark开始在厦门大学数据实验室学习的,

在安装Spark之前要先安装Hadoop(伪分布式)在安装配置Hadoop之前又重新安装配置了VMware和虚拟机,

虽然之前安装过但为了避免之后出现一些问题,又按照教程重新安装了一边,虚拟机用的是Ubuntu系统,

配置Hadoop过程中先创建了hadoop用户,更新apt,然后再安装配置java环境,在配置过程中遇到了一些问题,

由于之前自己很少使用虚拟机,对一些使用和操作不太熟悉在这里花费了一些时间,然后完成Hadoop的单机配置(非分布式),

成功执行了Hadoop运行的例子。再就是Hadoop伪分布式的配置,修改配置文件,但在配置执行过程中遇到了一些问题,

上网查找了解决方法还没有解决,尝试了一些方法但还没有完成,然后继续安装java JDK,安装Spark(Local模式),使用Spark shell编写代码

启动Spark shell实现加载文本文件和简单的RDD操作。然后继续实现独立应用程序编程,使用sbt对Scala独立应用程序进行编程打包

再使用Maven对java独立应用程序进行编译打包和使用Maven对Scala进行独立应用程序进行编译打包,目前的想法是先按自己的方法慢慢来,

然后之后再询问同学有哪些解决方法或更好的学习途径。本周学习的体会最重要的还是要有适合学习的环境和充足的信息来源,但有时候还是会有些焦虑。

标签:总结,假期,虚拟机,配置,Hadoop,应用程序,第二周,Spark,安装
From: https://www.cnblogs.com/-GYP/p/17574269.html

相关文章

  • 每周总结 第二周
    学习了idea的使用技巧,复习并检验了JDBC基础代码。本周编程学习时间约11h,其中代码时间约占3h,主要用于验证idea使用技巧和数据库连接与JDBC中的CRUD等基础操作,理论学习约占8h,主要学习python语言基础和复习JAVA语言、C++语言基本语法。......
  • 假期周结2
    一:1.本周做了什么本周回到了老家,每天没什么事,学习,做饭,玩手机2.花在学习上多长时间每日1个小时以上3.花在代码时间上多长时间与学习时间重复,每日共1个小时以上4.花在解决问题用了多长时间由于目前是跟着敲,碰到的问题较少,但前几天碰到一个问题,分页代码有个地方错了,导致项目......
  • 一周总结第四次
    这周完成了大量pta上的题目,学习了许多算法知识,虽然掌握并不熟练,但也收获颇多。对于Java课程也完成了许多学习,观看了许多视频。接下来一周将会重点进行大道至简书籍的阅读,并在月底之前完成一千字读后感的任务。......
  • 暑假第三周总结
    交代一下最近的动态,今天是回家的第二周了,我找到了一份暑假工,开始一边打工赚钱,一边减肥的生活。在回家的这段时间里面,我重新学习了一下尚硅谷的javaweb教程,在视频讲解中,我学习到了很多之前不会的内容,也开始逐渐减少对jsp文件的依赖,开始学习servlt的相关内容(之前对于这方面的认知仅......
  • 2023-07-16~07-22第二周暑假生活
    本周平均学习时间为3小时每天,大部分时间在学习CSScss通过伪类伪元素动画效果可以实现许多有趣的动画;动画元素为animotion;在css中一般这样定义:animation:nameattribute1attribute2...;/*attribute可以省略*/@keyframesname{/*具体实现*/0%{/*动画时间进行到0%的效果*/}10......
  • 第三周总结
      这周去青岛旅游了。。。^.^ ......
  • 暑期第五周总结
    本周花在学习上的时间大概为15小时,花在代码上的时间大概为13小时。花在解决问题上的时间大概为2小时。本周,我学习了布尔类型和比较运算符的具体内容,if语句的使用。Python的if语句和c,c++,java不一样,还有if和else的组合使用,以及ifelseelif。还有while语句的使用。Python的while语句......
  • 第四周训练总结
    比赛第一场牛客多校只A了一道题ACD:博弈论,比赛的时候,通过几个例子的检查,大胆的猜测出了答案,然后就A了补题H:在比赛的时候想了很久,没有思路,最后通过讲解,学到了正序相交,正序包络,正序不交,反序包络,反序不交,反序相交之间的关系,重要的是把这里搞清楚,这道题基本就差不多了K:比赛......
  • 2023.7.22-假期周进度报告
    本周(7.16-7.22)主要学习大数据相关的最基本知识。下周准备进行休息。周日,进行VMware的下载和虚拟机镜像的下载和安装,完成了VMware的下载和安装,虚拟机的下载和安装,VMnet8虚拟网卡的基本配置,虚拟机主机名和ip地址的配置,遇到了虚拟机镜像下载慢的问题,解决方法是从所看课程中给的资料......
  • 7.21总结
    上午不想学习,摆了一上午,中午想起来有个活动需要查资料,然后起来查了一些资料,之后想起来还有原来剪辑的视频需要更改,然后我按照要求稍微更改了一下,让其他部门润色了文案,修改了一下,然后真的啥也不想学,就摆到了晚上,晚上提起了精神,学了会前端,发现跟java差不多,有些api差不多,然乎就睡觉......