首页 > 其他分享 >大数据路线

大数据路线

时间:2023-06-17 09:22:56浏览次数:22  
标签:数仓 java 离线 实时 路线 spark 数据

  1. java基础+语法
  2. jdbc
  3. maven
  4. mybatis/spring,mvc,boot--了解
  5. java项目 java复习

  1. linux
  2. hadoop/zookeeper/ha
  3. hive/flume/kafka
  4. scala/spark/离线数仓
  5. redis/es/hbase/spark实时项目
  6. flink/docker/实时数仓
  7. cdh/

标签:数仓,java,离线,实时,路线,spark,数据
From: https://www.cnblogs.com/dataxing/p/17487033.html

相关文章

  • Redis中的数据结构
    字符串SDS(simpledynamicstring):redis自己构建的一种简单动态字符串,而没有直接使用C语言的字符串(在redis中C语言的字符串仅用在无需对字符串修改的地方,例如日志打印),SDS以空字符'\0'结尾,且不占用len里,会额外占用1字节空间,即使用长度为N+1的空间来表示长度为N的字符串数......
  • 块状数据结构选做
    收集了最近做的一些块状数据结构题,涉及分块,莫队,块状链表等,难度大多不是很高,老少皆宜。QAQP4168[Violet]蒲公英题目链接大意:静态在线区间众数先离散化,预处理出\(cnt_{i,j}\)和\(mode_{i,j}\),分别表示前\(i\)块中数值\(j\)出现的次数和第\(i\)到第\(j\)块的众数。......
  • 2023.6.16 10.数据库备份恢复
    10.数据库备份恢复1.MySQL逻辑备份与恢复1.1数据库完整备份与恢复1.2数据库增量备份与恢复2.MySQL物理备份与恢复2.1数据库完整备份与恢复2.2数据库增量备份与恢复2.3数据库差异备份与恢复3.简单命令进⾏物理备份4.⽣产备份思路与实战 通常数据库备份database数据......
  • 2023.6.16 09.数据库⽇志管理
    09.数据库⽇志管理1.错误⽇志2.查询⽇志3.慢查询⽇志4.⼆进制⽇志0.⽇志作⽤ 1.排查故障2.性能优化3.安全审计4.统计分析5.数据备份与恢复 1.mysql⽇志管理  2.错误⽇志MySQL的错误⽇志errorlog记录mysqld服务进程启动/关闭或运⾏过遇到......
  • Python数据类型-字典与集合
    """题目1:下面关于字典的定义正确的是:CA.d={1,}B.d={1,2:3,4}C.d={'name':'xinlan','age':18}D.d={[1,2]:[3,4],'age':18}"""#题目2:请创建一个字典用来表示你自己的个人信息。有哪些key由你自己来决定。my_info={'name':&......
  • 数据集选择和清理概述
    数据集是机器学习和深度学习中至关重要的组成部分。数据集的选择和清理对于模型的性能和结果至关重要。本文将介绍数据集选择和清理的重要性,并提供一些关键步骤和注意事项,帮助您进行有效的数据集处理。数据集选择选择适合任务的数据集是构建有效模型的关键步骤。以下是一些数据集......
  • 批量下载SRR数据
    1.安装prefetch,要安装最新版本2.用conda安装Ascp3.确保都安装好之后执行命令prefetch-Ooutput--option-fileSRR_Acc_List.txt  ......
  • 大数据学习--虚拟机Linux系统安装使用
    大数据学习推荐使用CentOS系统,于是在虚拟机上安装这个程序。   接下来复制三个,  ......
  • 数据库理论题
    (计算题,20分)设有两个关系R和S,求①\(R\cupS\);②\(R-S\);③\(R\timesS\);④\(\prod_{C,A}(R)\);⑤\(\sigma_{B>'4'}(R)\)关系R关系S(简答题,10分)设有学生表S(SNO,SN)(SNO为学号,SN为姓名)和学生选课表SC(SNO,CNO,CN,G)(CNO为课程号,CN为课程名,G为成绩),试用SQL......
  • 程序员路线规划
    第一个五年:70%投入编程技术和架构思想,20%投入产品思想和运营方法,10%投入领袖哲学和管理第二个五年:70%投入产品思想和运营方法,20%投入编程技术和架构思想,10%投入领袖哲学和管理第三个五年:70%投入领袖哲学和管理,20%投入产品思想和运营方法,10%投入编程技术和架构思想......