• 2024-07-02spark运行的基本流程
    前言:由于最近对spark的运行流程非常感兴趣,所以阅读了《Spark大数据处理:技术、应用与性能优化》一书。通过这本书的学习,了解了spark的核心技术、实际应用场景以及性能优化的方法。本文旨在记录和分享下spark运行的基本流程。一、spark的基础组件及其概念1.ClusterManager在S
  • 2024-07-01目标检测算法
            目标检测算法是计算机视觉领域的核心问题之一,其任务是在图像中识别并定位感兴趣的目标物体。目标检测算法的发展经历了多个阶段,从传统的基于手工特征的方法到现代的基于深度学习的方法。以下是一些关于目标检测算法的要点概述:目标检测的四大任务:分类(确定物体
  • 2024-06-30目标检测算法
    目标检测算法是计算机视觉领域中的一个重要分支,其核心任务是识别和定位图像或视频中的目标对象。以下是对目标检测算法的详细说明:一、定义与目标定义:目标检测算法旨在识别图像或视频中的目标对象,并确定其在图像或视频中的位置。目标:解决“目标是什么”和“目标在哪里”两个问
  • 2024-06-30大数据面试题之Spark(3)
    目录Spark的哪些算子会有shuffle过程?Spark有了RDD,为什么还要有Dataform和DataSet?Spark的RDD、DataFrame、DataSet、DataStream区别?Spark的Job、Stage、Task分别介绍下,如何划分?Application、job、Stage、task之间的关系Stage内部逻辑为什么要根据宽依赖划分Stage?
  • 2024-06-21#26. 2024.6.21
    929.qoj1961Postman930.loj3085「GXOI/GZOI2019」特技飞行931.loj3086「GXOI/GZOI2019」逼死强迫症932.loj3087「GXOI/GZOI2019」旅行者933.loj3088「GXOI/GZOI2019」旧词934.The3rdUniversalCup.Stage0:TrialContestL又名:hos_lyric代码
  • 2024-06-16Hbuilder创建项目,制作html网页第一天
    1、引入js文件<scriptsrc="js/pixi.min.js"></script>2、创建应用varapp=newPIXI.Application(500,600);//宽500,高6003、将应用放进页面document.body.appendChild(app.view);4、创建背景元素varbg=newPIXI.Sprite.fromImage("img/bg.jpg");5、将背景元素放进界
  • 2024-06-15Apollo 决策规划代码详细解析 :Stage逻辑详解
    Apollo 决策规划代码详细解析 :Stage逻辑详解附赠自动驾驶最全的学习资料和量产经验:链接在本文你将学到下面这些内容:Stage中如何对task进行注册;Stage中如何调用task执行规划任务;LaneFollowStage 包含哪些task;LaneFollowStage 的详细运行逻辑;PlanOnReferenc
  • 2024-06-14鸿蒙开发:【Stage模型应用配置文件】
    Stage模型应用配置文件应用配置文件中包含应用配置信息、应用组件信息、权限信息、开发者自定义信息等,这些信息在编译构建、分发和运行解决分别提供给编译工具、应用市场和操作系统使用。在基于Stage模型开发的应用项目代码下,都存在app.json5(一个)及module.json5(一个或多个
  • 2024-06-12Jenkins技术概述与开发实战
    本文详细讲解了Jenkins的安装与配置、构建作业、流水线、构建、测试和部署的具体方法,涵盖关键概念、详细步骤及代码示例,旨在帮助专业从业者实现高效的CI/CD自动化流程。关注作者,复旦博士,分享云服务领域全维度开发技术。拥有10+年互联网服务架构、AI产品研发经验、团队管理经验
  • 2024-06-11presto 查询调度流程 (Coordinator Scheduler)
    basedontag:0.287presto的scheduler是SqlQueryScheduler这个类控制的,这个class主要是负责调度物理执行计划。调度具体的每个SqlStageExecution.这个Stage可以当成Fragment的一个概念他会先把所有的stage创建一个schedule计划。一共有两种schedule计划,一个是all-at-on
  • 2024-06-09定时器更新界面,线程报错
    项目场景:在javafx框架下使用线程更新UI的时候,出现无法正常更新UI。问题代码如下:packageclock;importjava.util.Calendar;importjava.util.GregorianCalendar;importjava.util.Timer;importjava.util.TimerTask;importjavafx.application.Application;importj
  • 2024-06-08手把手制作Vue3+Flask全栈项目 全栈开发之路实战篇 问卷网站(五)数据处理
    全栈开发一条龙——前端篇第一篇:框架确定、ide设置与项目创建第二篇:介绍项目文件意义、组件结构与导入以及setup的引入。第三篇:setup语法,设置响应式数据。第四篇:数据绑定、计算属性和watch监视第五篇:组件间通信及知识补充第六篇:生命周期和自定义hooks第七篇:路由
  • 2024-06-08Pyramid Vision Transformer, PVT(ICCV 2021)原理与代码解读
    paper:PyramidVisionTransformer:AVersatileBackboneforDensePredictionwithoutConvolutionsofficialimplementation:GitHub-whai362/PVT:OfficialimplementationofPVTseries存在的问题现有的VisionTransformer(ViT)主要设计用于图像分类任务,难以直接用
  • 2024-06-03DataX HiveReader
    DataXHiveReader来源:github-datax-hivereader1快速介绍Hivereader插件:从Hive表读取数据2实现原理实现方式是:根据配置的QuerySql,通过将查询结果保存到一张新的临时hive表中这种方式;然后获取临时表的hdfs文件地址,然后读取文件到缓冲区,最后删除临时的表。3功能说明Hiv
  • 2024-05-31AWC6.3.8 开发环境搭建(虚拟机中)
    前提安装完毕awc,并且能够正常访问在配置nodejs环境变量添加NODE_PATH下载vscode并安装(也可以用其他工具)拷贝stageC:\Siemens\Teamcenter14\aws2\stage=>C:\dev\stage修改initenv.cmd,增加两行运行在开发工具中cdc:/dev/stage#执行initenv.cmd.\init
  • 2024-05-30datax 从 hive 同步数据配置
    DataXHiveReader1快速介绍Hivereader插件:从Hive表读取数据2实现原理实现方式是:根据配置的QuerySql,通过将查询结果保存到一张新的临时hive表中这种方式;然后获取临时表的hdfs文件地址,然后读取文件到缓冲区,最后删除临时的表。3功能说明Hivereader插件:从Hive表读取数据
  • 2024-05-29IDEA 创建 JavaFX 工程
    JavaFX下载安装1.检查本机JDK版本CMD命令行窗口输入java--version查询JDK版本,如下:C:\Users\Administrator>java--versionjava17.0.92023-10-17LTSJava(TM)SERuntimeEnvironment(build17.0.9+11-LTS-201)JavaHotSpot(TM)64-BitServerVM(build17.0.9+
  • 2024-05-25鸿蒙HarmonyOS实战-Stage模型(进程模型)
  • 2024-05-24鸿蒙HarmonyOS实战-Stage模型(信息传递载体Want)
  • 2024-05-23鸿蒙HarmonyOS实战-Stage模型(应用上下文Context)
  • 2024-05-22鸿蒙HarmonyOS实战-Stage模型(AbilityStage组件容器)
  • 2024-05-22PVT:特征金字塔在Vision Transormer的首次应用,又快又好 | ICCV 2021
    论文设计了用于密集预测任务的纯Transformer主干网络PVT,包含渐进收缩的特征金字塔结构和spatial-reductionattention层,能够在有限的计算资源和内存资源下获得高分辨率和多尺度的特征图。从物体检测和语义分割的实验可以看到,PVT在相同的参数数量下比CNN主干网络更强大来源:晓飞的
  • 2024-05-21鸿蒙HarmonyOS实战-Stage模型(卡片数据交互)
  • 2024-05-20鸿蒙HarmonyOS实战-Stage模型(开发卡片事件)
  • 2024-05-18鸿蒙HarmonyOS实战-Stage模型(开发卡片页面)