Dag
  • 2025-01-10Ray 源码分析系列(15)—Ray Dag
    前言官方文档关于dag几乎没有多少资料,只有使用示例。另外,官博上提到了dag.experimental_compile能够提升20%训练吞吐,并且以更低的开发成本实现不同并行策略,所以好奇地分析一下dag和compiledgraph有什么可以学习的地方吧。Dag关键特性LazyComputationGraphs:懒计算
  • 2025-01-01论文阅读日记
    阅读一点论文,主要是\(k-clique\)计数相关的。Listingk-cliquesinSparseReal-WorldGraphs这篇比较基础,涉及到了很基本的团计数思想。基本就是说,将这个图的边定向形成一个\(DAG\)后,可以按照树的隐式结构,访问所有可能包含团的子集。具体的说,每次递归,传的参就是一个顶点的
  • 2024-12-30[笔记]Airflow入门
    前言Airflow入门教程正文简介任务管理、调度、监控工作流平台。基于DAG(有向无环图)的任务管理系统。基本架构组件scheduler:以有向无环图(dag)的形式创建任务工作流,根据用户的配置将任务定时/定期进行调度worker:任务的执行单元,worker会从任务队列当中拉取任务并运行
  • 2024-12-26UOJ37 【清华集训2014】主旋律(SCC/DAG 状态压缩)
    题意求一个有向图\(G\)删掉一些边后原图仍强连通的方案数。模数\(10^9+7\)。\(n\le15,m\len(n-1)\)分析SCC状压有一个非常经典的“耳分解”:以SCC内两个点(可以相同)为起点、终点,找一条除两端外不在SCC内的链,然后加进去。但是这里要求方案数,耳分解失效,考虑别的方法。
  • 2024-12-24【ALGC】探秘 ALGC—— 卓越数据处理能力的科技瑰宝
    我的个人主页我的领域:人工智能篇,希望能帮助到大家!!!
  • 2024-12-23Automating-Webscraping-with-Airflow
    Automating-Webscraping-with-Airflowhttps://github.com/fanqingsong/Automating-Webscraping-with-Airflow WebScrapingwithAirflowThisprojectprovidesstep-by-stepinstructionsonsettingupandrunningawebscrapingprojectusingApacheAirflow.T
  • 2024-12-23拓扑序相关
    拓扑排序概念:DAG:有向无环图。拓扑排序可以对一张DAG上的顶点排序。流程:最初将入度为\(0\)的点加入队列。每次从队列中取出一个点,删去这个点的所有出边,将新产生的入度为\(0\)的点加入队列。这样按入队的先后顺序就把顶点排好序了。\(O(n+m)\)。拓扑排序在后的点只依赖
  • 2024-12-05Dolphinscheduler DAG核心源码剖析
    背景描述注意:在Dolphinscheduler中,离线任务是有完整的声明周期的,比如说停止、暂停、暂停恢复、重跑等等,都是以DAG(有向无环图的形式进行任务组织)T+1离线任务的。DolphinschedulerDAG实现org.apache.dolphinscheduler.common.graph.DAGDAG三个重要的数据结构://顶点
  • 2024-11-25最短路图
    最短路图type1:给定一张有向图,起点s,终点t求s到t的所有最短路组成的DAG(没有负环的最短路图一定是DAG)首先需要建一张正向图,一张反向图dis1[]表示正向图上点s到所有点的最短距离,dis2[]表示反向图上点t到所有点的最短距离考虑正向图上的一条边(edge){u,v,w}如何判断这条边
  • 2024-11-24有向无环图(DAG,Directed Acyclic Graph)算法
    大家好!今天我想给大家讲一个非常有趣的算法,叫做有向无环图(DAG,DirectedAcyclicGraph)算法。这个算法就像是在玩一个游戏,帮我们找到完成一系列任务的最佳顺序!什么是有向无环图?假设你喜欢做一些手工DIY,比如制作一个纸飞机。但你发现,做纸飞机需要先完成一些步骤,比如剪纸、折纸、
  • 2024-12-13基于微信小程序+Springboot+Vue社区车位租赁系统设计与实现(源码+lw+讲解部署等)
  • 2024-12-07TOPSIS法
    TOPSIS法:多属性决策的有效工具在多属性决策分析领域,TOPSIS法(TechniqueforOrderPreferencebySimilaritytoIdealSolution)是一种广泛应用且极具价值的方法。它为解决复杂的决策问题提供了一种系统、科学的途径,尤其在面临多个评价对象和多个评价指标时,能够帮助决策者
  • 2024-10-09(长期更新)DP 学习笔记
    DP的本质一般DP的本质状态:点。(带了值)转移:边。DP:在DAG上推。(得到/更新点的值)特殊(类似DP)图不是DAG。有两种思路:解方程简单的:直接解(比如只有一个环)。复杂的:高斯消元。高斯消元。高斯-约旦消元。图论类似最短路:Dijkstra算法/类似Dijkstra的算
  • 2024-09-27文心一言 VS 讯飞星火 VS chatgpt (356)-- 算法导论24.2 2题
    二、假定将DAG-SHORTEST-PATHS的第3行改为:3forthefirst|V|-1vertices,takenintopologicallysortedorder。证明:该算法的正确性保持不变。如果要写代码,请用go语言。文心一言:首先,我们来证明将DAG-SHORTEST-PATHS算法的第3行从遍历所有顶点改为仅遍历拓扑排序后的前|V|-
  • 2024-09-23DAG(有向无环图)通俗介绍
    什么是DAG(有向无环图)?DAG全称为“DirectedAcyclicGraph”,中文意思是“有向无环图”。顾名思义,这是一种特殊的图结构,其中包含了“有向”的边和“无环”的特性。什么是图?在计算机科学和数学中,“图”是一种数据结构,用来表示事物之间的关系。图由两部分组成:节点(Vertices):图中的一个个独
  • 2024-09-22Spring Boot利用dag加速Spring beans初始化
    1.什么是Dag?有向无环图(DirectedAcyclicGraph),简称DAG,是一种有向图,其中没有从节点出发经过若干条边后再回到该节点的路径。换句话说,DAG中不存在环路。这种数据结构常用于表示并解决具有依赖关系的问题。DAG的特性首先,DAG中的节点可以有入度和出度。节点的入度是指指向该
  • 2024-09-10「NOI2021 D1T3 庆典」题解
    uoj675加强:\(\sumk\le6\times10^5\)暴力\(u\)在\(s\Rightarrowt\)路径上\(\iff\)正图上\(s\Rightarrowu\)且反图上\(u\Rightarrowt\)时间复杂度\(O((n+m)q)\)正解只关心可达性,不妨SCC缩点成DAG。注意到一个奇怪的条件:对于三座城市\(x,y,z\),若\(x\Right
  • 2024-09-06spark为什么比mapreduce快?
    spark为什么比mapreduce快?首先澄清几个误区:1:两者都是基于内存计算的,任何计算框架都肯定是基于内存的,所以网上说的spark是基于内存计算所以快,显然是错误的2;DAG计算模型减少的是磁盘I/O次数(相比于mapreduce计算模型而言),而不是shuffle次数,因为shuffle是根据数据重组的次数而定,所以shu
  • 2024-09-03Exchange 2016部署实施案例篇-01.架构设计篇(下)
    相信看过上篇Blog《Exchange2016部署实施案例篇-01.架构设计篇(上)》的老铁们可能知道,小弟在上篇Blog中编写了一个需求,不知是否有老铁们已经设计出相对于的架构了,今天我就给大家介绍下我设计的架构。  需求分析我在上篇已经做过了,欢迎各位老铁查阅上一篇博客《Exchange2016
  • 2024-09-01待补 重要思考:求给无向图定向使得其变为DAG的方案数
    今天比赛考到了,不会,丢了100分。rk2,380->rk15,280别问为什么T4没过,因为不会T2。方法一\(O(3^n)\)令\(f_S\)为子集\(S\)内定向得到DAG的方案。\(f_S=\sum\limits_{\emptyset\not=T\subsetS,\text{T为独立集}}(-1)^{|T|-1}f_{S-T}\)考虑DAG的分解
  • 2024-08-27D2. Turtle and a MEX Problem (Hard Version)
    D2.TurtleandaMEXProblem(HardVersion)Thetwoversionsaredifferentproblems.Inthisversionoftheproblem,youcan'tchoosethesameintegertwiceormore.Youcanmakehacksonlyifbothversionsaresolved.Oneday,Turtlewasplayingwit