- 2024-11-12【大数据测试 Hive数据库--保姆级教程】
大数据测试Hive数据库详细教程一、环境准备二、Hive数据库功能测试1.创建表2.插入数据3.查询数据4.使用条件过滤查询5.删除数据三、Hive数据库性能测试1.查询响应时间2.大数据量查询测试3.分区表性能测试4.并发查询性能四、Hive数据完整性测试1.数据加
- 2024-10-18编写自定义dbt通用数据测试
dbt默认提供了NotNull,Unique,Relationships,和AcceptedValues四个通用数据测试，这些测试被称为”schema测试“，底层这些通用测试就是类似宏的测试块。本文首先介绍内置通用测试，然后介绍如何自定义通用测试，最后还实践如何覆盖内置通用测试的功能。内置数据测试
- 2024-07-14Doping：使用精心设计的合成数据测试和评估异常检测器的技术
在这篇文章中，我们将探讨测试和评估异常检测器的问题（这是一个众所周知的难题），并提出了一种解决方案被称为“Doping”方法。使用Doping方法，真实数据行会被（通常是）随机修改，修改的方式是确保它们在某些方面可能成为异常值，这时应该被异常检测器检测到。然后通过评估检测器检测Doping记录
- 2024-06-18Navicat和SQLynx功能比较三（数据导出：使用MySQL近千万数据测试）
数据导出的功能在数据库管理工具中是最普遍的功能之一。所以数据导出的功能稳定性和性能也是数据库管理工具是否能很好地满足应用需求的一个考虑因素。目录1.整体比较2.示例2.1 前置环境2.2Navicat导出2.3 SQLynx导出2.4 性能对比结果（690万行数据）3.结论Nav
- 2024-06-03大数据测试/ETL开发，如何造测试数据
相信很多的小伙伴，有些是大数据测试岗位，有些是ETL开发，都面临着如何要造数据的情况。1，造数背景【大数据测试岗位】，比较出名的就是宁波银行，如果你在宁波银行做大数据开发，对着需求开发完代码之后，可能需要把代码提交给测试人员，那么测试人员会根据这个业务需求，他们会自己造一批数据
- 2024-04-28大数据小白的测试成长之路
引言22年校招入职京东后，我一直在数据中台测试部从事测试开发的工作。毕业后，写的最多的文档是测试计划和测试报告，鲜有机会就自己的成长码字进行回顾和总结。借“up技术人”栏目，也终于是在工作之余回头望，对自己这近两年时光进行一个小总结。本文是一个大数据测试小白初入职场后
- 2024-03-17mysql与redis数据测试
题目要求1.新建一张user表，在表内插入10000条数据。2.①通过jdbc查询这10000条数据，记录查询时间。②通过redis查询这10000条数据，记录查询时间。3.再次查询这一万条数据，要求根据年龄进行排序，mysql和redis各实现一次。4.上面排序后的前5人可进行抽奖，每人有一次抽奖机会，抽
- 2024-01-29大数据测试简介
【前言】大数据是现在很常听到的一项技术了，哪里都有。比如现在我们生活中必不可少的一个东西——健康宝。 北京健康宝的数据就是来自北京市大数据中心的。那么到底什么是大数据，大数据测试又要怎么进行呢？接下来了解一下吧！一、大数据简介大数据（BigData）是指无法在一定时间范
- 2024-01-29大数据测试怎么测？
大数据测试是针对大规模数据处理和分析的测试过程，旨在验证数据处理系统的正确性、性能和可靠性。以下是一些常见的大数据测试方法和技术：1.数据完整性测试：验证数据是否按照预期的规则和逻辑进行处理，包括数据的清洗、去重、合并、转换等操作。检查数据的完整性，确保数据没有遗漏
- 2024-01-29如何做大数据测试
测试流程及测试方法没有太大的区别，重点说一下大数据测试相比传统测试的区别： 1、数据规模：大数据测试所涉及的数据规模通常是海量级别的，而普通测试所涉及的数据规模较小。2、测试工具：大数据测试需要使用专门的测试工具和框架，如HadoopUnit、ApacheBigTop、JMeter、LoadRunner等，
- 2023-12-25QA 团队基于 DataLeap 开放平台能力的数据测试实践
背景&痛点随着生态体系扩展和业务发展，数据在业务中承担的决策场景越来越多样化，一部分数据已应用在资损、高客诉等高风险场景，因此对数据质量的要求，尤其是高风险场景的质量要求非常之高。但在保障过程中往往面临以下痛点：无标准化流程，管控能力较弱研发QA人力比高达20:1，因此QA采
- 2023-12-25QA团队基于DataLeap开放平台能力的数据测试实践
背景&痛点随着生态体系扩展和业务发展，数据在业务中承担的决策场景越来越多样化，一部分数据已应用在资损、高客诉等高风险场景，因此对数据质量的要求，尤其是高风险场景的质量要求非常之高。但在保障过程中往往面临以下痛点：无标准化流程，管控能力较弱研发QA人力比高达20:1，
- 2023-07-16三通道激光恒流源 数据测试
前端整流部分空载不带电容输出：都使用耐压35v电容测试，10000uf为绿色高频电容类型（优信）：不带负载：10000uf电容滤波效果47000uf电容滤波：（和没上220v供电一致，，）带1r电阻负载：47000uf&10000uf电容对比
- 2023-05-16大数据测试学习笔记之监控工具Dr.Elephant
这是2018年度业余主要学习和研究的方向的笔记：大数据测试整个学习笔记以短文为主，记录一些关键信息和思考预计每周一篇短文进行记录，可能是理论、概念、技术、工具等等学习资料以IBM开发者社区、华为开发者社区以及搜索到的相关资料为主我的公众号：开源优测大数据测试学习笔记之监控
- 2023-05-05数据测试
数据测试设计正常数据测试应包括数据完整性、数据一致性、数据准确性、数据多样性测试 1数据的完整性数据完整性是指数据记录和信息完整，不存在缺失情况。数据缺失主要包括记录缺失和记录中某个字段信息缺失，两者都会导致统计结果不准确。需要关注两点：数据不多和数据不少。
- 2023-04-22每日总结 4.22
今天进行了数据测试。进行了我这边的主要流程： <!DOCTYPEHTML><html><head><title>登录界面</title><metacharset="utf-8"><metahttp-equiv="pragma"content="no-cache"><metahttp-eq
- 2023-03-07数据测试实践：从一个bug开始的大数据引擎兼容性探索
作者：京东零售李晓洁我们常常忘记，天才也取决于其所能掌握的数据，即使阿基米德也无法设计出爱迪生的发明。——ErnestDimnet在大数据时代，精准而有效的数据对于每个致力
- 2023-03-06如何做大数据测试
测试流程及测试方法没有太大的区别，重点说一下大数据测试相比传统测试的区别：1、数据规模：大数据测试所涉及的数据规模通常是海量级别的，而普通测试所涉及的数据规模较小。2、
- 2023-03-06大数据基础-测试过程
一、大数据： 大数据是一个大的数据集合，通过传统的计算技术无法处理。这些数据集的测试需要用各种工具、技术、框架进行处理。大数据涉及数据创建，存储、检索、分析，而且
- 2023-03-03RK3568核心板以太网大数据测试报告-万象奥科
1.测试对象HD-RK3568-IOT底板基于HD-RK3568-CORE工业级核心板设计（双网口、双CAN、5路串口），接口丰富，适用于工业现场应用需求，亦方便用户评估核心板及CPU的性能。适用于工
- 2022-12-19什么是大数据测试
大数据行业的诉求高质量，数据处理的正确性；高效率，数据处理的及时性；高可用，数据是否具有可恢复性；高主动性，分析产物是否满足业务需求。 大数据测试要了解的面？测试思维
- 2022-12-09redis哨兵集群搭建与数据测试！！
博客园首页新随笔联系管理订阅随笔-583 文章-1 评论-1081 阅读- 1108万 Redis哨兵模式（sentinel）学习总结及部署记录（主从复制、读写分离、主从切换）
- 2022-11-08数据测试总结
问题：mysql 语法转hql语法过程遇到的问题：int类型和字符串类型比较大小，比如表中是int类型 10< '1' 或者 '10'>1 ,常见与where 后写法类
- 2022-11-02基于Echarts实现可视化数据大屏车联网平台数据可视化
前言
- 2022-10-18Hive大数据测试
Result文件数据说明：Ip：106.39.41.166,（城市）Date：10/Nov/2016:00:01:02+0800,（日期）Day：10,（天数）Traffic:54,（流量）Type:video,（类型：视频video或文章article）Id:8701（视频或