首页 > 其他分享 >京东平台内容合规的技术与挑战

京东平台内容合规的技术与挑战

时间:2024-08-28 17:41:16浏览次数:10  
标签:商家 挑战 业务 商品 内容 京东 价格 合规

1、内容合规域介绍

合规域在电商平台中扮演着重要的角色,它相当于电商体系中的“免疫系统”,通过识别恶意的商品、商家以及UGC内容,确保电商生态的健康、有序和可持续发展。因此我们部门致力于打造业内领先的内容理解与审核平台,在具体工作中,通过识别并治理商家在产品、价格、服务维度的违规行为以及短视频、直播、评价、问答等内容的违规信息,降低审核成本、提升运营效率,并最终保障用户体验。

 

1.1、从用户视角哪些问题涉及内容合规域

•商品只卖1分钱,以为捡了便宜,购买时发现邮费要收20元! •直男给女朋友买生日礼物的口红,买成了山寨品 •商品主图各种满减宣传,实际购买和主图价格宣传不一样 •买了商品,先收到了礼品包,很久才收到想要的货 •京东搜索结果页/推荐结果页整体杂乱,图片没有其他平台好看 •……

这些关于商品价格、服务、泛假货/质量的问题都是我们持续努力在解决的问题。

 

1.2、从业务视角我们具体负责哪些工作

合规团队的主要工作从技术角度是做平台内容理解与审核,从业务角度总结下来主要做以下三方面的事情:

•商家、商品经营的审核,从产品、价格、服务维度识别恶意商品信息与商家行为。 •商品信息的审核,包括商品的图片、标题、类目等信息的准确性与一致性校验。 •短视频、直播的审核,从安全、合规、质量维度检测内容风险。

 

2、内容合规域面临哪些挑战以及我们的解法

内容审核是一个对抗性很高的风控场景,一方面,我们要不断提升识别能力,检测商家的恶意对抗行为,结合运营机制惩治违规商家,保障用户体验,另一方面,我们需要尽量不打扰正常商家的经营,提供前置检测与修改建议的能力,不影响商家运营效率。 因此,既要建立一套发现、识别、处置的违规治理机制,又要从商家、用户视角建立观测指标体系,尽量量化对用户体验、商家经营的影响,还要从平台视角出发降低审核成本,所以具体工作中要平衡用户体验、商家效率、平台成本,是一个复杂而又有趣的工作。针对每一个具体场景都需要深刻理解业务并设定好业务核心指标,与业务、运营、产品充分沟通并搭建业务运营流程,最后紧追行业趋势与竟对动向结合业务做出技术深度。

2.1 业务核心指标

在明确我们要负责的业务场景后,需要设定可量化的核心指标,在设定指标时,需要避免依赖单一指标,因为这可能导致结果的片面性进而引发决策偏差,在合规域我们需要考虑内容消费者(C端用户)、内容生产者(商家/达人)、内容平台(京东),并考虑对立统一的综合指标:

•用户客诉/抱怨率 •商家申诉率 •平台审核成本/监管罚金

2.2 业务运营流程

明确核心业务指标后,需要从业务实现的角度设计运营流程,实现风险感知、识别、处置的闭环,下图是我们正在逐步建立和完善的流程:

 


 

明确业务流程后需要基于点状的业务需求进行横向的标签体系设计以及服务接口设计并建立指标监控体系防范技术风险:

 


 

2.3 技术攻坚案例

大家都知道产品、价格、服务是决定用户体验的三要素,基于经营理念我们首先从合规视角盘点了影响这三要素的核心问题,包含 假货治理和内容审核、价格治理、服务治理。然后,基于用户、商家、平台视角制定业务指标体系、建立产品能力以及运营流程。最近部门承接了价格治理的能力建设,面临很多挑战,也取得了一定成果,下面以价格治理的一个子项-价格虚高的具体案例具体说明下合规域遇到的挑战。

价格虚高要解决京东域内商家发布商品价格标价虚高的问题,依赖于商家的健康经营行为的规范,因此需要规模化的发现价格虚高问题并对商家进行触达,并对多次违规的商家进行惩治。

识别上,通过站内比价、站外比价可以获取商品的价格水位进而判断是否价格虚高,具体依赖可以拆解为站外数据获取以及可比价商品判别,通过对站内外可比价商品数据进行比对识别价格虚高商品,但在实际工作中均有很大挑战,在产品、运营、研发角度均有一些解法,以下侧重算法角度的方案设计。

我们基于流量表现数据我们将商品分为价格可信商品、价格不可信商品,对于价格不可信商品,有站内可比价商品的基于价格比对进行判断,否则基于价格预测模型进行兜底,下面是关键能力的一些粗略介绍:

2.3.1 构建可比价模型

构建“商品可比价”算法训练任务,同品/相似品识别结果作为输入特征,通过已有的人工标注结果分析,训练算法模型,增加判别因素,提升识别进准度。

 


 

 

2.3.2 价格预测大模型

•基于站内商品的历史成交数据,明确商品的合理价格区间,构建价格锚点数据集,下图是某同品组价格与成交的分布图。然后,基于已有商品价格构建“价格预测大模型” ,输出商品预测价格以及预测置信度。

 


 

2.3.3 商家触达与治理

模型化方案的优势是可以快速覆盖类目,并有效覆盖价格虚高的违规case,商家治理需要更高的精度,可以作为识别漏斗,结合业务规则进行圈选和治理。 商家经营建议不需要太高精度,我们增加了商家触达预警的方式引导商家合理设置价格。

 

至此,我们完成了违规识别、商家触达的流程,再基于商家的反馈信息不断做优化和迭代,当然技术细节上有很大挑战,我们也做了不少优化,也希望有相关经验和具体想法的同学和我们交流沟通。

3、内容合规域个人成长的建议

随着技术的发展,过往很多公司的技术壁垒,以及个人工作中沉淀的调参、特征工程心得,都成为了历史,对个人来讲,我们需要适应和学习不断变化的东西拥有自己趁手的“武器库”,同时追求和沉淀过程中不变的思维框架,不断加强业务洞察能力以及数据驱动解决问题的行为方式。

对于合规域来讲,我们需要关注AIGC的前沿技术,特别是在内容理解与审核方向的应用,确保自身武器库保持先进性。同时,更需要理解业务,从不同的业务场景中总结业务逻辑、沉淀业务知识并结合技术理解形成自己解决问题的框架结构。

对于个人来讲,我们需要保持对用户需求和市场变化的敏感度,理解业务需求背后的用户痛点并思考自己是否可以多想一些、多做一点,通过不断的业务理解与持续的技术应用创新,实现业务价值与个人的成长。

作为合规域的一员,很庆幸处在一个与业务很近的前沿领域,技术上既需要结合大模型、多模态等使用NLP、CV技术从信息层面做内容理解,也需要洞悉业务挖掘商家行为序列模式与关联做异常检测,就像毛主席说的:“与人斗,其乐无穷”,我们在和恶意商家的博弈中不断积累自身的业务理解与技术深度,实现审核成本的降低、效率的提升,以及用户客诉的降低。

标签:商家,挑战,业务,商品,内容,京东,价格,合规
From: https://www.cnblogs.com/Jcloud/p/18385179

相关文章

  • 用 Higress AI 网关降低 AI 调用成本 - 阿里云天池云原生编程挑战赛参赛攻略
    作者介绍:杨贝宁,爱丁堡大学博士在读,研究方向为向量数据库《Higress AI网关挑战赛》正在火热进行中,Higress社区邀请了目前位于排行榜top5的选手杨贝宁同学分享他的心得。下面是他整理的参赛攻略:背景我们要在Higress网关中编写WebAssembly(wasm)插件,使得在http请求的各个......
  • 大模型的“弱转强”越狱攻击:挑战与防御
     人工智能咨询培训老师叶梓转载标明出处大模型(LLMs)在各种应用中展现出了惊人的能力,但同时也引发了安全和可信度方面的担忧。如果没有适当的防护措施,LLMs可能会传播虚假信息或助长犯罪活动。为了减少这些风险,模型创建者实施了安全措施并通过强化学习等手段来优化模型,以确保......
  • DDR5 Channel SI设计的挑战
    DDR5延续了前几代数据速率不断提高的趋势。数据传输速度在3200至6400MT/s之间。同时将继续像前几代一样使用单端数据线的方式。为了帮助减少由高数据速率引起的信号完整性问题,DRAM端也会考虑加入判决反馈均衡(DFE)来减轻反射、ISI对信号传输的影响。DDR5内存设计挑战尽管DDR5......
  • 京东中文点选验证码识别方案
     一、验证码介绍这款验证码防御能力还是很强,主要是中文字体特殊,颜色和背景融合度很高,以至于人都很难看清楚。有些文字甚至进行了模糊处理,人都很难识别是上面字。所以给机器识别造成了很大困扰。二、识别代码1、识别参数介绍京东中文点选验证码识别,我们需要两种图片才能完......
  • 冰封挑战,见证DYNAMIXEL XW系列的防水传奇!
    原文链接:https://youtu.be/lUxUkDmkf0U ��IntroducingDYNAMIXEL XWseries,thewaterproofversions!DYNAMIXEL XWseriesareROBOTIS’firstlineofIPLevelmodels,featuringacertifiedIP68(1m,24hr)ratingandaredesignedforuseinwetenvironments,un......
  • 从主流技术架构视角剖析 Java Web 项目的性能测试策略与挑战
    随着互联网应用的不断发展,JavaWeb项目在企业级应用中占据了重要地位。然而,如何在复杂的技术架构下,确保项目的高性能和稳定性,成为了每个开发与测试团队无法回避的难题。今天,我们将从主流技术架构的视角,深度剖析JavaWeb项目的性能测试策略与面临的挑战,为你揭开性能优化的神......
  • 京东内推码
    内推码:C49L8秋招到啦!使用内推码可私信帮忙查看投递进度哦~每个岗位都可以用哦!感谢大家多多评论点赞转发~京东2025校园招聘“燃”力全开专属导师助推身份转变专属培养赋能快速发展十大职位方向只为等待最“燃”的你网申入口:https://campus.jd.com/api/wx/position/inde......
  • 京东面试:600Wqps高并发ID如何设计?时钟回拨 如何解决?
    文章很长,且持续更新,建议收藏起来,慢慢读!疯狂创客圈总目录博客园版为您奉上珍贵的学习资源:免费赠送:《尼恩Java面试宝典》持续更新+史上最全+面试必备2000页+面试必备+大厂必备+涨薪必备免费赠送:《尼恩技术圣经+高并发系列PDF》,帮你实现技术自由,完成职业升级,薪......
  • 梦熊第二届省选挑战赛 T2 炫酷原神 genshin 唐氏记录
    需要复制一段文字,具体来说给定一个字符串si,然后你有一个剪贴板,初始为空,和一个初始为空的字符串t,然后对于所有1到n的i,小水母会依次进行如下操作:"Ctrl+C"操作,将剪贴板的内容修改为si。"Ctrl+V"操作,将剪贴板的内容添加到t末尾。每次"Ctrl+C"操作和"Ctrl+......
  • 数据安全合规评估在线旅游平台的实践【原创】
    摘要:随着旅游服务行业数字化转型,数据逐渐成为核心生产要素。数据安全保障已成为在线旅游企业不可忽视的工作。本文旨在分析了近年来国内发布施行的数据安全相关法律法规和标准文件。为在线旅游平台企业数据安全保护提供了措施指导,提出了数据安全合规评估的体系框架和评估指标。为......