更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群近日,南京途牛科技有限公司与火山引擎数智平台(VeDI)的合作获得新进展:途牛大数据系统全面迁移至火山引擎开源大数据平台E-MapReduce。 作为国内专注休闲旅游的数字一体化旅游服务商,南京途牛科技有限公司(以下简称“途牛”)旗下的【途牛旅游网】可以为线上、线下消费者提供包括跟团、自助、自驾、邮轮、景区门票以及公司旅游、机票、酒店等在内的产品和服务——“要旅游,找途牛”的企业口号,更是被众多消费者熟知。 全面精细化的服务背后,是海量数据的沉淀和应用。 过去,为了应对蓬勃发展的前线业务,途牛通过IDC(Internet Data Center ,互联网数据中心)自主建设大数据平台,覆盖离线计算、实时计算和OLAP分析等多个大数据体系,用以支撑包括市场画像分析、业务计收统计等场景下的业务数据分析需求。 “当时的大数据平台建设主要聚焦于如何更快地解决早期业务需求,”途牛大数据团队负责人魏超告诉记者,“但随着业务自身发展,一些弊端也逐步显现出来。” 首先,旅游市场近年来发生了比较大的变化,目前整个市场仍处于恢复期。对途牛来说,如何跟随行业环境实现数据建设层面的“降本”正在成为新课题。 其次,原本基于IDC搭建的大数据平台,其数据集群存在单点部署情况,在出现故障的情况下,易出现数据丢失、恢复周期长等问题。 再次,途牛自主建设的大数据平台组件版本较旧,甚至存在不再维护的版本,当问题出现时难以高效找到解决方案。 最后,途牛也希望有专业的服务团队,能够一站式协助运维大数据平台,进一步控制人力成本。 在充分沟通并拆解途牛的核心诉求后,火山引擎数智平台为其引入了火山引擎开源大数据平台E-MapReduce(以下简称“EMR”): 通过可弹性收缩的数据存储、查询和分析服务,途牛可以根据自身变化的业务需求按需使用,实现实际使用和产品服务规格上的匹配,合理控制成本。 在数据集群部署上,EMR支持一键创建多个数据集群,并将生产集群和开发集群作出区隔,防止其中某个集群出现问题影响其他集群数据。 当途牛在平台运维上遇到问题时,火山引擎EMR团队可提供24小时运维支持服务,更好更快地帮助解决问题。 目前,途牛已经将原来的大数据系统全面迁移至EMR,在综合比较前后运维数据后发现,通过EMR的运用,途牛的大数据作业效率提升一倍以上。
点击跳转火山引擎数智平台VeDI了解更多
标签:途牛,数智,平台,引擎,集群,数据系统,数据 From: https://www.cnblogs.com/bytedata/p/17650853.html