更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，火山引擎数智平台（VeDI）2023数据飞轮汽车行业研讨会在上海举办，活动聚焦汽车行业数字化转型痛点，从字节跳动自身数据驱动经验、数据飞轮模式落地、企业侧场景实践三方面，诠释数据飞轮如何在汽车行业转活数据消费。 从左至右的分享嘉宾分别为：火山引擎数据产品负责人郭东东、火山引擎汽车行业副总经理贾思杰、火山引擎数据产品解决方案负责人萧然、火山引擎汽车行业数据产品解决方案负责人朱静芸 数据飞轮是基于字节跳动十余年数据驱动实践经验提炼的企业数智化升级新范式，数据飞轮以数据消费为核心驱动，能够帮助企...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着数据规模的迅速增长和数据处理需求的不断演进，云原生架构和湖仓分析成为了现代数据处理的重要趋势。在这个数字化时代，企业面临着海量数据的挑战和机遇，而构建可扩展、灵活且高效的数据分析平台成为了迫切的需求。 文章主要介绍了火山引擎湖仓一体分析服务LAS（下文以LAS指代）基于Spark的云原生湖仓分析实践，利用Spark的强大功能和云原生技术的优势，构建高效、可扩展、灵活的数据分析平台，满足现代企业对数据洞察的迫切需求，为企业提供了强大的解决方案。文末更有专属彩蛋，新人优惠购福利，等着你来解锁！ 本篇文章提...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 2022年10月，字节跳动BitSail数据引擎正式开源。同期，社区推出Contributor激励计划第一期，目前已有21位外部开发者为BitSail社区做出贡献，成为了首批BitSailContributor。 江海的广阔是由每一滴水珠构成的，BitSail社区永远欢迎每一位开发者的加入。我们推出本档“对话BitSailContributor”栏目，是想用自己的方式为每一位Contributor留下与BitSail紧密相关的独立记录。正因为有你们、有今后更多的Contributor存在，BitSail才...

近日，由中国商务协会数字营销专业委员会指导的第十四届虎啸奖正式公布获奖名单，火山引擎数智平台VeDI荣获技术平台/产品类奖项。 作为国内品牌营销领域兼具权威性、前瞻性以及创新性的赛事活动，第十四届虎啸奖累计收到来自品牌主、代理机构、媒体平台、技术公司等近850家参赛公司的积极参与，各类别案例作品的提报总数量达4000件，在经由800+专业评审团严谨、严格、严肃的评审流程，最终仅有千余件入围终审，案例作品入围比例不超过总数的28%。 火山引擎数智平台VeDI此次斩获的【年度最佳智能营销系统/工具/平台】，旨在鼓励数字技术在营销领域的进一步创新和应用，帮助行业更直观地感受到新兴技术形态，推动行业深...

一.概述 编程实验：指的是通过代码编程进行AB实验，广泛使用于前端优化、策略优化和后端算法优化多种实验场景，包含客户端和服务端实验。前置条件：接入客户端SDK或者服务端SDK，详见：应用接入 二.应用场景 如何选择实验类型？适用场景是什么？ 服务端实验：指通过服务端获取实验分组信息并控制配置生效或下发的实验。 部分功能只能由服务端来控制，比如内容分发算法（如用户打开今日头条以后在feed流中会看见什么内容）、由服务端逻辑控制的产品功能（如推送）等。 不要求唤起APP时就使实验配置生效。客户端有充分时间向服务端发起请求，获得实验配置后再向用户展示策略。 客户端实验：指通过客户端获取实验...

一.概述 可视化实验，通过所见即所得的在线编辑（比如对页面中的图片、文字、颜色、位置等元素和属性进行编辑），降低在Web/H5页面优化的场景下，产品方和运营方使用A/B实验工具的成本，免除编码。前置条件及限制： 目前可视化实验支持在Web及H5页面开启。 用于创建可视化实验的页面需要接入「A/B测试」的Web/H5/WAPSDK。 页面传输协议需使用HTTPS（HypertextTransferProtocolSecure：超文本传输安全协议）。 实验类型：可视化实验的实验类型为客户端实验。浏览器建议：主流的浏览器均可支持；iOS系统自带Safari浏览器支持iOS10及以上版本(若系统版...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 摘要 火山引擎大数据研发治理套件DataLeap的DataCatalog系统通过汇总和组织各种元数据，解决了数据生产者梳理数据、数据消费者找数和理解数的业务场景，其中搜索是DataCatalog的主要功能之一。本文详细介绍了火山引擎DataLeap的DataCatalog系统的搜索功能的设计与实现。 背景 DataCatalog能够帮助大公司更好地梳理和管理自己的资产，是Data-drvien公司的重要平台。一个通用的DataCatalog平台通常包含元数据管理，搜索，血缘，标签，术语等功能。其中，搜索是...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着市场竞争的加剧，企业对数字营销投入的效果监测和优化需求日益增强，营销实时监控也成为企业提升运营效率的重要手段。在数字化营销中，数据是进行实时分析和监控的基础。企业需要建立符合自身需求的数据平台，整合和分析来自不同渠道的数据，以提供更加准确和及时的决策支持，实现更好效果。 在数据平台建设中，不少企业开始引入OLAP引擎，以提升对营销活动的数据实时查询和相应效果。OLAP引擎的特点在于能处理大规模的数据集，并快速地提供多维度的数据分析的结果。 ByteHouse则是火山引擎推出的一款基于开源Clic...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 背景 某企业实时数仓团队通过数据收集、整合、计算和存储构建实时数据仓库，为企业提供快速、准确、可靠的实时数据分析和决策支持。目前该实时数仓团队已运行了上万的实时任务，依赖的组件繁多（例如：Flink、Yarn、Abase、Doris等）、开发人员众多、开发习惯和经验程度参差不齐等各类主客观因素，导致任务稳定性、资源浪费等问题频出。因此，任务治理已是势在必行，但纵观整个治理过程，仍存在以下矛盾： 1.业务阶段与数据治理的矛盾 业务阶段大致可以分为两个阶段：发展期，成熟期。发展期：产品不断迭代，需求不断新增，...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群   作为企业数字化建设的必备要素，易用的数据引擎能帮助企业提升数据使用效率，更好提升数据应用价值，夯实数字化建设基础。 数据导入是衡量OLAP引擎性能及易用性的重要标准之一，高效的数据导入能力能够加速数据实时处理和分析的效率。作为一款OLAP引擎，火山引擎云原生数据仓库ByteHouse源于开源ClickHouse，在字节跳动多年打磨下，提供更丰富的能力和更强性能，能为用户带来极速分析体验，支撑实时数据分析和海量离线数据分析，具备便捷的弹性扩缩容能力，极致的分析性能和丰富的企业级特性。 随着By...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 背景介绍 业务场景 在日常工作中，我们时不时需要对某些逻辑进行重复调度，这时我们就需要一个调度系统。根据不同的调度需求，可以广义分为两类： 定时调度 根据一定的周期对任务进行重复调度。这类比较容易实现，通常一个crontab就可以对任务进行定期调度。但是简单的crontab任务在实际生产中应用会有一些挑战，包括失败处理、监控以及部署、跨机器部署、重试等。 依赖调度 依赖调度类型，通常是指某个逻辑的触发需要在特定的“事件”发生之后，这个事件可以是上游某个任务完成，也可以是某个指定路径数据就绪，或者其他外部触...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 文章介绍了Bucket优化技术及其在实际业务中的应用，包括SparkBucket的基本原理，重点阐述了火山引擎湖仓一体分析服务LAS（下文以LAS指代）Spark对Bucket优化的功能增强，实现了Bucket易用性的巨大提升，优化的覆盖范围得以扩大，且在字节内部已有成功应用案例。文中提及的能力增强在LAS上均可直接使用，欢迎大家到火山引擎官网进行体验和选购（点击前往），文末更有专属彩蛋，新人优惠购福利，等着你来解锁！ 本篇文章提纲如下： Bucket优化技术简介 LASbucket增强 Bucket优...

 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着信息技术飞速发展，互联网、Web3、物联网、人工智能相继出现。在这近三十年的高速发展中，“程序员”也成为构建丰富互联网世界的中坚力量。 作为被程序员们日常广泛使用的工具之一，数据仓库发展历程也很悠久。云计算等技术出现以及海量数据应用场景等愈加广泛，对数据仓库也提出全新要求，高性能、实时性、云原生等成为数据仓库发展关键词，也因此演变出不同的数仓发展路径。 火山引擎ByteHouse是基于开源ClickHouse推出的云原生数据仓库，在今年1024程序员节到来之际，火山引擎ByteHouse推...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近年来，随着消费者的心理需求逐步趋向于精神层面、科技的迭代迅速以及市场环境的复杂性逐步上升，我国的广告行业逐步展开新的投放模式。但流量成本高，企业试错成本高昂，如何在控制成本的同时实现广告投放效益最大化，成为广告投放师关注的重点。 广告投放的目的是为保持企业产品的持续曝光，帮助企业获取更多利益。因此广告投放师需要在控制广告投放成本的同时，保证广告投放的效益最大。随着互联网红利的消失，如何同时实现广告投放成本可控和使广告投放效果达到预期，让广告主感受到“物有所值”，成为广告投放师越来越难平衡的问题。 AB实验...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着信息技术飞速发展，互联网、Web3、物联网、人工智能相继出现。在这近三十年的高速发展中，“程序员”也成为构建丰富互联网世界的中坚力量。 作为被程序员们日常广泛使用的工具之一，数据仓库发展历程也很悠久。云计算等技术出现以及海量数据应用场景等愈加广泛，对数据仓库也提出全新要求，高性能、实时性、云原生等成为数据仓库发展关键词，也因此演变出不同的数仓发展路径。 火山引擎ByteHouse是基于开源ClickHouse推出的云原生数据仓库，在今年1024程序员节到来之际，火山引擎ByteHouse推出三类企业级...

更多技术交流、求职机会，欢迎关注 字节跳动数据平台微信公众号，回复【1】进入官方交流群 近年来，随着消费者的心理需求逐步趋向于精神层面、科技的迭代迅速以及市场环境的复杂性逐步上升，我国的广告行业逐步展开新的投放模式。但流量成本高，企业试错成本高昂，如何在控制成本的同时实现广告投放效益最大化，成为广告投放师关注的重点。   广告投放的目的是为保持企业产品的持续曝光，帮助企业获取更多利益。因此广告投放师需要在控制广告投放成本的同时，保证广告投放的效益最大。随着互联网红利的消失，如何同时实现广告投放成本可控和使广告投放效果达到预期，让广告主感受到“物有所值”，成为广告投放师越来越难平衡...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在全球软件工程创新峰会上，火山引擎DataTester研发负责人韩云飞围绕“AB测试：让数据与业务共舞”主题，结合火山引擎DataTester的发展历程和发展现状，向与会者进行了分享。 AB测试本质上是一种实验评估手段，通过设计随机抽样实验，消除人群、时间、环境、其他产品差异等外界因素的影响，准确评估效果、合理归因。在AB测试的帮助下，企业可以进行方案优选、激发创新、降低风险以及效果归因，力求为每一次数字化体验的优化提供可靠的决策依据，并据此实现自动化决策。 与此同时，AB测试也是企业数据能力成熟度...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，大数据研发治理套件DataLeap数据集成更新CDC分库分表能力，可做到将多个实例的多个数据库的多个分表同步到目标端的一个表中，先离线同步，然后实时同步。适用于分库分表场景。同时，支持将MySQL同步到EMR-Doris、EMR-Starrocks、LAS，助力将最新的数据以最快且最低的带宽成本同步到目标库，辅助业务数据分析准确、提效 CDC(ChangeDataCapture)是变更数据获取的简称。可以基于增量日志，以极低的侵入性来完成增量数据捕获的工作。核心思想是，监测并捕获数据库的变动（包...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 “双十一”电商大促脚步渐近，各大平台的战火又将燃起。直播电商以低成本、高转化率等优势备受商家青睐。据智研咨询数据显示，2022年我国直播电商市场规模为34879亿元，较2017年的196.4亿元增长近178倍。 近几年来短视频平台数量不断增长，用户规模持续走高。短视频平台也加速直播电商布局，平台不仅具备商品营销推广、品牌塑造的能力，更具备成交、下单、评价等产品功能。 数据对于短视频平台尤为重要，例如短视频生产者需要根据粉丝量、视频播放量、播放时长等数据来判断账号如何进行后续运营，创作者周报等数据看板也能直...

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近年，电商行业进入了一个新的发展阶段，一方面电商市场规模持续扩大，另一方面直播电商、即时零售、社区团购等新兴电商业态在疫情期间强势崛起，平台之间激烈角逐，平台更迭轮换速度史无前例。电商行业行业内形成多元化渠道竞争格局，对电商平台的运营、服务能力提出更高要求。 电商运营的目标是帮助商家或者平台与消费者建立联系并维护关系。一方面需要不断引流拉新，另一方面需要维护与已有消费者之间的关系，进而不断提高店铺及平台内的成交率。其工作涵盖营销推广、活动运营、平台管理以及用户服务等。在此行业现状下电商运营成本日益增大，用...