助力春节精准营销,火山引擎ByteHouse加速数据分析效率

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 随着元宵节的结束,2024年春节圆满落幕。据抖音生活服务发布的《2024年春节消费数据报告》显示,除夕至大年初六(2月9日-2月15日),吃喝玩乐等生活服务业日均消费规模同比增长153%,这与春节期间商家开展的各种营销活动是紧密相关。 由于促销或者广告投放等营销活动对数据实时分析要求非常高,不少商家或平台通过引入OLAP引擎来解决实时数据分析的问题。以OLAP为数据库架构
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

数据驱动的实验文化:字节跳动产品优化之路

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 在近期CCF TF第123期用户体验工程主题活动中,火山引擎DataTester产品经理结合字节跳动在产品优化方面的经验,围绕“数据驱动的实验文化”这一话题进行了分享。 用户体验优化的最终目的是为了实现商业价值,为了确保优化方向的正确,企业需要有方法对用户体验和用户价值进行评估。AB测试是目前最简单可靠的评估方法,它的基本的逻辑是通过控制变量,保证在同一时间、同一环境,只
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

从MySQL到ByteHouse,抖音精准推荐存储架构重构解读

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 抖音依靠自身推荐系统为用户推送可能感兴趣的视频内容,其中兴趣圈层是推荐的重要能力,通过理解核心用户的偏好特征,判断两者偏好的相似性,从而构建同类用户的兴趣圈层,实现精准推荐。 以往的兴趣圈层往往依赖单一的维度或标签,比如内容类型、时长、地理特征等,难以揭示用户兴趣的底层逻辑。例如,重庆美女小姐姐吃播视频、二次元古风舞蹈视频,表面上标签类型可能完全不一样,但深度分析后发现喜
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

火山引擎VeDI广州研讨会:数据飞轮为金融行业数字化转型注入新活力

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 火山引擎数据飞轮 研讨会现场 3月5日,火山引擎数据飞轮行业研讨会在广州举办。本次会议以金融领域为焦点,汇集了多家金融行业企业,旨在共同探讨“数据飞轮”在行业的应用与发展。火山引擎的数据产品解决方案专家们围绕“数据飞轮”的典型应用案例,与参会企业进行了深入的探讨交流。 火山引擎数据产品解决方案负责人首先向与会者介绍了“数据飞轮”这一基于字节跳动十余年数据驱动实践经验的企业
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

提升地理空间分析效率,火山引擎ByteHouse上线GIS能力

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 在数字化时代,地理空间分析(Geospatial Analytics)成为辅助企业市场策略洞察的重要手段。无论是广告投放的精准定位,还是电商物流的效率优化,都离不开对地理空间数据的查询、分析和可视化处理,以便助力企业更好决策。 一些传统的地理信息系统数据库具备丰富的地理空间对象结构、成熟的空间索引能力,在导航、旅游、智能城市等典型应用场景中被广泛使用。随着实时分析报表等
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

火山引擎VeDI:A/B实验如何应用在APP推荐系统中?

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 在移动互联网飞速发展的时代,用户规模和网络信息量呈现出爆炸式增长,信息过载加大了用户选择的难度,这样的背景下,推荐系统应运而生,为用户提供个性化的内容推荐。推荐系统在不断迭代中,其算法、策略、特征、功能和用户界面时常得到更新和优化,其中推荐算法的调整尤为关键。然而,由于深度学习模型的广泛应用,推荐算法调整后的用户体验和效果难以通过经验直接判断。 为了更准确地评估和优化推荐
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

ByteHouse白皮书即将发布,揭秘如何让万台节点的OLAP性能大涨

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 随着数据量和数据复杂性的不断增加,越来越多的企业开始使用 OLAP(联机分析处理)来处理大规模数据并提供即时分析结果。在选择 OLAP 引擎时,性能是一个非常重要的因素。高性能的 OLAP 具有快速的数据处理能力,并能够缩短响应时间,提供更好的用户体验,使数据分析和查询更加流畅和便捷。 作为一款 OLAP 引擎,伴随字节跳动各业务的发展,ByteHouse 已经过数百个应
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

更智能的广告素材生成!看A/B测试如何驱动AIGC素材调优

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 前言:AIGC大爆发,引发广告营销行业变革 ChatGPT等AI产品引发的AIGC大爆发引起了各行业的震动,其中以图片生成甚至视频生成技术的效果和速度最为令人震撼。也正因如此,AIGC的爆发对一直以创意为核心竞争力设计师群体构成了重大挑战。 然而,人们发现,AI在模仿和融合设计方面具备出色的能力,善用AI工具可以极大地提高创意的效率。特别是在广告营销领域,大家纷纷将AIG
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

火山引擎VeDI:A/B测试开放平台正式上线,企业个性化平台一键定制

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 火山引擎数智平台VeDI旗下的A/B测试平台(DataTester),旨在为企业提供科学且可信的A/B测试能力及丰富的场景实验支持。随着企业的数据化进程加深,将A/B测试深度融入企业大数据体系及内部信息化平台的需求也日益凸显。 鉴于此,火山引擎DataTester特推出开放平台,帮助企业实现A/B测试与自身大数据及信息化系统的深度融合。借助该平台成熟的产品化能力,不仅能有
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

火山引擎发布ByteHouse性能白皮书,揭秘OLAP性能突破的关键技术

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 日前,火山引擎正式发布《云原生数据仓库ByteHouse性能白皮书》,白皮书通过使用 SSB 100G、TPC-H 100G、TPC-DS 100G 数据集进行性能测试,展示出 ByteHouse 在查询效率方面的显著成果,并详细介绍ByteHouse在实时数仓、复杂查询等八大应用场景的高性能应用表现。 在数据处理和分析的领域,提升查询效率始终是一项关键挑战。对于 OLA
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

吴晓波频道:构建知识付费领域的数据飞轮

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 知识付费正在完成新阶段的转变。 知识付费的概念可以追溯到 20 世纪 80 年代的彼得·德鲁克,他在《后资本主义》一书中提出“知识经济”,指出人类社会从制造业经济转向了以知识为生产要素的经济。在这之后,知识成为了一项重要资源,知识的价值被广泛认可,知识付费的概念也得以在人们心中萌芽。 随着计算机技术和互联网应用的发展,知识付费也经历了从纸质到电子、从线下到线上的载体形式变
分类: 其他 发布时间: 04-13 10:59 阅读次数: 0

火山引擎 VeDI:剪映产品如何应用A/B测试验证新功能效果

武汉源创会回归,4月20聊聊大模型” 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 C端产品的用户体验是决定用户留存率和产品使用率的关键,为了提升用户体验,一些C端产品上线新功能前已经开始引入A/B测试,判断新功能带来的用户反馈。本文介绍剪映APP应用A/B测试验证新功能上线效果的案例,分享C端产品通过A/B实验验证产品新功能的实践经验。 剪映APP是一款视频编辑工具,提供剪辑功能,滤镜、美颜效果,曲库等资源。随着用户规模增加,剪映希望对产品素材库进行优
分类: 其他 发布时间: 04-13 10:54 阅读次数: 0

代码手术刀—自定义你的代码重构工具

武汉源创会回归,4月20聊聊大模型” 前言 笔者近日在做代码仓库的存量代码缩减工作,首先考虑的是基于静态扫描的缩减,尝试使用了很多工具来对代码进行优化,例如PMD、IDEA自带的inspect功能、findBugs等。但是无一例外,要么过于“保守”,只给出扫描结果,但是无法实现一键优化,要么直接就是有bug(这里特指IDEA2023.1.5专业版-inspect功能扫描problems清单里的unused declaration)。对于懒人而言,挨个手动点击几百次按钮和坐牢无异,遂自己写了一个
分类: 其他 发布时间: 04-13 10:44 阅读次数: 0

jar包冲突组建设计书

武汉源创会回归,4月20聊聊大模型” . 背景 实际开发过程中,使用maven管理jar给我们开发带来了很多便利,不需要自己一个一个的jar包下载了,只需要配置个pom配置文件就可以了,写上对应坐标和仓库地址就可以了。但是jar冲突没问题没有解决,有冲突的jar包maven不会给我们检查出来还是会根据我们的配置进行下载,等到编译才会报错,并且报错信息很晦涩,需要面向百度查一会可能才能定位出问题。 这时候我们迫切需要有个东东可以提前告诉我们我的工程里有内奸,需要及时剔除,否则会影响军心。 2.
分类: 其他 发布时间: 04-13 10:34 阅读次数: 0

一次接口的性能优化之旅

武汉源创会回归,4月20聊聊大模型” 一、引言 在项目开发过程中,我们经常会遇到接口响应慢的问题。这不仅影响了用户体验,还可能降低了系统的吞吐量。为了提高接口性能,我们需要对整个系统进行全面的优化,包括代码层面、数据库、缓存、异步处理等方面。本文将分享一个接口性能优化之旅,希望能帮助大家掌握Pfinder使用、JSF异步调用等优化技巧,提升接口性能和定位问题的能力。 二、现状诊断 • UMP诊断: ◦ Max:10s ◦ T99:1000ms ◦ 经常可用率下降     • Pfi
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0

Sql优化之回表

武汉源创会回归,4月20聊聊大模型” 前言: MySQL的性能是大家在使用时十分关心的问题,比如在高并发访问时,并且有慢sql存在的情况下,MySQL的性能会明显下降,这会导致数据库响应时间变慢,甚至导致数据库宕机。那么为了避免Mysql性能问题,比较常用的方式创建适当的索引,提升sql语句的执行效率。而本文简单介绍一下和索引有关的回表,从实际案例出发,讲讲什么是回表,如何避免回表,如何减少回表。 实际案例: 前置仓产能动态ETA时效降级需求,提供一个数据同步接口,接送大数据同步过来的前置仓的
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0

dubbo3.0 服务导入导出原理

武汉源创会回归,4月20聊聊大模型” 不管是服务导出还是服务引入,都发生在应用启动过程中,比如:在启动类上加上 @EnableDubbo 时,该注解上有一个 @DubboComponentScan 注解,@DubboComponentScan 注解 Import 了一个 DubboComponentScanRegistrar,DubboComponentScanRegistrar 中会调用 DubboSpringInitializer.initialize(),该方法中会注册一个 DubboD
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0

【稳定性】浅谈团队如何做好系统稳定性

武汉源创会回归,4月20聊聊大模型” 背景 稳定性建设需要一系列具体的建设活动推进和落地,这些建设活动涉及人员、机制和文化,全方位的建设活动才能更好地落实建设模式。 一、稳定性保障机制 稳定性涉及团队所有不同水平技术人员、所有系统、研发所有环节、线上时时刻刻,单个技术人员是无法保障好的,必须建立团队流程机制来可持续保障。 人为因素的根源一方面是专业能力不足,经验不足,另一方面很多都是无心之失,所以需要通过流程、规范来保住“底线”,减少人为因素导致的故障。大家严格遵守咱们的各种规范即可(Code
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0

浅谈从浏览器输入URL到页面渲染的流程

武汉源创会回归,4月20聊聊大模型” 浏览器输入URL到页面渲染完成,这个过程大致可分为两个阶段:网络通信和页面渲染。 一、网络通信 互联网内各网络间设备的通信遵循TCP/IP协议,利用TCP/IP协议进行网络通信时,会通过分层与对方通信。数据传输的过程:由应用层产生数据后,经过传输层的分段处理(添加TCP或UDP包头)、网络层(添加IP地址信息)、数据链路层(封装成MAC帧)、物理层传输电信号。   浏览器输入URL:   1.1、浏览器根据域名查找IP地址 在浏览器中输入域名
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0

无用代码扫描组件设计

武汉源创会回归,4月20聊聊大模型” 1、现状痛点 系统越来越臃肿,开发过程中可能产生的无用代码增加了系统维护成本。 2、设计思路 2.1、静态代码扫描方案 本方案解决静态代码下无调用方法扫描,通过ASTParser对静态文件进行扫描分析,获取代码块来判断调用关系。 基本步骤及思路 (1)载入本地磁盘项目 (2)循环使用ASTParser解析每个java文件的方法块,把类名+方法名和方法代码块一起落缓存,vm文件单独落。 分析代码如下   (3)进行调用关系扫描,再次用ASTParser
分类: 其他 发布时间: 04-13 10:29 阅读次数: 0