itpub技术论坛-2024欧洲杯官网

展示kafka工作方式的简单架构。

数据分析

2023-09-28 11:13

本文介绍了vivo在大数据元数据服务横向扩展道路上的探索历程，由实际面临的问题出发，对当前主流的横向扩展方案进行了调研及对比测试，通过多方面对比数据择优选择tidb方案。其次分享了整个扩展方案流程、实施遇到的问题及在线欧洲杯买球的解决方案，对于在大数据元数据性能上面临同样困境的开发者本篇文章具有非常高的参考借鉴价值。

数据挖掘

2023-09-28 11:00

日常开发中，相信大家都对 kafka 有所耳闻，kafka 作为一个分布式的流处理平台，一般用来存储和传输大量的消息数据。在 kafka 中有三个重要概念，分别是 topic、partition 和 offset。

数据分析

2023-09-25 13:50

如果排序逻辑变得太复杂或影响性能，可能需要考虑在应用层进行后处理，而不是依赖 elasticsearch 的内部排序。

数据分析

2023-09-25 11:05

存算分离已经成为云数仓的主流技术趋势。hashdata正通过一份数据全域共享的方式，满足核心业务的实时性需求，为企业业务决策提速带来了强大助力。

数据分析

2023-09-22 16:19

1. flink batch on paimon 挑战 2. flink batch 核心优化 3. 后续规划

数据分析

2023-09-22 09:27

支持etl场景。引入spark引擎，将离线链路的etl任务无感迁移到spark，并且保证任务的稳定性。

数据分析

2023-09-21 10:24

本文将介绍pandas 2.1中的新功能，探讨关于这个新版本中最有趣的事情。

数据分析

2023-09-19 16:44

招商信诺人寿基于 apache doris 实现 olap 技术栈统一，赋能 70 一线业务场景实时化

数据分析

2023-09-19 12:07

在保持 clickhouse 原有超高性能的基础上，我们对其进行深度的云原生改造，实现了计算和存储层的弹性扩缩容能力，从而有效减轻运维负担并降低成本。

数据分析

2023-09-18 14:38

在本篇文章中，我们主要介绍了b站大数据系统诊断在sqlscan所做的改造和阶段性成果，主要关注任务的事前治理，对于事中和事后的治理诊断，请关注后续文章《bmr大数据元仓》以及《大数据任务诊断系统-数据智囊》

数据分析

2023-09-18 13:49

本文整理自字节跳动基础架构工程师李国君，在 streaming lakehouse meetup 的分享。幸福里业务是一种典型的交易、事务类型的业务场景，这种业务场景在实时数仓建模中遇到了诸多挑战。本次分享主要介绍幸福里业务基于 flink & paimon 构建流式数仓的实践经验，从业务背景、流批一体数仓架构、实践中遇到的问题和在线欧洲杯买球的解决方案，借助 paimon 最终能拿到的收益，以及未来规划方面进行介绍。

数据分析

2023-09-15 09:44

近日，袋鼠云大数据引擎专家郝卫亮，为大家带来了《袋鼠云在实时数据湖上的探索与实践》主题分享，帮助大家能了解到什么是实时数据湖、如何进行数据湖选型及数据平台建设数据湖的经验。如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据处理能力，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战。因此，袋鼠云基于自研的一站式大数据基础软件——数栈提出相应的实时数据湖解决方

hadoop

2023-09-14 16:08

本文整理自 smartnews 数据平台架构师 apache iceberg contributor 戢清雨，在 flink forward asia 2022 实时湖仓专场的分享。本篇内容主要分为五个部分：

数据分析

2023-09-14 09:31

以“如何快速落地”、“快速适应新环境”为出发点，探讨数据研发“新人”如何快速了解公司业务、领域模型和业务系统，然后快速高效的推进相关工作，赢得在线欧洲杯买球的合作伙伴的信任和支持。

可视化

2023-09-13 15:19

kafka 支持高吞吐量、高度分布式、容错性强的平台，能够以低延迟传递消息。

数据分析

2023-09-13 14:33

对于刚刚步入职场的运维小白而言，面对工作中的突发情况时常会感到手忙脚乱，为了帮助他们更好地应对这些挑战，本文将介绍三款特别适合运维新手使用的网络监测工具：                    1.zabbix是一个功能强大的网络监控系统，可以监视各种网络设备的性能指标、应用的运行状态等，并提供实时

数据分析

2023-09-13 11:16

对于 api 平台管理者、开发者和调用者来说，api 的调用性能、安全性和稳定性是在平台选型时最需要考虑的三个因素。本文将为大家分享 袋鼠云数据服务平台dataapi 是如何实现这三方面保障的。

hadoop

2023-09-13 11:12

在企业的业务经营中，实时数据是营销、运维、决策的重要支撑，实时数据链路基本是所有大公司所拥有的，无论是否采用了中台模式，本文从如何建设实时数据双流、数据双流的建设标准，以及数据双流的压测备战三方面进行了详细的论述。

数据分析

2023-09-13 10:06

apache doris 历经近十年的发展，为何还能持续保持竞争力和活力？其背后的核心推动力又是什么？

数据分析

2023-09-12 11:05