itpub技术论坛-2024欧洲杯官网

大数据

主要是常见面试问题,结合自己的开发经验,做出的个人回答,仅供参考。文末留言,提出不足和你的见解!

数据挖掘
2023-11-22 09:29

平安银行根据数据生命周期内的关键安全工作事项并结合行内的部门职责和组织架构进行raci分析,并构建三大类职责,横向联动,保障数据安全责任落地。

数据分析
2023-11-21 10:32

在今年的敏捷团队建设中,我通过suite执行器实现了一键自动化单元测试。juint除了suite执行器还有哪些执行器呢?由此我的runner探索之旅开始了!

数据挖掘
2023-11-20 10:08

kubernetes 是市面上最/受/欢/迎的集群管理在线欧洲杯买球的解决方案之一,本文将介绍 easymr 作为一款提供一站式可视化组件安装部署与可观测运维管理能力的大数据计算引擎产品,是如何基于 kubernetes 部署进行实践探索的。

hadoop
2023-11-17 10:55

那么这次,通过升级mysql的版本到8.0之后,咱再来看看之前在ck身上的那套玩法是否能奏效,至于doris如何导入mysql的增量数据(不依赖外部工具情况下),由于文章篇幅原因,咱下篇再详细展开说。

数据分析
2023-11-17 09:36

doris的发展大家是有目共睹的。例如冷热分离等新特性的持续增加。使得doris在易用和成本上都有大幅提升。

数据挖掘
2023-11-15 17:18

本文是《bi数据可视化平台建设》系列文章第1篇 - 交叉表组件。本文通过一些特定场景,提供了一些技术实现简易描述,对这些场景有一些宏观认识;worker,虚拟滚动,微应用等关键技术的实现细节。

可视化
2023-11-15 09:58

本篇内容主要分为三部分: 1. cdc 数据实时集成的挑战 2. flink cdc 核心技术解读 3. 阿里云基于 flink cdc 的企业级实时数据集成方案

数据分析
2023-11-15 09:41

数据湖将成为管理大量原始、非结构化和半结构化数据的基础。它可以将历史数据存储为单一事实来源,这对于在不同部门和团队之间保持数据一致性、完整性和可信度是至关重要的。

数据分析
2023-11-13 10:22

别误会,这个不靠谱,说的是不论spark还是flink,都不能通过jdbc的方式,支持真正意义上的流式读取,而不是它不可用。

数据分析
2023-11-13 10:06

在本篇文章中,将通过实时入湖和物化视图两个方面,介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践,及未来规划。

hadoop
2023-11-10 13:53

ai 智能时代,开发者需要一个真正的向量数据库吗?答案很简单,这取决于开发者的应用场景。举个例子,晚饭选择去一家五星级餐厅用餐或是是快餐店,往往和你的胃口和期望有关。

数据分析
2023-11-10 11:13

kafka 最初是为分布式系统中海量日志处理而设计的。它可以通过持久化功能将消息保存到磁盘直到过期,并让消费者按照自己的节奏提取消息。与它的前辈不同(rabbitmq、activemq),kafka 不仅仅是一个消息队列,它还是一个开源的分布式流处理平台。

数据分析
2023-11-10 10:55

其实从flink在线欧洲杯买球官网来看,flink读取mysql,还有一种jdbc的方式,只不过cdc这个概念被flink宣传的过于火热,咱还是决定从它先开始。

数据分析
2023-11-09 10:07

与 devops将 ci/cd 应用于软件开发和运维的方式类似,dataops需要一种类似于ci/cd、自动化优先的方法来构建和扩展数据产品。同时, dataops使数据工程团队更容易为分析师和其他下游使用人员提供可靠的数据来驱动决策。

数据分析
2023-11-07 15:04

我只想插入大量的测试数据,不是想测试性能,有没有自动办法生成tb级别的测试数据? 有工具?还是说有测试数据集之类的东西?

数据分析
2023-11-07 11:34

要说高效,其实用ck自带的外部表 物化视图的方式一定是最快的、最省事的。 因为之前用过kafka的外部表 物化视图的方式,就可以很方便把外部数据给导入到ck内部,确实很好用,可是这一次,我们把kafka换成mysql之后,到底还能不能好使呢? 那么这篇文章,咱就来看看,ck支持的mysql外部表,到底能不能行。

数据分析
2023-11-07 11:23

kafka是一个开源项目。它具有分布式、弹性的架构,并且容忍故障(您可以对其进行修补和维护,而无需关闭整个系统)。kafka具有横向扩展性。该项目旨在提供一个统一的、高吞吐量、低延迟(低于10毫秒)的平台,用于处理实时数据流。

数据分析
2023-11-06 09:57

数据库工具是指用于创建、设计、管理、开发、维护和优化数据库的一系列软件工具,包括数据库设计工具、数据库迁移与复制、数据库管理工具、数据安全工具等,这些工具可以帮助数据库管理员和开发人员更高效地管理、使用和开发数据库,减少人工维护和管理的成本,因此被广泛使用于各种企业和应用中。

数据分析
2023-11-03 09:15

这两天在帮一个项目部署 clickhouse (下称ck),并且需要将上游的数据给导入到其中。

数据分析
2023-11-02 10:26
推荐小栈
精选课程
24小时热点
精选文章
联系在线欧洲杯买球

商务合作:

tel: 86-15801238530

email:sales@itpub.net

媒体合作:

email:edit@it168.com

关注公众号获取更多技术文章

网站地图