找回密码
 立即注册

推荐主题

repmgr搭建一主+一从+一witness的PostgreSQL高可用集群
测试环境说明 环境如下: OS:      ubuntu 20 PostgreSQL:  PostgreSQL 16.4 repmgr:     repmgr 5.3.3 三台测试环境,均已安装好PostgreSQL 16.4,数据库实例信息如下 IP            postgresql实例名   ...
赏勿 2025-6-10 18:41
496 0 0
达梦数据库DM管理工具增删改不生效怎么办?如何设置事务自动提交?
前言我在使用达梦数据库DM时,一开始使用的是达梦数据库自带的连接工具DM管理工具。自带的有它自己的好处,起码对于修改新增字段等是比较兼容的。后面我发现DBeaver也是支持连接达梦数据库的,所以后面用DBeaver也在连接达梦数据库。我在 ...
恙髡 2025-6-10 18:36
304 0 0
读数据工程之道:设计和构建健壮的数据系统31安全和隐私
1. 安全和隐私 1.1. 安全在数据工程的执行层面至关重要 [*]1.1.1. 安全需要成为一种思想和行动的习惯 [*]1.1.2. 安全是隐私立足的根本 1.2. 数据安全是数据工程师在其工作和数据工程生命周期的每个阶段需要考虑的首要问题 [*]1. ...
姊囝 2025-6-10 18:30
47 0 0
推动企业数字化转型的三驾马车:DataOps与DevOps、MLOps的关系及其重要性
在当今快速发展的技术领域,DevOps、DataOps和MLOps成为了推动企业数字化转型的三大核心实践。它们各自关注不同的领域,但又相互关联,共同推动着软件和数据的高效开发与运营。 DevOps:软件开发的加速器 DevOps是一种将开发(Developm ...
庾签 2025-6-10 18:22
97 0 0
【GreatSQL优化器-01】const_table
【GreatSQL优化器-01】const_table 一、const_table介绍 GreatSQL的优化器主要用JOIN类来进行处理SQL语句的,JOIN类有以下四个table数量相关的成员变量。其中const_tables是optimize最开始就检查并且标识的,因为这样可以把记录最少的 ...
捡嫌 2025-6-10 18:20
873 0 0
hive基础知识分享(三)
写在前面 今天继续学习hive部分的知识。 Hive中如何实现行列转换 [*]一行变多行 可以对表使用 LATERAL VIEW EXPLODE(),也可以直接使用 EXPLAIN() 函数来处理一行数据。 [*]多行变一行 使用 GROUP BY + COLLECT_SET/COLLECT_LIST: ...
官厌 2025-6-10 18:18
161 0 0
劫持微信聊天记录并分析还原 —— 访问数据库并查看聊天记录(五)
[*]本工具设计的初衷是用来获取微信账号的相关信息并解析PC版微信的数据库。 [*]程序以 Python 语言开发,可读取、解密、还原微信数据库并帮助用户查看聊天记录,还可以将其聊天记录导出为csv、html等格式用于AI训练,自动回复或备份等 ...
皇甫佳文 2025-6-10 18:18
964 0 0
面试:什么是死锁,如何避免或解决死锁;MySQL中的死锁现象,MySQL死锁如何解决
文章目录 前言 一、死锁 [*]1.1 什么是死锁 [*]1.2 死锁产生的四个必要条件 [*]1.3 模拟产生死锁的代码 [*]1.4 死锁的产生原因 二、如何避免或解决死锁 [*]2.1 死锁预防 [*]2.2 死锁避免 [*]2.3 死锁检测 [*]2.4 死锁解除 三、数据库锁 ...
涂流如 2025-6-10 18:18
935 0 0
读数据工程之道:设计和构建健壮的数据系统33未来
1. 未来 1.1. 运营的优先级和最佳实践与技术可能会改变,但生命周期的主要阶段会在许多年内保持不变 1.2. 随着组织以新的方式利用数据,将需要新的基础、系统和工作流来满足这些需求 1.3. 如果工具变得更容易使用,数据工程师就会 ...
毡轩 2025-6-10 18:18
45 0 0
SqlServer 分页学习
在B站上看到一个分页视频,老师讲的挺好 ,记录下来。想看原视频的可以去B站 --1.建立Students表 CREATE TABLE students ( ID INT PRIMARY KEY IDENTITY(1,2), NAME NVARCHAR(50) NOT NULL, SEX CHAR(6) CHECK (SEX IN ('Mal ...
丘娅楠 2025-6-10 18:16
94 0 0
Redis
Redis概念和基础 Redis是一种支持key-value等多种数据结构的存储系统。可用于缓存,事件发布或订阅,高速队列等场景。支持网络,提供字符串,哈希,列表,队列,集合结构直接存取,基于内存,可持久化。 什么是Redis Redis是一款内存高 ...
馑妣窟 2025-6-10 18:16
414 0 0
读数据工程之道:设计和构建健壮的数据系统32序列化和云网络
1. 序列化 1.1. 仅仅通过从CSV转换到Parquet序列化,任务性能就提高了上百倍 1.2. 基于行的序列化 [*]1.2.1. 基于行的序列化是按行来组织数据 [*]1.2.2. 对于那些半结构化的数据(支持嵌套和模式变化的数据对象)​,基于行的序 ...
宋子 2025-6-10 18:15
39 0 0
PostgreSQL中将对象oid和对象名相互转换
PostgreSQL中将对象oid转为对象名 使用pg的内部数据类型将对象oid转为对象名,可以简化一些系统视图的关联查询。 数据库类型转换对应类型的oid 可以用以下数据库类型转换对应类型的oid(以pg12为例) 对应关系 创建测试数据 基于如上 ...
梨恐 2025-6-10 18:14
519 0 0
指标+AI+BI:构建数据分析新范式丨2024袋鼠云秋季发布会回顾
10月30日,袋鼠云成功举办了以“AI驱动,数智未来”为主题的2024年秋季发布会。大会深度探讨了如何凭借 AI 实现新的飞跃,重塑企业的经营管理方式,加速数智化进程。 作为大会的重要环节之一,袋鼠云数栈产品经理潮汐带来了题为《指标+AI ...
申倩语 2025-6-10 18:13
808 0 0
读数据工程之道:设计和构建健壮的数据系统34读后总结与感想兼导读
1. 基本信息 数据工程之道:设计和构建健壮的数据系统 [*][美]乔·里斯(Joe Reis),[美]马特·豪斯利(Matt Housley)著 [*]机械工业出版社,2024年2月出版 1.1. 读薄率 书籍总字数473千字,笔记总字数109584字。 读薄率109584÷473000 ...
孓访懔 2025-6-10 18:13
742 0 0
读数据工程之道:设计和构建健壮的数据系统29分析
1. 合作角色 1.1. 数据分析师 1.2. 数据科学家 1.3. MLOps/机器学习工程师 1.4. 业务侧 [*]1.4.1. 数据或非技术的利益相关者、经理和高管 1.5. 数据工程师更多的是在支持这些利益相关者的工作,不一定对数据的最终使用方式负责 ...
电棘缣 2025-6-10 18:12
42 0 0
TableFill:一天搞定1000人的数据填报工作丨2024袋鼠云秋季发布会回顾
10月30日,袋鼠云成功举办了以“AI驱动,数智未来”为主题的2024年秋季发布会。大会深度探讨了如何凭借 AI 实现新的飞跃,重塑企业的经营管理方式,加速数智化进程。 会上,易知微产品经理林树为大家带来了一款新产品——多层级数据填报 ...
越蔓蔓 2025-6-10 18:11
486 0 0
DolphinScheduler集成Arthas实现接口调用监控,提升调度任务可靠性
本文介绍了在Apache DolphinScheduler中嵌入Arthas的方法,以实现对接口调用的监控。Arthas是一款强大的 Java诊断工具,能够帮助开发者实时查看应用程序的运行状态、性能瓶颈和方法调用情况。在DolphinScheduler中集成Arthas,可以方便地 ...
决台 2025-6-10 18:11
1005 0 0
使用SeaTunnel从InfluxDB同步数据到Doris
本文介绍了如何使用SeaTunnel将数据从InfluxDB同步到Doris。通过SeaTunnel强大的数据集成功能,用户可以高效地将存储于InfluxDB中的时间序列数据传输至Doris,便于数据的访问与分析。 版本信息: SeaTunnel 2.3.3 InfluxDB 2.7.6 Doris 2 ...
扎先 2025-6-10 18:11
411 0 0
hadoop基础知识分享(二)
写在前面 今天继续学习hadoop部分的知识。 MapReduce 数据切片 InputFormat 接口 InputFormat 是一个抽象类,定义了两个方法: [*]getSplits:负责实现数据切片的方法 [*]createRecordReader:实现数据的 key-value 格式。 FileInpu ...
宗和玉 2025-6-10 18:11
325 0 0

快速发帖

还可输入 80 个字符
您需要登录后才可以发帖 登录 | 立即注册

本版积分规则