找回密码
 立即注册
读数据工程之道:设计和构建健壮的数据系统12开源软件
1.       开源软件 1.1.         开源软件(Open Source Software,OSS)是一种软件发行模式,在这种模式下,软件和底层代码库通常在特定的许可条款下可供普遍开发者使用 1.2.         社区管理的开源软件 [*]1.2 ...
莠畅缕 2025-6-10 15:25
37 0 0
PostgreSQL流复制主从切换
  0,前提确保PostgreSQL主从流复制是正常状态  1,从节点执行promote提升为主节点:    1.1 ###修改原从节点的pg_hba.conf,设置复制用户的IP为主节点   host     replication     replica_user     原始主节点 ...
轧岔 2025-6-10 15:25
606 0 0
Redis 万字入门教程
0. 前言 文章已经收录到 GitHub 个人博客项目,欢迎 Star: 或者访问网站,进行在线浏览: 1. NoSQL 1.1 NoSQL 介绍 NoSQL(Not Only SQL ),意即不仅仅是 SQL,泛指非关系型的数据库。NoSQL 这个技术门类,早期就有人提出,发展至2009 ...
蚬蕞遂 2025-6-10 15:25
957 0 0
SuperSet安装
安装Python环境 mkdir /opt/soft curl -O https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh bash Miniconda3-latest-Linux-x86_64.sh 回车之后,一直按空格,提示Please answer ‘yes’ or ‘no’:’ 输入yes。 ...
杭环 2025-6-10 15:24
605 0 0
TB 级数据入库无压力:Apache DolphinScheduler 助力 ClickHouse 优化
引言 来源:程序园用户自行投稿发布,如果侵权,请联系站长删除 免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
邰怀卉 2025-6-10 15:23
821 0 0
MySQL命令rebootClusterFromCompleteOutage重启集群注意事项
rebootClusterFromCompleteOutage()是MySQL Shell中的一个实用命令,用于在 InnoDB 集群遇到完全中断(例如,当组复制在所有成员实例上停止时)后重新配置和恢复集群。这个命令允许你连接到集群中的一个MySQL 实例,并使用该实例的元数据 ...
祖娅曦 2025-6-10 15:23
71 0 0
SQL Server存储过程的优缺点
SQL Server存储过程(Stored Procedure)是一组为了完成特定功能的SQL语句集合,经编译后存储在数据库中。存储过程可以接收参数、执行相关SQL后返回结果。用户通过指定存储过程的名字并给出参数(带参存储过程)来执行它。以下是使用SQL Serv ...
剽达崖 2025-6-10 15:22
224 0 0
读数据工程之道:设计和构建健壮的数据系统13无服务器
1.       无服务器 1.1.         云供应商的一个大趋势是无服务器,允许开发人员和数据工程师无须在后台管理服务器即可运行应用程序 [*]1.1.1.           无服务器快速将价值投入到其正确的用例 1.2.     ...
墨佳美 2025-6-10 15:21
43 0 0
读数据工程之道:设计和构建健壮的数据系统06底层设计(下)
1. 数据问责制 1.1. 数据问责制意味着分配一个人来管理一部分数据 [*]1.1.1. 负责人协调其他利益相关者的治理活动 [*]1.1.2. 如果没有人对相关数据负责,那么管理数据质量就会很困难 [*]1.1.3. 负责数据的人不一定是数据工程师 [ ...
梁宁 2025-6-10 15:20
260 0 0
白鲸开源WhaleStudio项目获得“创客北京2024”企业组优秀奖,晋级复赛!
近日,“创客北京2024”海淀区复赛名单正式公布,白鲸开源凭借其全球领先的云原生DataOps平台——WhaleStudio,荣获企业组优秀奖,并成功进入复赛名单。 此次“创客北京2024”海淀区级赛由中关村科学城管理委员会主办,北京中关村科学城 ...
皆炳 2025-6-10 15:17
308 0 0
Sql基础
[*]1. sql基础 [*]1.1. 数据库常用的数据类型 [*]1.2. 带n与不带n的区别 [*]1.3. 带var与不带var的区别 [*]1.4. 2.基础操作 [*]1.4.1. 更新语句 [*]1.4.2. 删除语句 [*]1.4.3. 约束 [*]1.4.4. 修改表结构 [*]1.4.5. 查询表 [*]1.4.6. ...
迎脾 2025-6-10 15:12
824 0 0
[20241012]cursor_sharing=force与函数索引.txt
[20241012]cursor_sharing=force与函数索引.txt --//今天听了一个课程,提到使用cursor_sharing=force解决sql语句使用文字变量问题以及局限性,实际上一些局限性在新的oracle版 --//本已经不存在, 突然想起今年3月份的事情,使用cursor ...
左丘纨 2025-6-10 15:12
698 0 0
再见,数据中台,理想还在路上
近日,Gartner发布了24年《中国数据分析及人工智能成熟度周期报告》,在成熟度曲线中声明“数据中台”已被淘汰。数据中台,这个曾被奉若圭臬,视为先进架构的标志性建筑,将就此将淡出历史舞台。   有些东西,在它真正消亡前,就已经被 ...
艾曼语 2025-6-10 15:12
794 0 0
简单练习Microsoft SQL Server MERGE同步两个表
MERGE同步两个表, 根据与源表的JOIN 条件,来通过插入、更新和删除目标表行,达到2张表数据一致。 MERGE 语法: ,   Source Code  在SQL中,创建2张表,[dbo].[Target_Data]和[dbo].[Source_Data],也就是将来你Merge的2张表。 Sourc ...
松菊 2025-6-10 15:11
215 0 0
[20241013]sqlplus spool与文件覆盖.txt
[20241013]sqlplus spool与文件覆盖.txt --//这个问题在8月份遇到的问题,我发现在sqlplus下spool a.sql文件,并没有在当前目录产生a.sql文件,后来我发现建立在环境变量 --//ORACLE_PATH定义的目录下,当时以为自己打开多个会话,没有注 ...
绂染 2025-6-10 15:11
413 0 0
读数据工程之道:设计和构建健壮的数据系统07数据架构的原则
1. 企业架构 1.1. 企业架构有很多子集,包括业务、技术、应用程序和数据 1.2. TOGAF [*]1.2.1. The Open Group Architecture Framework,是The Open Group的一个标准 [*]1.2.2. 被誉为当今使用最广泛的架构框架 [*]1.2.3. 定义 ...
呵桢 2025-6-10 15:11
37 0 0
读数据工程之道:设计和构建健壮的数据系统08主要架构概念
1. 域和服务 1.1. 域是你正在为其构建的现实世界主题区域 1.2. 服务是一组功能,其目标是完成一项任务 1.3. 一个域可以包含多个服务 1.4. 确定领域中应包含的内容 [*]1.4.1. 确定领域应该包含什么以及要包括哪些服务时,最好的 ...
奄蜊 2025-6-10 15:11
40 0 0
Spark任务OOM问题如何解决?
大家好,我是 V 哥。在实际的业务场景中,Spark任务出现OOM(Out of Memory) 问题通常是由于任务处理的数据量过大、资源分配不合理或者代码存在性能瓶颈等原因造成的。针对不同的业务场景和原因,可以从以下几个方面进行优化和解决。 一 ...
姚梨素 2025-6-10 15:10
997 0 0
误删GreatSQL数据?别慌,Binlog来帮忙
误删GreatSQL数据?别慌,Binlog来帮忙 数据丢失是每一个数据库管理员和开发者都不愿面对的噩梦。然而,意外总是难免,当不小心删除了重要的数据,如何才能迅速而有效地进行恢复呢?在数据库中有二进制日志 (Binlog),它不仅记录了所有 ...
湄圳啸 2025-6-10 15:10
647 0 0
mysql基础-事务
本篇章为初步了解mysql数据事务控制问题,事务作为MySQL的基础篇章是至关重要的一部分内容! 事务 1、事务简介 事务是一组操作的集合,它是一个不可分割的工作单位,事务会把所有的操作作为一个整体一起向系统提交或撤销操作请求,即这 ...
寿爹座 2025-6-10 15:08
839 0 0

快速发帖

还可输入 80 个字符
您需要登录后才可以发帖 登录 | 立即注册

本版积分规则