搜索结果
查询Tags标签： OLAP，共有 23条记录-
大数据的技术生态之间的关系
学习很重要的是能将纷繁复杂的信息进行归类和抽象。对应到大数据技术体系，虽然各种技术百花齐放，层出不穷，但大数据技术本质上无非解决4个核心问题。存储，海量的数据怎样有效的存储？主要包括hdfs、Kafka； 计算，海量的数据怎样快速计算？主要包括MapReduce、Spark、…
2022/8/21 23:54:30 人评论 次浏览 -
hive 导出表到mysql
1 在mysql 中建库 CREATE DATABASE yp_olap DEFAULT CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;2 在presto 中建mysql的表 DROP TABLE mysql.yp_olap.test;CREATE TABLE mysql.yp_olap.test(id int comment 主键ID,create_time timestamp comment 会话创…
2022/7/4 2:24:13 人评论 次浏览 -
【数据库】OLTP(TP)、OLAP(AP)与HTAP
一、OLTP(TP) On-Line Transaction Processing 联机事务处理过程(OLTP)1.也称为面向交易的处理过程，其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理，并在很短的时间内给出处理结果，是对用户操作快速响应的方式之一。这样做的最大优点是可以即时地处理输…
2022/7/4 2:20:29 人评论 次浏览 -
数据库 OLAP、OLTP是什么？相同和不同？适用场景
一、OLTP和OLAP是什么，二者比较 人类世界遵从基本的物理规律，数据世界里，关于数据的操作处理，也大体分为OLTP和OLAP两类。 OLTP on-line transaction processing 联机事物处理以传统RDBMS关系型数据库为主要应用，用于基本的、日常的事务处理，例如银行交易 OLAP on-l…
2022/7/1 2:19:55 人评论 次浏览 -
【clickhouse专栏】数据库、数据仓库之间的区别与联系
从本篇文章开始，笔者打算写一个系列的《clickhouse专栏》，其全称是Click Stream,Data WareHouse，简称ClickHouse。从其全称中的“Data WareHouse”，我们可以看出clickhouse的定位是数据仓库。那么“数据仓库”和“数据库”有什么区别呢？理解这点这很重要，理解了二者…
2022/6/7 2:21:06 人评论 次浏览 -
SQL与Database
SQL-Structured Query Language 语言简洁，易学易用DDL：Create、Drop、Alter DML：ISUD（Insert、Select、Update、Delete）权限Grant、Revoke场景olap（Analysis） oltp（Transaction）DatabaseBigDataHadoop生态查询引擎组件 定位 架构 开发语言 存储 元数据 查询 安装…
2022/6/1 2:50:37 人评论 次浏览 -
数仓选型必列入考虑的OLAP列式数据库ClickHouse(中)
实战 案例使用 背景 ELK作为老一代日志分析技术栈非常成熟，可以说是最为流行的大数据日志和搜索解决方案；主要设计组件及架构如下：而新一代日志监控选型如ClickHouse、StarRocks特别是近年来对ELK地位发起较大的挑战，不乏有许多的大公司如携程，快手已开始把自己的日志…
2022/5/22 10:51:08 人评论 次浏览 -
ClickHouse 对付单表上亿条记录分组查询秒出, OLAP应用秒杀其他数据库
1. 启动并下载一个clickhouse-server, By default, starting above server instance will be run as default user without password.docker run -d --name ch-server --ulimit nofile=262144:262144 -p 8123:8123 -p 9000:9000 -p 9009:9009 yandex/clickhouse-server或…
2022/5/3 19:14:23 人评论 次浏览 -
|NO.Z.00019|——————————|Deployment|——|Hadoop&OLAP数据库管理系统.v19|---------------------------------|Kylin.
[BigDataHadoop：Hadoop&OLAP数据库管理系统.V19] [Deployment.OLAP数据库管理系统][|Kylin：Kylin构建Cube&实时OLAP.V2|]一、OLAP环境准备### --- OLAP环境准备~~~ # 进入服务部署目录 [root@hadoop02 ~]# cd /opt/yanqi/servers…
2022/4/18 19:13:00 人评论 次浏览 -
ClickHouse读书笔记(一)—ClickHouse的前世今生
第一章的内容是ClickHouse的诞生背景，相比其他数据库的优缺点。读此书时，我对一些数据库的概念没有认知，很容易被卡住，讲着讲着就不知道是在讲什么，特此，记录一些概念性的东西。 1、名词BI系统：商业智能系统，Business Intelligence。 OLAP：联机分析处理，On-Line…
2022/3/8 6:16:45 人评论 次浏览 -
数据库DB与数据仓库DW区别和联系
数据库（DB）和数据仓库（DW）的区别与联系 数据库与数据仓库基础概念： 数据库：传统的关系型数据库的主要应用，主要是基本的、日常的事务处理，例如银行交易。 数据仓库：数据仓库系统的主要应用主要是OLAP（On-Line Analytical Processing），支持复杂的分析操作，侧重…
2022/3/2 19:45:08 人评论 次浏览 -
【大数据】OLTP和OLAP，数据库和数据仓库
在接触大数据之前我们基本都是使用mysql数据库，这种定位为关系型的数据库主要是为了实时业务需要而建表，而在大数据中大多是以分析为主的，读多写少，且如果用传统的关系型数据库则经常会涉及到多表联合查询，因此这种关系型数据库并不适用于分析场景，本文主要是介绍OL…
2021/10/5 19:11:38 人评论 次浏览 -
【大数据】OLTP和OLAP，数据库和数据仓库
在接触大数据之前我们基本都是使用mysql数据库，这种定位为关系型的数据库主要是为了实时业务需要而建表，而在大数据中大多是以分析为主的，读多写少，且如果用传统的关系型数据库则经常会涉及到多表联合查询，因此这种关系型数据库并不适用于分析场景，本文主要是介绍OL…
2021/10/5 19:11:38 人评论 次浏览 -
传统数据库在分布式领域的探索
传统数据库分布式化 业务应用系统可以按照交易类型分为 OLTP 场景和 OLAP 场景两大类。OLTP 是面向交易的处理过程，单笔交易的数据量小，但是要在很短的时间内给出结果，典型场景包括购物、转账等；而 OLAP 场景通常是基于大数据集的运算，典型场景包括生成各种报表等。 …
2021/8/7 19:06:49 人评论 次浏览 -
传统数据库在分布式领域的探索
传统数据库分布式化 业务应用系统可以按照交易类型分为 OLTP 场景和 OLAP 场景两大类。OLTP 是面向交易的处理过程，单笔交易的数据量小，但是要在很短的时间内给出结果，典型场景包括购物、转账等；而 OLAP 场景通常是基于大数据集的运算，典型场景包括生成各种报表等。 …
2021/8/7 19:06:49 人评论 次浏览
