搜索结果
查询Tags标签: Streaming,共有 37条记录-
Flink实战(八十六):flink-sql使用(十三)Flink 与 hive 结合使用(五)Hive Streaming
声明:本系列博客是根据SGG的视频整理而成,非常适合大家入门学习。 《2021年最新版大数据面试题全面开启更新》 0 Hive Streaming A typical hive job is scheduled periodically to execute, so there will be a large delay. Flink supports to write, read and join t…
2021/6/11 2:27:31 人评论 次浏览 -
Spark综合性练习(Spark,Kafka,Spark Streaming,MySQL)
写在前面: 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新。由于水平有限,博客中难免会有一些错误,有纰漏之处恳…
2021/6/1 19:21:38 人评论 次浏览 -
春城无处不飞花,小白带你侃SparkStreaming(原理引入篇)
介绍完了SparkSQL,接下来让我们推开SparkStreaming的大门,接收新知识的洗礼。跟刚入坑SparkSQL时一样,让我们来回顾一下Spark的内置模块。 相信勤奋好学的大家肯定都还记得的对吧,那么接下来我们就要正式开始学习SparkStreaming咯~码字不易,先赞后看,养成习…
2021/6/1 18:26:48 人评论 次浏览 -
30岁以后搞Java已经没有前途?分享面经
前言 最近一个读者和我反馈,他坚持刷题2个月,终于去了他梦寐以求的大厂,薪资涨幅非常可观,期间面字节跳动还遇到了原题… 因为据我所知很多大厂技术面试的要求是:技术要好,计算机基础扎实,熟练掌握算法和数据结构,语言不重要,熟练度很重要。每一轮技术面试都可能…
2021/5/18 12:25:33 人评论 次浏览 -
PySpark之Structured Streaming基本操作
PySpark之Structured Streaming基本操作 思想:将实时数据流视为一张正在不断添加的数据的表,可以把流计算等同于在一个静态表上的批处理查询,Spark会在不断添加数据的无界输入表上运行计算,并进行增量查询。 编写Structured Streaming程序的基本步骤包括: 导入pyspar…
2021/5/16 10:55:16 人评论 次浏览 -
Spark Streaming + Elasticsearch构建App异常监控平台
本文已发表在《程序员》杂志2016年10月期。 如果在使用App时遇到闪退,你可能会选择卸载App、到应用商店怒斥开发者等方式来表达不满。但开发者也同样感到头疼,因为崩溃可能意味着用户流失、营收下滑。为了降低崩溃率,进而提升App质量,App开发团队需要实时地监控App异常…
2021/5/11 18:55:13 人评论 次浏览 -
Spark Streaming 实时计算在甜橙金融监控系统中的应用及优化
1写在前面天翼电子商务有限公司(简称“甜橙金融”)是中国电信的全资子公司,2011 年 3 月成立于北京,作为中国人民银行核准的第三方支付机构,是兼具金融、电信、互联网文化的跨界国家高新技术企业。目前公司对实时性计算的需要及应用越来越多,本文选取了其中之一的 S…
2021/4/8 10:11:42 人评论 次浏览