上一期:毕业设计项目:基于容器化的金融交易流水跨区域协同异常检测系统设计与实现-开发日记-01-环境搭建 - 滕王阁 这次就是核心服务的具体实现了,主要是后端部分,前端后面再做,再放一下完整架构图。 一、C 区 Gateway Gateway 是 C 区面向外部的统一业务 API 入口。使用 Fas
上一期:毕业设计项目:基于容器化的金融交易流水跨区域协同异常检测系统设计与实现-开发日记-01-环境搭建 - 滕王阁 这次就是核心服务的具体实现了,主要是后端部分,前端后面再做,再放一下完整架构图。 一、C 区 Gateway Gateway 是 C 区面向外部的统一业务 API 入口。使用 Fas
居然快毕业了,其实关于考研和工作一直在纠结,又想搞点项目和实习又想复习考研,9 月份了还在纠结我真是一个神人。 想起来之前写红帽考试的那个前言的时候才大二,刚刚回过去看写得真尬,尬得我直接把中间的胡言乱语全删了。 其实这里我想到了好多的话,如果是以前我包写出来了,现在就算了。 Anyway,这就是一
一、前言 上一期在这里🥰:大数据项目 在线教育实时数仓-01-用户行为采集平台 - 滕王阁 。 简介 在线教育业务流程可以以一个普通用户的浏览足迹为例进行说明,用户点开在线教育网站首页开始浏览,可能会通过分类查询也可能通过全文检索寻找自己中意的课程,这些课程都是存储在后台管理系统中的。 当用户寻找
一、前言 这个学期大数据项目是实训要求搭建一个电商数仓,我看老师发的资料好像是直接把尚硅谷的教程直接拿来用了🤔。 记录一下搭建过程吧🐔。 这是原教程的下载链接,我看有的地方用的东西太老的,做的过程中稍微改了一下(其实就是把一些软件换成了新版):https://pan.baidu.com/s/1G
一、前言 上课直接做项目好无聊,写篇文章磨洋工😗。 Apache Hive 是一个分布式、容错的数据仓库系统,支持大规模分析,并利用 SQL 支持分布式存储中的 PB 级数据的读写和管理。 Hive 可以理解成把你写的 SQL,翻译成对大数据文件的处理任务的一个工具。 比如你把数据放在 HDFS
一、虚拟机下载 虚拟机选择 VMware Workstation Pro,这是官网下载地址:Fusion and Workstation | VMware 。 随便吐槽一下,我不知道把下载链接藏这么深是何意味😕?而且你不登录还下载(下载链接会验证你是否登录)不了,本来网站就在国外,没有梯子网站都打
一、Kafka Producer Kafka Producer 是一个向 Kafka 集群发送消息的客户端程序。它负责以消息的形式将数据流发布到指定的主题中。 1、Working Principle of Kafka Producer(Kafka Producer 的工作原理) Producer 以
一、HQL Syntax(HQL 语法) Hive 提供了一种机制,可以在 Hadoop 中的数据之上投射结构,并使用一种类似 SQL 的语言——HiveQL (HQL) 来查询这些数据。 之所以使用 Hive,是因为 Hive 中的表与关系型数据库中的表非常相似。如果你熟悉 SQL,那么使用 Hi
一、Kafka Core Concepts(Kafka 核心概念) Apache Kafka 的核心是一个基于 **分区(Partition)**和 **多副本(Replication)**的分布式消息引擎,由 Zookeeper 协调管理。 在 Kafka 中,每条消息也被称为一条 记录(Reco