Fork me on GitHub
摘要:在之前的18次文章中,我们实现了广告系统的 ,`广告检索 服务发现Eureka 服务调用Feign 网关路由Zuul 错误熔断Hystrix Spring Cloud`组件。 简单调用关系: 但是系统往往都会报错,我们之前定义了一些容错类和方法,但是只是在控制台可以看到错误信息,我们想要统计一些数据 阅读全文
posted @ 2019-08-15 22:48 IsaacZhang 阅读 (150) 评论 (0) 编辑
摘要:Docker中部署tomcat相信大家也都知道,不知道的可以google 或者bing 一下。这里主要是为了记录在我们启动容器之后,tomcat需要直接定位到网站信息,而不是打开域名之后,还得加个blog后缀才能访问到我们的网站首页。 进到 修改 server.xml。 在我们安装完docker容器 阅读全文
posted @ 2019-08-14 20:52 IsaacZhang 阅读 (66) 评论 (0) 编辑
摘要:根据三个维度继续过滤 在上一节中我们实现了根据流量信息过滤的代码,但是我们的条件有可能是多条件一起传给我们的检索服务的,本节我们继续实现根据推广单元的三个维度条件的过滤。 在 类中添加过滤方法 定义三个方法实现过滤 根据推广单元id获取推广创意 我们知道,推广单元和推广创意的关系是多对多,从上文我们 阅读全文
posted @ 2019-08-13 22:26 IsaacZhang 阅读 (199) 评论 (0) 编辑
摘要:广告检索服务 功能介绍 媒体方(手机APP打开的展示广告,走在路上看到的大屏幕广告等等) 请求数据对象实现 从上图我们可以看出,在媒体方向我们的广告检索系统发起请求的时候,请求中会有很多的请求参数信息,他们分为了三个部分,我们来编码封装这几个参数对象信息以及我们请求本身的信息。Let's code. 阅读全文
posted @ 2019-08-12 22:24 IsaacZhang 阅读 (144) 评论 (0) 编辑
摘要:实现增量数据索引 上一节中,我们为实现增量索引的加载做了充足的准备,使用到 开源组件来实现MySQL 的binlog监听,关于binlog的相关知识,大家可以自行网络查阅。或者可以 本节我们将根据binlog 的数据对象,来实现增量数据的处理,我们构建广告的增量数据,其实说白了就是为了在后期能把广告 阅读全文
posted @ 2019-08-10 22:15 IsaacZhang 阅读 (141) 评论 (1) 编辑
摘要:MySQL Binlog简介 什么是binlog? 一个二进制日志,用来记录对数据发生或潜在发生更改的SQL语句,并以而进行的形式保存在磁盘中。 binlog 的作用? 最主要有3个用途: 数据复制(主从同步) Mysql 的Master Slave协议,让Slave可以通过监听binlog实现数据 阅读全文
posted @ 2019-08-09 22:02 IsaacZhang 阅读 (186) 评论 (0) 编辑
摘要:上一节我们实现了索引基本操作的类以及索引缓存工具类,本小节我们开始实现加载全量索引数据,在加载全量索引数据之前,我们需要先将数据库中的表数据导出到一份文件中。Let's code. 1.首先定义一个常量类,用来存储导出文件存储的目录和文件名称 因为我们导出的文件需要在搜索服务中使用到,因此,我们将文 阅读全文
posted @ 2019-08-08 22:45 IsaacZhang 阅读 (232) 评论 (0) 编辑
摘要:"上一节" 我们分析了广告索引的维护有2种, 和`增量索引维护`。因为广告检索是广告系统中最为重要的环节,大家一定要认真理解我们索引设计的思路,接下来我们来编码实现索引维护功能。 我们来定义一个接口,来接收所有index的增删改查操作,接口定义一个范型,来接收2个参数, 代表我们索引的健值, 代表返 阅读全文
posted @ 2019-08-07 23:05 IsaacZhang 阅读 (56) 评论 (0) 编辑
摘要:索引设计介绍 在我们广告系统中,为了我们能更快的拿到我们想要的广告数据,我们需要对广告数据添加类似于数据库index一样的索引结构,分两大类: 和`倒排索引`。 正向索引 通过唯一键/主键生成与对象的映射关系。 比如,我们从数据库中查询数据的时候,根据数据主键ID查询当前记录,其实就是一个正向索引的 阅读全文
posted @ 2019-08-06 21:44 IsaacZhang 阅读 (54) 评论 (0) 编辑
摘要:"回顾传统垃圾回收器" HotSpot 垃圾收集器实现 Serial Collector(串型收集器) 使用场景,大多数服务器是单核CPU。 适用收集场景:1. 新生代收集(Young Generation Collection)2. 老年代收集(Old Generation Collection) 阅读全文
posted @ 2019-08-05 20:09 IsaacZhang 阅读 (34) 评论 (0) 编辑
摘要:上一节我们使用了Ribbon(基于 )进行微服务的调用,Ribbon的调用比较简单,通过Ribbon组件对请求的服务进行拦截,通过 获取到服务实例的 ,然后再去调用API。本节课我们使用更简单的方式来实现,使用声明式的 服务客户端 ,我们只需要使用Feign来声明接口,利用 来进行配置就可以使用了, 阅读全文
posted @ 2019-08-04 23:07 IsaacZhang 阅读 (51) 评论 (0) 编辑
摘要:在使用Ribbon调用广告投放系统API之前,我们需要先创建2个VO对象, ,`AdPlanGetRequestVO`. 在 启动类中,添加 客户端。 创建一个controller,来测试调用广告提供系统的API 阅读全文
posted @ 2019-07-31 21:24 IsaacZhang 阅读 (32) 评论 (0) 编辑
摘要:搜索系统启动主类 配置文件 阅读全文
posted @ 2019-07-30 22:02 IsaacZhang 阅读 (28) 评论 (0) 编辑
摘要:工作流程 项目依赖 阅读全文
posted @ 2019-07-30 21:55 IsaacZhang 阅读 (27) 评论 (0) 编辑
摘要:在前面的过程中,我们创建了4个project: "服务发现" 我们使用Eureka 作为服务发现组件,学习了 ,`Eureka Client`的使用。 Eureka Server 1. 加依赖 2. 加注解 3. 改配置 使用Sprint Boot 项目三部曲,我们可以快速添加一个新组件,并正常使用 阅读全文
posted @ 2019-07-29 23:23 IsaacZhang 阅读 (57) 评论 (0) 编辑
摘要:DAO层设计实现 这里我们使用 来实现数据库操作,当然大家也可以使用 ,都是一样的,我们依然以用户表操作为例: JPARepository 的默认实现方法,如果我们只是继承了 而没有实现具体的操作方法,我们也是可以通过使用它的默认方法来做 操作的,如下: 功能Service实现 创建service 阅读全文
posted @ 2019-07-29 19:51 IsaacZhang 阅读 (47) 评论 (0) 编辑
摘要:广告投放系统启动主类说明 配置信息 创建实体对象 实体类和数据库表一般是一一对应,通常称之为 ,以用户表为例: "Lombok传送门" 其他的数据库对应实体类( ,`AdPlan AdCreative AdUnitDistrict AdUnitHobby AdUnitKeyword Relation 阅读全文
posted @ 2019-07-28 20:00 IsaacZhang 阅读 (65) 评论 (0) 编辑
摘要:一个大的系统,在代码的复用肯定是必不可少的,它能解决: 1. 统一的响应处理(可以对外提供统一的响应对象包装) 2. 统一的异常处理(可以将业务异常统一收集处理) 3. 通用代码定义、配置定义(通用的配置信息放在统一的代码管理中,便于维护和更新) 创建项目 POM文件 项目结构 vo (统一响应对象 阅读全文
posted @ 2019-07-27 19:59 IsaacZhang 阅读 (107) 评论 (0) 编辑
摘要:Zuul(Router and Filter) WIKI: "传送门" 作用 1. 认证,鉴权(Authentication/Security) 2. 预判(Insights) 3. 压力测试(Stress Testing) 4. 灰度/金丝雀测试(Canary Testing) 5. 动态路由(D 阅读全文
posted @ 2019-07-26 20:29 IsaacZhang 阅读 (90) 评论 (1) 编辑
摘要:什么是广告系统? 主要包含: 广告主投放广告的《广告投放系统》 媒体方(广告展示媒介 )检索广告用的《广告检索系统》 广告计费系统(按次,曝光量等等) 报表系统 Etc. 使用技能栈 JDK1.8 MySQL 8+ Maven 3+ Spring cloud Greenwich.SR2 Eureka 阅读全文
posted @ 2019-07-26 07:43 IsaacZhang 阅读 (151) 评论 (0) 编辑