Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如 ：MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。 以上是对sqoop的一个简单说明，具体我就不再多赘述。日常企业开发过程中，我们可能面对增删改查的业
转载
2021-12-15 10:35:49
616阅读
1评论
Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如 ：MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。 以上是对sqoop的一个简单说明，具体我就不再多赘述。日常企业开发过程中，我们可能面对增删改查的业
转载
2022-01-12 14:55:50
53阅读
cnanalClientAdapter – canal 1.1.1版本之后, 增加客户端数据落地的适配及启动功能, 目前支持功能:客户端启动器 同步管理REST接口 日志适配器, 作为DEMO 关系型数据库的数据同步(表对表同步), ETL功能 HBase的数据同步(表对表同步), ETL功能 (后续支持) ElasticSearch多表数据同步,ETL功能Canal Admin – canal-
设计模式的7大原则1.单一职责原则 SRP
2.里氏替换原则 LSP
3.依赖倒转原则 DIP
4.开闭原则 OCP
5.接口隔离法则 ISL
6.合成复合原则 CRP (CARP)
7.迪米特法则 LoD
————————————————————————————
(注意区分：单一职责 & 接口隔离)记忆方式： 一个【单身】的【里氏】拿着一本【倒转】又【半开半闭】的书，在思考： 如何实现
转载
2023-11-22 17:11:21
47阅读
sqoop我就不再这里给大家介绍了，能来到这里应该都知道
sqoop了。目前我写了一个demo，
springboot操作
sqoop。废话不多说，直入主题。 pom文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="://maven.a
转载
2021-06-03 19:54:00
71阅读
2评论
一、简介(http://start.spring.io/) Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。通过这种方式，Spring Boot致力于在蓬勃发展的快速应用开发领域(rapid appl
一、Linux下安装ElasticSearch 1、检测是否安装了Elasticsearch 2、安装JDK 3、下载Elasticsearch 解压Elasticsearch 移动Elasticsearch到/usr/local/elasticsearch 4、修改配置文件 进入/usr/loca
原创
2021-07-29 16:38:56
555阅读
目录1 概述2 Spring Data JPA整合2.1 pom文件2.2 配置文件2.3 实体类2.4 Dao接口2.5 启动类2.6 编写测试类3 Spring Data JPA核心接口3.1 Repository接口3.1.1 基于方法名称命名方式查询3.1.1.1 接口3.1.1.2 测试代码3.1.1.3 运行结果3.1.2 基于@Query注解查询与更新3.1.2.1 接口3.1.2
转载
2024-03-21 11:12:23
598阅读
目录前言：一、什么是mqtt二、主要思想发布/订阅模式三、MQTT重要概念3.1 MQTT Client3.2 MQTT Broker3.3 MQTT Connection3.4 MQTT主要参数四、软件和Apollo4.1 安装Apollo4.2 安装Postman 4.3 安装MQTTBox五、代码实现5.1 配置pom.xml5.2 配置MQTT服务器基本信息5.3 配置
一、准备工作
本地准备cas服务端（https://github.com/apereo/cas），下载cas代码并build成war包
本地准备Tomcat,并将打包好的cas包放至tomcat的webapps目录下,启动Tomcat
打开WEB-INF下application.proper
springboot结合dubbo使用dubbo结合spring需要在配置文件中配置，结合springboot时就可以使用application.yml配置文件或者application.properties。个人更喜欢结合springboot的使用。 不说那么多了，从代码中得到的才是最深沉的。 创建一个maven项目创建一个springboot提供者的modulestep0:创建好后pom.xm
转载
2024-02-29 20:31:54
42阅读
目录1.前言2.流程2.1导入依赖2.2用户实体类实现UserDetails2.3用户业务层实现UserDetailsService2.4编写SpringSecurity的配置类SecurityConfig3.效果演示 1.前言之前项目用的是SSM框架,所以我们选用的安全框架是shiro,但是因为技术主管把我们分散做的模块整合到一起做成微服务的形式,所以我们就用springboot重新将我们的项
转载
2024-03-18 09:53:27
79阅读
之前用myeclipse做的一个课设，用的ssm框架，没有maven，所以想着能不能用spring boot做一下这里说一下为什么要用spring boot 主要是最近在学spring boot啦，用这个项目来练一下手。 优点是显而易见的，spring boot相比于传统的spring省去了繁琐的配置，甚至这个项目中我都没有去管web.xml。只需要将必须的信息：如数据库信息，mapper文件位置
转载
2024-03-22 14:51:27
19阅读
工程简介项目地址页面效果（前台）后台项目技术框架：springboot视图技术：thymeleaf数据库实现：mybatis缓存：redis任务管理：邮箱消息队列：rabbitMQ权限管理：springsecurity评论系统：LeanCloud 导出功能：easyexcel视频播放器：DPlayer2 | Powerful danmaku video player | NPlayer(可以尝试一
转载
2024-03-07 11:41:51
36阅读
一、场景简介 最近在做公众号关键词回复方面的智能问答相关功能，发现用户输入提问内容和我们运营配置的关键词匹配回复率极低，原因是我们采用的是数据库的Like匹配。这种模糊匹配首先不是很智能，而且也没有具体的排序功能。为了解决这一问题，我引入了分词器+Lucene来实现智能问答。二、功能实现本功能采用springboot项目中引入Lucene相关包，然后实现相关功能。前提大家对springboot要
转载
2024-02-04 07:36:08
50阅读
阿里sentinel已适配springboot，整合非常简单，只需要添加一些配置就可以了，不需要写任何代码。但是如果有一些特殊需求，需要更细粒度的控制限流，就需要自己写些代码，比如对外的接口需要根据请求者ip，header中的user-agent或者其他信息限流，来防止恶意刷接口，或者爬虫，本人的项目就遇到了有人使用sqlmap工具来寻找sql注入漏洞和爬虫扫描接口，于是研究了一下sentinel
实战前言RabbitMQ 作为目前应用相当广泛的消息中间件，在企业级应用、微服务应用中充当着重要的角色。特别是在一些典型的应用场景以及业务模块中具有重要的作用，比如业务服务模块解耦、异步通信、高并发限流、超时业务、数据延迟处理等。RabbitMQ 官网拜读首先，让我们先拜读 RabbitMQ 官网的技术开发手册以及相关的 Features，感兴趣的朋友可以耐心的阅读其中的相关介绍，相信会有一定的收
Spring Boot集成Redis在Spring Boot项目中使用Redis时，需要如下几个步骤对Redis进行整合。1. 加入Redis和Jedis客户端依赖。<!-- 配置Redis依赖 -->
<dependency>
<groupId>org.springframework.boot</groupId&g
转载
2023-08-21 09:41:38
382阅读
说明:这里是在springboot已经整合了mybatis 实现了数据的增删查改的基础上再与shardingsphere进行整合. springboot与mybatis的整合 这里不再做介绍.关于shardingsphere这里也不做过多的介绍,可以去官网自行查看,官网地址:shardingsphere官方文档介绍读写分离产生的背景介绍: 面对
转载
2024-03-19 20:58:02
71阅读
springboot集成freemarker集成依赖把一些通用的导航栏定义成模板定义个全局layout（宏）创建首页index.ftl写个controller跳转过来 我们首先在layui上下了一套fly模板，然后首先把index.html的代码移过来看看效果（注意css,js文件都需要自己去官网下载，然后fly模板里的引入要自己去修改，不然会无法引入会导致排版出问题），现在的话这些数据都是静
转载
2024-03-19 06:39:40
81阅读
