寻一款基于Kafkaconnect的商用级数据迁移工具

软件环境Hadoop:2.7,3.1(sincev2.5)Hive:0.13-1.2.1HBase:1.1,2.0(sincev2.5)Spark(optional)2.3.0K ... [详细]

springboot基于redis配置session共享项目环境配置pom.xml引入依赖application.properties配置Cookie序列化（高版本不需要）测试启 ... [详细]

前言大厂面试真题向来都是各大求职者的最佳练兵场，而今天小编带来的便是“HUAWEI”面经！这是一次真实的面试经历，虽然不是我自己亲身经历 ... [详细]

前言最近一段时间在整公司项目里一个功能的优化，用到了多线程处理。期间也是踩了不少的坑，在这里想说下我遇到的问题和注意事项。以及怎样知道启动的那些多线程都 ... [详细]

kafka教程基本概念 ... [详细]

大家好，这是一个为了梦想而保持学习的博客。这个专题会记录我对于KAFKA的学习和实战经验，希望对大家有所帮助，目录形式依旧为问答的方式，相当于是模拟面试。一、概述在对kafka有了 ... [详细]

一.IDEA开发环境1.pom文件设置1.8 ... [详细]

大家好，今天分享的议题主要包括几大内容：带大家回顾一下大数据在国内的发展，从传统数仓到当前数据中台的演进过程；我个人认为数 ... [详细]

“阅读本文大概需要3分钟。”一、不记录程序部署在哪里“我：他妈的，这个程序明明一直在正确产生日志，可它到底运行在哪里？怎么我 ... [详细]

update之后，写MySql，再写入Redis,替旧数据（可在MySql端定义CRUD触发器，触发后写数据到Redis，也可Redis端解析binlog） ... [详细]

ApacheKafka是一个开源、分布式发布订阅消息系统，主要设计了下面这些特性：持久化消息：从大数据中提取真正的数据值，任何类型的数据丢失都不能够再获取。 ... [详细]

技术方案：Spark、kafka、opentsdb、Yahoo的egads模型静态训练：采用两种算法进行模型的训练：指数移动平均和HotWinters，模型一天训练一次，即每天0点开始训练， ... [详细]

此处讲解单机安装kafka kafka是LinkedIn开发并开源的一个分布式MQ系统，现在是Apache的一个孵化项目。在它的主页描述kafka为一个高吞吐量的分布式（能将消息分 ... [详细]

简单谈一些JSON数据处理的小知识。近期工作中，因为要把数据库数据实时更新到elasticsearch，在实践过程中遇到了一些JSON数据处理的问题。实 ... [详细]

目录一、简介二、搭建消息生产者端三、搭建消息消费者端四、消息重复消费问题五、消息持久化六、总结一、简介在实际项目中，服务与服务之间的通信往往我们会采用消 ... [详细]