Stella981 Stella981
3年前
Canal——增量同步MySQL数据到ElasticSearch
!(https://img2018.cnblogs.com/ibeta/1577453/201911/1577453201911091027463801995267551.png)1.准备1.1.组件JDK:1.8版本及以上;ElasticSearch:6.x版本,目前貌似不支持7.x版本;
Stella981 Stella981
3年前
SQL Server 迁移数据到MySQL
SQLServer迁移数据到MySQL一、背景由于要在sqlserver中导出一些报表还要对一些表进行一些特殊处理,好久没用功sqlserver了,想着导入到mysql中更好操作些,所以需要把SQLServer的数据转移到MySQL;由于涉及的表比较多,所以想在MySQL中生成对应表并导入数据;上网找了些资料,如:将AC
Easter79 Easter79
3年前
TiKV 是如何存取数据的(下)
上篇文章(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fzhuanlan.zhihu.com%2Fp%2F46372968)中,我们介绍了与TiKV处理读写请求相关的基础知识,下面将开始详细的介绍TiKV的读写流程。Enjoy~作者:唐刘@siddontang(h
Stella981 Stella981
3年前
Hadoop 中利用 mapreduce 读写 mysql 数据
有时候我们在项目中会遇到输入结果集很大,但是输出结果很小,比如一些pv、uv数据,然后为了实时查询的需求,或者一些OLAP的需求,我们需要mapreduce与mysql进行数据的交互,而这些特性正是hbase或者hive目前亟待改进的地方。好了言归正传,简单的说说背景、原理以及需要注意的地方:1、为了方便MapReduce
Stella981 Stella981
3年前
MapReduce原理和WordCount数据详细过程
1.MapReduce原理 1.1MapReduce简介     MapReduce是一种分布式计算模型,是Google提出的,主要用于搜索领域,解决海量数据的计算问题。   MR有两个阶段组成:Map和Reduce,用户只需实现map()和reduce()两个函数,即可实现分布
Wesley13 Wesley13
3年前
UPUPW数据库密码的修改
UPUPW绿色服务器平台是Windows下很有特色的一款免费服务器PHP套件,包括Apache,Nginx和Kangle三大核心,UPUPWPHP套件可运行Discuz!X3.4phpwind9.Xdedecms5.7wordpress5.X等程序。官方网站:http://www.upupw.netWin10环境,下载了"UPUPW\_AP7
Stella981 Stella981
3年前
Django 数据库模块 单独使用
pipinstalldjangopipinstallpsycopg2pipinstallmysqlclientEntity.pyfromdjango.dbimportmodelsfromdjango.confimportsettings
Stella981 Stella981
3年前
Redis 底层数据结构介绍
!Redis底层数据结构(https://oscimg.oschina.net/oscnet/2bdc88a69f3d195776f6b395ddc914775f8.png)Redis底层数据结构版本:2.9支持的数据类型:1.字符串2.散列3.列表4.集合5.有序集合字符串
Stella981 Stella981
3年前
Cache缓存及数据处理流程
第一,在应用程序中有三个线程存在:主线程(随activity的声明周期启动销毁)、feed初始化线程(进入程序时只运行一次,用于加载相册初始信息)、feed监听线程(一直在跑,监听相册和相片的变更)。第二,不考虑CacheService启动的主要流程归纳如下:1.首次进入程序Gallery调用onCreate,此时发送初始化消息进入
大数据建模、分析、挖掘技术应用
时间2022年8月5日—2022年8月9日北京(同时转线上直播)(5日报到,6日9日上课)课程第一天一、大数据概述二、大数据处理架构Hadoop三、分布式文件系统HDFS四、分布式数据库HBase第二天五、MapReduce六、Spark七、IPythonNotebook运行PythonSpark程序八、PythonSpark集成开发环境第三