数据存储-大数据的三种存储方式
互联网时代各种存储框架层出不穷,眼花缭乱,比如传统的关系型数据库:Oracle、MySQL;新兴的NoSQL:HBase、Cassandra、Redis;全文检索框架:ES、Solr等。如何为自己的业务选取合适的存储方案,相信大家都思考过这个问题,本文简单聊聊我对Mysql、HBase、ES的理解,希望能和大家一起探讨进步,有不对的地方还请指出。MySQL:
Wesley13 Wesley13
3年前
mysql数据库中的数据导入与导出
需求:  在本地电脑上的mysql中创建了一个数据库,并且在该数据库中创建了很多表,表中数据比较多;  现在想换一台电脑,但是又不想重新建数据库、建表、造数据。解决方案:  利用mysql提供的命令,在本地将所需数据和表导出成.sql文件;  然后在另外一台电脑中使用mysql提供的命令,将导出的.sql文件导入,这样就能
Stella981 Stella981
3年前
Django上传excel表格并将数据写入数据库
前言:  最近公司领导要统计技术部门在各个业务条线花费的工时百分比,而jira当前的Tempo插件只能统计个人工时。于是就写了个报表工具,将jira中导出的个人工时excel表格导入数据库,在后端处理各个业务工时占比。后来研究了jira的API文档,放弃了之前的思路,直接调用jira API处理数据,这个先不谈。这
Easter79 Easter79
3年前
TiDB数据库 使用syncer工具同步实时数据
mysqlselectcampaign_id,count(id)fromcreative_outputgroupbycampaign_id;602843rowsinset(4min44.23sec)mysqlselectis_cr_own,count(id)fromcreative_o
Stella981 Stella981
3年前
Kettle下实现Excel数据导入至数据库
Kettle下实现Excel数据导入至数据库https://www.lanhusoft.com/Article/723.html(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.lanhusoft.com%2FArticle%2F723.html)本文分享CSD
Stella981 Stella981
3年前
Python大数据分析(二):大数据技术基础
文章目录(一)Linux系统和大数据(二)Hadoop(1)Hadoop包含哪些模块?(2)Hadoop的生态成员(3)哪些人在使用Hadoop?(三)Spark(1)Scala(2)RDD(3)主件(四)云计算(1)虚拟化技术
Wesley13 Wesley13
3年前
5步实现数据指标增长,提升数据分析能力
!5步实现数据指标增长,提升数据分析能力(https://s4.51cto.com/images/blog/202009/15/081547a226ce35f8ee53d7e5675f38cb.png?xossprocessimage/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_10
Easter79 Easter79
3年前
TiDB 助力卡思数据视频大数据业务创新
作者:刘广信,火星文化技术经理卡思数据是国内领先的视频全网数据开放平台,依托领先的数据挖掘与分析能力,为视频内容创作者在节目创作和用户运营方面提供数据支持,为广告主的广告投放提供数据参考和效果监测,为内容投资提供全面客观的价值评估。!图1卡思数据产品展示图(https://download.pingcap.com/images/blog
数据分析七大能力:梳理数据需求
大数据数据分析数据需求,就是业务部门对数据分析产出的需求。有小伙会说:这还有需求呀,我们公司都是一通电话:“歪!给我个XX数据,快!”就完事了,根本不存在啥需求。大家好,我是爱学习的小xiong熊妹。今天分享数据分析师必备的工作能力——需求梳理。需求梳理很不起眼,甚至很多小伙伴感受不到他的存在。但它结结实实影响到大家的下班时间和绩效。一、什么是数据需求?顾名
玩转云端 | 天翼云数据加密,护航企业数据安全
有交流就会产生信息,为了防止信息泄露,人们通常会采取一些特殊的措施来保护信息。很早以前,“数据加密”就出现在人类的生活中。比如:由姜子牙创造的历史上最早的密钥——阴符(兵符),兵符由两半组成,一半留给君主,另一半交给下属,需两半吻合后命令才能生效;厉害的武