CuterCorley CuterCorley
4年前
Python数据分析实战(1)数据分析概述
一、入门数据分析1.大数据时代的基本面大数据产业发展现状:现在数据已经呈现出了爆炸式的增长,每一分钟可能就会有:13000个iPhone应用下载Twitter上发布98000新微博发出1.68亿条Email淘宝双十一10680个新订单12306出票1840张在大数据时代,出现了三大变革:从随机样本到全量数据
BichonCode BichonCode
4年前
大数据排序
一、如何给100亿个数字进行排序? 1.1解答:1.把这个37GB的大文件,用哈希分成1000个小文件,每个小文件平均38MB左右(理想情况),把100亿个数字对1000取模,模出来的结果在0到999之间,每个结果对应一个文件,所以我这里取的哈希函数是hx%1000,哈希函数取得"好",能使冲突减小,结果分布均匀。2.拆分完了之后
Wesley13 Wesley13
3年前
mysql数据库中的数据导入与导出
需求:  在本地电脑上的mysql中创建了一个数据库,并且在该数据库中创建了很多表,表中数据比较多;  现在想换一台电脑,但是又不想重新建数据库、建表、造数据。解决方案:  利用mysql提供的命令,在本地将所需数据和表导出成.sql文件;  然后在另外一台电脑中使用mysql提供的命令,将导出的.sql文件导入,这样就能
Stella981 Stella981
3年前
GeoJson数据合并
本文主要是基于geojsonmerge,实现多个geojson文件合并为一个geojson文件,以便实现基于该文件进行数据分析展示geojson合并概述当前在datav的geoatlas中,可以下载单个地市或区县的数据,例如福建省下面每个地市都可以单独下载一个geojson文件,现在需要将所有地市的geojson合并为
Stella981 Stella981
3年前
Kettle下实现Excel数据导入至数据库
Kettle下实现Excel数据导入至数据库https://www.lanhusoft.com/Article/723.html(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.lanhusoft.com%2FArticle%2F723.html)本文分享CSD
Wesley13 Wesley13
3年前
PID控制器开发笔记之十三:单神经元PID控制器的实现
神经网络是模拟人脑思维方式的数学模型。神经网络是智能控制的一个重要分支,人们针对控制过程提供了各种实现方式,在本节我们主要讨论一下采用单神经元实现PID控制器的方式。1、单神经元的基本原理  单神经元作为构成神经网络的基本单位,具有自学习和自适应能力,且结构简单而易于计算。接下来我们讨论一下单神经元模型的基本原理。(1)、单神经元模
Stella981 Stella981
3年前
Python大数据分析(二):大数据技术基础
文章目录(一)Linux系统和大数据(二)Hadoop(1)Hadoop包含哪些模块?(2)Hadoop的生态成员(3)哪些人在使用Hadoop?(三)Spark(1)Scala(2)RDD(3)主件(四)云计算(1)虚拟化技术
数据分析七大能力:梳理数据需求
大数据数据分析数据需求,就是业务部门对数据分析产出的需求。有小伙会说:这还有需求呀,我们公司都是一通电话:“歪!给我个XX数据,快!”就完事了,根本不存在啥需求。大家好,我是爱学习的小xiong熊妹。今天分享数据分析师必备的工作能力——需求梳理。需求梳理很不起眼,甚至很多小伙伴感受不到他的存在。但它结结实实影响到大家的下班时间和绩效。一、什么是数据需求?顾名
VR虚拟技术的具体运用华锐互动
1.地产行业通过楼盘虚拟可体现楼盘在未来的真实景观、周边的环境及配套设施,可以验证客户所购买的单位与周边环境的协调关系、通过该户型的窗户可真切的看到未来属于自己的景观。给客户提供一种崭新的方式展示、宣传楼盘;完美体现了客户的设计方案,通过第一人称角色切换,给予购房者以真实在场,亲临其景的感受;在同一角度,对同一户型尝试不同的装潢设计;实时变换房间的装修材料,
云启芯篇!天翼云斩获一云多芯优秀案例奖!
近日,由中国信息通信研究院(以下简称中国信通院)、中国通信标准化协会主办的“云启芯篇,一云多芯激活新质生产力”主题交流会在北京举行。会上,天翼云作为核心参编单位出席《一云多芯迁移能力要求》标准发布仪式,该标准的发布为推动企业一云多芯各项能力建设、高效安全迁移和适配相关资源提供参考指南;天翼云助力打造的“安徽省政务云项目案例”获得一云多芯优秀案例奖,其技术和服务能力再获业界权威认可。