课程安排 一、大数据概述 二、大数据处理架构Hadoop 三、分布式文件系统HDFS 四、分布式数据库HBase 五、MapReduce 六、Spark 七、IPythonNotebook运行PythonSpark程序 八、PythonSpark集成开发环境 九、PythonSpark决策树二分类与多分类 十、PythonSpark支持向量机 十一

区块链的算法主要有两个部分，一个是哈希算法，一个是非对称加密。哈希（Hash）是一种加密算法，也称为散列函数或杂凑函数。哈希函数是一个公开函数，可以将任意长度的消息M映射成为一个长度较短且长度固定的值H（M），称H（M）为哈希值、散列值（HashValue）、杂凑值或者消息摘要。它是一种单向密码体制，即一个从明文到密文的不可逆映射，只有加密过程，没有解密过

iBase4J是基于java的开源框架搭建分布式系统架构，使用到的开源框架有：SpringMVC,Mybatis,Redis数据和session缓存,分布式,单点登录,shiro权限管理,dubbo扩展,Rest等等；http://git.oschina.net/iBase4J/iBase4J(http://git.oschina.net/iBase4J

SpringCloud提供的服务  配置管理服务注册服务发现断路器负载均衡智能路由服务间调用一次性令牌微代理思维导图模板全局锁控制总线分布式式会话集群状态领导选举分布式消息  子项目功能说明SpringCloudConfig配置中心，利用git来集

1、GIT基础GIT是一个分布式版本管理系统，速度快，适合大规模，跨地区多人协同开。SVN是一个集中式版本管理系统。（1）GIT生态GIT分布式版本管理系统Gitlabgit私库解决方案Githubgit公有库解决方案（2）Git安装Centos：yuminstall

1基本概念什么是ShardingSphere1)一套开源的分布式数据库中间件解决方案2)有三个产品:ShardingSphereJDBC、ShardingSphereProxy、ShardingSphereSidecar3)定位为关系型数据库中间件,合理在分布式环境下使用关系型数据库

HadoopMapReduceV2(Yarn)框架简介原HadoopMapReduce框架的问题对于业界的大数据存储及分布式处理系统来说，Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架，对于Hadoop框架的介绍在此不再累述，读者可参考Hadoop官方简介(https://www.oschina.net/action

Celery异步分布式什么是celery？他是一个python开发的异步分布式任务调度模块celery本身不提供消息服务，使用第三方服务，也就是broker来传递任务，目前支持rabbitmq，redis，数据库等等。我们使用redis连接URL的格式为：redis://:password@hostname:port/

EKL核心组成1.ElasticSearch开源分布式搜索引擎，他的特点是分布式、零配置、自动发现、索引自动分片，索引副本机制，restful接口，多数据源，自动搜索负载。安装ElasticSearch  高可用，易扩展，支持集群(cluster),分片和复制(sharding和replicas)验证启动：curlXGETht

改进式背景差分算法研究改进式背景差分算法，并应用于监控系统中。针对人流量较少的监控情况，提出一种基于计算机视觉的嵌入式监控系统解决方案，其以DSPDM642为核心处理芯片，可对3路视频视角同时处理。系统利用动态权值的改进式背景差分算法对视频流进行实时监控，若发现异常事件，则自动存储一段时间的视频数据，并利用H.264压缩后保存至外存中以供事后取证