Prodan Labs Prodan Labs
4年前
IoT基础架构的演进 — Kuiper
EMQXKuiper是映云科技开源的轻量级物联网边缘数据分析和流式处理软件,Kuiper设计的一个主要目标就是将在云端运行的实时流式计算框架(如ApacheSpark,ApacheStorm和ApacheFlink等)迁移到边缘端。Kuiper参考了云端流式处理项目的架构与实现,结合边缘流式数据处理的特点,采用了编写基于源(Sou
DevOpSec DevOpSec
4年前
nginx安全配置
安全是一个重要的问题,必须引起注意。1.nginx介绍nginx本身不能处理PHP(http://www.ttlsa.com/php/"php"),它只是个web服务器,当接收到请求后,如果是php请求,则发给php解释器处理,并把结果返回给客户端。nginx一般是把请求发fastcgi管理进程处理,fastcgi管理进程选择cgi子
Easter79 Easter79
4年前
springboot2.0结合fastdfs实现文件分布式上传
1\.引入依赖在父工程中,我们已经管理了依赖,版本为:<fastDFS.client.version1.26.7</fastDFS.client.version因此,这里我们直接在工程的pom.xml中引入坐标即可:<dependency<groupIdcom.githu
Stella981 Stella981
4年前
SpringBoot开发案例之整合Dubbo分布式服务
!(https://oscimg.oschina.net/oscnet/28e6892843e943139df80dc6571b37ee.jpg)前言在SpringBoot很火热的时候,阿里巴巴的分布式框架Dubbo不知是处于什么考虑,在停更N年之后终于进行维护了。在之前的微服务中,使用的是当当维护的版本Dubbox,整合方
Stella981 Stella981
4年前
Babel 处理 webpack 无法处理的 ES 语法(Babel 6.x 和 Babel 7.x 有区别)(二)
//这是main.js是我们项目的js入口文件//1:a导入jQuery,引入jQuery包用$变量接收,此方法与node中const$require('jquery')同//此为ES6中导入模块的方式//由于ES6的语法太高级,浏览器解析不了次引入方式import$from'jqu
Stella981 Stella981
4年前
PCA (主成分分析)详解 (写给初学者) 结合matlab
(转载请注明出处)一、简介     PCA(PrincipalComponentsAnalysis)即主成分分析,是图像处理中经常用到的降维方法,大家知道,我们在处理有关数字图像处理方面的问题时,比如经常用的图像的查询问题,在一个几万或者几百万甚至更大的数据库中查询一幅相近的图像。这时
Stella981 Stella981
4年前
MapReduce的自定义排序、分区和分组
自定义排序(WritableComparable)当写mr程序来处理文本时,经常会将处理后的信息封装到我们自定义的bean中,并将bean作为map输出的key来传输而mr程序会在处理数据的过程中(传输到reduce之前)对数据排序(如:map端生成的文件中的内容分区且区内有序)。操作:自定
Python进阶者 Python进阶者
1年前
盘点一个Python自动化办公Excel数据处理的需求
大家好,我是Python进阶者。一、前言前几天在Python白银交流群【干锅牛蛙】问了一个Python处理Excel数据的问题。问题如下:有两个问题哈:1、表头有合并单元格识别不出来,如何处理类似下图2、遇到单元格有公式自动识别成了0,如何处理,保留计算后
探讨篇(四):分布式数据访问解决方案
背景如果数据在同一个服务的同一个数据库,通过SQL即可查询相对比较简单,但当数据被分布到不同服务不同的数据库中时,访问组合数据的操作就变的比较困难。针对这个问题,本文描述了服务读取不同服务的数据库的几种方法:服务间通信模式、数据缓存模式、数据复制模式、数据
京东云开发者 京东云开发者
6个月前
深入理解分布式锁:原理、应用与挑战
作者:京东物流刘浩前言在单机环境中,我们主要通过线程间的加锁机制来确保同一时间只有一个线程能够访问某个共享资源或执行某个关键代码块,从而防止各种并发修改异常。例如,在Java中提供了synchronized/Lock。但是在分布式环境中,这种线程间的锁机制