Irene181 Irene181
4年前
一篇文章带你了解Python的分布式进程接口
一、前言    在Thread和Process中,应当优选Process,因为Process更稳定,而且,Process可以分布到多台机器上,而Thread最多只能分布到同一台机器的多个CPU上。Python的multiprocessing模块不但支持多进程,其中managers子模块还支持把多进程分布到多台机器上。可以写一个服务进程作为调度者,将任务分
Easter79 Easter79
3年前
stage的划分
stage的划分是以shuffle操作作为边界的,遇到一个宽依赖就分一个stage一个Job会被拆分为多组Task,每组任务被称为一个Stage就像MapStage,ReduceStage。Stage的划分在RDD的论文中有详细的介绍,简单的说是以shuffle和result这两种类型来划分。在Spark中有两类task,一类是shuffleMap
九路 九路
4年前
IntentService使用以及源码分析
一概述我们知道,在Android开发中,遇到耗时的任务操作时,都是放到子线程去做,或者放到Service中去做,在Service中开一个子线程来执行耗时操作。那么,在Service里面我们需要自己管理Service的生命周期,何时开启何时关闭,还是很麻烦的,还好Android给我们提供了一个这样的类,叫做IntentService那么Intent
ChatGPT ChatGPT
2年前
ChatGPT让沟通更智能、更便捷
ChatGPT让沟通更智能、更便捷ChatGpt是最近引起强烈关注的一种技术,它可以实现聊天机器人,为使用者解决复杂的信息获取和学习任务。但他也不仅仅是一个聊天机器人,它是一种基于深度学习算法的自然语言生成模型,由OpenAI公司开发。它可以模拟人类的对话
Stella981 Stella981
3年前
JFinal 整合Quartz
    项目中要加入调度和计划任务等功能,所以选择Quartz调度插件,原先都是在S2SH上整合的。现在项目用JFinal框架,不得不说JFinal框架的定制性真好,可以自己根据项目要求进行修改,并且很节省时间。    原先当然是先找有没有JFinal的quartz插件,先是找到了JFinalext,里面有一个QuartzPlugin
Wesley13 Wesley13
3年前
2020实战复盘:如何从0到1搭建数据传输平台产品DTS?
!(https://oscimg.oschina.net/oscnet/ca2eabac90fa498a9cfc6b699d66cd5c.gif)2020年下半年的主要任务,就是从0到1搭建了数据传输服务平台产品。平稳上线后,基本达到预期,实现了最初的产品规划目标。这里做个复盘,记录下从0到1的过程,包括:产品设计
Wesley13 Wesley13
3年前
Java多线程之线程池
 newFixedThreadPool:固定线程池,核心线程数和最大线程数固定相等,而空闲存活时间为0毫秒,说明此参数也无意义,工作队列为最大为Integer.MAX\_VALUE大小的阻塞队列。当执行任务时,如果线程都很忙,就会丢到工作队列等有空闲线程时再执行,队列满就执行默认的拒绝策略 newCachedThreadPool:带缓冲
Stella981 Stella981
3年前
Node.js 应用性能优化的五个技巧
在这个由软件定义的世界里,企业往往是通过Web应用和移动应用程序来提供他们大部分的服务。所以对企业来说,一个非常重要的任务就是要确保用户拥有出色的使用体验。Node.js(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.oneapm.com%2Fai%2Fnodejs.html
3A网络 3A网络
2年前
一招教你如何高效批量导入与更新数据
一招教你如何高效批量导入与更新数据前言如果有一张表,我们既想对它更新,又想对它插入应该如何操作?可以使用UPDATE和INSERT完成你的目标。如果你的数据量很大,想尽快完成任务执行,可否有其他方案?那一定不要错过GaussDB(DWS)的MERGEINTO功能。MERGEINTO概念MERGEINTO是SQL2003
茅台元宇宙游戏被玩家质疑“割韭菜”
元宇宙领域近两年变得很火爆,各行各业都纷纷加入其中。而贵州茅台似乎也想借此出圈,在今年元旦推出了自己的元宇宙APP——巽风APP。这款APP模拟了一个茅台镇的场景,玩家需要完成任务获得积分,并且排名靠前的才能拿到原价购买茅台酒的资格。不过这款APP仅上线两