导读：在进行数据分析和建模的过程中，大量的时间花在数据准备上：加载、清理、转换和重新排列。本文将讨论用于缺失值处理的工具。缺失数据会在很多数据分析应用中出现。pandas的目标之一就是尽可能无痛地处理缺失值。作者：韦斯·麦金尼（WesMcKinney）译者：徐敬一来源：大数据DT（ID：hzdashuju）pandas对象的所有描述

导读：在进行数据分析和建模的过程中，大量的时间花在数据准备上：加载、清理、转换和重新排列。本文将讨论用于缺失值处理的工具。缺失数据会在很多数据分析应用中出现。pandas的目标之一就是尽可能无痛地处理缺失值。作者：韦斯·麦金尼（WesMcKinney）译者：徐敬一来源：大数据DT（ID：hzdashuju）pandas对象的所有描述

来源：Python数据科学作者：东哥起飞上一篇分享了一个从时间处理上的加速方法「」，本篇分享一个更常用的加速骚操作。for是所有编程语言的基础语法，初学者为了快速实现功能，依懒性较强。但如果从运算时间性能上考虑可能不是特别好的选择。本次东哥介绍几个常见的提速方法，一个比一个快，了解pandas本质，才能知道如何提速。下面是一个例子，数据获取方式见文末。

版本：7.0.0描述通过采样率设置，我们可以配置采样的数据量，如80%，50%等，这样做的目的是避免采集过分多的数据。但是，这样会丢失一些信息，如果恰好我们想查看的数据丢失了，就会导致排查问题难度提升，甚至遗漏问题。SkyWalking同时提供了数据清理机制，即我们采集的数据会保留多长时间。因为链路追踪这样的需求，大多数情

大家晚上好，最近忙每天忙于项目没有时间更新自己的博客，时间就是海绵嘛硬挤挤就是有的，咂看标题"流程图"，编程界的一个不可或缺的技能，特别是在做复杂的逻辑的时候要处理好每一步的关系，在数据中讲就是数据之间的关联关系，或者关联模型等，通俗点也就是父子，母子等关系。首先给大家介绍几款画流程图的软件：亿图图示，VISIO，百度脑图（在线使用），office等

作为国内顶级的数据领域技术盛会，10年来，DTCC见证了国内数据库技术的迅猛发展，各种分布式数据库、NoSQL、NewSQL技术异军突起，与Oracle、DB2等分庭抗礼，甚至大有超越之势。在这种背景下，ITPUB将组织历时半年的数据领域评选活动，向大家展现对数据领域起到了重大推动与贡献作用的热点技术、企业与技术专家。会议时间：2019050808

现代社会科学和信息技术的发展,特别是互联网技术和云计算的发展,有两个特点:一是数据量大,活动量大;二是业务数据从非常枯燥的数据到海量的数据,结构和非结构数据、复杂数据、如何随着时间的推移收集和管理数据、研究数据和可视化以使其更高效和直观地帮助管理者做出最佳决策。在大数据和信息化浪潮的推动下，各大企业纷纷拥抱数据可视化技术，为企业决策提供直观、清晰的依据。

Redis缓存穿透、缓存雪崩缓存雪崩，是指在某一个时间段，缓存集中过期失效。产生雪崩的原因之一，比如在写本文的时候，马上就要到双十二零点，很快就会迎来一波抢购，这波商品时间比较集中的放入了缓存，假设缓存一个小时。那么到了凌晨一点钟的时候，这批商品的缓存就都过期了。而对这批商品的访问查询，都落到了数据库上，对于数据库而言，

前言mysql数据库是现在应用最广泛的数据库系统。与数据库打交道是每个Java程序员日常工作之一，索引优化是必备的技能之一。为什么要了解索引真实案例案例一：大学有段时间学习爬虫，爬取了知乎300w用户答题数据，存储到mysql数据中。那时不了解索引，一条简单的“根据用户名搜索全部回答的sql“

一：为什么要进行数据库的备份？　最主要的原因：尽可能地减少损失，包括时间上、精神上和金钱上的损失。很多人都不注意备份数据，以致在发生问题后丢失大量的重要数据。要知道，在地球上网是很危险的，即使做好安全预防措施，也难免会发生不可预想的问题。因此，数据备份是日常必不可少的操作。数据库的备份用mys