Stella981 Stella981
4年前
ElasticSearch之安装及基本操作API
!(https://oscimg.oschina.net/oscnet/upb1199a4cc6dafbb796e5cb4ccf76dbde1ab.png)ElasticSearch是目前非常流行的搜索引擎,对海量数据搜索是非常友好,并且在高并发场景下,也能发挥出稳定,快速特点。也是大数据和索搜服务的开发人员所极力追捧的中间件。虽然Elas
Stella981 Stella981
4年前
ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台
ELKFilebeatKafkaZooKeeper构建海量日志分析平台参考:http://www.tuicool.com/articles/R77fieA(https://www.oschina.net/action/GoToLink?urlht
Stella981 Stella981
4年前
Spark Streaming和Kafka集成深入浅出
写在前面本文主要介绍SparkStreaming基本概念、kafka集成、Offset管理本文主要介绍SparkStreaming基本概念、kafka集成、Offset管理一、概述Spark Streaming顾名思义是spark的流式处理框架,是面向海量数据实现高吞吐量、高可用的分布式实时计算。关于spark的安装可以参考Spa
Easter79 Easter79
4年前
TARS:Linux基金会新一代海量服务开发框架
_本文来源:__开源中国__原文标题:__Linux基金会执行董事眼中的海量服务之道_在今年的美国加州圣迭戈开源峰会上,Linux基金会执行董事JimZemlin做了主题演讲。他把由腾讯主导开源并捐献给Linux基金会的微服务RPC框架TARS定义为“Newwaystoscale”,一种海量服务之道。与TARS一起在主题
Wesley13 Wesley13
4年前
TARS:Linux基金会新一代海量服务开发框架
_本文来源:__开源中国__原文标题:__Linux基金会执行董事眼中的海量服务之道_在今年的美国加州圣迭戈开源峰会上,Linux基金会执行董事JimZemlin做了主题演讲。他把由腾讯主导开源并捐献给Linux基金会的微服务RPC框架TARS定义为“Newwaystoscale”,一种海量服务之道。与TARS一起在主题
Stella981 Stella981
4年前
Kafka 集群在马蜂窝大数据平台的优化与应用扩展
_马蜂窝技术原创文章,更多干货请订阅公众号:mfwtech_Kafka是当下热门的消息队列中间件,它可以实时地处理海量数据,具备高吞吐、低延时等特性及可靠的消息异步传递机制,可以很好地解决不同系统间数据的交流和传递问题。Kafka在马蜂窝也有非常广泛的应用,为很多核心的业务提供支撑。本文将围绕Kafka在马蜂窝大数据平台的应用实践,介绍相
Wesley13 Wesley13
4年前
BI报表工具
现代社会科学和信息技术的发展,特别是互联网技术和云计算的发展,有两个特点:一是数据量大,活动量大;二是业务数据从非常枯燥的数据到海量的数据,结构和非结构数据、复杂数据、如何随着时间的推移收集和管理数据、研究数据和可视化以使其更高效和直观地帮助管理者做出最佳决策。在大数据和信息化浪潮的推动下,各大企业纷纷拥抱数据可视化技术,为企业决策提供直观、清晰的依据。
天翼云Serverless边缘容器下沉服务 促进企业聚焦业务创新
当前,我国经济社会各领域正加速向数字化转型迈进,随之涌现出海量的数据处理需求在边缘侧不断产生。根据信通院发布的数据显示,2021年我国边缘计算市场规模已经达到436.4亿元,其中边缘硬件规模市场为290.2亿元,边缘软件与服务市场规模达146.2亿元,
Scala网络爬虫实战:抓取QQ音乐的音频资源
引言在当今数字化时代,互联网中蕴藏着海量的数据,而网络爬虫技术则是获取这些数据的重要工具之一。而Scala作为一种功能强大的多范式编程语言,结合了面向对象和函数式编程的特性,为网络爬虫开发提供了更多的可能性。在本文中,我们将结合网络爬虫技术和Scala编程
C# 爬虫技术:京东视频内容抓取的实战案例分析
摘要随着互联网技术的飞速发展,数据的获取和分析变得愈发重要。爬虫技术作为数据获取的重要手段之一,广泛应用于各个领域。本文将重点探讨C语言在京东视频抓取中的实现过程,分析其技术细节,并提供相应的代码实现。引言京东作为中国领先的电商平台,拥有海量的商品信息和用