Stella981 Stella981
3年前
Kafka源码阅读环境搭建
kafka主要是由scala写,其源码质量高,考虑到新版本提交人员的水平高低不同,对阅读源码不太好,因此选择早期的0.10.1版本。下面记录一下搭建kafka源码阅读环境,后面使用。搭建的基本环境:OS:Mac(10.12.x);JDK:1.8.0\_191;ScalaJDK:2.11.7;Gradle:4.8.1安装sca
Stella981 Stella981
3年前
Gradle的基本使用
Gradle的介绍Gradle是一个基于ApacheAnt和ApacheMaven概念的项目自动化建构工具。它使用一种基于Groovy的特定领域语言(DSL)来声明项目设置,抛弃了基于XML的各种繁琐配置。面向Java应用为主。当前其支持的语言限于Java、Groovy和Scala,计划未来将支持更多的语言。Gra
Wesley13 Wesley13
3年前
Kafka是什么,JMS是什么,常见的类JMS消息服务器,为什么需要消息队列(一)
1、Kafka是什么ApacheKafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 Kafka最初是由LinkedIn开发,并于2011年初开源。2012年10月从ApacheIncubator毕业。该项目的目标是为处理实时数据提供一个统一、高通量、低等待的平台。
Stella981 Stella981
3年前
Kafka初入门简单配置与使用
一Kafka概述1.1Kafka是什么在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。1)ApacheKafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。2)Kafka最初是由LinkedIn开发
Stella981 Stella981
3年前
Graphviz4S
前言    之前需要在Scala中用到类似python的graphviz(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fgithub.com%2Fxflr6%2Fgraphviz)库的功能,用来在Mxnet中可视化网络结构,但是在网上搜索了一下,没有找到好用的库,所以就自
Wesley13 Wesley13
3年前
Java版Kafka使用及配置解释
Java版Kafka使用及配置解释一.Java示例kafka是吞吐量巨大的一个消息系统,它是用scala写的,和普通的消息的生产消费还有所不同,写了个demo程序供大家参考。kafka的安装请参考官方文档。引入Maven库首先我们需要新建一个maven项目,然后在pom中
Stella981 Stella981
3年前
Kafka源码调试环境搭建
写在前面1.用到了kafka,于是借机会看看代码,顺便复习下Scala,看到一半,换电脑了,搭环境有搭了半天,所以记录下.注意这里是0.8.2.2版本,因为公司用的就是这个版本.依赖的软件1.Git2.ScalaIDE(4.4.1)3.Gradle4.ZooKeeper环
流浪剑客 流浪剑客
1年前
「更新」IntelliJ IDEA 2023 .2.3汉化激活版 支持M1
是一款由JetBrains开发的集成开发环境(IDE),专门为Java语言设计,并且支持Kotlin、Groovy、Scala等多种编程语言和技术。它的智能化和高效性被广大开发者所喜爱,是全球最受欢迎的Java开发工具之一。IntelliJIDEA2023
Scala中使用Selenium进行网页内容摘录的详解
前言公众号成为获取信息的重要途径之一。而对于公众号运营者来说,了解公众号的数据情况非常重要。比如,你可能想要获取公众号的文章内容,进行数据分析或者生成摘要。或者你可能想要监控竞争对手的公众号,了解他们的最新动态动态。无论是哪种情况,使用Scala和Sele
小白学大数据 小白学大数据
5个月前
网页爬虫开发:使用Scala和PhantomJS访问知乎
引言随着大数据时代的到来,网页爬虫作为一种高效的数据收集工具,被广泛应用于互联网数据抓取和信息抽取。而知乎是一个知识分享平台,拥有大量的用户生成内容。通过爬虫获取知乎数据,企业和研究人员可以进行深入的数据分析和市场研究,了解用户的需求、兴趣和行为模式,从而