把帆帆喂饱 把帆帆喂饱
3年前
爬虫
爬虫什么是爬虫使用编程语言所编写的一个用于爬取web或app数据的应用程序怎么爬取数据1.找到要爬取的目标网站、发起请求2.分析URL是如何变化的和提取有用的URL3.提取有用的数据爬虫数据能随便爬取吗?遵守robots.txt协议爬虫的分类通用网络爬虫百度,Google等搜索引擎,从一些初识的URL扩展到整个网站,主要为门户站点搜索引擎和大型网站服务采
Stella981 Stella981
3年前
Kong serverless插件
概述kong的serverless插件可以在请求的生命周期内,动态执行lua代码。例子一下面来看一个删除请求url中的jsessionid的例子。现在请求中有如下url导致后端服务报错:pc/courses/jcqzf9dc;jsessionid94DB14C127698FCAFEA6599AEE93C252/last
Stella981 Stella981
3年前
HttpURLConnection(http 1.1) 用法、状态码、状态描述
最近研究了java的HttpURLConnection的用法,这里简单的做一下记录:Java中可以使用HttpURLConnection来请求WEB资源。1、 URL请求的类别分为二类,GET与POST请求。二者的区别在于:     a:)get请求可以获取静态页面,也可以把参数放在URL字串后面,传递给servlet,
Easter79 Easter79
3年前
SpringMvc的学习笔记
springmvc\_@RequestMapping注解\_映射请求的URL:1.@RequestMapping除了修饰方法,还可以修饰类2.类定义处:提供初步请求的映射信息。相当于WEB应用的根目录2).方法处:提供进一步的细分映射信息。相对于类定义处的url.若类定义处未标注@RequestMapping,则方
可莉 可莉
3年前
11.前台文件数据流下载获取源文件名
1.文件流下载文件axios实现:exportfunctiondownload(url,data){axios.post(baseurlurl,data,{responseType:'blob'}).then(function(response){
Wesley13 Wesley13
3年前
PHP生成短链接方法
PHP生成短链接方法方法一:新浪提供了长链接转为短链接的API,可以把长链接转为t.cn/xxx这种格式的短链接。API:http://api.t.sina.com.cn/short\_url/shorten.json(返回结果是JSON格式)http://api.t.sina.com.cn/short\_url/s
Wesley13 Wesley13
3年前
Jmeter参数化的4种方法
用Jmeter测试时包含两种情况的参数,一种是在url中,一种是请求中需要发送的参数。URL中的参数,如:http://blog.dafang.com/index.php/2010/06/01/jmeter(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fblog.dafang.c
Wesley13 Wesley13
3年前
HTTP协议
URI与URL有什么不同呢?URI:UniversalResourceIdentifier统一资源标志符URL:UniversalResourceLocator统一资源定位器URI是用来唯一地确定资源的表示方式,只要资源能唯一确定,则可以算作一种URIURL是用定位的方式来确定资源的表示方式,比如常见的http://www.googl
Stella981 Stella981
3年前
PHP Curl模拟登录签到
<?php/curl登录签到201704W3Cqjd/$arr'cookstr'"";$arr'url'"http://www.w3cschool.cn/checklogin";$
Wesley13 Wesley13
3年前
JS授权
(function(){varorigin_urllocation.href;varoauth_url'https://vx.mcilife.com/weixin/api/oauth/?callback';var$_GET(function(){