http
(图片来自互联网)
如果一个人想学习爬虫技术,我会首先推荐他学会使用httpbin!
httpbin(官网|github)是一个很不错测试工具,你可以放心大胆的黑他,而不用担心他报复你。他有点像一个蜜罐,时刻等待着你的光临,然后根据你的请求,给你返回你想要的东西
类似这种能够很方便调试接口的还有很多,但是无疑还是httpbin最好用。
requestb
putsreq
ttpresponder
runscope
使用你擅长的语言,与它的接口互动。
接口列表
Endpoint
Description
This page.
Returns Origin IP.
Returns user-agent.
Returns header dict.
Returns GET data.
/post
Returns POST data.
/patch
Returns PATCH data.
/put
Returns PUT data.
/delete
Returns DELETE data
Returns gzip-encoded data.
Returns deflate-encoded data.
Returns given HTTP Status code.
Returns given response headers.
302 Redirects n times.
302 Redirects to the foo URL.
302 Relative redirects n times.
Returns cookie data.
Sets one or more simple cookies.
Deletes one or more simple cookies.
Challenges HTTPBasic Auth.
/hidden-basic-auth/:user/:passwd
404'd BasicAuth.
/digest-auth/:qop/:user/:passwd
Challenges HTTP Digest Auth.
Streams n – 100 lines.
Delays responding for n – 10 seconds.
Drips data over a duration after an optional initial delay, then (optionally) returns with the given status code.
Streams n bytes, and allows specifying a Range header to select a subset of the data. Accepts a chunk_size and request duration parameter.
Renders an HTML Page.
Returns some robots.txt rules.
Denied by robots.txt file.
Returns 200 unless an If-Modified-Since or If-None-Match header is provided, when it returns a 304.
Sets a Cache-Control header for n seconds.
Generates n random bytes of binary data, accepts optional seed integer parameter.
Streams n random bytes of binary data, accepts optional seed and chunk_size integer parameters.
Returns page containing n HTML links.
HTML form that submits to /post
Returns some XML
Returns page containing UTF-8 data.
## 简单例子 ```python import requests s = requests.Session() print s.get('http://httpbin.org/ip').text print s.get('http://httpbin.org/get').json() print s.post('http://httpbin.org/post', {'key':'value'},headers={'user-agent':'LAOGAO'}).text print s.get('http://httpbin.org/status/404').status_code print s.get('http://httpbin.org/html').text print s.get('http://httpbin.org/deny').text ``` ## 技巧 httpbin给我们提供了很多HTTP基本的操作,如果你的APP组问你要接口,你手头又很忙,怎么办?当然是用httpbin按照接口文档先给他们快速写几个丢过去。 ## 部署 httpbin使用flask编写,可以参考[使用nginx + uWSGI运行flask程序][9],不过在此老高又学会了一种新的方法 -- 使用gunicorn运行flask。 > gunicorn又是一个 Python WSGI HTTP Server for UNIX! ```bash # 如果已经安装PIP,请忽略此步骤 cd ~ && wget -O - "https://bootstrap.pypa.io/get-pip.py" | python # 安装httpbin pip install httpbin # 安装服务器软件gunicorn pip install gunicorn # 运行httpbin,在8000端口 gunicorn -b :8000 httpbin:app # [2015-06-27 03:16:52 +0000] [18568] [INFO] Starting gunicorn 19.3.0 # [2015-06-27 03:16:52 +0000] [18568] [INFO] Listening at: http://0.0.0.0:8000 (18568) # [2015-06-27 03:16:52 +0000] [18568] [INFO] Using worker: sync # [2015-06-27 03:16:52 +0000] [18573] [INFO] Booting worker with pid: 18573 ``` 接下来访问你的`IP:8000`,不出意外,你就能看到与官网一样的功能了! ![httpbin on localhost][10] 使用文档 [gunicorn文档][11] [pip文档][12] ## 使用PHPSTORM RESTful调试 在 *Tools | Test RESTful* 中可以找到Test RESTful工具,可以方便的调试接口。 ![RESTful][13] [1]: https://blog.phpgao.com/usr/uploads/2015/06/727407702.jpg [2]: http://httpbin.org [3]: https://github.com/Runscope/httpbin [4]: http://requestb.in [5]: http://putsreq.com [6]: http://httpresponder.com [7]: https://www.runscope.com [8]: https://github.com/Runscope/httpbin#endpoints [9]: https://blog.phpgao.com/nginx_uwsgi_flask.html [10]: https://blog.phpgao.com/usr/uploads/2015/06/2402402771.png [11]: http://docs.gunicorn.org/en/latest/index.html [12]: http://pip.readthedocs.org/en/latest/index.html [13]: https://blog.phpgao.com/usr/uploads/2015/06/4153390953.png
Original url: Access
Created at: 2019-04-10 18:03:20
Category: default
Tags: none
未标明原创文章均为采集,版权归作者所有,转载无需和我联系,请注明原出处,南摩阿彌陀佛,知识,不只知道,要得到
java windows火焰图_mob64ca12ec8020的技术博客_51CTO博客 - 在windows下不可行,不知道作者是怎样搞的 监听SpringBoot 服务启动成功事件并打印信息_监听springboot启动完毕-CSDN博客 SpringBoot中就绪探针和存活探针_management.endpoint.health.probes.enabled-CSDN博客 u2u转换板 - 嘉立创EDA开源硬件平台 Spring Boot 项目的轻量级 HTTP 客户端 retrofit 框架,快来试试它!_Java精选-CSDN博客 手把手教你打造一套最牛的知识笔记管理系统! - 知乎 - 想法有重合-理论可参考 安宇雨 闲鱼 机械键盘 客制化 开贴记录 文本 linux 使用find命令查找包含某字符串的文件_beijihukk的博客-CSDN博客_find 查找字符串 ---- mac 也适用 安宇雨 打字音 记录集合 B站 bilibili 自行搭建 开坑 真正的客制化 安宇雨 黑苹果开坑 查找工具包maven pom 引用地 工具网站 Dantelis 介绍的玩轴入坑攻略 --- 关于轴的一些说法 --- 非官方 ---- 心得而已 --- 长期开坑更新 [本人问题][新开坑位]关于自动化测试的工具与平台应用 机械键盘 开团 网站记录 -- 能做一个收集的程序就好了 不过现在没时间 -- 信息大多是在群里发的 - 你要让垃圾佬 都去一个地方看难度也是很大的 精神支柱 [超级前台]sprinbboot maven superdesk-app 记录 [信息有用] [环境准备] [基本完成] [sebp/elk] 给已创建的Docker容器增加新的端口映射 - qq_30599553的博客 - CSDN博客 [正在研究] Elasticsearch, Logstash, Kibana (ELK) Docker image documentation elasticsearch centos 安装记录 及 启动手记 正式服务器 39 elasticsearch 问题合集 不断更新 6.1.1 | 6.5.1 两个版本 博客程序 - 测试 - bug记录 等等问题 laravel的启动过程解析 - lpfuture - 博客园 OAuth2 Server PHP 用 Laravel 搭建带 OAuth2 验证的 RESTful 服务 | Laravel China 社区 - 高品质的 Laravel 和 PHP 开发者社区 利用Laravel 搭建oauth2 API接口 附 Unauthenticated 解决办法 - 煮茶的博客 - SegmentFault 思否 使用 OAuth2-Server-php 搭建 OAuth2 Server - 午时的海 - 博客园 基于PHP构建OAuth 2.0 服务端 认证平台 - Endv - 博客园 Laravel 的 Artisan 命令行工具 Laravel 的文件系统和云存储功能集成 浅谈Chromium中的设计模式--终--Observer模式 浅谈Chromium中的设计模式--二--pre/post和Delegate模式 浅谈Chromium中的设计模式--一--Chromium中模块分层和进程模型 DeepMind 4 Hacking Yourself README.md update 20211011
Laravel China 简书 知乎 博客园 CSDN博客 开源中国 Go Further Ryan是菜鸟 | LNMP技术栈笔记 云栖社区-阿里云 Netflix技术博客 Techie Delight Linkedin技术博客 Dropbox技术博客 Facebook技术博客 淘宝中间件团队 美团技术博客 360技术博客 古巷博客 - 一个专注于分享的不正常博客 软件测试知识传播 - 测试窝 有赞技术团队 阮一峰 语雀 静觅丨崔庆才的个人博客 软件测试从业者综合能力提升 - isTester IBM Java 开发 使用开放 Java 生态系统开发现代应用程序 pengdai 一个强大的博主 HTML5资源教程 | 分享HTML5开发资源和开发教程 蘑菇博客 - 专注于技术分享的博客平台 个人博客-leapMie 流星007 CSDN博客 - 舍其小伙伴 稀土掘金 Go 技术论坛 | Golang / Go 语言中国知识社区
最新评论