Content-Type与POST知识总结.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Content-Type 与 Post请求\n",
    "　　参考：[POST的Content-Type引发的HTTP相关知识思考](https://blog.csdn.net/woaixiaoyu520/article/details/76690686)  \n",
    "　　　　　[一文弄懂POST提交的Content-Type值。](http://fairysoftware.com/post_content_type.html)  \n",
    "　　　　　[]()  \n",
    "　　　　　[python实现Content-Type:application/octet-stream](https://blog.csdn.net/weixin_38927522/article/details/123627929)  \n",
    "　　　　　[python requests post 二进制流_python requests-toolbelt 生成上传multipart/form-data格式数据](https://blog.csdn.net/weixin_39575758/article/details/110907523)  \n",
    "　　　　　[Python中requests_toolbelt实现multipart/form-data文件上传](https://blog.csdn.net/weixin_42400792/article/details/107557248)  \n",
    "　　　　　[Python POST 二进制数据](https://stackoverflow.com/questions/14365027/python-post-binary-data)  \n",
    "## 一、关于Content-Type\n",
    "### 1.1、Content-Type 说明\n",
    "　　Content-Type是实体头域（或称为实体头部，entity header）用于向接收方指示实体（entity body）的介质类型的，或称为资源的MIME类型，现在通常称media type更为合适。（例如，指定HEAD方法送到接收方的实体介质类型，或GET方法发送的请求介质类型，表示后面的文档属于什么MIME类型。）  \n",
    "　　1、在响应中：Content-Type标头告诉客户端实际返回的内容的内容类型。浏览器会在某些情况下进行MIME嗅探，并不一定遵循此标题的值; 为了防止这种行为，可以将标题 X-Content-Type-Options 设置为 nosniff。  \n",
    "　　2、在请求中： (如POST 或 PUT)，客户端告诉服务器实际发送的数据类型。  \n",
    "\n",
    "### 1.2、Content-Type 语法\n",
    ">Content-Type: text/html; charset=utf-8  \n",
    "Content-Type: multipart/form-data; boundary=something\\[1 to 70 characters\\]  \n",
    "\n",
    "　　说明：\n",
    "　　　　1、media-type　资源或数据的 media type  \n",
    "　　　　2、charset　字符编码标准  \n",
    "　　　　3、boundary　对于多部分（multipart）实体，boundary 是必需的，它用于封装消息的多个部分的边界。其由1到70个字符组成，浏览器自动生成，该字符集对于通过网关鲁棒性良好，不以空白结尾。  \n",
    "\n",
    "## 二、常见POST数据提交类型\n",
    "### 2.1、application/x-www-form-urlencoded\n",
    "　　最常见的 POST 提交数据的方式，原生Form表单，如果不设置 enctype 属性，默认为application/x-www-form-urlencoded 方式提交数据。请求类似于下面这样（无关的请求头域已略去）：\n",
    "```\n",
    "POST http://www.example.com HTTP/1.1\n",
    "Content-Type: application/x-www-form-urlencoded;charset=utf-8\n",
    "\n",
    "name=test&val1=1&val2=%E6%B5%8B%E8%AF%95&val3%5B%5D=2\n",
    "```\n",
    "　　首先，Content-Type被指定为 application/x-www-form-urlencoded；  \n",
    "　　其次，提交的表单数据会转换为键值对并按照 key1=val1&key2=val2 的方式进行编码，key 和 val 都进行了 URL 转码。大部分服务端语言都对这种方式有很好的支持。  \n",
    "　　另外，如利用AJAX 提交数据时，也可使用这种方式。例如 jQuery，Content-Type 默认值都是”application/x-www-form-urlencoded;charset=utf-8”。  \n",
    "\n",
    "### 2.2、multipart/form-data\n",
    "　　另一个常见的 POST 数据提交的方式， Form 表单的 enctype 设置为multipart/form-data，它会将表单的数据处理为一条消息，以标签为单元，用分隔符（这就是boundary的作用）分开，类似我们上面Content-Type中的例子。该种方式，用于支持向服务器发送二进制数据，指定传输数据为二进制类型，比如图片、mp3、文件。\n",
    "　　由于这种方式将数据分为很多部分，它既可以上传键值对，也可以上传文件，甚至多个文件。当上传的字段是文件时，会有Content-Type来说明文件类型；Content-disposition，用来说明字段的一些信息。每部分都是以 –boundary 开始，紧接着是内容描述信息，然后是回车，最后是字段具体内容（字段、文本或二进制等）。如果传输的是文件，还要包含文件名和文件类型信息。消息主体最后以 –boundary– 标示结束。  \n",
    "```\n",
    "POST http://www.example.com HTTP/1.1\n",
    "Content-Type:multipart/form-data; boundary=----WebKitFormBoundaryrGKCBY7qhFd3TrwA\n",
    "\n",
    "------WebKitFormBoundaryrGKCBY7qhFd3TrwA\n",
    "Content-Disposition: form-data; name=\"text\"\n",
    "\n",
    "title\n",
    "------WebKitFormBoundaryrGKCBY7qhFd3TrwA\n",
    "Content-Disposition: form-data; name=\"file\"; filename=\"chrome.png\"\n",
    "Content-Type: image/png\n",
    "\n",
    "PNG ... content of chrome.png ...\n",
    "------WebKitFormBoundaryrGKCBY7qhFd3TrwA--\n",
    "```\n",
    "　　Python请求示例：\n",
    "```python\n",
    "# 首先安装requsets和requests_toolbelt两个模块\n",
    "# pip install requests\n",
    "# pip install requests_toolbelt\n",
    "\n",
    "import time\n",
    "import datetime\n",
    "import hashlib\n",
    "import os\n",
    "import random\n",
    "import sys\n",
    "import requests\n",
    "import json\n",
    "\n",
    "from requests_toolbelt.multipart.encoder import MultipartEncoder\n",
    "\n",
    "url = 'http://XXXXXXXXXXXXXXXXXXXXXXXXXXXXX'\n",
    "\n",
    "headers = {\n",
    "    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:50.0) Gecko/20100101 Firefox/50.0',\n",
    "    'Referer': url\n",
    "}\n",
    "\n",
    "multipart_encoder = MultipartEncoder(\n",
    "    fields = {\n",
    "        'save_name': 'test.txt',\n",
    "        'save_data': ('test.txt', open('test.txt', 'rb'), 'application/octet-stream')\n",
    "    },\n",
    "    boundary = '-----------------------------' + str(random.randint(1e28, 1e29 - 1))\n",
    ")\n",
    "\n",
    "headers['Content-Type'] = multipart_encoder.content_type\n",
    "\n",
    "#请求头必须包含一个特殊的头信息，类似于Content-Type: multipart/form-data; boundary=${bound}$\n",
    "\n",
    "responseStr = requests.post(url, data=multipart_encoder, headers=headers)\n",
    "print(responseStr.text)\n",
    "```\n",
    "### 2.3、application/json\n",
    "　　Content-Type: application/json 作为响应头比较常见。实际上，现在越来越多的人把它作为请求头，用来告诉服务端消息主体是序列化后的 JSON 字符串，其中一个好处就是JSON 格式支持比键值对复杂得多的结构化数据。由于 JSON 规范的流行，除了低版本 IE 之外的各大浏览器都原生支持JSON.stringify，服务端语言也都有处理 JSON 的函数，使用起来没有困难。  \n",
    "　　Google 的 AngularJS 中的 Ajax 功能，默认就是提交 JSON 字符串。例如下面这段代码：  \n",
    "```\n",
    "var data = {'title':'test', 'sub' : [1,2,3]};\n",
    "http.post(url, data).success(function(result) {\n",
    "    ...\n",
    "});\n",
    "```\n",
    "　　最终发送的请求是：  \n",
    "```\n",
    "POST http://www.example.com HTTP/1.1 \n",
    "Content-Type: application/json;charset=utf-8\n",
    "\n",
    "{\"title\":\"test\",\"sub\":[1,2,3]}\n",
    "```\n",
    "### 2.4、text/xml\n",
    "　　XML的作用不言而喻，用于传输和存储数据，它非常适合万维网传输，提供统一的方法来描述和交换独立于应用程序或供应商的结构化数据，在JSON出现之前是业界一大标准（当然现在也是），相比JSON的优缺点大家有兴趣可以上网search。因此，在POST提交数据时，xml类型也是不可缺少的一种，虽然一般场景上使用JSON可能更轻巧、灵活。  \n",
    "```\n",
    "POST http://www.example.com HTTP/1.1 \n",
    "Content-Type: text/xml\n",
    "\n",
    "<?xml version=\"1.0\"?>\n",
    "<methodCall>\n",
    "    <methodName>examples.getStateName</methodName>\n",
    "    <params>\n",
    "        <param>\n",
    "            <value><i4>40</i4></value>\n",
    "        </param>\n",
    "    </params>\n",
    "</methodCall>\n",
    "```\n",
    "　　XML-RPC就是利用XML编码，使用HTTP协议进行传输的一种协议机制，它使用的就是这种编码类型，XML-RPC协议简单、功能够用，各种语言的实现都有。还有类似的JSON-RPC，不过它可用于在同一进程中、套接字或HTTP之间、或其他很多消息传递的环境中传输数据，使用JSON(RFC 4627)作为数据格式。  \n",
    "　　附：XML-RPC是一个远程过程调用（远端程序呼叫）（remote procedure call，RPC)的分布式计算协议，通过XML将调用函数封装，并使用HTTP协议作为传送机制。  \n",
    "　　以下为一个寻常的 XML-RPC 请求的范例：  \n",
    "```\n",
    "<?xml version=\"1.0\"?>\n",
    "<methodCall>\n",
    "  <methodName>examples.getStateName</methodName>\n",
    "  <params>\n",
    "    <param>\n",
    "        <value><i4>40</i4></value>\n",
    "    </param>\n",
    "  </params>\n",
    "</methodCall>\n",
    "```\n",
    "　　相对于上述请求，以下为一个寻常回应的范例：\n",
    "```\n",
    "<?xml version=\"1.0\"?>\n",
    "<methodResponse>\n",
    "  <params>\n",
    "    <param>\n",
    "        <value><string>South Dakota</string></value>\n",
    "    </param>\n",
    "  </params>\n",
    "</methodResponse>\n",
    "```\n",
    "　　在Chrome浏览器的Postman工具中，可以看到后面两种类型归为\"raw\"一类，其可用来上传任意格式的文本，如Text(text/plain)、JSON(application/json)、XML(application/xml, text/xml)、HTML(text/html)、Javascript(application/javascript)等。  \n",
    "　　注：application/xml 和 text/xml两种类型， 二者功能一模一样，唯一的区别就是编码格式，text/xml忽略xml头所指定编码格式而默认采用us-ascii编码，而application/xml会根据xml头指定的编码格式来编码。  \n",
    "\n",
    "### 2.5、binary (application/octet-stream)\n",
    "　　在Chrome浏览器的Postman工具中，还可以看到\"binary\"这一类型，指的就是一些二进制文件类型。如application/pdf，指定了特定二进制文件的MIME类型。就像对于text文件类型若没有特定的子类型（subtype），就使用 text/plain。类似的，二进制文件没有特定或已知的 subtype，即使用 application/octet-stream，这是应用程序文件的默认值，一般很少直接使用 。  \n",
    "　　对于application/octet-stream，只能提交二进制，而且只能提交一个二进制，如果提交文件的话，只能提交一个文件，后台接收参数只能有一个，而且只能是流（或者字节数组）。  \n",
    "　　很多web服务器使用默认的 application/octet-stream 来发送未知类型。出于一些安全原因，对于这些资源浏览器不允许设置一些自定义默认操作，导致用户必须存储到本地以使用。一般来说，设置正确的MIME类型很重要。  \n",
    "\n",
    "\n",
    "     \n",
    "     \n",
    "     "
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.7.4"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 4
}