Python：使用Request POST获取网站d

Question

我花了很多时间试图在python数据框中从以下网站获得追溯价格：

http://www2.bmf.com.br/pages/portal/bmfbovespa/boletim2/Ajustes2.asp

我能够使用以下方法成功获取当前数据：

url = 'http://www2.bmf.com.br/pages/portal/bmfbovespa/boletim2/Ajustes2.asp'
df = pd.read_html(url, header = 0)

现在，我在纠结追溯价格：

import pandas as pd
import requests

#BMF webpage
url = 'http://www2.bmf.com.br/pages/portal/bmfbovespa/boletim2/Ajustes2.asp'

#requests to manipulate BMF Form
r = requests.post(url, data = {'txtData':'11/21/2018'})
df_1 = pd.read_html(r.url, header = 0)

我相信我已经在上面提到的网站上找到了正确的身份证：

.
.
.
<h1>Settlement Prices</h1>
<table border="0" cellpadding="0" cellspacing="0">
<form name="frmBD" onSubmit="return retroativo_Validator(this)"action="Ajustes2.asp" method="POST">
<tr>
<td class="TXT_Azul">RETROACTIVE:&nbsp;</td>
<td>
<input name="txtData" MAXLENGTH="10" onKeyPress="javascript:mask_data_home('2','0',true,frmBD);" type="text" class="combo" id="txtData">
<input name="Consultar" type="image" src="http://www.bmf.com.br/bmfbovespa/images/comum/btoOk.gif" border="0" align="absmiddle">
<img src="http://www.bmf.com.br/bmfbovespa/images/comum2/btoLegenda.gif" align="absmiddle" onMouseOver="javascript:legenda.style.display='block';" onMouseOut="javascript:legenda.style.display='none';">
<div id="legenda" style="position:absolute; width:200px; height:115px; z-index:10; background-color: #FFFFFF; layer-background-color: #FFFFFF; border: 1px solid #C9C9C9; overflow: visible; display: none;"> 
.
.
.

我真的很感激你的帮助和帮助

谢谢你

Answer 1

将df_1 = pd.read_html(r.url,header = 0)更改为df_1 = pd.read_html(r.text,header = 0)，因为您需要post请求之后的数据。如果您访问r.url，您将获得最新的数据，因为txtData是None

Answer 2

将以下标题添加到您的请求中：

Content-Type: application/x-www-form-urlencoded