Solicitação HTTP (S) manual

Estou procurando uma ferramenta (possivelmente no Linux) que me permita fazer uma solicitação HTTP ou HTTPS manual. Por manual, eu realmente quis dizer isso: eu deveria poder alimentar um arquivo de texto que parece

POST /foo HTTP/1.1
Host: www.example.com
Accept: text/xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5
Accept-Language: en-gb,en;q=0.5
Content-Type: text/plain
Content-Length: 11

Hello world

e um URL de destino (www.example.com/foo) e envie a solicitação para o URL. No máximo, seria útil se o cabeçalho Content_Length fosse calculado automaticamente.

Eu seria capaz de escrever uma ferramenta desse tipo usando alguma biblioteca como o initplib em Python, mas o motivo pelo qual preciso é fazer uma investigação manual quando algo der errado com essas bibliotecas.

O wget possui uma opção --post-file que deve funcionar para você.

Edit: Além disso, há o Ncat , que você usaria de maneira semelhante à sugestão de telnet de Randolf Richardson, exceto que ele também suporta SSL / HTTPS:

ncat -C --ssl www.example.com 443 < input.txt > output.txt

Para HTTP (não HTTPS), uma alternativa ao comando "wget" que vem à mente é usar o telnet da seguinte maneira:

• nome do host do telnet 80 <input.txt> output.txt

O arquivo "input.txt" é sua lista de comandos predefinidos que você deseja alimentar para o host no nome do host e o arquivo "output.txt" armazenará a resposta.

Você pode emitir uma solicitação GET com o OpenSSL:

openssl s_client -quiet -connect cdn.sstatic.net:443 <<eof
GET /stackexchange/js/universal-login.js HTTP/1.1
Connection: close
Host: cdn.sstatic.net

eof

Observe que você também pode usar "HTTP / 2", mas tenha cuidado porque alguns servidores (por exemplo, github.com) não são compatíveis.

Para mim, funcionou a criação de um arquivo de solicitação (Exemplo: request.txt)

POST /foo HTTP/1.1
Host: www.example.com
Accept: text/xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5
Accept-Language: en-gb,en;q=0.5
Content-Type: text/plain; charset=utf-8
Content-Length: 11
Connection: close

Hello world

E, em seguida, chame o openssl s_clientcomando:

cat request.txt | openssl s_client -quiet -connect www.example.com:443

No entanto, tenha cuidado com alguns pontos:

• O arquivo deve ser codificado corretamente, especialmente o corpo do conteúdo. Melhor se você incluir um cabeçalho Content-type: text/plain; charset=utf-8se o arquivo estiver codificado em utf-8.
• As terminações de linha dos cabeçalhos devem ser CR / LF . Somente com LF o servidor da web poderia retornar HTTP/1.1 505 HTTP Version Not Supported, porque o protocolo HTTP padrão usa CR / LF para terminações de linha ( https://www.w3.org/Protocols/rfc2616/rfc2616-sec4.html ). Você pode usar o unix2doscomando para fazer essa conversão.
• Adicione um Connection: closecabeçalho para finalizar a solicitação e retornar da chamada. Caso contrário, o comando estará aguardando a interação do usuário, se o servidor normalmente responder com um Connection: keep-alivecabeçalho.

Estou surpreso que ninguém mencionou cURL . É feito exatamente para o que você quer fazer. E está disponível em praticamente qualquer plataforma (incluindo Windows).

Portanto, para o seu exemplo, tudo o que você faria é:

curl -H 'Content-Type: text/plain' -d 'Hello World' www.example.com

Capturado no Wireshark, você receberá:

POST / HTTP/1.1
User-Agent: curl/7.19.7 (x86_64-pc-linux-gnu) libcurl/7.19.7 OpenSSL/0.9.8k zlib/1.2.3.3 libidn/1.15
Host: www.example.com
Accept: */*
Content-Type: text/plain
Content-Length: 11

Hello world

Você pode facilmente modificar ainda mais os cabeçalhos se desejar fazer todo tipo de coisa (por exemplo, alterar o user agent, etc).

Editar: não percebeu o requisito "de um arquivo". Você também pode fazer isso, arquivos simples ascii ou binários. Você acabou de especificar o nome do arquivo com um símbolo @

-d @/tmp/HelloWorldFile