Perguntas com a marcação «urlopen»

Estou tentando desenvolver um raspador de web simples. Quero extrair texto sem o código HTML. De fato, alcancei esse objetivo, mas vi que em algumas páginas onde o JavaScript é carregado, não obtive bons resultados. Por exemplo, se algum código JavaScript adiciona algum texto, não consigo vê-lo, porque quando ligo …

178 python  web-scraping  python-2.x  urlopen 

Com o Python 3, estou solicitando um documento json a partir de uma URL. response = urllib.request.urlopen(request) O responseobjeto é um objeto parecido com um arquivo com reade readlinemétodos. Normalmente, um objeto JSON pode ser criado com um arquivo aberto no modo de texto. obj = json.load(fp) O que eu …

177 python  json  python-3.x  encoding  urlopen