¿Tiene contenido de páginas web con Python?

Question

Estoy usando Python 3.1, si eso ayuda.

De todos modos, estoy tratando de obtener los contenidos de this página web. Busqué en Google un poco y probé cosas diferentes, pero no funcionaron. Supongo que esto debería ser una tarea fácil, pero ... No puedo conseguirlo. : /.

Resultados de urllib, urllib2:

>>> import urllib2 
Traceback (most recent call last): 
    File "<pyshell#0>", line 1, in <module> 
    import urllib2 
ImportError: No module named urllib2 
>>> import urllib 
>>> urllib.urlopen("http://www.python.org") 
Traceback (most recent call last): 
    File "<pyshell#2>", line 1, in <module> 
    urllib.urlopen("http://www.python.org") 
AttributeError: 'module' object has no attribute 'urlopen' 
>>> 

Python 3 solución

Gracias, Jason. :RE.

import urllib.request 
page = urllib.request.urlopen('http://services.runescape.com/m=hiscore/ranking?table=0&category_type=0&time_filter=0&date=1519066080774&user=zezima') 
print(page.read()) 

Answer 1

Dado que está utilizando Python 3.1, necesita utilizar el nuevo Python 3.1 APIs.

Probar:

urllib.request.urlopen('http://www.python.org/') 

Alternativamente, parece que se está trabajando desde Python 2 ejemplos. Escríbalo en Python 2, luego usa la herramienta 2to3 para convertirlo. En Windows, 2to3.py está en \ python31 \ tools \ scripts. ¿Puede alguien más señalar dónde encontrar 2to3.py en otras plataformas?

Editar

En estos días, escribo Python 2 y 3 Código compatibles mediante el uso de seis.

from six.moves import urllib 
urllib.request.urlopen('http://www.python.org') 

Asumiendo que tiene instalado seis, que se ejecuta tanto en Python 2 y Python 3.

Answer 2

Puede usar urlib2 y analizar el HTML usted mismo.

O pruebe Beautiful Soup para hacer algunos de los análisis para usted.

Answer 3

Mechanize es un gran paquete para "actuar como un navegador", si se quiere gestionar el estado de galletas, etc.

http://wwwsearch.sourceforge.net/mechanize/

Answer 4

si usted me pregunta. prueba este

import urllib2 
resp = urllib2.urlopen('http://hiscore.runescape.com/index_lite.ws?player=zezima') 

y leer de forma normal, es decir

page = resp.read() 

Buena suerte aunque

Answer 5

La mejor manera de hacerlo estos días es el uso de la biblioteca 'peticiones':

import requests 
response = requests.get('http://hiscore.runescape.com/index_lite.ws?player=zezima') 
print (response.status_code) 
print (response.content) 

Answer 6

Una solución con funciona con Python 2.X y Python 3.X:

try: 
    # For Python 3.0 and later 
    from urllib.request import urlopen 
except ImportError: 
    # Fall back to Python 2's urllib2 
    from urllib2 import urlopen 

url = 'http://hiscore.runescape.com/index_lite.ws?player=zezima' 
response = urlopen(url) 
data = str(response.read())