Ver instructivo vistas con Python raspado de pantalla (6 / 6 paso)

Paso 6: Notas y comentarios

  • Por favor leer los archivos cuidadosamente para obtener más información he puesto mucho esfuerzo en ellos. Esto aplica a los archivos .py el urllist.txt archivo y los archivos .bat .
  • Mucho que más se puede hacer con las posibilidades gráficas y otras de análisis de los datos, si no algo interesante (o encontrar un error) me avisas.
  • Los programas empezaron como bastante simples, pero han evolucionado. Si hay interés suministrará más simple pero menos versátiles versiones para principiantes, me avisas.
  • Puede que desee ejecutar los archivos sin utilizar el entorno de desarrollo. En mi sistema los archivos .bat hacen. Estos me dejan ejecutar desde un doble click en un gestor de archivos, o un icono en el escritorio. Otros sistemas operativos tienen instalaciones similares, pero usted tendrá que averiguar los detalles, si deseas publicar aquí como comentarios.
  • El sistema de fecha usado aquí es un poco extraño usa ts = time.time() que es un timestamp: instantes en el tiempo expresan en segundos desde las 12:00 am, 1 de enero, 1970(epoch). Convertir esto a días para graficar. Conversión a valores que parecen fechas serían una mejora agradable.
  • Ver instructivo de cuentas son un poco extrañas. He notado que cuando yo ejecute diferentes navegadores en Instructables, incluso al mismo tiempo, obtendrá un número ligeramente diferente de puntos de vista. Así que usted puede encontrar que scrape_views.py tenga algo diferente vista cuenta también que su navegador.
  • Todos los raspadores de pantalla son muy sensibles al formato de la página web que raspar. Si instructables cambia su formato puede también romper el programa, típicamente sin embargo generalmente se puede modificar en forma con mucho trabajo.
  • Adaptar para otros sitios: la mayoría de esto se hace en la subrutina: ( scrape_views.py ) parseit (apage) , que tiene sólo 20 líneas de código ejecutable, debe ser una reescritura fácil.
  • Mi estilo de Python es un poco aleatorio, no han aprendido/formado mi opinión sobre los convenios que utilizo, esto puede causar algo de confusión. He tratado de mantener a Python bastante simple.
  • Existe un módulo llamado "Sopa de bellos" que hace un montón de manipulación de la web, buscar en él métodos de gran alcance, me he pegado a una forma más sencilla de raspar.
  • Hay algunas ideas sobre mejoras incrustados en el código, leerlo.
  • Quieres ver una manera diferente: hay muchas opciones aquí es uno:
  • También ha habido algunos instructables alrededor de este tema o similares. Usted puede encontrar de interés:

Artículos Relacionados

Ver instructivo como usuario pro con características adicionales (todas las medidas en una página + guardar).

Ver instructivo como usuario pro con características adicionales (todas las medidas en una página + guardar).

Este es mi primer instructable. Si tienes alguna sugerencia, por favor me avisan. Esperamos que disfrute de esto. Has pensado de ver todos los pasos de un instructivo en una sola página y guardarlo. Aquí es una técnica para conseguirlo con algunas ca
Gestión de foto digital - fotos Del débil con Python

Gestión de foto digital - fotos Del débil con Python

En los días con la película cuesta dinero cada vez que usted oprimió el botón del obturador, ahora "película" es gratuita, así que a menudo tomamos duplicados en caso de que el enfoque, el encuadre o algún otro detalle está apagado. A veces toma
Intel Edison la estación de sol (UV y temperatura) con Python #IntelMakerMx

Intel Edison la estación de sol (UV y temperatura) con Python #IntelMakerMx

Vamos a utilizar a nuestro Edison de Intel con un escudo de Arduino y un escudo de arboleda para conectar tantos sensores como quieras.GitHub: https://github.com/Kurtz1993/iot-roadshowPaso 1: Comunicarse con nuestro Edison a través de una serie COM E
Consiguiendo comenzado con Python y programación - el breve Tutorial

Consiguiendo comenzado con Python y programación - el breve Tutorial

por lo que veo estás interesado en aprender sobre programación... o serpientes.Si estás aquí para serpientes, lamento que este no es el lugar para usted. Bueno, tal vez...Si estás aquí aprender acerca de la programación o Python entonces usted ha lle
Cómo empezar con python.

Cómo empezar con python.

Así que creo que a ti mismo, hombre ésos codificación dudes seguro que molan! ¿O tal vez eres un gurú de codificación y quiero aprender otro idioma para presumir en el sótano de las madres? Bien de cualquier manera has seleccionado el idioma correcto
Archivo con Python programación

Archivo con Python programación

Una herramienta útil en muchos programas automatizados es la capacidad de abrir archivos, editar y guardar los resultados. En muchos casos datos en bruto se exportan por el dispositivo de recolección de datos en un archivo de texto. ¿Cómo se puede cr
Plotly con Python

Plotly con Python

Recientemente, me topé con Plotly, un hermoso sistema de visualización de datos en línea en virtud de un artículo de hace. Es redundante decir que hay varios artículos que muestran la utilización de Plotly para Arduino, Raspberry Pi, etcétera.Desafor
Inalámbrico de temporizador de luz de Navidad con Python y frambuesa Pi

Inalámbrico de temporizador de luz de Navidad con Python y frambuesa Pi

actualización 14/01/2014: gracias a todos los que votaron por este proyecto en el concurso de Hacking de Hardware! Esperando a mi nueva pluma del fabricante.¿Actualización 31/12/2013: en busca de una versión más avanzada de este proyecto? Echale mi n
Control de Arduino con python basado en web API (No php)

Control de Arduino con python basado en web API (No php)

En esta guía le mostrará cómo controlar el dispositivo arduino de una página web! Luego, te voy a mostrar cómo controlar tu arduino desde tu dispositivo móvil e incluso crear un API basado en web para controlar tu arduino desde su página web con otro
Uso de XML en la frambuesa Pi con Python

Uso de XML en la frambuesa Pi con Python

Este Instructable discutirá el uso de XML en las aplicaciones de la Raspberry Pi. Paso uno cubre lo que es el formato de las estructuras de datos y XML. Paso dos cubrirá construcción y análisis de XML en Python y paso tres muestra cómo se utiliza XML
LinkIt uno - comunicación con python

LinkIt uno - comunicación con python

Hola compañeros creadores!Nueva Junta de MediaTek, LinkIt uno ofrece gran potencial - GPS, WiFi, Bluetooth, GSM, extensibilidad con gpio, procesador fuerte y mucho más. Pero a veces necesita la comodidad de python para analizar archivos o gráficos de
PyDuino, interfaz Arduino con Python a través de comunicación serial

PyDuino, interfaz Arduino con Python a través de comunicación serial

Aprender a interfaz arduino a través de comunicación serial con python usando la librería pyduino. Hay algunos otros tutoriales que hay en instructables en cómo interfaz arduino con python, pero no demuestran cómo hacerlo todo, donde esperamos que es
Portapapeles comunicación PC ↔ Pi con Python

Portapapeles comunicación PC ↔ Pi con Python

Yo normalmente uso mi frambuesa Pi en un escritorio compartido de windows. Comparto también una unidad de red con el Pi. Esto es genial, pero sigo teniendo la molestia del portapapeles en el PC no se refleja en la Pi. Puede haber aplicaciones de plat
Construcción de robots con Python y frambuesa Pi

Construcción de robots con Python y frambuesa Pi

el objetivo de este tutorial es ayudarle a comenzar a programar con Python para controlar tus robots Arduino con un Raspberry PI. Revisaremos los aspectos básicos como instalación y algunos ejemplos simples para controlar tu robot desde una GUI de Py