robots.js

Software captura de pantalla:
robots.js
Detalles de software:
Versión: 0.9.4
Fecha de carga: 12 May 15
Promotor: Eugene Kalinin
Licencia: Libre
Popularidad: 134

Rating: nan/5 (Total Votes: 0)

Se puede utilizar para extraer datos del archivo robots.txt y alimentar a otras aplicaciones o herramientas estadísticas.
Extraerá URL de destino, motivo de datos de acceso y de estado

¿Qué hay de nuevo en esta versión:.

  • Maneja http (s ) Los errores de petición.

¿Cuál es nuevo en la versión 0.7.2:.

  • Fijo package.json información de metadatos para los insectos

Requisitos

  • Node.js 0.6 o superior

Programas parecidos

Otro software de desarrollador Eugene Kalinin

typogr.js
typogr.js

13 Apr 15

sitemap.js
sitemap.js

10 Feb 16

Comentarios a la robots.js

Comentarios que no se encuentran
Añadir comentario
A su vez en las imágenes!