Detalles de software:
Versión: 0.9.4
Fecha de carga: 12 May 15
Licencia: Libre
Popularidad: 258
Se puede utilizar para extraer datos del archivo robots.txt y alimentar a otras aplicaciones o herramientas estadísticas.
Extraerá URL de destino, motivo de datos de acceso y de estado
¿Qué hay de nuevo en esta versión:.
- Maneja http (s ) Los errores de petición.
¿Cuál es nuevo en la versión 0.7.2:.
- Fijo package.json información de metadatos para los insectos
Requisitos
- Node.js 0.6 o superior
Comentarios que no se encuentran