odka33 / b3c-parsage-2019

B3C-PARSAGE-2019

Script de parsage de log en langage bash.

Les outils en ligne de commande utilisés:

• cat: la commande sed est un utilitaire qui parcourt un fichier texte ligne par ligne afin de lui appliquer un traitement ou un remplacement lorsque l'expression régulière est vérifiée.
• grep: la commande grep permet de rechercher une chaîne de caractères ou un motif dans un fichier.
• awk: awk est une commande et un langage de programmation à elle toute seule qui permet une recherche de chaînes et l'exécution d'actions sur les lignes sélectionnées. Elle est utile pour récupérer de l'information, générer des rapports, transformer des données entre autres.
• cut: la commande cut permet d'afficher des zones spécifiques d'un fichier
• paste: la commande paste concatène les lignes de même niveau des fichiers passés en argument

Exécution:

Placez-vous dans le répertoire courant des logs et exécutez le script dans un interpréteur de ligne de commande en environnement shell bash:

    user@kali$ cd /logs_scan/

Obtenir le script

    user@kali$ ./parsage.sh

Le script rendra un fichier csv d'une ligne daté pour chaque scanner utilisé.

Il est possible d'ajouter à la ligne chaque fichier pour n'en faire qu'un en utilisant l'exemple d'utilisation suivant:

   user@kali$ ./parsage.sh
   user@kali$ paste -d '\n' 04.29.2019_fierce.csv 04.29.2019_nikto.csv 04.29.2019_nmap.csv > scanner_all.csv	

Automatisation:

Il est possible de rajouter le script de parsage au python de rejeu des scans en rajoutant une ligne au script python:

    os.system("cd /logs_scan/ && ./parsage")

Les scans parsés sont dans /root/logs_scan/date_scan/