analyse
Utiliser Xenu sous ubuntu linux pour vérifier les liens d’un site
L’outil Xenu est un petit programme très efficace pour vérifier l’intégrité des liens de votre site.
vous pouvez télécharger le logiciel à l’adresse suivante :
http://home.snafu.de/tilman/xenulink.html
Une fois téléchargé, vous obtenez un fichier xenu.zip qu’il convient de décompresser (sous GNU/Linux Ubuntu avec Gnome dans le cas présent), en cliquant avec le bouton droit de la souris, puis cliquer sur « extraire ici ».
Vous obtiendrez alors un fichier « Setup.exe ». Pour l’exécuter nous aurons besoin d’avoir « Wine » installé, si ça n’est pas le cas, ouvrez un terminal et tapez :
[bash]sudo apt-get install wine[/bash]
(confirmez l’installation).
Une fois « Wine » installé, nous devons autoriser le fichier « Setup.exe » à être exécuté, donc un clic droit sur le fichier puis, « propriétés ». Dans l’onglet « Permissions », cochez la case « Autoriser l’exécution du fichier comme un programme ».
On clique maintenant avec le bouton droit de la souris sur « Setup.exe », et on choisit « Ouvrir avec Wine – Chargeur de programmes windows ». Effectuer l’installation avec les options par défaut (Next => I Agree => Next => Next => Install => Next => on decoche les 2 cases puis, Finish).
Vous retrouvez l’accès au programme installé via le menu application => Wine => Programmes => Xenu’s Link sleuth => Xenu.
On lance donc Xenu pour la première fois, une fois lancé, je vous recommande de modifier les préférences par défaut pour ne pas trop charger votre serveur web lors de l’analyse. Par le menu « Options », puis « Préférences », on arrive dans l’onglet « Basic » de Xenu. L’option « Parallel Threads » est par défaut sur 30, je vous recommande de baisser cette option à 5, ou 7 maximum.
En effet, ceci représente le nombre de requêtes simultanées que vous allez effectuer sur votre serveur ! Trop de requêtes simultanées, sur un serveur un peu chargé ou en production risque de rendre l’accès aux sites hébergés dessus ralenti, voir impossible. Autant éviter de parasiter votre propre installation.
Attention également à ceux qui auraient la super idée d’infliger ce traitement aux sites concurrents, sachez que des mécanismes de sécurité peuvent bloquer votre IP dans un tel cas, car trop de requêtes simultanées peut être vues comme une attaque informatique. Dans le meilleur des cas vous risquez de ne plus pouvoir joindre le serveur pour un certain temps, dans le pire des cas, une plainte pourrait être déposée à votre encontre (via votre IP) et ça pourrait finir en justice.
N’utilisez donc ce logiciel que pour vos propres analyses, ou alors avec un nombre de « thread » (processus) réduit au minimum pour une analyse concurrentielle.
Vous êtes maintenant prêts à lancer une analyse, pour cela, il suffit de passer par le menu « File » puis « Check URL », ou d’utiliser le raccourcis CTRL+N.
Dans le premier champs, saisissez l’adresse de votre site (http://www.votresite.com), et décochez « Check external links ». Par défaut il n’est pas nécessaire d’analyser les liens extérieurs, vous pourrez refaire l’analyse avec cette option une fois que votre site est entièrement optimisé.
Cliquez enfin sur « OK », et l’analyse démarre. Plus votre site comporte de liens, plus l’analyse prendra du temps.
L’avancement du processus est indiqué en bas à droite, une fois l’analyse terminée, Xenu vous propose de vous créer un rapport sitemap, il s’agit d’un plan du site (sitemap) issu de la recherche.
La création d’un sitemap via un outil comme Xenu ne présente que peu d’intérêt, car le travail que fait le programme (suivre les liens) est réalisé de la même façon par les robots d’indexation des moteurs de recherche. L’utilisation d’un sitemap n’est pertinent que si celui ci est alimenté dynamiquement, au fur et à mesure de l’ajout de contenu sur le site.
Vous pouvez maintenant consulter la liste de l’ensemble des URL présentes sur votre site. Tout ce qui apparaît en rouge est un problème que vous devriez corriger.
De plus, vous pouvez également vérifier que l’ensemble de vos liens possèdent bien une balise « title », ainsi qu’une description.
Voilà, un bon outil, utilisable sous GNU/Linux simplement grâce à Wine.
Suivre les logs systèmes en temps réel avec tail sous gnu/linux
Un atout dans les systèmes GNU/Linux, c’est principalement la « verbosité » du système.
Cela signifie, que lorsque vous avez un système GNU/Linux installé, soit sur votre machine, soit sur un serveur distant, vous pouvez consulter en temps réel les informations renvoyées par le système (dans une console / fenêtre terminal en local, ou connecté en SSH à un serveur distant).
Ce post s’adresse évidemment à un niveau plutôt débutant.
Les principales remontées d’informations sont les logs systèmes, le plus généralement inscrits dans le fichier /var/log/messages.
Pour suivre l’activité du fichier, vous allez pouvoir utiliser la commande « tail » comme ceci :
[bash]tail -f /var/log/messages[/bash]
Avec cette commande, les informations vont défiler automatiquement sur la sortie standard (votre console). Pour interrompre la consultation, pressez :
CTRL+C (les 2 touches en même temps).
Vous pouvez également conserver le processus actif, et reprendre la main sur la console, en plaçant le processus en arrière plan :
Lancement de la commande :
[bash]tail -f /var/log/messages[/bash]
Presser CTRL+Z (passage en arrière plan, en pause)
Taper : bg
La tache reste active en arrière plan (background).
Vous noterez qu’après avoir pressé CTRL+Z, la tache est numérotée [1] (ici 1, la première en arrière plan), et se retrouve à l’état « Stopped ». C’est en tapant « bg » et en validant, que la tache devient active.
Vous pouvez ainsi taper d’autres commandes, tout en ayant la visibilité sur les logs. Notez que les logs s’affichent quoi que vous fassiez, ce qui peut parasiter si vous être en train de taper autre chose.
L’intérêt de la chose, est, par exemple, de pouvoir monitorer en temps réel plusieurs fichiers de log, et pouvoir agir.
Par exemple, je veux surveiller en même temps mes logs systèmes, et mes logs apache (serveur web httpd) lorsque je le relance pour voir si tout va bien.
On part du principe qu’on est connecté en root (ou sudo bash) dans le terminal :
Analyse des logs système :
[bash]tail -f /var/log/messages[/bash]
Puis je presse CTRL+Z
Activation de la tâche en arrière plan :
taper : bg
Analyse simultanée des logs apache :
[bash]tail -f /var/log/httpd/error_log[/bash]
Passage en arrière plan : CTRL+Z
Activation de cette autre tâche en arrière plan :
bg
(vous noterez le petit [2] indiquant qu’il s’agit de la deuxième tâche tournant en arrière plan).
Puis je relance mes services pour voir ce que ça donne :
[bash]/etc/init.d/httpd restart[/bash]
(Vous aurez évidemment apache d’installé sur votre machine pour cet exemple !).
Vous verrez donc défiler les informations « habituelles » de redémarrage du service, et les logs générés par tout ceci.
Enfin, car vous allez en avoir besoin, il faut ramener les tâche en premier plan afin de pouvoir les interrompre !
Vous pouvez donc rappeler vos processus, soit simplement via la commande « fg » (foreground) comme ceci :
[bash]fg[/bash]
Soit en appelant la commande voulue par son numéro :
[bash]fg 1[/bash]
Puis il suffit de presser CTRL+C pour interrompre la tâche. Répétez la commande « fg » jusqu’à avoir le message :
[bash]bash: fg: current : tâche inexistante[/bash]
C’est bon il ne reste aucun processus en arrière plan !
Ceci est évidemment utilisable avec tous les logs renvoyés par le système, que vous trouvez généralement dans le dossier /var/log.
S’il vous arrive par erreur d’utiliser la commande « tail » sur un binaire (un programme), l’environnement de votre console peut être « chamboulé » et les caractères affichés devenir illisibles. Dans ce cas, appuyez sur CTRL+C et tapez la commande
[bash]reset[/bash]
(même si les caractères ne s’affichent pas correctement) et la situation devrait être rétablie.
J’espère que ce petit article pourra être utile à certains.
Source image : http://www.openclipart.org/detail/25561
Links
Calendrier
| L | M | M | J | V | S | D |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 | 31 | |||||
Recherche
Derniers articles
Tresronours Twitter
Keywords cloud topic
Membre de la FSF
![[FSF Associate Member]](https://blog.inforeseau.com/fsf.png){kind=small}
Liens qui vont bien
Mots clés vrac – keyword cloud
License du contenu – CC By NC SA
This création is licensed under a Creative Commons Paternité - Pas d'Utilisation Commerciale - Partage des Conditions Initiales à l'Identique 2.0 France License.
Archives
- Resumed posting and expanding on X
- Linkedin Access to your account has been restricted – Final debrief and resilience plan
- I’m thankful for the support I get in rough time
- Cyber security news of the day – 2024 May 31
- Alexandre Blanc Cyber Kicked out from Linkedin
- You’ll most likely find me on LinkedIn
- The Russian roulette landing page !
- RTSP, Debian, VLC, not playing, IP Camera
- 5G network hosted in the cloud, no internet, no phone ! So smart ! And I ended on TV, This week in cyber
- They lock the door for privacy… but they keep a copy of the key, and couple of backdoors
- Worst is yet to come, but they all warned you
- Migrating an old WordPress and handling character set, UTF8, latin1, latin1_swedish_ci
- From a broken TLS CA, to Facebook, to FIN12 hit and run
- Yes we can fix this mess, but do we want to ? That’s another story
- Criminals are still dominating the game, why are we doing so wrong, and what can we learn in this tech ocean ?
- Riding cloud can be tricky, don’t fall from it, in the weekly cyber !
- The threat landscape is very dynamic – Cyber news this week
- Cybersecurity is not obvious even for this newsletter !
- Install Slack desktop app on Kali rolling fixing libappindicator3-1 missing dependency
- How to delete all resources in azure to avoid charges after trial on your forced credit card registration
- Proxmox – ZFS – Dead drive on active VM, recover from replicated disk
- Restrict access to proxmox web admin interface
- Migrate your ESXI VMs to proxmox ZFS
- Install your VPN server with pi-hole on OVH VPS in 30 min
- Using raspberry pi 3 as wifi bridge and repeater and firewall
- Raspberry 3 – create a wifi repeater with USB wifi dongle
- raspberry 3 – routeur pare feu point d’acces wifi avec filtrage pub et tracking – router firewall access point with ads and tracking filtering
- Dell XPS 13 touchpad – corriger la sensibilité
- Utiliser Zazeen set top box depuis une connexion videotron
- Fermeture de mon compte facebook – la dernière goutte
- Choisir un kernel par defaut au demarrage de Centos 7.2 – configuration grub2
- Openvpn access server 2.0.25 et android
- Régler la luminosité du laptop par ligne de commande
- chromium outlook web app version complete sous linux
- Nexus 7 2012 – android 5 lollipop solution au probleme de lenteur
- HDD led sur Xubuntu – xfce
- xubuntu 14.04 verrouiller ecran de veille et desactiver mise en veille a la fermeture de l’ecran
- Authentification avec Radmin en utilisant Wine sur Gentoo
- Patcher bash sur une distribution plus supportee comme fedora 11
- Zimbra desktop sous xubuntu 14.04 64bit – fix
- xubuntu 12.10 probleme de son avec VLC – pulse audio – alsa – toshiba L855D – solution
- Evolution sous xubuntu 12.10 – bug affichage a la configuration – solution temporaire
- Booster son acces internet en changeant de DNS pour opendns
- Serveur DLNA sous ubuntu – minidlna
- sshfs sous windows – dokan sshfs
- xubuntu 11.10 Installer le plugin java pour firefox
- Installer Google Earth sur Xubuntu 11.10
- Installer nagios sur Fedora 11 depuis les sources
- Configurer varnish-cache avec des virtualhosts, apache, fedora, redhat, centos
- Installer Varnish depuis les sources sur Fedora 11