robots informatiques (également appelés bots, robots ou araignées) sont des logiciels qui recherchent l`Internet, la collecte d`informations à partir de pages Web. Ils ne sont pas des virus parce qu`ils ne pas injecter le logiciel dans d`autres ordinateurs - ils se rassemblent simplement des informations. Le logiciel fonctionne sur l`ordinateur du robot propriétaire et ne pas utiliser les ressources de tout autre système. Certains robots de recueillir des informations les propriétaires des pages Web visitées préfèrent ne pas être libérés, mais les robots informatiques ont plusieurs utilisations bénignes et il y a certains d`entre vous aurait probablement envie de visiter votre page Web d`entreprise.
Créer un algorithme clair en premier. Dépêchant à travers cette partie est l`erreur la plus commune faite par les fabricants de robots. Vous devez savoir ce que vous voulez que le bot à faire dans chaque situation, exactement ce que les informations que vous souhaitez collecter et quand vous voulez que le bot d`arrêter la collecte d`informations. La structure typique d`un bot est une seule boucle: Regardez la liste d`entrée des répertoires, pour chaque fichier dans chaque répertoire collecter les informations que vous recherchez, si vous trouvez des liens vers de nouveaux répertoires les mettre dans votre liste de répertoires, toujours vérifier pour duplications et continuer à le faire jusqu`à ce que la liste des répertoires est vide. La liste des objets trouvés doivent être enregistrées sous une forme qui est facile à récupérer.
Choisissez la langue et coder l`algorithme. Vous pouvez écrire un robot informatique dans toutes les langues, mais certaines langues sont plus faciles que d`autres. Si vous êtes un expert dans une langue particulière, alors c`est la langue de choix évidente. Si vous êtes bien dans une variété de langues ou allez apprendre une langue juste à écrire le bot, certaines langues sont mieux que d`autres. Les langues de choix pour les écrivains bot sont Perl et Ruby. Ils sont tous deux disponibles gratuitement sur le web, relativement facile à apprendre, courir rapidement et ont des caractéristiques qui font de bot écriture simple pour les non experts. Par exemple, les deux langues ont des instructions simples pour capturer tous les fichiers dans un répertoire.
Testez le bot. Il est facile de créer un bot qui va sans se briser, mais ne recueille pas l`information appropriée. Vous devez tester le bot sur votre propre site web où vous savez quelles informations doivent être collectées. Les sites Web plus vous pouvez tester votre site sur le mieux.
Conseils & Avertissements
- Sites ont parfois un fichier appelé "robots.txt" au plus haut niveau d`un site Web qui contient le code de commande de robot pour diriger le robot visiter. Si vous collectez des informations légitimes - comme la classification du site pour un moteur de recherche - le code de commande de robot peut vous faire économiser beaucoup de temps en restreignant la recherche sur les fichiers appropriés.
- Certaines personnes n`aiment pas être visité par des robots et se déguiser des informations de robots. Par exemple, les adresses électroniques peuvent être écrites "abc {at} xyz.net" au lieu de par le signe @ comme ceci est ce qui distingue une adresse e-mail et sera ce que l`adresse e-mail les robots collecteurs recherchent.
