Spiders zijn geautomatiseerde programma's die een webpagina kruipen. Ze zijn ook bekend als robots of wormen. In ieder geval zal de spin van de pagina te vinden. Daaruit volgt dan links die leiden naar andere pagina's op de website. Spinnen halen de informatie en geef het dan aan de zoekmachine indexers.Clearly de indexer is net als de bibliothecaris van de zoekmachine. Elk woord is aangemeld, gecategoriseerd en opgeslagen in een gigantische databank door de indexer. Er zijn manieren om de spinnen te lokken naar andere dan handmatige indiening van uw website.
Hier zijn een aantal snellere methoden in plaats van rechtstreeks indienen van uw pagina's. Een van de beste manieren om uw website snel spidered is om uw website te koppelen aan een andere site die is gerelateerd aan het thema van uw website. Deze site moet al zijn geïndexeerd. Idealiter zou de site moet gespiderd regelmatig ook. Het hebben van uw site in persberichten en blogs genoemd kan ook uw site spidered zeer snel, soms binnen enkele dagen. U kunt ook een meer traditionele methode gebruiken, zoals het posten in forums. Als u deze route kiest wees niet te spam.
Volg de ter beschikking gestelde regels. Bieden altijd behulpzaam antwoorden. Vergeet niet om nooit overboord gaan op uw sig-bestand. Sturen duidelijk van de particuliere forums. Ze zijn niet altijd geïndexeerd. Zorg ervoor dat de forums waar je een bericht in de zoekresultaten worden weergegeven. Ongeacht welke methode je ook kiest om uw website spidered, krijgt u een goede site kaart nodig. Een sitemap lijsten en links naar alle pagina's op uw site. Als uw site bestaat uit meer dan ongeveer honderd pagina's, gebruik maken van een meerdere site map.
Zorg ervoor dat elke site map pagina links naar alle andere site map pagina. U moet een link naar uw site map op uw homepage en bij voorkeur op elk van uw pagina's. Daarnaast, zorg ervoor dat uw website pagina's zijn eenvoudig en vrij van rommel. Om te wo