En général, les bases de données sont intérrogées via des scripts qui produisent des pages dynamiques qui ne sont quasiment pas reconnues par les outils de recherche. Ces bases de données constituent une grosse par du web dit "invisible" qui représente à peu près 90% de l'information disponible sur le web.