Несомненно, что базы данных, регулярно наполняемые роботами, чрезвычайно востребованы и большинство пользователей пользуются их услугами, но существуют несколько проблем негативно влияющие на работу роботов. Например, такой проблемой является большой объем постоянно обновляющихся ресурсов.
Неплохим средством оптимизирующий поиск информации является отзыв, которой содержит информацию о найденных релевантных документах. Такой способ организации поиска является неплохим решением, так как наличие релевантных документов в глобальной сети более чем достаточно. Однако по сравнению с множеством документов в глобальной сети количество документов созданных роботом достаточно мало, что серьезно ограничивает точность отзыва. Возможно, представить и такую ситуацию, когда база данных не содержит данный ресурс, но такой документ представлен в большом множестве в интернете, поскольку глобальная сеть непрерывно расширяется.
