Нужно поменять алгоритм работы "очистки спама"

В связи с тем, что форум очень большой, очистка спама не отрабатывает корректно в веб контексте. Нужно поменять алгоритм на следующий:
1. Сделать очередь очисток спама.
2. При тыканье в кнопку "очистка спама" добавлять это задание в очередь
3. Фактически производить очистку по крону.
ценники и предложения жду в личку или в джаббер lust@jabber.no

 

Для начала советую попробовать выделить под PHP больше памяти. Я заметил, что очень часто скрипты XF вываливаются в ошибки в тот момент, когда скрипт пытается загрести из БД очень большой объем данных.

 

Нет. Причина именно в таймаутах - тяжело php в вебконтексте перелопачивать базу размером в 3 гига, увеличивать таймауты - тупиковый путь.
Причины хорошо известны, алгоритм я описал, нужно чтобы кто нибудь его реализовал за деньги

 

бюджет?

 

Не знаю предлагайте в личку, джаббер. ТЗ я вроде достаточно понятно изложил, а вот расценков совсем не знаю.

 

ТЗ расписано точно, но кажется Вы просто не пользовались встроенным функционалом очистки спама.
Во первых, все запросы при очистке спама происходят по индексу, т.е. не зависимо от размера базы все будет удаляться быстро (проверено на очень больших форумах). Если же у Вас почему3-то удаляется медленно, значит или какой-то хак или настройка базы мешают нормальной работе (второе врядли т.к. ресурсы с базой в 3Г просто обязаны быть правильно настроены). Я специально проверил профайлером все работает быстро и на больших базах. Если у Вас это почему-то происходит долго, то должно тормозить и обычное удаление тем.
Во вторых, очистка спама - это полностью интерактивная операция в плане поиска дубликатов по ip. Т.е. физическое удаление тем и сообщений можно оставить на потом, но что делать с дубликатами - игнорировать или как?

 

Исправил сам. Проблема была в том что в таблице xf_post отсутствует по дефолту индекс на user_id, в этом и была причина тормозов именно на "удаление спама" так как там where строится по user_id.

 

Смотрите, чтобы не было проблем с обновлением. Судя по всему, этот индекс был добавлен в версии 1.1.0 Beta 1.

 

Обновлять в любом случае надо будет руками, там весьма много разнообразных патчей.

 

Lust, Вы бы сразу сказали номер версии форума, а то я проверял на последней, где индекс уже точно есть.