MySQL replace

[Sitealert]

Сообщение от sanek1991

Только в условие я добавлял BETWEEN

Не надо BETWEEN. Попробуй так, как у меня написано.

UPDATE table_name SET field_name=REGEXP_REPLACE(field_name, '\\[.*?\\]', '') WHERE content_id>99999 AND content_id<200000

[sanek1991]

В принципе то же самое время - 6.7 сек с условием для одной записи
WHERE content_id = 6094079

Текст обрабатывает корректно, но время что-то не того.
Сервер 4 ядра, 16 GB озу
Проблем со скоростью работы БД не наблюдалось

[XPraptor]

sanek1991, эта операция очень затратна, если большая таблица - так делать не надо.
Надо через php тоже регулярное выражение прогнать (preg_replace) с лимитами по 5-10 тысяч строк за раз.

Тут для скорости вообще нужно схитрить, создать таблицу временную с одним полем для этого текста и ключем как ключ основной талицы.
При проходе php, выбрать только ключ и это поле текста (SELECT key, text FROM...) записывать результат изменения в эту временную таблицу и по окончании сделать вставку в основную:

INSERT INTO table_name (key, text) SELECT key, text FROM table_temp ON DUPLICATE KEY UPDATE table_name.text=table_temp.text

[Sitealert]

XPraptor, какие там затраты для одной строки таблицы?
Сама операция UPDATE медленная, но мне непонятно, почему на простом REPLACE не тормозит. Для одной строки разница должна быть несущественной, с регуляркой или без регулярки.

[sanek1991]

Сообщение от XPraptor

Тут для скорости вообще нужно схитрить, создать таблицу временную с одним полем для этого текста и ключем как ключ основной талицы.
При проходе php, выбрать только ключ и это поле текста (SELECT key, text FROM...) записывать результат изменения в эту временную таблицу и по окончании сделать вставку в основную:

INSERT INTO table_name (key, text) SELECT key, text FROM table_temp ON DUPLICATE KEY UPDATE table_name.text=table_temp.text

Я думал по другому.
Через php выбрать запись, обработать её php-шным REGEXP REPLACE, после перезаписать существующую запись в базе новой

Затем выбрать следующую запись ... и тд
В промежутках перед следующей выборкой, делать паузу, что-бы БД сильно не грузить.
Но сам я не программер, знания на уровне общих понятий.
Скрипт такой не смог найти.

[XPraptor]

Sitealert, Так прогони EXPLAIN на запрос одной строки - что пишет, сколько строк затрагивает, какие индексы задействует?

[XPraptor]

Сообщение от sanek1991

ерез php выбрать запись, обработать её php-шным REPLACE, после перезаписать существующую запись в базе новой

UPDATE затратная штука, особенно на индексах текстовых, поэтому лучше так, как я указал выше, быстрее будет.

[Coder]

Сообщение от sanek1991

Я думал по другому.
Через php выбрать запись, обработать её php-шным REPLACE, после перезаписать существующую запись в базе новой

Затем выбрать следующую запись ... и тд

Взять всю базу, переработать и переписать... Причём даже через простой текстовый редактор., с соответствующим функционалом поиска и замены. И записать базу взад.
Если надо - через конвертацию в редактируемые форматы - вариантов много разных.

Ну, и через php и буфер или без буфера - просто, конкретно и сердито.

[XPraptor]

Coder, ну, это уже как последний аргумент.

[Sitealert]

Сообщение от sanek1991

WHERE content_id = 6094079

А почему content_id, а не id? По автоинкременту что идёт?