Как лучше добавить записи в таблицу MySQL? Порциями по 100 штук за каждый запрос или все 20000 сразу одним запросом?

20000 сразу, смысл мельчить, хотя если полей 1000, можно и частями. А проблема в чём?

А как добавляешь? Код покажи...

по 1000 добавляй в транзакции

(1) Полей мало. Сейчас на 20 000 записях работает норм. Но если их будет в 100 раз больше ничего страшного не случится?

(2) Обычным инсерт конечно. Как иначе?

лучше по одной

(3) Почему думаешь что все сразу не стоит?

(5) Почему так лучше?

(4) В нормальном сервере можно сделать инсерт порциями, можно булком.

(7) А как лучше? Сервер нормальный

Сервер не запарится парсить запрос если текст запроса будет на гигабайт?

(9) Он его просто не примет. В нормальном сервере есть ограничение на размер запроса - где-то 32КБ

(6) Для MySQL так лучше. У неё часто таблицы сыпятся. Лучше работать маленькими запросами.

Для ускорения можно отключить индексы, добавить, потом включить индексы.

(0)гугли "load data infile"

(9) текст запроса должен целиком вмещаться в физическую ОЗУ, по этому при достижении определенных размеров - будет вылет с системной ошибкой...

по этому любые инсерты с непредсказуемым размером правильно дробить...

(13) Память тут ни причём. У сервера есть тупо ограничение на размер запроса. Они страхуются от недостатка памяти, не совсем дурные... хотя мыскл... Там может быть всё, что угодно

(10) У меня работают запросы >>32Kb. Значит сервер не нормальный?

(11) Спасибо! Буду по одной добавлять.

(12) Это не по теме

Темку можно закрыть.

(15) Я не помню точное значение ограничений. Но оно есть

обычно все наооборот должно быть из май в мс, а тут прям интересное что-то, это чего-то в инет магазин выгружается из фронта...

(14) ты путаешь минимальное выделение памяти на запрос и предел...

Если разбираешься и имеешь доступ к настройкам My SQL то лучше одним запросом, если нет - тогда порциями по 10 тыс, например. Вообще делал запись одним запросом 90 тыс позиций - порядка 2 сек. Нет там никаких глюков. При обрыве соединения в момент записи большой порции, если запрос написал правильно - My SQL норм отрабатывает отмену порции.

И еще. Если что то глючило в какой то версии 5 лет назад или при непонятных обстоятельствах - это не повод писать все построчно и забивать сеть десятками тысяч мелких запросов, а потом не понимать почему сайт тормозит. Единственный ньюанс - конечно нужно знать параметр по ограничению и ставить его в требуемом значении.

Отлично. Спасибо!

20000 на несколько гигабайт? Ты там хайрез фотки в блобах держишь?

"В сто раз больше полей" - О_о!!!

(11) В 5х версиях не сыплются. Не, ну сыплются, конечно, но редко.

(22) нет, 20000 - это очень маленький запрос, всего на 1 мегабайт, он работает отлично. Но возможны более крупные запросы, неизвестного заранее размера.