Странности с определением ID + цикл PHP

1104

Dram

1 июня 2019, 19:56

1564

Есть парсер, где в таблицу пишутся ID и прочая ерунда, реализовано так


 $i = 0;
foreach ($Level3 as $lev3){
  $i++;

Ну и где-то там далеко внизу идет инсер в базу, где в качестве ID записывается переменная $i

Так как данных много за раз парсер не сможет все окучить да и бось чтобы не забанили, поэтому решил запускать его по категориям.

В этом случае прихожу к проблеме как определить с какого ID продолжать писать.

Так как опыта еще мало, решил это как смог - так:

$id = $db->query("SELECT MAX(`id`) FROM `table`");
$i = array();
foreach ($id as $item) {
$i[] = $item;
}
if(!isset($i[0]['MAX(`id`)'])){
$i=0;
} else {
$i= (int)$i[0]['MAX(`id`)'];
}

Проверил, в итоге перед циклом переменная $i принимает верное значение, но вот в самом цикле начинается магия.

В категории, на которой я тестирую - 4 товара.

Если один раз запустить парсер то

если прописано $i=0; запишется 4 товара как и положено, а если мой говнокод с определением максимального ID - то вообще ничего.

Проверяем дальше - запускаем еще раз.

При $i=0; запишется как и положено еще 4 товара, но !!!

если вставить мой быдлокод с определением ID - var_dump($i); мне покажет

int 4

что логично и внушает оптимизм :)) но в базу добавятся еще 8 записей вместо 4. (дубли будут)

Понять этого я не могу, надеюсь на вашу помощь.

437

totamon

2 июня 2019, 04:56

#1

смысл писать в ИД счетчик? база сама умеет это делать, на поле ИД установить флаг автоинкремент, в запрос вместо $i вставляй NULL

1

Домены и хостинг https://8fn.ru/regru | Дедик от 3000р https://8fn.ru/73 | VPS в Москве https://8fn.ru/72 | Лучшие ВПС, ТП огонь, все страны! https://8fn.ru/inferno | ХОСТИНГ №1 РОССИИ https://8fn.ru/beget

D

1104

Dram

2 июня 2019, 05:00

#2

Спасибо за подсказку!! В пхпмайадмин прописал у поля ID автоинкримент, далее так в запросе?

VALUES ('',

Попробовал прогнать - ничего не записалось

Так тоже попробовал

VALUES ('NULL'

Попробовал так

VALUES (LAST_INSERT_ID(),

В базу записалось 2 одинаковых товара - 2 раза записался первый товар, еще раз прогнал - опять они же записались :))

437

totamon

2 июня 2019, 05:07

#3

VALUES (NULL,

как-то так

1

D

1104

Dram

2 июня 2019, 05:10

#4

С

VALUES (NULL,

мне на первом же прогоне записало 8 записей.

Два раза по 4. Почему так не понятно...

В конце цикла

foreach ($Level3 as $lev3){

У меня прописан запрос

$db->query("INSERT INTO

Если попробовать после запроса прописать - break;

То в базу запишутся 2 раза первый товар и все. ТОже мне не понятна эта песня.

НЕ правильно работает цикл Добавление строки в html Как заставить цикл do

425

Таггу x_x

2 июня 2019, 05:18

#5

Сериал "Муки быдлокодера" :D

1

☠️☠️☠️

D

1104

Dram

2 июня 2019, 05:24

#6

Частично Решил проблему добавлением уникального индекса на одно из полей :))

Дублей больше нет, но по ID видно что они просто перезаписываются что-ли.

ID не по порядку идут

---------- Добавлено 02.06.2019 в 08:44 ----------

Упростил цикл до минимума

foreach ($Level3 as $lev3){
$db->query("INSERT INTO `table` (`id`, `parent_id`, `name`, `4`, `5`, `6`, `7`, `8`, `9`)
VALUES (NULL, '{$linksLevel2[0]['id']}', '0', '0', '0', '0', '0', '0', '');");
}

var_dump($lev3); показывает что в цикл заходят 4 ссылки в виде строк.

Но запуская этот цикл я получаю в базу 8 записей. Почему?

1

Слишком много данных, памяти Сравнить и удалить некоторые Где ошибка? PHP

437

totamon

2 июня 2019, 05:50

#7

Dram, тут видимо алгоритмические прорехи) само собой ведь ничего не происходит, пишет то что задано, нужно проработать логику и структуру программы, пройди по шагам, что выполняет скрипт, если не найдешь почему так а не так как хочется, попробуй выводить промежуточные результаты... http://phpfaq.ru/debug это изучи, получше любого курса будет, только сразу применяй)

1

На меня подали иск Вопрос по логике в Мордой к покупателю :)

IL

435

ivan-lev

2 июня 2019, 06:05

#8

Dram:
В базу записалось 2 одинаковых товара - 2 раза записался первый товар, еще раз прогнал - опять они же записались )

Видимо, имеет смысл перед записью проверять наличие этого товара в базе.. по какому-то уникальному идентификатору (ID в прайсе, либо название).

if (!$good = Good::find(array('id_inner'=>$row['id_inner']))

    $good = new Good;

// .. устанавливаем атрибуты

$good->save();

А ещё есть фишка - импортировать всю таблицу в таблицу в память (тип Memory) и

а) если товары точно есть

UPDATE product p INNER JOIN tmp_product tp SET p.price = tp.price, p.status = tp.status

б) старые обновляем, новые добавляем

INSERT INTO p (id_inner, name, price, status ...) SELECT id_inner, name, price, status FROM tmp_product tp

ON DUPLICATE KEY UPDATE name = tp.name, price = tp.price

... :) Облачные серверы от RegRu - промокод 3F85-3D10-806D-7224 ( http://levik.info/regru )

D

1104

Dram

2 июня 2019, 06:07

#9

Не, это все не то. Зачем городить кучу проверок, если банальный цикл из 4 итераций уходит на второй круг, а этого быть не должно априори.

Нужно понять почему так...

IL

435

ivan-lev

2 июня 2019, 06:09

#10

Dram:
если банальный цикл из 4 итераций уходит на второй круг,

Так смотри код.. или кидай, вместе посмотрим )))

Вышел новый Яндекс Браузер с YandexGPT и YandexART

Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта