Вывод недостающих дат?

Question

[arsenaljek]

У меня есть такая таблица

+------------+------------+------------+
| id | price | date |
+------------+------------+------------+
| 1 | 3000 | 2019-01-26 |
| 2 | 2500 | 2019-01-23 |
| 3 | 2000 | 2019-01-22 |
| 4 | 3000 | 2019-01-21 |
+------------+------------+------------+
Мне нужно, добавить все недостающие даты и присвоить им цены. При выводе на php


+------------+------------+------------+
| id | price | date |
+------------+------------+------------+
| 100 | 3000 | 2019-01-28 |
| 100 | 3000 | 2019-01-27 |
| 100 | 3000 | 2019-01-26 |
| 100 | 2500 | 2019-01-25 |
| 100 | 2500 | 2019-01-24 |
| 100 | 2500 | 2019-01-23 |
| 100 | 2000 | 2019-01-22 |
| 100 | 3000 | 2019-01-21 |
+------------+------------+------------+

Я пытаюсь и делаю так, но естественно он выводит только то, что уже есть в базе

$sql = "SELECT products.id_lab, products.vendor, products.vendor_code, products.name, products.author, products.description, products.image_product, products.link_product, prices.price_product, prices.date AS max_date 
	FROM products 
	LEFT OUTER JOIN prices ON products.id_lab = prices.id_lab
	WHERE prices.price_product != 0 AND products.id_lab = '".$row_product['id_lab']."'
	ORDER BY prices.date DESC, prices.price_product DESC;";
	$result = mysqli_query($link,$sql);
	foreach($result as $article1) {
	    if (isset($article1['price_product'])) {
	        $articles2[date("d.m.Y",strtotime($article1['max_date']))] = (int)$article1['price_product'];
	    }
	}
	foreach($result as $article2) {
	    if (isset($article1['price_product'])) {
	        $articles1[date("d.m.Y",strtotime($article2['max_date']))] = (int)$article2['price_product'];
	    }
	}

Comments

[Ninazu]

А вы уверенный что вам нужно в базе хранить цены за все даты, а не только изменение цены(то что у вас уже есть в таблице prices). Опишите задачу, зачем вам эти данные и как они применяются? Вам нужно за какую-то дату получить цену для товара? Или график изменения цены для товара? Нужен юзкейс, вангую что нужно не наполнять базу а обрабатывать данные

[arsenaljek]

Ninazu, тот вариант к которому я сейчас пришёл. Это мой второй вариант. Что записывать в бд цену, только если она отличается от цены за прошлый день. До этого я писал вообще все цены. Поэтому я не уверен в 100% правильном решении. Но до чего додумался, до того додумался. Как видите, на своем же алгоритме уже забуксовал(

[Ninazu]

Вопрос в том насколько часто эти данные вам нужны. Я это к тому что есть смысл денормализировать данные или аггрегировать их на лету

[arsenaljek]

Ninazu, Данные нужны постоянно.Скрипт собирает цены, и я постоянно обращаюсь к полученным данным

Answer 1

[Максим Тимофеев]

Вам нужно в php создать массив дат, а далее заполнять его ценами дергая их из другого массива, который получили из базы. При этом наверное удобнее будет индексировать массив по датам.

Comments

[arsenaljek]

Постараюсь осознать, то, что Вы написали. Спасибо за показанный путь)

[ThunderCat]

arsenaljek, имеется в виду что ключи массива - даты, а значения - цены.

[FeST1VaL]

arsenaljek, к этому же добавлю, чтобы добавить что то к уже существующей в базе строке нужно сделать не SELECT, а UPDATE.

[Максим Тимофеев]

Артем Будин,

Мне нужно, добавить все недостающие даты и присвоить им цены. При выводе на php

То есть это в php нужно, в базе все остается как есть

[FeST1VaL]

Максим Тимофеев, ну смотря что именно вы делаете... с датами и ценами? вы пытаетесь сделать админ панель или что? Как у вас заполняются товары? почему у некоторых отсутствуют даты и цены? Я наверно сказал бы так... перефразируйте свой вопрос...

[Максим Тимофеев]

Артем Будин,
я не топикстартер, но зачем хранить в базе избыточные данные. Можно хранить пределы при которых идет смена цены. Смысл для "со 2-го по 15-е - 3000рублей" хранить все 14 дат? Достаточно хранить диапазон или две записи-границы.

[FeST1VaL]

Максим Тимофеев, а ну чет не заметил... простите простите)) ну суть я передавал к топик стартеру))

[arsenaljek]

Артем Будин, Я собираю цены некоторых интернет магазинов. Раньше я писал в бд абсолютно все цены, каждый день. Но т.к база стала неприлично большой(20гб) Я решил, что буду писать в базу цену, только в том случае, если она отличается от цены за прошлый день. Т.е сейчас мои записи выглядят вот так
| 1 | 3000 | 2019-01-26 |
| 2 | 2500 | 2019-01-23 |
| 3 | 2000 | 2019-01-22 |
| 4 | 3000 | 2019-01-21 |

Выводить я должен цены каждый день. Т.е если цена в базе на 26.01.2019 = 3000р, а сегодня уже 30.01.2019, то за все пропущенные дни цена за эти даты к конкретному товару должна быть 3000. Это только на php. Без добавления в бд. Т.к я таким образом решил экономить место. Вообщем пока новая цена не записалась в бд, нужно писать последнию актуальную цену на пропущенные даты.

[arsenaljek]

Максим Тимофеев, Максим, вот именно так я и пытаюсь сейчас делать. Т.е в базу пишу, только цену, если она отличается от цены за прошлый день у конкретного товара.

[FeST1VaL]

arsenaljek, ну тогда просто берете текущую дату и ищите у товара дату меньше текущей и вот ваша цена

[arsenaljek]

Артем Будин, А как быть тогда с ценами которые не текущей датой ограничиваються?
| 1 | 3000 | 2019-01-26 |
| 2 | 2500 | 2019-01-23 |
Вот здесь вывод цены 2500 должен производиться с 23 - 25 числа включительно

[FeST1VaL]

arsenaljek, т.е у вас можно переключаться между датами? заменяете текущую дату на выбранную

[arsenaljek]

Артем Будин, Смотрите. Есть сайт. Вводя конкретный артикул товара, мы должны видеть все цены.
В базе это выглядит так
| 1 | 3000 | 2019-01-26 |
| 2 | 2500 | 2019-01-23 |
| 3 | 2000 | 2019-01-22 |
| 4 | 3000 | 2019-01-21 |
Это 4 цены. Но показать пользователю я должен как минимум цены с 21 числа и оканчивая сегодняшним, 30.01. С 24.01-25.01 это будет цена 2500. С 26.01-30.01 это 3000. Т.е весь перечень цен, которые я должен показать пользователю выглядит так
3000 | 2019-01-30 |
3000 | 2019-01-29 |
3000 | 2019-01-28 |
3000 | 2019-01-27 |
3000 | 2019-01-26 |
2500 | 2019-01-25 |
2500 | 2019-01-24 |
2500 | 2019-01-23 |
2000 | 2019-01-22 |
3000 | 2019-01-21 |

[FeST1VaL]

arsenaljek, берете подряд даты, проверяете каждую дату с базой, если не найдено, то берете предыдущее значение которое меньше по дате...

[arsenaljek]

Артем Будин, Для этого стоит сгенерировать массив дат?
Как-то так?

$start = strtotime('22-01-2019');
$finish = strtotime('01-01-2030');
$arrayOfDates = array();
  for($i=$start; $i<$finish; $i+=86400){
  list($year,$month,$day) = explode("|",date("Y|m|d",$i));
  $arrayOfDates[$year][$month][] = $day;

}

[FeST1VaL]

arsenaljek, ну это уже как надо вам) Я бы находил наверно первую дату в базе для нужного товара, брал ее как старт, а финиш как текущее число. А так ну что то вроде того... :3

[arsenaljek]

Артем Будин, Мне нужна помощь....

$sql1 = "SELECT * FROM prices 
	WHERE price_product != 0 AND id_lab = '".$row_product['id_lab']."' ORDER BY `date` LIMIT 1;";
	$result1 = mysqli_query($link7,$sql1);
	$row_start = mysqli_fetch_array($result1); // получаем первую дату

	$start = $row_start['date'];
	$finish = $dateround; //сегодняшняя дата
	while ($row = mysqli_fetch_array($result)) { // этот цикл выводит 4 записи из бд с ценами, датами, артикулами
		for($i=$start; $i<=$finish; $i++){
			if ($i != $row['max_date']) {
				echo $i.'==='.$row['max_date']. 'несовпала</br>';
			} else {
				echo $i.'==='.$row['max_date']. 'совпала</br>';
			}
		}

Этот код выдает следующий результат

2019-01-22===2019-01-25несовпала
2019-01-23===2019-01-25несовпала
2019-01-24===2019-01-25несовпала
2019-01-25===2019-01-25совпала
2019-01-26===2019-01-25несовпала
2019-01-27===2019-01-25несовпала
2019-01-28===2019-01-25несовпала
2019-01-29===2019-01-25несовпала
2019-01-30===2019-01-25несовпала
2019-01-31===2019-01-25несовпала
2019-01-22===2019-01-24несовпала
2019-01-23===2019-01-24несовпала
2019-01-24===2019-01-24совпала
2019-01-25===2019-01-24несовпала
2019-01-26===2019-01-24несовпала
2019-01-27===2019-01-24несовпала
2019-01-28===2019-01-24несовпала
2019-01-29===2019-01-24несовпала
2019-01-30===2019-01-24несовпала
2019-01-31===2019-01-24несовпала
2019-01-22===2019-01-23несовпала
2019-01-23===2019-01-23совпала
2019-01-24===2019-01-23несовпала
2019-01-25===2019-01-23несовпала
2019-01-26===2019-01-23несовпала
2019-01-27===2019-01-23несовпала
2019-01-28===2019-01-23несовпала
2019-01-29===2019-01-23несовпала
2019-01-30===2019-01-23несовпала
2019-01-31===2019-01-23несовпала
2019-01-22===2019-01-22совпала
2019-01-23===2019-01-22несовпала
2019-01-24===2019-01-22несовпала
2019-01-25===2019-01-22несовпала
2019-01-26===2019-01-22несовпала
2019-01-27===2019-01-22несовпала
2019-01-28===2019-01-22несовпала
2019-01-29===2019-01-22несовпала
2019-01-30===2019-01-22несовпала
2019-01-31===2019-01-22несовпала

Я вроде бы и логикой понимаю, то что вы написали, но с кодом вот проблема...

[FeST1VaL]

arsenaljek, Ну тут нужен новый запрос чтобы найти предыдущую цену т.е что то вроде этого:

if($i != $row['max_date']) {
	$query = mysqli_query($link7, "SELECT `price` FROM `prices` WHERE price_product != 0 AND id_lab = '{$row_product['id_lab']}' AND `date` < '{$row['max_date']}' ORDER BY `date` ASC LIMIT 1");
	$row_query = mysqli_fetch_assoc($query);

	$price = $row_query['price'];
} else {
	$price = $row['price'];
}

P.S: это не 100% вариант, но должно сработать... так вы найдете предыдущую цену и тут сможете уже в какую то переменную ее занести и далее ее в верстку

Answer 2

[Ninazu]

Ну тогда в вашей денормализации есть смысл.

Сложно понять структуру вашей базы по вашему куску кода. Поэтому код пишу наугад)

1. Нужно сформировать весь возможный диапазон дат на PHP

$period = new DatePeriod(
     new DateTime('2019-01-21'),
     new DateInterval('P1D'),
     new DateTime('2019-01-28')
);

$dates = [];

foreach($period as $date){
   $dates[] = $date->format("Y-m-d"); 
}

2. Получаем цены которые уже есть в базе для товаров

$where = " WHERE p.date IN ('" . implode(",'", $dates) . "')";

3. Построить cписок недостающих цен по массиву $dates и продуктам с их ценами.

$data[$product][$price][] = $date;
////.......
foreach($data[$product][$price] as $datesInDb){
     $missing = array_diff($dates, $datesInDb);
}

4. Добавить недостающие записи для продуктов

INSERT IGNORE INTO prices (columns)
VALUES (valueList),
      (valueList),
      ...

Comments

[arsenaljek]

Спасибо за код, попробую его адаптировать к своему. Единственно, что 4 пункт это лишнее. Т.к все делается именно для того, чтобы в базе хранить минимум цен. Сейчас я пишу, абсолютно все цены и размер бд уже 20гб. Т.е в базе я храню вот так
| 1 | 3000 | 2019-01-26 |
| 2 | 2500 | 2019-01-25 |
| 3 | 2000 | 2019-01-22 |
| 4 | 3000 | 2019-01-21 |
А на пхп я вывести должен вот так.
| 10 | 3000 | 2019-01-30 |
| 9 | 3000 | 2019-01-29 |
| 8 | 3000 | 2019-01-28 |
| 7 | 3000 | 2019-01-27 |
| 6 | 3000 | 2019-01-26 |
| 5 | 2500 | 2019-01-25 |
| 4 | 2000 | 2019-01-24 |
| 3 | 2000 | 2019-01-23 |
| 2 | 2000 | 2019-01-22 |
| 1 | 3000 | 2019-01-21 |
Т.е последняя цена(в нашем примере 3000р) будет проставляться до тех пор(до той даты), пока не запишется другая цена, которая != 3000