Разработка агрегатора цен

Для крупного портала требуется разработать дополнительный раздел – агрегатор цен на товары в отрасли. Проблема в том, что количество позиций, по которым нужно будет проводить сравнение/выборку, может составлять от 5 до 200 млн. Соответственно, не каждая С