Задача – парсинг сайтов
и
Требуется реализовать и оформить в виде удобного класса/библиотеки парсинг сайтов
и
, с тем, чтобы программист, используя эту библиотеку мог получить:
1. Дерево категорий
Получение списка категорий верхнего уровня, и далее – получение списка подкатегорий для каждой категории (если есть).
2. Получение списка товаров
Поиск по ключевым словам, в том числе с учетом категории. Перелистывание, фильтр по параметрам, сортировка (по популярности, по цене, по обзорам и пр.). Нужно учесть, что список параметров может быть различным для разных сайтов и даже категорий. В результатах вызова должны выдаваться также данные об общем количестве найденных товаров, о количестве страниц (для перелистывания) и о категориях, в которых найдены товары по данному поиску.
Список возможных параметров должен быть динамическим, то есть, при парсинге запроса на поиск товаров должен возвращаться список параметров, которые можно указать при уточняющем запросе. Например, для поиска
возможным уточнением будет Встроенная емкость для хранения (16 Гб или менее, 32GB), а для поиска
возможным уточнением будет Емкость карты памяти (128 МБ, 2 Гб, 4GB, 8GB, 16GB, 32GB, 64GB). Для
необходимо получить уточнения по дюймам и т.п.
3. Получение данных товара
Например, данных о товаре
Необходимы все параметры самого товара (цена и т.п.), а также данные об оплате, доставке (включая стоимость до любой префектуры) и продавце. Также нужно получить список товаров, которые часто покупают с этим товаром. И прочая информация, которая есть на странице.
4. Если есть идеи о переводе с японского на русский, они будут приветствоваться.
Нужна демонстрация работы библиотеки: навигация по категориям, поиск товаров, перелистывание списка товаров и других перечисленных функций. Исходный код такой демонстрации тоже нужен. Дизайн при этом не важен, и может быть минимальным.
Примеры вызовов (для понимания):
require_once('/lib/parser.php');
$parser = new Parser(PARSER_TYPE_RAKUTEN);
$parser->getCategories(); // Категории верхнего уровня
$parser->getCategories('20_92_60'); // Подкатегории категории 20_92_60
$parser->getItems(array('category' => '20_92_60', 'keywords' => 'Nikon')); // Поиск товаров в категории 20_92_60 по ключевому слову "Nikon". Набор критериев поиска может быть различным
$parser->getItem('3630186'); // Получение данных о товаре