База данных крупного ритейлера.

Для неформального обсуждения вопросов связанных с работой и отдыхом заходите сюда - в курилку. ВНИМАНИЕ!!! Если ВАС шокирует ненормативная лексика, то НЕ ЧИТАЙТЕ ЭТУ ВЕТКУ ФОРУМА!!!
MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

База данных крупного ритейлера.

Сообщение MoonRock » 24 мар 2017 11:40

Всем доброго времени суток. В качестве хобби начал заниматься парсингом публично доступных данных. На данный момент занимаюсь парсингом каталога товаров одного крупного ритэйлера г. Санкт-Петербург. Пока имеются следующие данные: каталог товаров, каталог производителей, список товаров с привязкой к соответствующим каталогам и производителям. Информация о товаре включает следующие данные: цену, историю изменения цены, описание товара, ссылку, рейтинг, историю изменения рейтинга. В перспективе планирую добавить: пункты выдачи, наличие товара в пунктах выдачи, изображение товара и его характеристики.

Интересны ли кому-нибудь на форуме подобные данные? Возможно будет интересна их какая-либо обработка/выгрузка? Могу для примера дать текущий "срез" базы (примерно 120 000 товаров).

Реклама
qazax
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 29 мар 2017 18:39
Имя: Иван
Фамилия: Серегин
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение qazax » 29 мар 2017 18:40

Напишите ваш емейл - нужна

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 30 мар 2017 09:51

qazax писал(а):Напишите ваш емейл - нужна

moon.rock@inbox.ru

waldfalke
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 17 фев 2017 15:29
Имя: Евгений
Фамилия: Соколов
Должность: Customer/Employee Experience manager

Re: База данных крупного ритейлера.

Сообщение waldfalke » 10 апр 2017 17:18

А профиль у ритейлера какой? Если книги или что-то близкое, то и мне нужно.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 апр 2017 20:54

Книги вроде скоро появятся, сейчас нету. Есть следующие категории:
    Парфюмерия и косметика
    Одежда и обувь
    Автотовары и автозапчасти
    Детские товары
    Дом, дача и ремонт
    Смартфоны и гаджеты
    Планшеты и игровые приставки
    Бытовая техника
    Фото и видеокамеры
    ТВ, Аудио, Видео
    Компьютеры и ноутбуки
    Комплектующие для ПК
    Офисная техника, канцелярия
    Красота и Здоровье
    Спорт и Туризм
    Зоотовары
    Услуги и сервисы
    Товары для взрослых 18+

Сейчас занимамаюсь парсингом ресурса с подержанными автомобилями. Может тоже будут кому-нибудь интересны такие данные.

sputnik
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 14 апр 2017 17:55
Имя: Александр
Фамилия: Тарасов
Должность: Менеджер ООП

Re: База данных крупного ритейлера.

Сообщение sputnik » 15 апр 2017 11:19

Добрый день!
А могу проконсультироваться?
Вы сами пишите программы или как собираете информацию? Мне тоже интересна эта тема.

Joopstar@mail.ru
Новичок
Новичок
Сообщений: 2
Зарегистрирован: 03 апр 2013 18:28
Имя: Максим
Фамилия: Зырянов
Должность: Категорийный менеджер

Re: База данных крупного ритейлера.

Сообщение Joopstar@mail.ru » 16 апр 2017 02:57

Добрый день, интересно. Напиши в личку.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 16 апр 2017 21:23

sputnik писал(а):Добрый день!
А могу проконсультироваться?
Вы сами пишите программы или как собираете информацию? Мне тоже интересна эта тема.


Да, сам пишу на С++.

Joopstar@mail.ru
Новичок
Новичок
Сообщений: 2
Зарегистрирован: 03 апр 2013 18:28
Имя: Максим
Фамилия: Зырянов
Должность: Категорийный менеджер

Re: База данных крупного ритейлера.

Сообщение Joopstar@mail.ru » 18 апр 2017 01:36

Привет!, Напиши на почту Joopstar@mail.ru Не могу ответить тебе в личке, у меня нед возможности.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 18 апр 2017 10:13

Joopstar@mail.ru писал(а):Привет!, Напиши на почту Joopstar@mail.ru Не могу ответить тебе в личке, у меня нед возможности.

Привет! Отправил письмо.

find
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 19 апр 2017 13:29
Имя: Екатерина
Фамилия: Фисюк
Должность: Исполнительный директор

Re: База данных крупного ритейлера.

Сообщение find » 19 апр 2017 21:28

Здравствуйте! И мне пришлите пожалуйста find77@yandex.ru

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 20 апр 2017 09:43

find писал(а):Здравствуйте! И мне пришлите пожалуйста find77@yandex.ru

Отправил.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 20 апр 2017 09:46

Я не указал, но наверно стоило: база данных не в Excel и не в Access, а в MySQL.

Т. е. для просмотра необходимо иметь установленный MySQL Server и MySQL Workbench. Они бесплатно доступны на сайте производителя mysql.com в разделе Downloads.

Андрей77
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 03 май 2017 16:55
Имя: Андрей
Фамилия: Снегирев
Должность: Начальник отдела снабжения

Re: База данных крупного ритейлера.

Сообщение Андрей77 » 03 май 2017 17:00

MoonRock писал(а):Я не указал, но наверно стоило: база данных не в Excel и не в Access, а в MySQL.

Т. е. для просмотра необходимо иметь установленный MySQL Server и MySQL Workbench. Они бесплатно доступны на сайте производителя mysql.com в разделе Downloads.

Доброго времени суток, если можно скиньте мне - snegi999@mail.ru

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 05 май 2017 09:26

Андрей77 писал(а):
MoonRock писал(а):Я не указал, но наверно стоило: база данных не в Excel и не в Access, а в MySQL.

Т. е. для просмотра необходимо иметь установленный MySQL Server и MySQL Workbench. Они бесплатно доступны на сайте производителя mysql.com в разделе Downloads.

Доброго времени суток, если можно скиньте мне - snegi999@mail.ru


Доброго. Можно. Отправил.

Anna Richter
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 05 май 2017 18:33
Имя: Анна
Фамилия: Рихтер
Должность: менеджер отдела закупа и логистики

Re: База данных крупного ритейлера.

Сообщение Anna Richter » 05 май 2017 18:37

Добрый вечер!
И мне пжл anechka.rihter@mail.ru

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 09:26

Anna Richter писал(а):Добрый вечер!
И мне пжл anechka.rihter@mail.ru


Отправил.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 10:31

База обновляется каждый день автоматически. Если кому-то из тех, кому уже отправил будет нужна более свежая - пишите, вышлю.

Аватар пользователя
бора-бора
Профессионал
Профессионал
Сообщений: 337
Зарегистрирован: 30 ноя 2011 11:27
Имя: Бора
Фамилия: Бора
Должность: би-ай
Откуда: Мозгва

Re: База данных крупного ритейлера.

Сообщение бора-бора » 10 май 2017 12:44

MoonRock писал(а):База обновляется каждый день автоматически. Если кому-то из тех, кому уже отправил будет нужна более свежая - пишите, вышлю.
Вышли пожалуйста: igor@sysexist.com

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 12:49

бора-бора писал(а):
MoonRock писал(а):База обновляется каждый день автоматически. Если кому-то из тех, кому уже отправил будет нужна более свежая - пишите, вышлю.
Вышли пожалуйста: igor@sysexist.com


Отправил.

Аватар пользователя
бора-бора
Профессионал
Профессионал
Сообщений: 337
Зарегистрирован: 30 ноя 2011 11:27
Имя: Бора
Фамилия: Бора
Должность: би-ай
Откуда: Мозгва

Re: База данных крупного ритейлера.

Сообщение бора-бора » 10 май 2017 13:01

MoonRock писал(а):Отправил.
Спс! А можешь sql разворачивающиеся файлы в csv плоскоту перегнать? Целостность данных мне сейчас не важна. Просто... все sql-серверы далеко, а powerpivot под рукой, настраивается всё за пару минут и сразу лепится в сводники.

В принципе, если перед тобой стоят задачи передачи "разворачивающейся" информации для аналитического использования и ты хочешь хоть как-то контролировать перепосты и целостность данных, задумайся о "локальных кубах" (*.cub) Настраивать кубы не сложно, модель у тебя простая ("парсер"), процессинг будет недорогой. Pentaho подойдет лучче всего (полноценный, java и ...бесплатный), а так конечно... добро пожаловать в мир микрософта(поверби), айбиэма(когнос), оракля(эссбейс). "Презентовать" красивей всего в повербиай микрософта на их бесплатном web сервисе.

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 14:16

бора-бора писал(а):
MoonRock писал(а):Отправил.
А можешь sql разворачивающиеся файлы в csv плоскоту перегнать?


Отправил таблицу с товарами в CSV.

Аватар пользователя
бора-бора
Профессионал
Профессионал
Сообщений: 337
Зарегистрирован: 30 ноя 2011 11:27
Имя: Бора
Фамилия: Бора
Должность: би-ай
Откуда: Мозгва

Re: База данных крупного ритейлера.

Сообщение бора-бора » 10 май 2017 14:31

MoonRock писал(а):Отправил таблицу с товарами в CSV.
Спс. Дальше понятно. Что собираешься делать с этими данными? Построишь полноценное хранилище, намажешь etl, будешь процессить кубы и раздавать доступ за копеечку или хочешь в наём?

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 14:49

бора-бора писал(а):
MoonRock писал(а):Отправил таблицу с товарами в CSV.
Спс. Дальше понятно. Что собираешься делать с этими данными? Построишь полноценное хранилище, намажешь etl, будешь процессить кубы и раздавать доступ за копеечку или хочешь в наём?


Коллекционирую ))).

Alexandr1988
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 10 май 2017 16:30
Имя: Александр
Фамилия: Сергеев
Должность: Менеджер отдела продаж

Re: База данных крупного ритейлера.

Сообщение Alexandr1988 » 10 май 2017 16:32

Скиньте мне пожалуйста тоже на perpetu@bk.ru

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 10 май 2017 16:50

Alexandr1988 писал(а):Скиньте мне пожалуйста тоже на perpetu@bk.ru


Скинул.

Tatyana1510
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 02 июн 2017 21:21
Имя: Татьяна
Фамилия: Смирнова
Должность: Категорийный менеджер

Re: База данных крупного ритейлера.

Сообщение Tatyana1510 » 02 июн 2017 22:45

И мне вышлите, пожалуйста: 9031679533@mail.ru

MoonRock
Пользователь
Пользователь
Сообщений: 30
Зарегистрирован: 24 мар 2017 11:11
Имя: Иван
Фамилия: Котов
Должность: разработчик

Re: База данных крупного ритейлера.

Сообщение MoonRock » 05 июн 2017 08:41

Tatyana1510 писал(а):И мне вышлите, пожалуйста: 9031679533@mail.ru

Выслал.

Мария Журавлева
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 06 июн 2017 19:29
Имя: Мария
Фамилия: Журавлева
Должность: Специалист

Re: База данных крупного ритейлера.

Сообщение Мария Журавлева » 06 июн 2017 19:34

Вышлите и мне пожалуйста manager@partner-opt.site

rufous_wife
Новичок
Новичок
Сообщений: 1
Зарегистрирован: 07 июн 2017 09:19
Имя: Дарья
Фамилия: Белоусова
Должность: менеджер

Re: База данных крупного ритейлера.

Сообщение rufous_wife » 07 июн 2017 09:22

Добрый день!

Пришлите и мне информацию, пожалуйста. popova2702@mail.ru


Вернуться в «Курилка для некурящих»

Кто сейчас на форуме

Количество пользователей, которые сейчас просматривают этот форум: CommonCrawl [Bot] и 0 гостей