Konrad Latkowski, PricePanorama @ TMT.AllThings`13: Big Data dla sprzedawców: doświadczenia...

Post on 29-Nov-2014

413 views 4 download

description

Konrad Latkowski, PricePanorama. Presentation at the TMT.AllThings`13 conference on 24.10.2013 at the WSE HQ: Big Data dla sprzedawców: doświadczenia Manubia.pl.

Transcript of Konrad Latkowski, PricePanorama @ TMT.AllThings`13: Big Data dla sprzedawców: doświadczenia...

TMT.AllThings'13, Warszawa, 24.10.2013

Big Data dla sprzedawców

Grupa Manubia

• Monitorowanie sprzedaży :• Manubia.pl (Allegro, Świstak, eBay)

• Aukcjolog.pl (Allegro)

• Monitorowanie cen:• PricePanorama.com

Grupa Manubia

• Monitorowanie sprzedaży :• Manubia.pl (Allegro, Świstak, eBay)

• Aukcjolog.pl (Allegro)

• Monitorowanie cen:• PricePanorama.com

Grupa Manubia

• Monitorowanie sprzedaży :• Manubia.pl (Allegro, Świstak, eBay)

• Aukcjolog.pl (Allegro)

• Monitorowanie cen:• PricePanorama.com

Grupa Manubia

• Monitorowanie sprzedaży :• Pobieranie danych z WebAPI • Raporty dedykowane / System

SaaS

• Monitorowanie cen:• Crawlerowanie danych• Raporty dedykowane / System

SaaS

Kluczowe elementy systemu

• Discovery• Extraction• Data quality verification• Reporting and analytics

Discovery: Rynek krajowy

Monitorujemy: 11 333Poszukujemy:

Discovery: Rynek około 17k sklepów

Monitorujemy: 11 333Poszukujemy: 5 667

Discovery: Rynek około 21k sklepów

Monitorujemy: 11 333Poszukujemy: 9 667

Discovery: Pobieranie

• 40 równoczesnych botów• Wykorzystanie łącznie 80 rdzeni

• Jeden bot pobiera około 1 mln podstron

• Część infrastruktury uruchomiona w chmurze Microsoft Azure

Kluczowe elementy systemu

• Discovery• Extraction• Data quality verification• Reporting and analytics

Extraction Kategoria asortymentu:AGD - Odkurzacze

Produkt:Zelmer Odyssey 450.0 ST

Cena:251,90 zł

Dostępny:1 dzień

Kluczowe elementy systemu

• Discovery• Extraction• Data quality verification• Reporting and analytics

Data quality verification

Data quality verification

• Na stanie• W ciągu 24h• Od ręki• Natychmiastowa wysyłka• Od 2 do 5 dni

• Niedostępny• Przedsprzedaż• Oczekiwanie na dostawę

Data quality verification: Dostępność

Data quality verification

Extraction Data quality verification

Correction

Reporting andanalytics

Kluczowe elementy systemu

• Discovery• Extraction• Data quality verification• Reporting and analytics

Reporting and analytics

• Wykrywanie słabych produktów• Wykrywanie sezonowych zmian cen• Wykrywanie dostaw

• Określanie fazy cyklu życia produktu• Określanie zatowarowania sklepu• Określanie cen nowych produktów

Reporting and analytics

Cena vs źródło

Dla produktu: http://www.mennicawroclawska.pl/product-pol-289-Australijski-Kangur-1-10-Uncji-Zlota-Australian-Kangaroo-1-10-oz-.html (16.09.2013)

Dla produktu: http://www.mennicawroclawska.pl/product-pol-289-Australijski-Kangur-1-10-Uncji-Zlota-Australian-Kangaroo-1-10-oz-.html (16.09.2013)

Spadki cen

Dla produktu: http://www.xperfume.pl/avril-lavigne-black-star-damska-edp-30-ml-p-10936.html (12.08.2013)

Dla produktu: http://www.xperfume.pl/avril-lavigne-black-star-damska-edp-30-ml-p-10936.html (12.08.2013)

Data Cena

2013-06-25 85,75

2013-06-26 85,7

2013-06-27 85,7

2013-06-29 85,25

2013-07-03 85,05

2013-07-05 84,35

2013-07-08 67,85

2013-07-10 68,5

2013-07-14 54,85

2013-07-16 54,1

2013-07-20 53,95

Wykrywanie dostaw

konrad.latkowski@manubia.pl | 506-623-451

Dziękuje, pytania?