Выпускаем парсеры в Open Source
Начинаем выпускать парсеры для различных сайтов в нашем репозитории (с MIT лицензией).
Первыми будут выпущены парсеры моно- и мульти-брендовых зарубежных интернет-магазинов. В планах около 170 штук. Их примерный список приведен в репозитории, в readme файле.
Воспользоваться ими достаточно просто. Прочитайте внимательно описание в readme и следуя инструкциям создайте диггер, затем перенесите в него код нужного парсера.
Далее вы можете запустить парсер у нас в облаке, но примите во внимание, что для некоторых парсеров может потребоваться платная подписка, поскольку количество запросов страниц по ним может быть более 5000, что выходит за рамки бесплатного аккаунта. Так же вы можете скомпилировать парсер под одну из платформ: Windows, MacOS, Linux и запускать на своем компьютере или своем сервере совершенно бесплатно, вам нужен только бесплатный аккаунт в Diggernaut для того, чтобы компилировать парсеры.
Более подробно порядок действий для ряда парсеров описан в нашем блоге.
В дальнейшем планируем подготовить решения для ряда российских источников с открытыми данными. Если у вас есть какие-либо пожелания, мы с радостью их выслушаем.
Update 12.01.2018: добавлены 10 новых парсеров:
debshops.com, desigual.com, diesel.com, dior.com, donnakaran.com, dwell.co.uk, eddiebauer.com, eloquii.com, esteelauder.com, faithfullthebrand.com
Update 18.01.2018: добавлены 12 новых парсеров:
farfetch.com, ferragamo.com, footlocker.com, forever21.com, freepeople.com, gap.com, gapfactory.com, gentrynyc.com, gilt.com, global.tommy.com, guess.com, guessbymarciano.guess.com
Update 18.01.2018: добавлены 6 новых парсеров:
happysocks.com, hermanmiller.com, hermes.com, hm.com, hollisterco.com, hugoboss.com