metaclass: (Default)
metaclass ([personal profile] metaclass) wrote2013-03-29 02:43 am

Amazon EMR

Наслушался сегодня зогбиватора про то, как его знакомые на Amazon EMR молотят жабой какой-то Machine Learning c финансово-маркетинговой аналитикой и сижу думаю, где взять столько данных и тяжелой по CPU, но параллелизуемой аналитики, чтобы имело смысл попробовать там что-нибудь посчитать.
А то получается, что у меня, например, похожая аналитика всегда упирается в дисковый i/o и глобального смысла в том, чтобы закачивать данные на S3 и оттуда их уже молотить на EMR, я не наблюдаю.
Вот если бы какие-нибудь десятки-сотни гигабайт данных от независимых источников сразу туда складывать, препроцессить и забирать обработанные - наверно имело бы смысл.

[identity profile] maxdz.livejournal.com 2013-03-29 12:35 am (UTC)(link)
>где взять столько данных и тяжелой по CPU, но параллелизуемой аналитики, чтобы имело смысл попробовать там что-нибудь посчитать.

Я коллекционирую ХМЛ-фиды нескольких крупных букмекерских контор. Беру только теннис и футбол, 2 раза в минуту. Хоть собираю некруглосуточно - получается много. :)

[identity profile] theiced.livejournal.com 2013-03-29 03:33 am (UTC)(link)
но ты тупое говно и твоё мнени никого не интересует

[identity profile] maxdz.livejournal.com 2013-03-29 12:35 pm (UTC)(link)
Забавный ты. :)

Но я тебя пожалею - не напишу тебе с каким рейтом я сейчас работаю. Чтобы ты не захлебнулся какашками из собственной головы. :)

[identity profile] theiced.livejournal.com 2013-03-29 06:19 pm (UTC)(link)
ещё раз - ты тупое говно и всем похуй ты сосёшь хуй у нигров за два евро в час или три.