metaclass: (Default)
metaclass ([personal profile] metaclass) wrote2013-03-26 09:25 pm
Entry tags:

Clojure, ленивость и отложенные отчеты

Очередной раз стукнулся об ленивость.

Делаю фоновый расчет отчетов - клиент просит у сервиса "посчитай мне отчет", тот ему возвращает идентификатор-ссылку на future со считалкой отчета и далее клиент опрашивает сервис на предмет "а не готов ли наш отчет" и тот ему отвечает либо "не готов" либо "готов, вот тебе данные".
Ну, склепал очередь отчетов - атом, в нем мап, в мапе идентификаторы запрошенных отчетов и future к ним. Запускаю - а оно мгновенно говорит, "да, вот отчет готов, забирай" и давай его считать и отдавать. В потоке запроса, не в рабочем потоке future.
Ленивость. Оно возвращает башку последовательности данных отчета сразу, "на тэбэ, дорогой, форси меня". И запрос готовых данных (в том числе, даже просто попытка в целях отладки посмотреть на мап с future) - вызывает форсинг последовательности.

PS: И еще обнаружил очередную фичу кложури - thread-local bindings протаскиваются во все вызовы, которые перекладывают работу в другие потоки. Т.е. конкретно тут - я в запросе часть общих параметров (типа имени пользователя) складываю в thread-local binding чтобы не протаскивать их руками через 100500 функций, думал, что при вычислении внутри future придется их доставать и перекладывать во второй поток - а оно уже сделано.
Авторы кложури не перестают удивлять своей крайней адекватностью и практичностью языка.

[identity profile] sergiej.livejournal.com 2013-03-27 09:13 am (UTC)(link)
Ну можно на миддлвере если трёхзвёнка. Хранить пару сотен айдишек это мелочь по сравнению со сложностью обеспечения правильного педжинга делая каждый раз запрос рейнджа. Да и для базы в итоге такое легче. Только один раз идёт запрос по сложным критериям, потом всегда "ин" по конкретным индексированым айдишкам.

[identity profile] metaclass.livejournal.com 2013-03-27 09:20 am (UTC)(link)
Заебись идея, в целом. Хранить IDшники гораздо легче, чем целиком результат.

[identity profile] sergiej.livejournal.com 2013-03-27 09:29 am (UTC)(link)
Может есть что-то более правильное, но это из опыта просто и быстро сделать.
Проблема только с хипстерскими базами, где нет айдишек, но там пейджинг это вообще секс в гамаке стоя :)