juan_gandhi: (Default)
[personal profile] juan_gandhi
Есть огромный диск (ну типа gfs); там миллионы фолдеров, короче, большое дерево. Надо построить график, по оси X дата, по оси Y сколько файлов модифицировано в тот день.

Есть несколько машин. Организуйте производство. В смысле, чтобы они трудились эффективно и произвели нужный результат за осмысленное время.

Date: 2010-01-20 01:44 am (UTC)
From: [identity profile] ivan-gandhi.livejournal.com
:) Да, можно и так. Мне в решении понравилось, что для wfs нужна queue, так вот эту queue и раздёргивать на threads.

Date: 2010-01-20 02:20 am (UTC)
From: [identity profile] smalgin.livejournal.com
Про wfs я не знаю, а gfs has single master machine with in-memory metadata storage, никаких грабель не предвидится, разделяй и властвуй :)

Date: 2010-01-20 02:25 am (UTC)
From: [identity profile] ivan-gandhi.livejournal.com
А, я не в курсе был.

wfs - это width first search

Я, кстати, не верю, что будет всё равно, читать ли директории с одной машины или с кучи машин.

Date: 2010-01-20 08:35 pm (UTC)
From: [identity profile] kashnikov.livejournal.com
Кстати, wfs, довольно редко употребляется. Обычно всё-таки Breadth-First Search. Возможно, поэтому собеседник и был смущен названием ;-)

Date: 2010-01-20 09:31 pm (UTC)
From: [identity profile] ivan-gandhi.livejournal.com
Да, BFS, конечно, правильнее.

Profile

juan_gandhi: (Default)
Juan-Carlos Gandhi

June 2025

S M T W T F S
1 234567
891011121314
15161718192021
22232425262728
2930     

Most Popular Tags

Style Credit

Expand Cut Tags

No cut tags
Page generated Jun. 3rd, 2025 01:56 am
Powered by Dreamwidth Studios