[Java lista] Parallel computing

[Kristof Jozsa]

ezt nezd meg, segithet: http://hadoop.apache.org/core/

K

2009/4/24 MolnĂĄr MiklĂłs <timortinj at freemail.hu>

> Sziasztok,
>
> Ma reggel a tĂĄrgybeli problĂŠmĂĄval ĂŠbredtem. TalĂĄn egy pĂŠnteki levlistĂĄs
> hozzĂĄszĂłlĂĄs kereteibe belefĂŠr a vĂĄzolĂĄsa.
>
> A problĂŠmĂĄt indukĂĄlĂł tĂŠma: nagy szĂĄmĂ­tĂĄsigĂŠnyĹą adatbĂĄnyĂĄszati algoritmusok.
>
> A problĂŠmĂĄt inspirĂĄlĂł tĂŠma: valĂłs ĂŠs sikeres seti at home projekt vagy
> prĂ­mfelbontĂĄsos projektek.
>
> A problĂŠma megnevezĂŠse: univerzĂĄlis keretrendszer pĂĄrhuzamos szĂĄmĂ­tĂĄsokhoz.
>
> A keretrendszer komponensei (egy ĂĄltalam elkĂŠpzelt veziĂłban):
> - Egy feladatot lebontĂł ĂŠs eredmĂŠnyeket aggregĂĄlĂł szerver, ez projektenkĂŠnt
> mindig kĂźlĂśn-kĂźlĂśn implementĂĄlandĂł.
> - Egy feladatszeleteket kiosztó és eredményeket begyűjtő (adminisztráló)
> egység/szerver (innentől indulna lefelé az univerzális keretrendszer)
> - Vékony(szerver általat "pusholt" működésű) vagy vastag(előre "egyenrangú"
> telepĂ­tett) kliensek.
>
> A keretrendszer triviĂĄlis alapfeladatai lehetnek:
> - Van-e szabad elérhető erőforrás - adott egységnyi processzor+memória
> (lekĂŠrdezĂŠs)
> - KliensenkĂŠnt mennyi feladat indĂ­thatĂł (egyeztetĂŠs)
> - Szerver1: feladat kiosztĂĄsa ĂŠs ennek leadminisztrĂĄlĂĄsa
> - Szerver2: eredmĂŠny begyĹąjtĂŠse ĂŠs ennek leadminisztrĂĄlĂĄsa
> - Kliens feladafogadĂĄs (adat+vĂŠgrehajtandĂł kĂłd), -vĂŠgrehajtĂĄs
> (ĂŠrtelemszerĹąen) valamint output-kĂźldĂŠs.
>
> MJ: a kliens fogalmat kétféle értelemben használom. Egyfelől úgy tekintek
> rĂĄ, mint aki elvĂŠgzi a neki dedikĂĄlt rĂŠszfeladatot, mĂĄsfelĂśl telepĂ­tett
> programot jelent, ami kommunikĂĄl az alacsonyabb szintĹą szerverrel. Ilyen
> ĂŠrtelemben lehetsĂŠges azonosĂ­tani "logikai kliens"-t (egy
> nyolcprocesszor(mag)os gĂŠpen nyolc ilyen logikai egysĂŠg lehet, ugye) ĂŠs
> "fizikai kliens"-t (ami hardver + opcionĂĄlis kliens program zĂĄrt egysĂŠge)
>
> "CPU" erőforrásfajták:
> - SzĂĄl (ezt akĂĄr ignorĂĄlhatom is, csak a teljessĂŠg kedvĂŠĂŠrt Ă­rtam)
> - Processzormagok
> - NVidia CUDA, ATI Stream, OpenCL típusú grafikuskártya-erőforrások
> - Grid ("Ăşj/szĹąz" gĂŠp, telepĂ­tett oprendszerrel ĂŠs opcionĂĄlisan telepĂ­tett
> kliens programmal.
> - P2p kötelező klienssel (megszállott alkalmazott otthoni gépének
> erőforrásait is be tudja integrálni a projektbe)
> - EgyĂŠb????
>
> KĂŠrdĂŠseim:
> - Életszerű-e a problémafelvetés vállalati környezetben? Szerintem security
> oldalrĂłl teljesen rendben van a dolog mĂŠg p2p/internet verziĂł esetben is.
> - Sci-fi fantazmagĂłria a koncepciĂł?
> - Esélyes-e/életképes-e/Jó-e az egész elgondolás? Pláne és elsősorban open
> source alapon. PĂŠldĂĄul Oracle Grid, semmikĂŠppen nem opciĂł kĂśltsĂŠgigĂŠnye
> miatt.
> - UniverzalizĂĄlhatĂł-e egy tĂśbbszĂĄlĂş mĹąkĂśdĂŠs ĂŠs egy p2p-mĹąkĂśdĂŠs? E tĂŠren
> vannak aggĂĄlyaim, ĂŠs ekkor inkĂĄbb a tĂśbbszĂĄlĂş mĹąkĂśdĂŠst ĂŠs/vagy a grafikus
> kĂĄrtyĂĄs mĂłkĂĄkat dobnĂĄm ki. Vagy rosszul gondolom?
> - ImplementĂĄlhatĂł-e egy ilyen keretrendszer?
> - Mekkora meló? Én valamiért úgy érzem annyira tragikusan nem nagy a
> vĂĄrhatĂł
> előnyökhöz viszonyítva (és főleg akkor, ha évekig nem lesz ilyesmire
> esĂŠly).
> Az igazĂĄn nagy feladat a feladatlebontĂĄsokban ĂŠs aggregĂĄlĂĄsokban van,
> ismerve az adatbĂĄnyĂĄszati algoritmusok nehĂŠzkessĂŠgĂŠt (pl.:svm=support
> vector
> machine)
> - Van-e már ilyen, látszik-e ilyen kifejlődni a közeljövőben szerintetek?
> - Mennyire eliminálható az elképzelésből a vastag kliens?
> - Mennyire megoldhatĂł, hogy a vastag klienst ne kelljen projektenkĂŠnt
> programozni (tudja fogadni a szervertől a végrehajtandó feladat
> algoritmusĂĄnak implementĂĄciĂłjĂĄt)?
>
> MegkĂśszĂśnve _minden_ ĂŠszrevĂŠtelt:
> MM
>
> _______________________________________________
> Javalist mailing list
> Javalist at javagrund.hu
> http://javagrund.hu/mailman/listinfo/javalist
>
--------- következő rész ---------
Egy csatolt HTML ĂĄllomĂĄny ĂĄt lett konvertĂĄlva...
URL: http://javagrund.hu/pipermail/javalist/attachments/20090424/feaf7ef0/attachment.html