Amsterdammers winnen supercomputingprijs
Het real-time samenvoegen van gegevens uit verschillende databases staat de afgelopen twintig jaar sterk in de belangstelling. De groei van wereldwijde netwerken waardoor grote hoeveelheden data gedistribueerd beschikbaar komen, deed de behoefte aan dergelijke technieken toenemen. Daarbij moeten tevens efficiënte protocollen beschikbaar komen om die gegevens over grote afstanden te koppelen. Volgens de jury hebben de winnaars op beide vlakken flinke vooruitgang geboekt. Het project maakte gebruik van het Nederlandse Surfnet dat de gegevens van de cluster computers in het Amsterdamse rekencentrum met een snelheid van 2,8 Gbps vervoerde naar het computercluster in het Starlight-centrum in Chicago. Tegelijk werd een stroom gegevens via het Canadese CA*4-netwerk van een cluster computers in Ottawa naar Chicago getransporteerd. In beide datastromen werd een nieuw transportprotocol genaamd Sabul gebruikt dat de universiteit van Illinois ontwikkelde. Tijdens de demonstratie werden beide gegevensstromen met een snelheid van 500 MBps succesvol samengevoegd. Deze zogeheten ‘lambda joins’ krijgen een belangrijke rol in dataminingtoepassingen. (tdo)