Cracking a Scientific Database

Prof. dr. M.L. (Martin) Kersten, CWI

Database management systemen zijn slecht toegerust voor de ondersteuning van peta-byte databases en complexe gespreide query verwerking. De Pinwheel project richt zich het verdiepen van wetenschappelijke en technologische kennis op de volgende deelterreinen: -Cracking de database, het continue opdelen van de database in brokken om lokale wetenschappelijke verwerking te verbeteren. Parellel hieraan worden te kleine brokken weer samengevoegd en wijzigingen verspreid over de gebruikersgemeenschap. -Cracking de queries, het opdelen in een aantal afhankelijke stappen om betere sturing te geven aan het datamining process en wetenschappelijke data exploratie. Het project is georganiseerd rond een experimentatie platform waarop twee wetenschappelijke astronomische databases worden geinstalleerd: de Sloan Digital SkyServer (USA) en Astro-Wise (Neth). De eerste is een veelgebruikte database catalogus applicatie, de ander een nieuw prototype database workflow applicatie gebaseerd op Python scripts en Grid-gebaseerde dataverwerking. Het platform wordt gerealiseerd met ons open-source database systeem MonetDB, wat ook de context biedt voor verspreiding van de software.