HIGH PERFORMANCE BIG DATA COMPUTING SYSTEM AND PLATFORM

A computing system and platform uses various types of data stores to allow efficient querying of, and accelerated access to, extremely large data sets. One such data store is a dimension store that combines key-value and columnar stores, access to which is provided by several selectable mechanisms chosen based the nature of the data of interest. These include bitmap-based access, us of an optimized columnar data format, and access via namespace identifiers. A compressed, optimized page data format is provided for storing and analyzing large fact-based data. The complex dimension store is used to provide complex relationships and interpretation of the fact-based data, enabling high-performance advanced queries, with bitmap indexes passed between the two stores. Dimension data is stored in an encrypted manner throughout the system, and can be exchanged among parties in a secure manner. Un système et une plateforme de calcul utilisent différents types de mémoire de données permettant de consulter efficacement des ensembles de données très volumineux et d'y accéder plus rapidement. Une telle mémoire de données est une mémoire dimensionnelle qui combine une valeur clé et des mémoires colonnaires, et qui est accessible par plusieurs mécanismes sélectionnables choisis en fonction de la nature des données d'intérêt. Cela inclut l'accès à base de table de bits, l'utilisation d'un format de données colonnaire optimisé et l'accès au moyen d'identifiants d'espaces de nommage. Un format de données de page compressé et optimisé permet de stocker et d'analyser des données factuelles volumineuses. La mémoire dimensionnelle complexe est utilisée pour fournir des relations complexes ainsi qu'une interprétation des données factuelles, ce qui permet de formuler des requêtes avancées hautes performances avec des index de table de bits transmis entre les deux mémoires. Les données dimensionnelles sont stockées de manière chiffrée dans tout le système et peuvent être échangées entre des parties de manière sécurisée.