面向复杂数据的对象存储系统

• Published in: 计算机科学与探索 no. 2; pp. 129 - 138
• Main Authors: 兰超, 张勇, 邢春晓
• Format: Journal Article
• Language: Chinese
• Published: 清华大学 信息技术研究院，北京 100084 2014; 清华大学 计算机科学与技术系，北京 100084; 清华大学 信息科学与技术国家实验室，北京 100084; 清华大学 信息科学与技术国家实验室，北京 100084%清华大学 信息技术研究院，北京 100084
• Subjects: digital library; 数字图书馆; 对象存储; digital infrastructure; object store; 数据管理架构; big data; 大数据
• ISSN: 1673-9418
• DOI: 10.3778/j.issn.1673-9418.1306050

TP315; 主要研究了数字图书馆应用中数字对象的有效存储和索引机制，提出并设计了针对数字图书馆的数据仓储系统PuntTable。PuntTable使用非关系模式存储和管理对象，并且通过在数据对象内部建立索引来支持查询。PuntTable包括两个主要模块：一个是PuntStore，一种有多存储引擎的数据存储系统；另一个是PuntIndex，一种支持多种索引方式的索引系统。PuntTable实现了高吞吐量和低延迟对象存储，数据对象的索引和内容都可以选择最为合适的存储层来进行存储。使用实际数字图书馆中的数据对PuntTable进行了测试和评估。在测试所用的数据集中，每个数据都采用不同长度，使测试更加接近实际应用。实验结果显示，对于不同的数据集使用不同的存储模型可以显著增大数据库系统的吞吐量，并且有效减少延迟。