用于访问核心外阵列的部分的扩展两相方法

抽象的

并行计算机上的许多应用程序处理不能适合主内存的非常大的数据集。在此类应用中，数据必须存储在磁盘上的文件中，并在程序执行期间获取到内存中。具有存储在文件中的大核心阵列的并行程序必须从/读取/写入文件的较小部分。在本文中，我们描述了一种有效地访问核心阵列外部的方法。我们的方法，扩展的两阶段方法，使用集体L / O：处理器协作将多个L / O请求组合成更大的粒度请求，以重新排序请求，以便以适当的顺序访问该文件，并消除同时的L /o请求相同的数据。此外，根据访问请求，L / O工作负载在处理器之间划分为处理器。我们呈现了从两个真正的核心并行应用中获得的绩效结果 - 矩阵乘法和Laplace的公式求解器 - 以及Intel Thegstone Delta的几种合成访问模式。这些结果表明，扩展的两相方法显着优于用于访问核心阵列部分的直接（非卷积）方法。

科学规划

抽象的

版权

更多相关文章