共享存储管理的核心困境

在深入技术方案之前，有必要先厘清高校科研场景下共享存储管理的几个核心困境。第一个困境是配额设定的两难。如果配额设置得过于宽松，少数高消耗用户可能快速耗尽整个存储池的空间，影响其他用户的正常使用；如果配额设置得过于严格，用户在实验中可能频繁遭遇磁盘空间不足的错误，打断科研工作的连续性。合理的配额需要在保障多数用户基本需求与防止个别用户过度占用之间取得平衡。

第二个困境是清理时机的选择。自动清理机制可以有效释放存储空间，但清理时机的选择至关重要。如果在用户实验进行中清理了关键的中间文件，可能导致数小时甚至数天的计算工作付诸东流；如果清理过于保守，存储空间的释放速度跟不上写入速度，清理机制就失去了意义。清理机制需要在“不打扰用户工作”和“及时释放空间”之间找到恰当的平衡点。

第三个困境是用户意识的缺失。许多科研人员并不清楚自己占用了多少存储空间，也不了解哪些文件可以被安全清理。在他们看来，存储空间是无限且免费的资源，用完即走、从不清理是一种常态。这种意识缺失使得单纯依靠用户自觉的清理策略几乎不可能奏效，必须借助系统层面的自动机制来兜底。

多层级配额体系的构建

息壤平台的共享存储配额管理采用多层级体系，从集群级到租户级再到用户级，层层嵌套、逐级细化。

集群级配额是整个存储系统的最高水位线，由平台管理员根据存储阵列的物理容量和冗余策略设定。集群级配额通常设置为物理容量的百分之八十左右，预留一部分空间用于应对突发写入和文件系统元数据开销。当集群级存储使用率达到阈值时，系统会向所有管理员发送告警，提示需要扩容或启动紧急清理流程。

租户级配额是集群级配额之下的第一层细分。在高校科研平台中，一个租户通常对应一个院系、一个实验室或一个课题组。租户级配额由管理员根据该租户的历史使用情况和预期需求进行分配。租户级配额的意义在于防止某个院系或实验室的无节制使用挤压其他租户的存储空间。租户管理员可以在自己的配额范围内进一步分配给下属用户。

用户级配额是最细粒度的控制单元。每个用户在创建时都会被分配一个默认的用户级配额，默认值根据用户角色设定——研究生用户的默认配额低于教师用户，本科生用户的默认配额更低。用户可以通过申请流程向租户管理员申请增加配额，申请时需要说明用途和预期使用周期。用户级配额的存在让每个用户对自己的存储占用有了明确的边界认知，也为后续的自动清理提供了精确的作用范围。

文件年龄分级与自动清理策略

自动清理机制的核心在于对文件进行年龄分级，并根据分级结果执行差异化的清理策略。息壤平台将共享存储中的文件划分为三个年龄等级。

热数据是指最近三十天内被访问或修改过的文件。热数据被认为正处于活跃使用状态，自动清理机制不对热数据做任何操作。热数据的判定基于文件的访问时间和修改时间，两个时间中较晚的一个作为判断依据。对于频繁被读取的模型权重文件或数据集，即使它们在上次写入后已经过了很长时间，只要持续被访问，就不会被划入可清理范围。

温数据是指三十天到九十天内未被访问且未被修改的文件。温数据被认为是可能有用但近期不再活跃的文件。自动清理机制对温数据执行压缩操作——将文件使用算法进行压缩，压缩后的文件保留在原路径下，文件名添加后缀标记以示区别。用户访问压缩文件时，系统会自动解压并提供原始内容，解压过程对用户透明但会有短暂的延迟。压缩操作可以在不删除文件的前提下释放百分之三十到百分之七十的存储空间。

冷数据是指超过九十天未被访问且未被修改的文件。冷数据被认为是高度可能不再需要的文件。自动清理机制对冷数据执行归档操作——将文件从主存储迁移到成本更低的归档存储中，并在原路径下留下一个占位文件。占位文件的大小极小，仅包含指向归档位置的指针。用户访问占位文件时，系统会从归档存储中取回原始文件，取回过程可能需要几分钟到几小时不等。归档存储的成本通常只有主存储的几分之一，能够显著降低总体存储费用。

清理前的通知与确认机制

自动清理机制在执行之前，需要给用户留出足够的反应时间。息壤平台建立了多轮通知机制，确保用户在文件被清理前能够及时知晓并采取行动。

第一轮通知在文件进入温数据阶段时触发。系统向文件所有者发送站内信和邮件，告知用户哪些文件即将进入温数据阶段，提示用户如果这些文件仍然需要频繁使用，应当主动访问一次以刷新文件的访问时间。通知中包含了文件列表和总大小，用户可以通过邮件中的链接直接跳转到文件管理页面查看详情。

第二轮通知在文件进入冷数据阶段前七天触发。系统向文件所有者发送更加紧急的通知，告知用户哪些文件将在七天后被归档到冷存储，以及归档后访问这些文件将需要额外的等待时间。通知中提供了“推迟归档”的操作入口——用户如果确认在未来一段时间内还需要频繁使用这些文件，可以一键将所有待归档文件的访问时间刷新为当前时间，从而将这些文件重新划入热数据范畴。

第三轮通知在文件被实际归档或删除后触发。系统向文件所有者发送归档完成通知，告知用户文件已被迁移到归档存储，以及如何从归档存储中取回文件。通知中还包含了存储空间释放的统计信息——本次归档释放了多少空间，用户当前的存储使用率和剩余配额。

对于超过配额上限的用户，通知机制会更加激进。当用户的存储使用率超过配额的百分之九十时，系统会每天发送一次告警通知；当使用率达到百分之百时，系统会阻止用户继续写入新文件，直到用户清理出足够的空间或申请增加配额。

例外文件的白名单机制

自动清理机制虽然能够有效释放存储空间，但在某些场景下可能误伤重要文件。息壤平台提供了例外文件的白名单机制，允许用户和管理员将特定文件或目录标记为不受自动清理影响。

白名单的设置在文件管理界面中完成。用户可以在文件或目录的属性面板中找到“保护”选项，开启后该文件或目录将被排除在自动清理的范围之外。保护标记会递归应用到子目录和文件，方便用户对整个项目目录进行统一保护。被保护的文件在文件列表中会有一个特殊的图标标识，提醒用户该文件不受自动清理影响。

白名单的设置有数量上限和有效期限制。每个用户最多可以保护一定数量的文件或目录，防止用户将所有文件都加入白名单而使清理机制失效。保护标记的有效期最长为一年，到期后需要用户重新确认续期。如果用户在有效期内离开了平台——例如毕业或离职——其保护的文件在有效期过后自动转为可清理状态。

对于系统级的核心数据——例如平台的操作系统文件、调度器的日志文件和数据库备份——息壤平台设置了不可更改的系统级白名单。这些文件对所有用户不可见，也不受任何自动清理策略的影响。系统级白名单由平台管理员维护，普通用户无权修改。

存储使用分析与可视化

配额管理和自动清理的有效运行，离不开对存储使用模式的深入分析。息壤平台提供了多维度、可视化的存储使用分析工具。

用户维度的分析展示了每个用户的存储使用趋势、文件类型分布和清理潜力。用户可以在个人控制台中查看自己过去六个月内的存储使用曲线，了解自己的使用高峰期和低谷期。文件类型分布饼图展示了各类文件——数据集、模型权重、代码、日志、中间产物——在总存储占用中的占比，帮助用户识别哪些类型的文件占用了最多的空间。清理潜力评估则基于文件年龄分级，告诉用户如果执行自动清理，预计可以释放多少空间。

租户维度的分析展示了租户内部的存储使用排名。租户管理员可以查看所有成员的存储使用排行，识别出占用空间最多的用户，并与其沟通是否需要清理或扩容。租户维度的分析还包含存储增长率预测——基于过去三个月的使用趋势，预测未来一个月内的存储需求，为租户管理员的扩容决策提供数据支撑。

集群维度的分析面向平台管理员，展示了整个存储系统的健康状况。包括总容量、已用容量、各租户的占用比例、清理操作的历史记录和释放空间的总量。集群维度的分析帮助管理员判断是否需要扩容、是否需要调整配额策略或是否需要优化自动清理的参数。

结语

高校科研平台的共享存储配额与自动清理，是在有限存储资源与无限科研需求之间寻求可持续平衡的系统工程。息壤平台通过多层级配额体系明确了每个用户和租户的资源边界，通过文件年龄分级与差异化的清理策略在释放空间与保障可用性之间取得平衡，通过多轮通知机制给了用户充分的反应时间，通过白名单机制保护了关键数据不被误伤，通过存储使用分析与可视化让用户和管理员对存储状态有了清晰的认知。这套体系在实际运营中帮助多个高校科研平台将存储利用率稳定在合理区间，因存储空间不足导致的任务失败率大幅下降，用户对存储管理的满意度显著提升。随着科研数据量的持续增长和存储技术的不断演进，共享存储管理也将持续进化——更智能的清理时机预测、更精细的配额动态调整、更友好的用户自助服务，都将是息壤平台在高校科研基础设施领域持续深耕的方向。