科學計算環境文件傳輸和共享服務
摘要：新的科研和工程活動正在以越來越快的速度產出海量并且多樣化的數據,這些數據帶來巨大的計算需求并且迅速增長,數據傳輸時間占作業處理時間的比例越來越大。本文面向中國科學院科學計算環境,針對計算環境中幾百MB到GB量級的數據文件傳輸耗時長、網絡不穩定和數據共享等問題,設計和實現基于微服務架構的文件傳輸和共享服務,提供一組簡單易用的REST開發接口,包括文件傳輸、管理、共享、統計等服務。該服務的目標是提升作業數據文件的傳輸效率和在線分享能力,為多學科領域的開發人員提供簡單易用的數據開發服務,為用戶提供簡單靈活的數據傳輸和共享服務。理論分析和實驗表明,該服務簡單易用并具備良好的可擴展性,能夠根據負載變化而動態擴展文件傳輸微服務。
注: 保護知識產權,如需閱讀全文請聯系科研信息化技術與應用雜志社
相關推薦
更多
