2023 年 6 月 15 日
- 2023 年 6 月 14 日，DLR 與 LRZ 一起開啟了“太字節”大型機。
- 該設施用作分析全球地球觀測數據的平台。
- 研究方向：地球觀測、數位化
德國航空航天中心 (DLR) 和巴伐利亞科學院萊布尼茨計算中心 (LRZ)推出了“terrabyte”——歐洲最大的地球觀測數據分析科學平台之一。該平台首次使研究人員能夠以最高分辨率有效地評估來自地球觀測衛星的全球數據集。對於全球變化，研究人員還可以更準確地確定對人類和環境的影響，並得出合適的措施。例如，這適用於極地地區的劇烈變化、極端天氣事件和自然災害的增加，或全球城市化進程的加快。“terrabyte”是安全的並且獨立於商業運營商。大型計算機的調試於 2023 年 6 月 14 日在慕尼黑附近加興的 LRZ 與來自政界和科學界的客人一起進行。
“terrabyte”提供了過去五年收集的當前和歷史地球觀測數據，以及通過雲服務的智能大數據分析方法。除了來自國家任務TerraSAR-X / TanDEM-X和美國 Landsat 系統的大量數據外，這些還包括歐洲地球觀測系統哥白尼的哨兵衛星的所有產品。此外，用戶可以將來自社交網絡的信息整合到他們的評價中。
“通過‘terrabyte’，我們在未來的地理信息研究方面向前邁出了一大步。大數據、最新的基於人工智能的處理方法和高性能計算以獨特的方式結合在一起。“太字節”不僅構成了我們科學的基礎，而且還是巴伐利亞和德國的決定性經濟因素。其基礎是與我們的合作夥伴的合作以及相關的知識轉移，”Dr.-Ing 教授說。DLR 首席執行官 Anke Kaysser-Pyzalla。
DLR德國遙感數據中心主任 Stefan Dech 教授補充說：“我們在萊布尼茨數據中心為這個具有挑戰性的項目找到了理想的合作夥伴。借助“terrabyte”，我們擁有一個自主且安全的平台，其中包含來自地球觀測的廣泛全球數據庫，我們可以與合作夥伴共同開發。同時，'terrabyte' 在 Oberpfaffenhofen 和 Garching 地點之間架起了一座技術橋樑。”
LRZ 負責人 Dieter Kranzlmüller 教授強調：“‘太字節’是對高效數據存儲、數據科學、人工智能和雲服務乃至高性能和高性能計算的各種需求的答案。憑藉我們在這些領域多年的專業知識，我們將這些技術結合到一項為地球觀測量身定制的服務中。不僅是 DLR 研究人員，巴伐利亞科學家也通過“太字節”從大量歷史和最新衛星數據中受益。一個非常令人興奮但也要求很高的項目——這要歸功於 DLR 和 LRZ 之間的密切和出色的合作。”
技術卓越，應用簡單
“terrabyte”的在線存儲總容量約為 50 PB。（1 PB 是 10 15字節和大約 223,000 張 DVD 的內容）。該系統集成到加興 LRZ 的現有基礎設施中，並與德國衛星數據存檔Oberpfaffenhofen 的 DLR。所有數據都在那里安全地長期存檔，如果需要可以重新加載到“太字節”。數據速率為每秒 100 吉比特的網絡連接允許將存檔數據快速傳輸到“太字節”生產系統。最新一代的CPU和GPU資源使其能夠在雲環境中流暢運行。“太字節”平台配備了最新的人工智能硬件來處理和分析數據，並提供 1.3 petaflop/s 的計算能力——即每秒 1.3 萬億次浮點計算。
“terrabyte”提供了一系列基於軟件的服務，因此研究社區也可以使用這些數據寶庫。大部分數據經過預處理並立即傳輸到應用程序（分析就緒數據；ARD）。軟件工具和其他系統使科學家更容易實施自己的算法並在“太字節”環境中使用它們。地球觀測中心 (EOC)、其他 DLR 機構及其合作組織正在開發包括人工智能和機器學習在內的算法。通過這種方式，可以進行廣泛的全球地球科學分析，這在以前由於數據量大和計算能力有限只能在商業平台上進行。
地球觀測大數據的未來
DLR的World Settlement Footprint等全球產品展示了對地觀測數據進行大數據分析的潛力。該數據集顯示了我們星球上人口稠密地區的發展情況，現在已成為聯合國、世界銀行和許多其他機構使用的標準。該地圖是根據哥白尼和陸地衛星任務的許多 PB 數據以及根據 TanDEM-X 任務的數據生成的全球數位高程模型生成的。另一個例子是基於 AI 的全球海上風力渦輪機分析在建或運行中。它們是評估減少 CO 2的努力是否成功的重要指標- 是中立的。評估還提供了有關我們可以通過這種能源供應實現經濟獨立的程度的信息。
“terrabyte”的正常運行現已成功開始。該系統為項目合作夥伴提供了繼續他們在高性能計算和雲計算領域的研究工作的平台。DLR 與萊布尼茨數據中心一起，希望抓住機會繼續啟動新的 IT 開發——為科學和作為研究地點的德國。
[圖片] 有衛星的地球
數以千計的衛星圍繞著這顆藍色星球運行。借助“太字節”，全球地球觀測數據首次能夠以最高分辨率進行分析。