新設データセンターをお考えですか?液体冷却は最初から計画しましょう
新しいデータセンターの設計には、常に数年先を見据えることが求められてきました。人工知能(AI)やハイパフォーマンス・コンピューティング(HPC)の急速な成長により、その課題はさらに大きくなっています。
高密度化が進むコンピューティング環境は、電力、冷却、接続性、そしてラック内の物理インフラ間の関係性を変えつつあります。
新しいデータセンターを建設する組織にとって、重要な問いは単に「現時点で液体冷却が必要か?」ということではありません。より有益な問いは、「コンピューティング要件が変化していくなかで、液冷インフラに対応できる施設をどのように設計すべきか」です。
そのインフラには、リアドア熱交換器(RDHx)、単相または二相のダイレクト・トゥ・チップ(DTC)冷却、そして一部の環境では液浸冷却などが含まれる可能性があります。新しい施設を建設する際は、主要な設計決定の変更が困難になったり、コストがかさむようになる前に、電力、ネットワーク、キャビネット、機械システムと併せてこれらの技術を評価する機会となります。
以下に、検討すべき8つのポイントを示します。
1. 今日のコンピューティングだけでなく、明日のコンピューティングを見据えた設計
まずはITロードマップから検討を始めましょう。その施設はどのような種類のAI、GPU、HPCシステムに対応できるでしょうか?データセンターのライフサイクルを通じて、ラック密度はどのように変化するでしょうか?
- どのサーバープラットフォームが導入される可能性が高いか?
- 施設はどの程度のラック電力密度に対応すべきか?
- 最終的に、IT負荷のどの程度が液体冷却を必要とする可能性があるか?
- 空冷式、リアドア冷却式、およびダイレクト・トゥ・チップ冷却式の機器が共存する必要はあるか?
- 次世代のコンピューティング機器が登場するにつれて、これらの要件はどのように変化するでしょうか?
設計原則:物理インフラの規模を、開設当初に導入が予定されている第1世代の機器のみに基づいて決定しないでください。
2. 施設用水アーキテクチャを早期に計画する
グリーンフィールドのデータセンターには重要な利点があります。それは、機械インフラを、水冷式IT機器を念頭に置いて設計できるという点です。
設計の早い段階で、熱除去の経路全体を考慮してください:
サーバーコールドプレート → ラックマニホールド → 冷却分配ユニット(CDU) → 施設用水システム → 排熱
施設用水、CDU、配管、制御システム、および排熱システムは相互に連携しています。稼働初日にRDHxやDTC冷却を採用するラックが一部のみであったとしても、アーキテクチャを早期に計画しておくことで、将来の拡張に向けた選択肢を確保できます。
3. CDUの設置場所を決定する
CDUは、多くのDTCアーキテクチャにおいて重要な構成要素です。これは、IT機器にサービスを提供する技術冷却システム(TCS)と、施設側の冷却システムとの間で熱を伝達する役割を果たします。
施設設計の際には、以下の点を検討してください:
- CDUはどこに設置されるか?
- 冷却液は、液体冷却式の列やラックにどのように供給されるか?
- 追加の容量はどのように増強されるか?
- 設計上、安全なメンテナンスアクセスはどのように確保されるか?
- アプリケーションにはどの程度の冷却冗長性が必要か?
目的は、単にCDU用の床面積を確保することだけではありません。冷却分配アーキテクチャは、当初からデータセンターの設計に組み込まれるべきものです。
4. ラックを完全なシステムとして設計する
空気冷却から液体冷却への移行は、CDUだけで終わるわけではありません。高密度AIキャビネットの内部では、サーバーは以下の要素と共存する必要がある場合があります:
- 冷却マニホールド
- 供給ホースおよび戻りホース
- クイックディスコネクト継手
- 複数の配電ユニット(PDU)
- 電源コード
- 高密度ネットワーク接続
- ケーブル管理インフラ
これらの構成要素が相まって、スペースと保守性の面で大きな課題を生み出しています。
設計原則:冷却、電源、接続、およびキャビネットを個別に設計しないでください。ラックを、物理インフラシステム全体として扱ってください。
5. 残りの空冷負荷を考慮する
決定を「空冷か液冷か」という二者択一で捉えたくなるかもしれません。しかし実際には、新しいデータセンターではその両方が必要となる場合があります。
DTC冷却は通常、サーバーの中で最も消費電力の大きいコンポーネントから熱を除去しますが、その他のコンポーネントは依然として気流に依存している場合があります。設計者は、導入予定のIT機器において液体冷却で捕捉される熱の割合を把握し、残りの負荷に対応できるようルームレベルの空冷システムの規模を決定する必要があります。
目標は、すべてのラックが同じように動作すると仮定するのではなく、想定されるIT機器の構成に対応できる冷却アーキテクチャを構築することです。
6. 設置だけでなく、メンテナンスも考慮した設計
試運転後の状況を考慮してください。技術者は、背面ドアの熱交換器、冷却液ホース、クイックディスコネクト、マニホールド、ネットワークケーブル、および複数の電源供給ラインに囲まれた、完全に充填されたAIラック内のサーバーを交換しなければならない場合があります。
したがって、保守性は設計要件として考慮すべきです。以下の点を評価してください:
- • サーバーやその他の現場交換可能機器へのアクセス性
- • マニホールドおよびPDUの配置
- • ホースおよびケーブルの配線経路
- • コンポーネントの交換手順
- • 個々のサーバーまたはラックセクションの隔離
- • 将来の拡張および再構成
設置は容易でも保守が困難なラックは、後々、不必要な運用リスクやダウンタイムを招く恐れがあります。
7. 液体関連の異常事態が発生する前に、その対応策を設計しておく
電子機器の近くに液体を導入することには、当然ながら懸念が生じます。新しい施設であれば、後から制御機能を追加するのではなく、当初の設計段階でそれらの懸念に対処する機会があります。
液体冷却を管理されたシステムとして扱ってください。漏洩検知、流量および圧力の監視、警報、隔離、排水、および保守手順について検討してください。
重要な問いは、単に「漏洩は起こり得るか?」ということではなく、「データセンターは異常状態をどのように検知し、隔離し、対応するのか?」ということです。
これらの要件は、施設の運用および緊急対応戦略の一部となるべきです。
8. 拡張を見据えた設計
当初は、施設のごく一部のみが液体冷却式のAIインフラをサポートするかもしれません。その要件が拡大した場合はどうなるでしょうか?
初期のアーキテクチャが以下の要件に対応できるかどうかを検討してください:
- 液体冷却式ラックの増加
- ラック密度の向上
- 冷却能力の増強
- マニホールドおよびPDUの増設
- 新世代のサーバー
- 追加の列やデータホールへの拡張
目指すべきは柔軟性であり、過剰設計ではありません。将来の選択肢を不必要に制限することなく、変化するラック密度、冷却技術、および容量要件に対応できるアーキテクチャを構築することです。
冷却だけにとどまらない視点
液体冷却は、単にサーバー内を空気が流れる仕組みの代替手段であるかのように語られることがあります。しかし、新しいデータセンターにおいては、その影響ははるかに広範囲に及びます。
コンピューティング → 電力 → 冷却 → キャビネット → 接続性 → 運用
IT、施設、電気、ネットワーク、運用各チーム間の早期の連携が不可欠です。予想されるコンピューティング要件、ラック密度、施設用水、CDUアーキテクチャ、ラックレベルの冷却液分配、残りの空冷負荷、電力分配、接続性、メンテナンス、および将来の拡張を、すべて同一のインフラストラクチャ戦略の一部として扱う必要があります。
ダイレクト・トゥ・チップ冷却は、単に熱を除去する新しい方法というだけではありません。これは、サーバー、キャビネット、電源、ネットワーク、および施設の冷却インフラ間の関係そのものを変えるものです。
P明日の冷却ニーズに備えて、今日から計画を立てましょう。
AI および高密度データセンター向けのPanduit の先進的な冷却ソリューションをご覧ください。冷却、電源、キャビネット、接続性がどのように連携して、進化し続けるインフラストラクチャのニーズをサポートするかをご確認ください。