このマルチパートのチュートリアルは、オープンソースツールを使用してオンプレミスの機(jī)械學(xué)習(xí)パイプラインを構(gòu)築することをガイドします。 予算のスタートアップに最適で、コントロールとコストの予測可能性を強(qiáng)調(diào)しています。

重要な利點(diǎn)：

費(fèi)用対効果：
• クラウドサービス費(fèi)用を回避します カスタマイズ可能：
MLパイプラインをより強(qiáng)力に制御します。
• アクセシブル：
Rancher Kubernetes Engine（RKE）でKubernetesのセットアップを簡素化し、基本的なDockerとLinuxのスキルのみを必要とします。
• 実用的なアプローチ：MLパイプライン開発のための実踐的なガイド、初心者に最適です。
• なぜオンプレミスに行くの？ ??

多くの人はクラウドストレージ（AWS S3、Google Cloud Storage）を想定していますが、このシリーズは、リソース制約の環(huán)境に最適な既存のサーバーを使用して機(jī)能的なパイプラインを構(gòu)築することを示しています。 このアプローチは、予測不可能なコストなしで安全な學(xué)習(xí)環(huán)境を提供します。

ターゲットオーディエンス：

このガイドは、ソフトウェアエンジニアまたはプロダクション対応のMLモデル、特にMLパイプラインの新しいモデルを構(gòu)築するためのものです。

前提條件： Linux（Ubuntu 18.04推奨）と基本的なDockerの知識に精通していることが役立ちます。 深いKubernetesの専門知識は必要ありません

使用されているツール：

docker

kubernetes

ランチャー（rke） Kubeflow/Kubeflow Pipelines（後の部分で覆われています）

minio
tensorflow（後の部分で覆われています）
• フェーズ1：ランチャーとの簡単なKubernetesのインストール
• このセクションでは、rkeで簡素化されたKubernetesインストールの挑戦的なタスクに焦點(diǎn)を當(dāng)てています。
• ステップ0：マシンの準(zhǔn)備：

「マスター」および「ワーカー」として指定された同じLANに、少なくとも2つのLinuxマシン（またはブリッジ付きネットワークと亂交モードが有効になっているVM）が必要です。 VMSを使用すると、GPUアクセスとパフォーマンスが制限されています

構(gòu)成には、必須マシンの詳細(xì)（IPアドレス、ユーザー名、SSHキー）が必要です。 このチュートリアルには、一時的なホスト名（例：

）が使用されます。 このホスト名とIPアドレスを反映するように、両方のマシンで

ファイルを変更します。 VMSを使用している場合は、ブラウザアクセスのためにホストマシンのファイルにホスト名エントリを追加します。

ステップ1：rkeバイナリの取得：

GitHubリリースページからOSの適切なRKEバイナリをダウンロードし、実行可能にして、

に移動します。実行してインストールを確認(rèn)してください

。

ステップ2：Linuxホストの準(zhǔn)備：rancher-demo.domain.test/etc/hosts /etc/hostson

すべての

マシン：

1. docker：インストールDocker CE（バージョン19.03以降）を使用してインストールします。インストールを確認(rèn)し、ユーザーをdockerグループに追加します。 グループの変更を有効にするためにログアウトして戻ってきます。
2. sshキー：マスターノードにSSHキーを設(shè)定し、すべてのワーカーノードに公開キーをコピーします。 sshサーバーを構(gòu)成して、ポート転送（inAllowTcpForwarding yes）を許可します。 /etc/ssh/sshd_config
スワップを無効にします：
3. を使用してスワップを無効にし、。 sudo swapoff -a/etc/fstabsysctl設(shè)定を適用します：
run
4. 。 sudo sysctl net.bridge.bridge-nf-call-iptables=1dns構(gòu)成（ubuntu 18.04）：
インストール
5. 、、edit、nameservers（例：8.8.4.4および8.8.8.8）、およびrestArtresolvconf。/etc/resolvconf/resolv.conf.d/head。 resolvconf

ステップ3：クラスター構(gòu)成ファイル：

マスターノードで、を使用して

ファイルを作成します。 必要な情報(bào)（IPアドレス、ホスト名、ロール、SSHキーパスなど）を提供します。

rke configステップ4：クラスターを持ち上げる：cluster.yml

マスターノードで

実行してKubernetesクラスターを作成します。 このプロセスには時間がかかります。

ステップ5：kubeconfigのコピー：

rke up

コピー

から。

ステップ6：kubectlのインストール：kube_config_cluster.yml$HOME/.kube/config

指定されたコマンドを使用してマスターノードにインストールします。実行してインストールを確認(rèn)してください

。

ステップ7：ヘルムのインストール3：

kubectl kubectl get nodes指定されたコマンドを使用してヘルム3をインストールします

ステップ8：ヘルムを使用した牧場主のインストール：

ランチャーリポジトリを追加し、名前空間を作成し、ヘルムを使用してランチャーをインストールします。 展開ステータスを監(jiān)視します

ステップ9：イングレスのセットアップ（ロードバランサーなしでアクセスするため）：

ファイルを作成し（ホストを選択したホスト名に適合）、cattle-system。

を使用して適用します。

ステップ10：牧場主へのアクセス：

ランチャーUIにingress.yml（または選択したホスト名）にアクセスし、パスワードを作成し、ドメイン名を設(shè)定します。 kubectl apply -f ingress.yml

ステップ11：cert-managerのインストール：

https://rancher-demo.domain.test指定されたコマンドを使用して、CERT-MANAGER（バージョンV0.9.1）をインストールします。ポッドを監(jiān)視して、それらが実行されていることを確認(rèn)します

これにより、Kubernetesクラスターのセットアップが完了します。シリーズの次の部分では、Kubeflowのインストールについて説明します。

よくある質(zhì)問（FAQ）：

FAQSセクションでは、オンプレミスのKubernetesセットアップ、クラウドベースのソリューションとの比較、課題、セキュリテ?？紤]事項(xiàng)、移行戦略、ハードウェア要件、スケーリング、Kubernetesオペレーター、機(jī)械學(xué)習(xí)ワークロード、および機(jī)械學(xué)習(xí)ワークロード、および機(jī)械學(xué)習(xí)のカバーに関する一般的な質(zhì)問に対する包括的な回答を提供します。パフォーマンス監(jiān)視。

以上が機(jī)械學(xué)習(xí)パイプライン：オンプレミスKubernetesのセットアップの詳細(xì)內(nèi)容です。詳細(xì)については、PHP 中國語 Web サイトの他の関連記事を參照してください。