3. 解決方案概述

組件與技術(shù)

1. 用於微調(diào)的 Python

   • 常用函式庫（例如，Hugging Face Transformers、PyTorch）
   • 簡化了載入和調(diào)整預(yù)訓(xùn)練模型的過程

2. 用於整合的 .NET Core C#

   • 公開微調(diào)模型的後端服務(wù)或 API
   • 強型別語言，許多企業(yè)開發(fā)人員都很熟悉

3. Azure 服務(wù)

   • Azure 機器學(xué)習(xí) 用於訓(xùn)練和模型管理
   • Azure 儲存 用於資料和模型工件
   • Azure 應(yīng)用服務(wù) 或 Azure 函數(shù) 用於託管 .NET Core 應(yīng)用程式
   • Azure 金鑰保管庫（可選）用於保護憑證

4. 環(huán)境設(shè)定

先決條件

• Azure 訂閱: 需要建立機器學(xué)習(xí)工作區(qū)和應(yīng)用程式服務(wù)等資源。
• Python 3.8 : 在本地安裝，用於模型微調(diào)。
• .NET 6/7/8 SDK: 用於建立和執(zhí)行 .NET Core C# 應(yīng)用程式。
• Visual Studio 2022 或 Visual Studio Code: 建議使用的 IDE。
• Azure CLI: 用於透過終端設(shè)定和管理 Azure 服務(wù)。
• Docker（可選）：如果需要，可用於容器化您的應(yīng)用程式。

5. 使用 Python 進行訓(xùn)練和微調(diào)

此範(fàn)例使用 Hugging Face Transformers－這是最廣泛採用的 LLM 微調(diào)函式庫之一。

5.1 設(shè)定虛擬環(huán)境

<code>python -m venv venv
source venv/bin/activate  # 在 Windows 上：venv\Scripts\activate</code>

5.2 安裝依賴項

<code>pip install torch transformers azureml-sdk</code>

5.3 建立 Azure 機器學(xué)習(xí)工作區(qū)

1. 資源組 和 工作區(qū):

<code>   az group create --name LLMFinetuneRG --location eastus
   az ml workspace create --name LLMFinetuneWS --resource-group LLMFinetuneRG</code>

1. 配置本機環(huán)境以連接到工作區(qū)（使用 config.json 檔案或環(huán)境變數(shù)）。

5.4 微調(diào)腳本 (train.py)

<code>import os
import torch
from transformers import AutoModelForCausalLM, AutoTokenizer, TrainingArguments, Trainer
from azureml.core import Workspace, Run

# 連接到 Azure ML
ws = Workspace.from_config()
run = Run.get_context()

model_name = "gpt2"  # 示例模型
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForCausalLM.from_pretrained(model_name)

# 加載自定義數(shù)據(jù)集（本地或來自 Azure 存儲）
# 示例：Azure ML 中的文本文件或數(shù)據(jù)集
train_texts = ["此處輸入您的特定領(lǐng)域文本..."]  # 簡化版
train_encodings = tokenizer(train_texts, truncation=True, padding=True)

class CustomDataset(torch.utils.data.Dataset):
    def __init__(self, encodings):
        self.encodings = encodings
    def __len__(self):
        return len(self.encodings["input_ids"])
    def __getitem__(self, idx):
        return {k: torch.tensor(v[idx]) for k, v in self.encodings.items()}

train_dataset = CustomDataset(train_encodings)

training_args = TrainingArguments(
    output_dir="./results",
    num_train_epochs=3,
    per_device_train_batch_size=2,
    save_steps=100,
    logging_steps=100
)

trainer = Trainer(
    model=model,
    args=training_args,
    train_dataset=train_dataset,
)

trainer.train()

# 保存微調(diào)后的模型
trainer.save_model("./fine_tuned_model")
tokenizer.save_pretrained("./fine_tuned_model")</code>

5.5 在 Azure 中註冊模型

<code>from azureml.core.model import Model

model = Model.register(
    workspace=ws,
    model_path="./fine_tuned_model",
    model_name="myFineTunedLLM"
)</code>

此時，您的微調(diào)模型已儲存在 Azure 機器學(xué)習(xí)中，方便存取和版本控制。

6. 在 .NET Core 整合微調(diào)後的模型

6.1 建立 .NET Core Web API 專案

<code>dotnet new webapi -n FineTunedLLMApi
cd FineTunedLLMApi</code>

6.2 新增依賴項

• HttpClient 用於呼叫 Azure 端點或本機推理 API
• Newtonsoft.Json（如果您喜歡使用 JSON.NET 進行序列化）
• Azure.Storage.Blobs 或 Azure.Identity 用於安全存取 Azure 資源

<code>dotnet add package Microsoft.Extensions.Http
dotnet add package Microsoft.Azure.Storage.Blob
dotnet add package Newtonsoft.Json</code>

6.3 ModelConsumerService.cs

假設(shè)您已將微調(diào)後的模型部署為 Web 服務(wù)（例如，使用 Azure 容器執(zhí)行個體或 Azure ML 中的自訂端點）。以下程式碼段呼叫該服務(wù)以取得完成結(jié)果。

<code>using Newtonsoft.Json;
using System.Net.Http;
using System.Text;
using System.Threading.Tasks;

public class ModelConsumerService
{
    private readonly HttpClient _httpClient;

    public ModelConsumerService(IHttpClientFactory httpClientFactory)
    {
        _httpClient = httpClientFactory.CreateClient("FineTunedModel");
    }

    public async Task<string> GetCompletionAsync(string prompt)
    {
        var requestBody = new { prompt = prompt };
        var content = new StringContent(
            JsonConvert.SerializeObject(requestBody),
            Encoding.UTF8, 
            "application/json");

        var response = await _httpClient.PostAsync("/predict", content);
        response.EnsureSuccessStatusCode();
        return await response.Content.ReadAsStringAsync();
    }
}</code>

6.4 LLMController.cs

<code>using Microsoft.AspNetCore.Mvc;
using System.Threading.Tasks;

[ApiController]
[Route("[controller]")]
public class LLMController : ControllerBase
{
    private readonly ModelConsumerService _modelService;

    public LLMController(ModelConsumerService modelService)
    {
        _modelService = modelService;
    }

    [HttpPost("complete")]
    public async Task<IActionResult> CompletePrompt([FromBody] PromptRequest request)
    {
        var result = await _modelService.GetCompletionAsync(request.Prompt);
        return Ok(new { Completion = result });
    }
}

public class PromptRequest
{
    public string Prompt { get; set; }
}</code>

6.5 設(shè)定 .NET Core 應(yīng)用程式

在 Program.cs 或 Startup.cs 中：

<code>var builder = WebApplication.CreateBuilder(args);

// 注冊 HttpClient
builder.Services.AddHttpClient("FineTunedModel", client =>
{
    client.BaseAddress = new Uri("https://your-model-endpoint/");
});

// 注冊 ModelConsumerService
builder.Services.AddTransient<ModelConsumerService>();

builder.Services.AddControllers();
var app = builder.Build();

app.MapControllers();
app.Run();</code>

7. 部署到 Azure

8. Azure 應(yīng)用服務(wù):

   • 對於許多 .NET Core 應(yīng)用程式來說，這是最簡單的途徑。
   • 從 Azure 入口網(wǎng)站或透過 CLI 建立新的 Web 應(yīng)用程式。

<code>python -m venv venv
source venv/bin/activate  # 在 Windows 上：venv\Scripts\activate</code>

1. Azure 函數(shù)（可選）：

   • 如果您的使用是間歇性的或計劃性的，則非常適合運行無伺服器、事件驅(qū)動的邏輯。

2. Azure Kubernetes 服務(wù) (AKS)（進階）：

   • 非常適合大規(guī)模部署。
   • 使用 Docker 容器化您的應(yīng)用程式並將其推送到 Azure 容器註冊表 (ACR)。

8. 最佳實踐

9. 資料隱私: 確保負(fù)責(zé)任地處理敏感或?qū)Ｓ袛?shù)據(jù)，尤其是在模型訓(xùn)練期間。

10. 監(jiān)控和日誌記錄: 整合 Azure Application Insights 以監(jiān)控效能、追蹤使用情況並偵測異常。

11. 安全性: 使用 Azure 金鑰保管庫 來儲存金鑰（API 金鑰、連接字串）。

12. 模型版本控制: 追蹤 Azure ML 中不同微調(diào)版本的模型；如果需要，回滾到舊版本。

13. 提示工程: 完善您的提示以從微調(diào)後的模型中獲得最佳結(jié)果。

9. 結(jié)論

使用Python 和Azure 機器學(xué)習(xí) 微調(diào)LLM，然後將它們整合到.NET Core 應(yīng)用程式中，使您可以建立強大的特定領(lǐng)域AI 解決方案。對於尋求利用 Python 的 AI 生態(tài)系統(tǒng)和 .NET 的企業(yè)功能的組織來說，這種組合是一個極好的選擇，所有這些都由 Azure 的可擴展性提供支援。

透過仔細(xì)規(guī)劃安全、資料治理和 DevOps，您可以推出一個滿足現(xiàn)實世界需求的生產(chǎn)就緒型解決方案，在強大且易於維護的框架中提供準(zhǔn)確的特定領(lǐng)域語言功能。

以上是使用 .NET Core、Python 和 Azure 微調(diào)大型語言模型 (LLM)的詳細(xì)內(nèi)容。更多資訊請關(guān)注PHP中文網(wǎng)其他相關(guān)文章！