最近為何要研究大語言模型 LLM 與 ChatGPT 在醫療領域上有些甚麼議題或者研究,所以,就順手上網搜尋相關研究論文,為了要能夠在最快的時間將找到的四篇論文內容,快速看過一遍,並且針對心中的疑惑或者問題,看看是否可以在這些論文上獲得解答,所以,就想到了這個標題的主題,來看看如何透過 Azure OpenAI AOAI 2.0 來將 PDF 檔案內容,進行聊天的應用程式設計作法。
為了要進行這樣的程式開發練習,首先先找到了一篇 Potential of Large Language Models in Health Care:Delphi Study 文章,這篇文章是關於在醫療保健領域中,大語言模型的潛力,透過 Delphi 研究的方式,來探討大語言模型在醫療保健領域中的應用與可能性。將這篇論文的 PDF 下載下來,接著,將這篇論文的內容,透過 Azure OpenAI AOAI 2.0 來進行聊天的應用程式設計。
請依照底下的操作,建立起這篇文章需要用到的練習專案
- 打開 Visual Studio 2022 IDE 應用程式
- 從 [Visual Studio 2022] 對話窗中,點選右下方的 [建立新的專案] 按鈕
- 在 [建立新專案] 對話窗右半部
- 切換 [所有語言 (L)] 下拉選單控制項為 [C#]
- 切換 [所有專案類型 (T)] 下拉選單控制項為 [主控台]
- 在中間的專案範本清單中,找到並且點選 [主控台應用程式] 專案範本選項
專案,用於建立可在 Windows、Linux 及 macOS 於 .NET 執行的命令列應用程式
- 點選右下角的 [下一步] 按鈕
- 在 [設定新的專案] 對話窗
- 找到 [專案名稱] 欄位,輸入
csPdfChat
作為專案名稱 - 在剛剛輸入的 [專案名稱] 欄位下方,確認沒有勾選 [將解決方案與專案至於相同目錄中] 這個檢查盒控制項
- 點選右下角的 [下一步] 按鈕
- 現在將會看到 [其他資訊] 對話窗
- 在 [架構] 欄位中,請選擇最新的開發框架,這裡選擇的 [架構] 是 :
.NET 8.0 (長期支援)
- 在這個練習中,需要去勾選 [不要使用最上層陳述式(T)] 這個檢查盒控制項
這裡的這個操作,可以由讀者自行決定是否要勾選這個檢查盒控制項
- 請點選右下角的 [建立] 按鈕
稍微等候一下,這個 背景工作服務 專案將會建立完成
因為開發此專案時會用到這些 NuGet 套件,請依照底下說明,將需要用到的 NuGet 套件安裝起來。
請依照底下說明操作步驟,將這個套件安裝到專案內
- 滑鼠右擊 [方案總管] 視窗內的 [專案節點] 下方的 [相依性] 節點
- 從彈出功能表清單中,點選 [管理 NuGet 套件] 這個功能選項清單
- 此時,將會看到 [NuGet: csPdfChat] 視窗
- 切換此視窗的標籤頁次到名稱為 [瀏覽] 這個標籤頁次
- 在左上方找到一個搜尋文字輸入盒,在此輸入
Azure.AI.OpenAI
- 在視窗右方,將會看到該套件詳細說明的內容,其中,右上方有的 [安裝] 按鈕
請確認有取消 Pre-release 這個選項,與選擇 2.0 正式版
- 點選這個 [安裝] 按鈕,將這個套件安裝到專案內
在這篇文章中,將會把會用到的新類別與程式碼,都寫入到 [Program.cs] 這個檔案中,請依照底下的操作,修改 [Program.cs] 這個檔案的內容
- 在專案中找到並且打開 [Program.cs] 檔案
- 將底下的程式碼取代掉
Program.cs
檔案中內容
using Azure.AI.OpenAI;
using iText.Kernel.Pdf.Canvas.Parser.Listener;
using iText.Kernel.Pdf.Canvas.Parser;
using iText.Kernel.Pdf;
using OpenAI.Chat;
using System.Text;
namespace csPdfChat;
internal class Program
{
static void Main(string[] args)
{
// 讀取環境變數 AOAILabKey 的 API Key
string apiKey = System.Environment.GetEnvironmentVariable("AOAILabKey");
AzureOpenAIClient azureClient = new(
new Uri("https://gpt4tw.openai.azure.com/"),
new System.ClientModel.ApiKeyCredential(apiKey));
ChatClient chatClient = azureClient.GetChatClient("gpt-4");
string pdfContent = GetPdf("jmir-2024-1-e52399.pdf");
ChatPdf(chatClient, pdfContent);
}
static string GetPdf(string filename)
{
StringBuilder result = new StringBuilder();
using (PdfReader pdfReader = new PdfReader(filename))
{
using (PdfDocument pdfDoc = new PdfDocument(pdfReader))
{
int numberOfPages = pdfDoc.GetNumberOfPages();
for (int i = 1; i <= numberOfPages; i++)
{
ITextExtractionStrategy strategy = new SimpleTextExtractionStrategy();
string pageContent = PdfTextExtractor.GetTextFromPage(pdfDoc.GetPage(i), strategy);
result.AppendLine(pageContent);
}
}
}
string content = result.ToString();
return content;
}
private static void ChatPdf(ChatClient chatClient, string pdfContent)
{
#region 與 PDF 文字內容進行聊天
List<ChatMessage> prompts;
ChatCompletion completion;
string userPrompt1 = $"'''{pdfContent}'''";
//string userPrompt2 = "大語言模型,經過研究,在醫療照顧上是否具有可行性,有甚麼要注意的地方";
//string userPrompt2 = "摘要這篇論文的重點與結論";
string userPrompt2 = "醫療照顧採用 LLM 是否可行,多久可以實現這樣的技術";
prompts = new()
{
UserChatMessage.CreateUserMessage(userPrompt1),
UserChatMessage.CreateUserMessage(userPrompt2),
};
foreach (var message in prompts)
{
string roleName = message is SystemChatMessage ? "System" :
message is UserChatMessage ? "User" :
"Assistant";
Console.WriteLine($"{DateTime.Now} [{roleName}]: {message.Content[0].Text}");
}
completion = chatClient.CompleteChat(prompts);
Console.WriteLine($"{DateTime.Now} [Assistant]");
foreach (var message in completion.Content)
{
Console.WriteLine($"{DateTime.Now} {message.Text}");
}
Console.WriteLine($"");
Console.WriteLine($"Role : {completion.Role}");
Console.WriteLine($"InputTokenCount : {completion.Usage.InputTokenCount}");
Console.WriteLine($"OutputTokenCount : {completion.Usage.OutputTokenCount}");
Console.WriteLine($"ReasoningTokenCount : {completion.Usage.OutputTokenDetails?.ReasoningTokenCount}");
Console.WriteLine($"TotalTokenCount : {completion.Usage.TotalTokenCount}");
Console.WriteLine($"");
Console.WriteLine($"");
#endregion
}
}
在 [Main] 方法內,同樣的會透過環境變數來取的需要的授權金鑰,接著建立 AzureOpenAIClient 這個類別的物件,並且取得 ChatClient 這個類別的物件,接著呼叫 [GetPdf] 這個方法將指定的 PDF 檔案文字內容抽取出來,接著,呼叫 [ChatPdf] 來進行聊天。
對於 [GetPdf] 這個方法將會接收到一個字串參數,這個參數將會指定為需要處理的 PDF 檔案名稱,在此方法內,建立一個型別為 [StringBuilder] 的 result 物件,接著,透過 iText7 套件來讀取指定的 PDF 檔案,並且將每一頁的文字內容,透過 [PdfTextExtractor.GetTextFromPage] 這個方法,將每一頁的文字內容抽取出來,最後,將這些文字內容串接起來,並且回傳給呼叫端。
一旦取的了 PDF 文件內的文字內容,接下來就會呼叫 [ChatPDF] 這個方法,對於 [ChatPdf] 這個方法將會接收到兩個參數,一個是 ChatClient 這個類別的物件,另一個是 PDF 檔案的文字內容,這個方法內容如下:
在此方法內將會先前讀取 PDF 檔案的文字內容取得之後,接著,將這些文字內容透過 Azure OpenAI AOAI 2.0 來進行聊天,這裡設計了兩個使用者的提示訊息,第一個提示訊息是 PDF 檔案的文字內容,第二個提示訊息是關於 PDF 檔案內容的問題,這裡設計的問題是:[醫療照顧採用 LLM 是否可行,多久可以實現這樣的技術],這樣的問題,將會透過 Azure OpenAI AOAI 2.0 來進行聊天,並且取得回應結果。
- 按下
F5
開始執行專案 - 將會看到輸出結果
2024/11/25 上午 09:37:05 [User]: 醫療照顧採用 LLM 是否可行,多久可以實現這樣的技術
2024/11/25 上午 09:37:42 [Assistant]
2024/11/25 上午 09:37:42 醫療照顧領域採用大型語言模型(Large Language Models,LLMs)的可行性是一項正在進行中的研究課題。LLMs,如文中提及的 GPT(Generative Pretrained Transformer)型態,已經展示了在處理自然語言處理(Natural Language Processing,NLP)任務方面的巨大潛力。這些任務包括臨床決策支援、患者教育、醫療文件自動編碼及研究文獻審查。
本文中的黛爾菲研究(Delphi study)匯集了衛生資訊學、護理資訊學和醫學自然語言處理領域研究人員的意見,以探討LLMs在醫療照顧中的潛力以及其強點、弱點、機會和威脅。參與者普遍認為LLMs將用於支援臨床任務、文件任務和醫學研究與教育,並同意這些系統將作為患者教育的健康助理,表明LLMs在醫療照顧中的應用認為在未來是有廣泛前景的。
儘管達成了對於LLMs在提升數據處理效率、改善流程自動化、提供個性化護理以及加速診斷和治療過程中應用的共識,但研究者們也指出了一些風險,包括網絡安全、病患誤導、倫理問題、決策偏見以及準確性通訊風險。
至於LLMs在醫療照顧中實現的時間表,目前難以給出具體的預測。技術實現的速度將取決於多個因素,包括技術創新的進展、數據隱私和安全性的法規,以及這些系統在實際醫療環境中進行測試和驗證的結果。
從實務角度來看,需要廣泛的臨床試驗、社會和法律框架的改進,以及教育和培訓計畫,才能使LLMs在醫療照顧中得到有效且安全的應用。因此,即使LLMs的技術已經取得了重大進展,其在醫療照顧中的全面應用仍面臨諸多挑戰,可能需要一段較長的時間來解決這些問題。
Role : Assistant
InputTokenCount : 22878
OutputTokenCount : 871
ReasoningTokenCount :
TotalTokenCount : 23749
沒有留言:
張貼留言