LM Studio 是給「想在自己的電腦上先跑 AI」的人用的桌面工作台。它把模型搜尋與下載、聊天視窗、文件問答、本機伺服器(server)放在同一個介面裡,適合想先保護文件、測試開放權重模型、或把本機模型接給 Cursor、n8n、自製小工具的個人與小團隊。
選工具可以先從工作流切入:想要圖形介面與文件問答,先試 LM Studio;想把模型當成穩定的命令列服務、接 Open WebUI 或做自動化,先看 Ollama 教學;已經要多人共用知識庫,再評估 Open WebUI 或 AnythingLLM。
LM Studio、Ollama、Open WebUI 怎麼分工?
本機 AI 工具常被放在同一張清單裡,但它們解決的層級不同。先確認你要的是桌面工作台、模型執行服務、多人介面,還是文件知識庫。
| 你的主要工作 | 先看哪個工具 | 為什麼 |
|---|---|---|
| 一個人下載模型、離線聊天、丟文件問答 | LM Studio | 圖形介面完整,對不想先碰命令列的人較友善。 |
| 想把本機模型接給 IDE、自動化腳本或 Open WebUI | Ollama | 命令列、模型管理與本機 API 路線清楚,適合長期服務化。 |
| 需要瀏覽器介面、帳號、多人入口、權限設定 | Open WebUI | 更像本機或內部 AI 入口,適合從個人測試走向團隊使用。 |
| 想把 PDF、SOP、合約、筆記整理成長期文件問答工作區 | AnythingLLM | 文件庫、工作區和資料整理流程比單純聊天工具更聚焦。 |
如果你今天只想確認「這台電腦跑不跑得動本機模型」,LM Studio 的入門成本最低。若你已經知道要把模型接到其他系統,Ollama 會比較容易變成穩定的底層服務。
LM Studio 是什麼?
LM Studio 是本機大語言模型(local LLM)桌面工具。你可以在它裡面下載模型、管理聊天、附加文件,也可以在開發者頁面啟動本機程式介面(API),讓其他工具用 OpenAI 相容端點呼叫同一台電腦上的模型。
LM Studio 離線文件說明,只要先取得模型檔,聊天、文件問答、執行本機伺服器都可以不依賴網路。需要連線的部分包含搜尋模型、下載新模型、檢查更新與部分外部資源。
這個邊界很重要:LM Studio 可以讓推論與文件處理留在本機,但模型來源、授權、外掛、同步資料夾、區網分享和你接上的工具仍要另外管理。
什麼情境最適合先用 LM Studio?
想先跑本機模型,但不想從命令列開始
如果 ollama run、模型名稱、量化版本、連接埠(port)和環境變數讓你覺得負擔太重,LM Studio 比較像一般桌面軟體。你可以先完成三件事:下載一個小模型、開聊天視窗、確認回應速度是否可接受。
這條路適合產品、內容、營運、研究或資料整理工作者先做本機測試。你仍需要理解 RAM、顯示記憶體(VRAM)和模型授權,但不用一開始就處理服務設定。
想把本機模型接到其他工具
LM Studio 的開發者文件寫明,它可以在本機或區網提供大語言模型 API。若工具支援 OpenAI 相容介面,通常只要把本機位址(localhost)的 base URL 指到 LM Studio,就能把請求送到自己的電腦。
常見場景包括:
- 在測試環境用本機模型做摘要或分類。
- 用 n8n、自製腳本或小型內部工具處理不適合上雲的資料。
- 讓支援 OpenAI 相容 API 的工具先接本機端點,評估速度和品質。
- 在採購雲端方案前,先用本機模型驗證流程與資料邊界。
想做本機文件問答,但還沒到多人知識庫
LM Studio 文件問答說明列出 .docx、.pdf、.txt 等文件可附加到聊天。短文件可直接放進模型上下文;長文件會走檢索增強生成(RAG),先找相關片段,再提供給模型回答。
這適合合約草稿、會議紀錄、產品規格、內部 SOP 或研究資料的初步整理。重要限制是:RAG 會找「相關片段」,不保證讀完每一頁;高風險文件仍要要求模型引用段落,最後由人確認。
下載模型前先看硬體與模型授權
LM Studio 系統需求建議 Mac 使用 Apple Silicon 與 macOS 14 以上,16GB 以上 RAM 較合適;Windows x64 需要 AVX2,並建議至少 16GB RAM。8GB Mac 仍可嘗試小模型與保守上下文,但不要預期長文件和大模型都能順暢。
| 電腦條件 | 建議先試 | 適合任務 |
|---|---|---|
| 8GB RAM 筆電 | 1B 到 3B 小模型、短上下文 | 安裝驗證、簡短問答、流程熟悉。 |
| 16GB RAM 筆電 | 3B 到 7B 量化模型 | 日常摘要、短文件整理、簡單改寫。 |
| 32GB RAM 或 Apple Silicon 中高階機種 | 7B 到 14B 量化模型 | 較長文件、較穩定中文、複雜一點的整理任務。 |
| NVIDIA 12GB VRAM 以上 | 7B、14B 或部分更大模型 | 速度較好,但仍要看模型格式、量化版本與上下文長度。 |
模型能下載到 LM Studio,只代表工具可載入或嘗試執行,不代表授權可商用、資料可放入、或品質適合決策。每次正式使用前,都要回到模型卡、授權條款和來源頁確認。
本機 API 怎麼啟動與驗證?
LM Studio REST API 快速開始說明,可以在開發者頁面切換伺服器,預設位址是 http://localhost:1234;文件也提醒,預設 API 伺服器不要求認證,但可在設定中啟用 API token。
最短驗證流程:
- 在 LM Studio 下載並載入一個小模型。
- 到開發者頁面啟動本機伺服器。
- 確認本機位址是
http://localhost:1234,或以畫面顯示為準。 - 在要接上的工具中,把 base URL 改成
http://localhost:1234/v1。 - 送一個不含敏感資料的測試請求,確認回應來自本機模型。
- 若要開給區網,先設定 API token、防火牆、可信網段和記錄方式。
OpenAI 相容端點文件提供 Python、TypeScript 和 cURL 範例。概念上是把 OpenAI 官方端點改成本機端點,程式結構可以維持相近。
from openai import OpenAI
client = OpenAI(
base_url="http://localhost:1234/v1",
api_key="lm-studio",
)
response = client.chat.completions.create(
model="local-model",
messages=[
{"role": "user", "content": "請用三點摘要這份測試文字。"}
],
)
print(response.choices[0].message.content)
實際模型名稱以 LM Studio 開發者頁面顯示為準。正式接到內部工具前,先用假資料測試 timeout、錯誤訊息、記憶體占用和模型載入時間。
文件問答怎麼問比較穩?
LM Studio 的文件聊天很適合先做小範圍驗證,但問題要具體。把「幫我看一下」改成可檢查的任務,會比泛泛要求更容易得到可靠結果。
比較穩的問法:
請只根據我上傳的文件回答。
回答前先列出你引用的段落或頁碼,再整理:
1. 合約終止條件有哪些?
2. 付款期限是多少天?
3. 哪些條款需要人工確認風險?
風險較高的問法:
幫我看這份文件有沒有問題。
若文件很長、格式雜亂、掃描品質差,先把文件拆小、改成清楚標題,或改用專門的文件工作區。你要處理一批 SOP、合約或客服知識庫時,可接著比較 AnythingLLM 本機 RAG 教學。
什麼時候改用 Ollama?
LM Studio 和 Ollama 可以並存,但同一時間不要讓多個工具搶同一張顯卡跑大模型。以下情境更適合把 Ollama 放在主路線:
| 情境 | 為什麼 Ollama 更合適 | 下一步 |
|---|---|---|
| 你常用終端機、腳本或自動化 | 命令列與本機 API 路線清楚,模型管理可寫進流程。 | 看 Ollama 教學。 |
| 你要接 Open WebUI | Open WebUI 與 Ollama 是常見搭配,排查文件也多。 | 先跑通 Ollama,再接 Open WebUI。 |
| 你需要確認 GPU 是否被使用 | Ollama 可用 ollama ps 看模型跑在 CPU、GPU 或混合狀態。 | 看 Windows GPU 設定教學。 |
| 你想把本機模型長期當服務 | 服務、環境變數、模型位置與部署流程比較容易標準化。 | 先規劃網路、權限、模型更新和監控。 |
如果你的主要需求是「不用命令列也能下載模型與問文件」,留在 LM Studio。若需求變成「讓多個工具穩定呼叫同一個模型服務」,Ollama 通常會更順。
區網分享前先做安全檢查
LM Studio 可以在本機或區網提供模型服務。只要服務離開 127.0.0.1,風險就從「只有這台電腦能呼叫」變成「同一個網段的人可能碰到」。
開區網前至少確認:
- 這台電腦在哪個網路:家用、公司、共用 Wi-Fi、VPN。
- 是否啟用 API token 或其他認證。
- 防火牆只允許可信裝置或可信網段。
- 模型會處理哪些資料,是否有客戶資料、個資、合約或商業機密。
- 請求與回應是否有記錄,記錄會保存多久。
- 如果模型答錯、卡住或資源耗盡,誰負責停止服務。
本機推論會降低資料上傳雲端的風險,但本機工具也可能因外掛、同步資料夾、區網服務或錯誤設定而擴大暴露面。敏感資料先用假資料跑流程,再逐步放入低風險文件。
一週試用路線:不要一開始就做大部署
你可以用一週判斷 LM Studio 是否值得留下:
- 第 1 天:安裝與小模型 — 下載 LM Studio,載入 1B 到 3B 小模型,確認聊天速度和電腦負載。
- 第 2 天:工作文件測試 — 用一份低風險文件測試摘要、引用段落和不確定標記。
- 第 3 天:本機 API 測試 — 啟動伺服器,讓一個測試腳本或工具接
localhost。 - 第 4 天:模型替換 — 換一個中文或程式能力較好的模型,比較速度、品質和記憶體占用。
- 第 5 天:安全檢查 — 檢查文件來源、模型授權、API token、區網設定和刪除流程。
- 第 6 到 7 天:決定分流 — 個人桌面使用留下 LM Studio;服務化改走 Ollama;多人入口接 Open WebUI;大量文件改看 AnythingLLM。
這條路線的目的,是先確認「你的資料、電腦、任務」是否適合本機模型。若品質、速度或維護負擔不合適,保留雲端模型或混合架構會更務實。
常見問題
LM Studio 可以完全離線使用嗎?
可以在已下載模型的前提下離線聊天、文件問答和執行本機伺服器。搜尋模型、下載新模型、檢查更新與取得外部資源仍需要網路。第一次建置環境時,先把模型來源、授權和檔案保存方式確認好。
LM Studio 和 Ollama 可以同時裝嗎?
可以。同一台電腦可以同時裝 LM Studio 和 Ollama,但不要同時載入多個大模型搶 RAM 或 VRAM。個人桌面測試用 LM Studio,服務化和 Open WebUI 搭配用 Ollama,會比較容易維護。
LM Studio 適合公司文件嗎?
適合先做低風險、本機範圍的測試。正式處理公司文件前,要確認模型授權、文件是否真的留在本機、誰能存取電腦、是否開區網、外掛是否會傳資料,以及產出的答案如何人工複核。
本機 API 和雲端 API 成本怎麼看?
本機 API 不依 token 計費,但要算硬體、電費、維護、速度、模型授權和故障排查時間。雲端 API 會產生用量費用,通常品質、長上下文與維運穩定度更好。少量敏感資料整理可先試本機;大量、多人、長上下文或高可靠度需求,要把雲端 API、租 GPU 和 開源 LLM 與本地端 LLM 成本一起比較。
官方來源與查證時間
- LM Studio Offline Operation:離線聊天、文件問答、本機伺服器與需要連線的操作邊界。
- LM Studio System Requirements:Mac、Windows、Linux、RAM、GPU 與系統需求。
- LM Studio Chat with Documents:文件附加、RAG 與上下文限制。
- LM Studio REST API Quickstart:本機伺服器、預設
localhost:1234與 API token 設定。 - LM Studio OpenAI Compatibility:OpenAI 相容端點與 base URL 切換方式。
- Ollama Quickstart、Ollama FAQ、Ollama GPU 支援:Ollama 的作業系統、API、GPU 驗證與硬體支援。
本文於 2026-06-21 重新查證上述官方文件。工具版本、模型清單、系統需求和授權條款可能更新;正式部署前請回到官方文件與模型授權頁確認。