Loading blogs...
關於 AI 基礎設施、MLOps、模型以及上線生產的實操指南。
Workstation 透過可觀察性揭示 LLM 代理瓶頸:OpenTelemetry、Prometheus/Grafana/Thanos、Langfuse — 具有明確的優缺點、成本槓桿和保護利潤的使用指標。
Workstation 增強 LLMs:用於 KV 快取的 PagedAttention 分頁、vLLM 服務、用於代理的 Self-Debugging、PowerInfer 令牌率和 EG-MLA 記憶體削減 — 以及生產權衡。
非同步 Rust 阻塞上的 Workstation、用於 CPU 繫結工作的 Rayon,以及為什麼 Rust 適合現代 API、邊緣、代理和 CI/CD — 靈感來自 Alice Ryhl 的 Rayon 指南。
Ring Promoter 是用於人工智慧驅動部署的現代 CI/CD 控制平面:共享環、健康門、版本驗證、自動回滾和多應用程式升級。
Workstation WSL 代理 (WSLProxy) 是一個完整的 API 閘道器和 CDN 邊緣:實時路由、WAF、快取、多 POP DNS、MCP — 代理閘道器和 MCP 閘道器正在進行中。
KubePilot 幫助 SRE、DevOps 和平臺團隊從嘈雜的叢集訊號轉向安全修復 - CoPilot、Pilot 和 AutoPilot。在 kubepilot.org 上開源。
Meta Muse Glimmer 透過 Ollama 將始終線上的本地代理帶到單個 GPU:30B、Apache 2.0、128K 上下文、願景和工具 - Workstation 業務指南。