DevOps & Backend Engineer @ 集雅科技 GliaCloud
2023-02 – present- 主導 IaC 實踐,採用 Terraform (Terramate) 維護公司所有雲端基礎建設,並以 AI Agent 加速審核與建置流程,大幅節省人力成本
- 建構大規模用戶資料收集系統,每月處理 3,000 億次請求,涵蓋 Load Balancer、GKE、Cloud Logging、Cloud Storage、BigQuery 完整資料處理 pipeline
- 管理 10 個 GKE cluster、200+ 個 serverless service,確保系統高可用與穩定性
- 主導 mikan agent 導入,降低使用門檻,輔助公司運維及管理、系統偵錯自動化、產品進度管理與即時資料查詢
- 管理 SaaS 專案完整雲端架構:Cloud Run、Cloud SQL、Memorystore for Redis、API Gateway
- 優化對外 API 安全機制,強化身份驗證與存取控管
- 定位 DB slow query 根因,將隨資料量線性增長的 API 回應時間從數分鐘壓縮至 3 秒內
- 針對高併發場景重構 ML 任務批次寫入機制,提升系統吞吐量數倍
- 部署並維運多套 LLM 推論服務(自行 fine-tune 語言模型、開源 video / image 生成模型),依服務世代採 PyTorch Serve / NVIDIA Triton / BentoML 三套維運策略,並維護 HuggingFace、Replicate 上的實驗性部署流程
- 在 Azure NVIDIA A10 GPU VM 上建置並維運 NVIDIA Omniverse 基礎設施,支援 3D 場景生成與 AI 視覺內容研究