ニュースボイス

Apple SiliconでLLMを自作サーブする入門講座

🕒

カテゴリ

科学・技術

Apple Silicon環境でMLXを用いてLLMサービングを学ぶ講座『tiny-llm』を紹介。高レベルAPIを使わず、配列・行列操作からモデルサービングインフラを構築していく。