استفاده از مدل‌های هوش مصنوعی قدرتمند، اغلب به‌معنای وابستگی به سرویس‌های ابری است که می‌تواند هزینه‌بر و از نظر حریم خصوصی، نگران‌کننده باشد. خوشبختانه، ابزارهای متن‌باز جدیدی این امکان را فراهم کرده‌اند که مدل‌های هوش مصنوعی را به‌صورت محلی و آفلاین روی کامپیوتر شخصی خود اجرا کنید. اجرای هوش مصنوعی روی کامپیوتر شخصی که به آن «هوش مصنوعی محلی» (Local AI) نیز می‌گویند، چند مزیت کلیدی دارد: اول از همه، حریم خصوصی شما کاملاً حفظ می‌شود، زیرا هیچ داده‌ای از دستگاهتان خارج نمی‌شود. علاوه‌براین، هزینه‌های ماهانه حذف می‌شوند و همه‌چیز به‌دلیل عدم نیاز به اینترنت سریع‌تر و بدون تأخیر کار می‌کند. این رویکرد به‌لطف انتشار مدل‌های زبان بزرگ متن‌باز و قدرتمندی مانند Llama ۳ از شرکت متا (فیسبوک) و Mistral امکان‌پذیر شده است. این مدل‌ها که قدرت پردازشی بسیار بالایی دارند، حالا می‌توانند روی سخت‌افزارهای خانگی نیز اجرا شوند.