SaaS Købmænd

← SaaS Købmænd29 Jun · 44 min

Self-hosted LLM/AI i kælderen

Self-hosted LLM/AI i kælderen29 Jun44 min

<p>Anders er begyndt at bygge en lokal, open-source konkurrent til Open AI - eller er han?</p><p>Hør med, når Anders forklarer Bo sit projekt og Bo stiller dumme spørgsmål.</p><p><br></p><p>Her er beskrivelsen fra vores producer:</p><p>I denne episode dykker vi ned i Anders&#39; spændende projekt med at etablere en self-hosted, open source AI-model. </p><p>Vi diskuterer teknologiske muligheder, udfordringer ved self-hosting, og hvordan man kan optimere AI-udnyttelse lokalt for at undgå de stigende omkostninger ved kommercielle API-tjenester.</p><p><br></p><p>Emner</p><ul><li>Anders&#39; projekt med egen AI-model baseret på open source modeller</li><li>Brugen af kraftige grafikkort og GPU&#39;er til AI-beregninger</li><li>Fordele ved self-hosting af AI frem for cloud-tjenester</li><li>Sikkerhed og GDPR-krav ved lokal hosting af AI</li><li>Valg af modeller og data til træning af AI</li><li>Økonomiske aspekter ved AI-udvikling og drift</li><li>Fremtiden for open source AI og europæisk uafhængighed</li></ul>