there are no enemies, only mirrors... autistic alien & professional amateur... an artistic approach to the world - art, philosophy, webdesign, programming... 0 times grammy winner... running my own instance from switzerland... languages: (swiss) german & english... he/him, ally #ASD kein boost von posts mit bildern ohne bildbeschreibung bluesky: @pmj.bsky.social
𝗣𝗠𝗝 ⚫
@pmj@social.pmj.rocks
social.pmj.rocks
fazit nach ner woche #programmieren mit #opencode und #qwen3.6 27b über #llamacpp :
macht richtig spass! 😎
man muss das teil zwar eng an der hand nehmen und muss gucken dass man immer nur ganz kleine dinge in auftrag gibt, aber wenn man sich mal darauf eingestellt hat, dann ists tatsächlich - und immer noch bisschen unglaublicherweise - produktiv nutzbar
auf consumer hardware im eigenen #homelab - crazy
New week, new slides: Run LLMs Locally
Added OpenAI's Privacy-Filter model using privacy-filter.cpp.
New slides about economics and hardware used by the Hugging Face community.
https://codeberg.org/thbley/talks/raw/branch/main/Run_LLMs_Locally_2026_ThomasBley.pdf
#ai #llm #llamacpp #wllama #stablediffusion #qwen #localai #gemma4 #webgpu #opencode #huggingface #privacy #digitalsovereignty
New update for the slides of my talk "Run LLMs Locally": WebGPU
Now models can run completely inside the browser using Transformer.js, Vulkan and WebGPU (slower than llama.cpp, but already usable).
https://codeberg.org/thbley/talks/raw/branch/main/Run_LLMs_Locally_2026_ThomasBley.pdf
#ai #llm #llamacpp #stablediffusion #gptoss #qwen3 #glm #localai #webgpu
You've seen all posts
Pascal 1993-2001, PHP/JS/MySQL since 2000, some Rust/C/C++/Java/Go/Bash