文生图和图生图应用已经出现一段时间了,目前常用的应用就是根据用户需求修改图片,事实上这就是一种自定义. 因为需要模型重新生成整张图或者部分图,要么通过prompt、reference image,也就是改变输入的方式;要么通过修改模型,也就是微调模型的方式. 因此诞生出了许多微调模型的方式,目前常用的微调库是huggingface/peft: 🤗 PEFT. 针对AI绘图应用的微调技术,倒是可以推出一道清晰的发展线. 这里简单整理一下.
An intro to Websocket and SSE
发表于
本文字数： 5.6k 阅读时长 ≈ 5 分钟
本文字数： 5.6k 阅读时长 ≈ 5 分钟
最近在看LLM的流式输出如何反映到json输出上,现有的解决方案包括 WebSocket 或 Server-Sent Events (SSE) 实时通信技术.
Learn OpenGL(二):模型加载与高级OpenGL
发表于 更新于
本文字数： 26k 阅读时长 ≈ 24 分钟
本文字数： 26k 阅读时长 ≈ 24 分钟
从手动设置顶点坐标到加载模型以及OpenGL高级技巧
Agentic RAG and LLMs-based assistant
发表于 更新于
本文字数： 14k 阅读时长 ≈ 13 分钟
本文字数： 14k 阅读时长 ≈ 13 分钟
既text2img和大语言模型之后的热点,AI Agent和RAG,简单来说在既有的多模态大模型基础上打造应用,比如利用多个智能体以及外部数据进行搜索. 目前来看还是有一些发展潜力,这方面的资料多见于Hugging Face,LangChain,llama index等等
OpenGL中不可忽视的部分:glsl、glm、assimp以及更多
发表于 更新于
本文字数： 20k 阅读时长 ≈ 18 分钟
本文字数： 20k 阅读时长 ≈ 18 分钟
在OpenGL中着色器的编程语言叫做GLSL,类似C语言但是内置了许多有用的函数. 这里简单学习其基础语法和包含特殊函数.