Tech Planet

Frontend notes, engineering systems, and useful things worth keeping.

A focused personal knowledge base for frontend, JavaScript, CSS, engineering workflows, deployment, and long-term learning.

Latest

Recent notes

AI / AI 工程

什么是向量数据库:给大模型接上「按意思查」的知识库

向量数据库,简单说就是专门用来存「向量」、并能极快地找出「最相似向量」的数据库。要理解它,得先接上 embedding 这个概念——如果对「文本怎么变成向量」还不熟,可以先看 从 Prompt 到输出 和 多模态 Token。 一、从 embedding 说起:为什么需要它我们已经知道:文本、图像、音频经过模型都会变成向量(embedding),而且有个关键...

LLM 向量数据库 Embedding RAG
AI / 大模型原理

多模态 Token:文本、图像、音频分别被切成了什么

在 从 Prompt 到输出 里我们讲过:文本会先被分词器切成一个个 token、再变成向量送进模型。那很自然会问——图像和音频也讲「token」,它们的 token 又是什么?是像素吗?是采样点吗? 答案是:token 从来就不是「字」,而是「Transformer 处理的最小单位」。理解了这一点,三种模态其实是同一套路。 统一视角:切块 → 变向量不管什...

LLM Transformer Token 多模态