2026年6月6日星期六

RunningHub :1毛钱成本生成高质量商品详情海报,注册送1000RH币

无需专业设计技能,1毛钱成本生成商品详情海报。通过RunningHub注册(邀请码rh-v1542)送1000RH币,支持一键工作流。适合电商卖家。通过本文链接注册可获1000RH币,体验AI生成海报工作流,每张海报成本仅0.1元,无需设计师。注意:RH币可用于调用工作流。立即尝试。

Tags:

分割线



👉通过这个链接注册送1000RH币:https://www.runninghub.cn/post/2051989894217650177?inviteCode=rh-v1542👈点击可直接跳转 👉领取RH币需填写邀请码:rh-v1542
一键海报工作流:
 https://www.runninghub.cn/post/2062023913923764226/?inviteCode=rh-v1542
 ✅欢迎体验我其他工作流:
👉(https://www.runninghub.cn/user-center/1914528379251671041/?inviteCode=rh-v1542) 👈点击可直接跳转 
 飞书:https://my.feishu.cn/wiki/KrKow7S6ziML2IkuhWdc0vlQnnc?from=from_copylink

Obsidian笔记发芽功能复刻 AI让思想跨域关联 提升知识管理效率

本文演示在Obsidian中复刻GET笔记发芽功能的方法,利用Claude Code从笔记提炼思想内核并自动关联跨领域知识如母题与慢直觉。适合知识工作者提升信息碰撞效率,无需编码基础,核心逻辑通用。

Tags:

  见字如面,我是艾康。
点击关注👆防止迷路。







 

本文字数 3281,阅读大约需 6 分钟

你在笔记里记了曾国藩的一句话:「既往不恋,当下不杂,未来不迎。

想找找有没有相关的内容。搜「曾国藩」,结果是更多的曾国藩——生平、语录、相关书籍。

这是检索和罗列。

但有另一种方式。

AI 先理解这句话的思想内核是「活在当下」,然后告诉你:爱因斯坦说过「我从不去想未来,因为它来得已经够快了」;《功夫熊猫》里乌龟大师也说过「昨天是历史,明天是谜题,但今天是上帝的礼物」。

你种下一颗种子,它能结出什么果子,像开盲盒一样。

这个功能叫做「笔记发芽」,我是在 GET 笔记这款 App 里第一次看到它的。

img

就在几天前,我用 Claude Code 给自己做了一个类似的发芽 Skill。不过这篇文章想聊的,不只是这个 Skill 本身。

而是一个更有意思的发现:创造这个 Skill 的整个过程,恰好就是发芽🌱所揭示的那个现象的完美范例。

起点跟「发芽🌱」毫无关系

故事的起点,跟「发芽」一点关系都没有。

因为最近接手了一个新项目,开发过程中跟 Claude Code 有一次日常对话。聊到项目架构时,它提到了一个词:LSP

我当时挺好奇。LSP 到底是什么?是脚本、是命令行工具,还是别的什么?

Claude Code 给我解释:LSP 全称是语言服务器协议,简单说就是一套标准的通信规则,让代码编辑器可以向一个后台服务询问「这个符号定义在哪里、谁引用了它」这类问题。

跟 grep 的区别在于,grep 匹配的是文本字符串,而 LSP 是按符号来理解代码的。

img

我觉得这是一个有必要了解的新概念,所以在跟它讨论了解清楚后,就让它帮我沉淀到 Obsidian 笔记库里了。

img

整理完成后,我扫了一眼笔记,注意到里面出现了两个概念:母题坍缩

这两个词我之前都听说过,但具体含义印象并不深刻。所以我的好奇心一下子就上来了,想要搞清楚具体细节。

母题的「萌芽」

Claude Code 是这样解释「母题」的:

母题(motif)是跨作品反复出现的最小题材单元。比如「复仇」「远行」「死亡与重生」「灰姑娘式的受虐者逆袭」。它们不属于某一部作品,而是横跨无数作品反复出现的那块「砖」。

它还特意做了一个区分:主题是某一部作品想表达的中心思想,是个别的;母题是跨作品反复出现的客观结构,是可复用的。

《哈姆雷特》的主题是它独有的,但「复仇」这个母题在无数故事里都会出现。

紧接着,Claude Code 补了两点扩展,一下子就吸引了我:

  1. 1. 学术上有 Stith Thompson 的《民间文学母题索引》,把上千个叙事母题都编了号。
  2. 2. 音乐里对应的是瓦格纳的「主导动机」(Leitmotif)。

    img

看到这里的时候,我脑子里突然「叮🔔」了一下。

想起了之前在 GET 笔记里看到过那个叫「发芽」的功能。Claude Code 刚才做的事情,不就跟「发芽」的逻辑一模一样吗?

img

它从「母题」这个文学概念出发,自然地连接到了民俗学的母题索引,又连接到了音乐里的主导动机。从一个点出发,跨越领域的边界,找到远方的回响。

那一刻我的原话是:

好巧啊,刚才你就像是有一个「萌芽」的瞬间,这是非常宝贵的。

紧接着我就想到:我们能不能也做一个类似「发芽」的 Skill?

这就是整件事的起心动念。

说干就干

有了这个念头,接下来就是跟 Claude Code 反复讨论设计细节。

这个 Skill 的核心是什么?入口在哪里?最终输出包含哪些东西?什么场景下触发?

这些问题经过了多轮对话,逐渐清晰了起来。具体的设计过程就不展开了。

一个小时后,发芽 Skill 做出来了。

img

用一句话概括它的核心逻辑:提炼思想内核 → 关联远方的回响。

这里说明一下:完整的 Skill 跟我现有 Obsidian 的耦合度比较高,里面依赖了一些定制化的脚本和其他 Skill。但上面这条核心逻辑是通用的,换成任何一个大模型都能理解。

文章最后我会贴出 Skill 的核心部分,需要可以自取。

第一份发芽报告

做完之后,我拿自己过去一周的日记跑了一次。

结果还是挺惊喜的。

img

它从我这一周的日记里,提炼出了两个思想内核:

内核 A:杠杆越强,支点越关键。 工具的放大效果不取决于工具本身的强度,而取决于使用者为它搭建的承接结构。

内核 B:灵感是多源输入的延迟碰撞。 创造性突破很少来自单点深入,而是不同来源的信息在某个意外时刻碰撞的产物。

看到这两个内核的时候,我的第一反应是:确确实实是我这一周触动最大的两个点。

不是随意编造的。

两个内核里,我对内核 B 的「灵感是多源输入的延迟碰撞」更为触动。

发芽报告为其找到了 5 条来自完全不同领域的回响,例如:

简·雅各布斯的城市理论。 她在 1961 年提出,城市活力的秘密不在于规划师画的蓝图,而在于功能的混杂。住宅、商铺、办公、休闲混在一起,人们在非计划的相遇中产生协作和创新。单一功能的「纯净」街区反而死气沉沉。

达芬奇的跨域笔记本。 他的笔记中,解剖学素描旁边是水流动力学研究,旁边是飞行器草图,旁边是光影透视的数学推导。领域之间没有围墙,碰撞就在翻页之间自然发生。

img

其中,我觉得 **Steven Johnson 的「慢直觉」**更符合我当下语境里表达的意思。

慢直觉是 Steven Johnson 在《好创意从哪里来》这本书里提出的:伟大的创意很少是一瞬间的灵光乍现,更多是一种 Slow Hunch

一个想法在脑中潜伏数月甚至数年,直到遇到另一个不相关的想法,两者碰撞才形成突破。

慢直觉,这个概念让我很想展开聊聊。

因为我觉得虽然结果上好像是一瞬间想清楚了,但在此之前一定是有长期的想法潜伏在意识里。

表面上看起来像是灵光乍现。实际上,是慢了很久之后的一次延迟碰撞。同时我让它帮我找一找历史上有没有这样的案例。

还真找到了很多👇

img

这些案例有一个共同结构:当事人在「灵光乍现」之前,脑中已经有一个未解决的问题或半成品想法存在了很久。

而最终的碰撞对象,往往来自一个完全不相关的领域。

那慢直觉能发生,到底需要什么条件?

我觉得至少需要三样东西。

第一,多样性的输入。

如果一直围绕同一个领域做事情,很难有跨领域的碰撞。

达芬奇同时研究解剖学和水流动力学,达尔文读了经济学家马尔萨斯的人口学著作,Art Fry 在教堂唱诗班碰上了实验室同事的失败发明。

碰撞的前提是:你的输入足够杂

无用之用,方为大用。

第二,保持困惑/好奇心。

费曼有一个习惯:他长期在脑子里挂着 12 个核心问题

每当接触到新知识,就拿这 12 个问题去过滤。这些问题就像 12 块磁铁,等着把不相关的输入吸过来碰撞。

没有困惑,就没有引力场,信息就只是信息。

第三,外化记录。

想法如果只停留在脑中,碰撞的概率其实很低。

因为工作记忆的带宽非常有限,同时能「挂着」的未解决问题不会超过三五个。

但一旦把想法外化到笔记系统里,碰撞的「表面积」就从脑容量扩展到了整个知识库。

达尔文有大量的物种笔记。达芬奇有跨域笔记本。我自己有 Obsidian vault 和每天的日记。

碰撞从「靠运气的脑内偶遇」,变成了「可检索的系统性碰撞」。

所以,慢直觉的完整公式可能是这样的:

多样性输入 × 保持困惑 × 外化记录。

img

环环相扣

聊到这里,不知道你有没有发现一件事。

回头看整个过程,创造发芽 Skill 的过程本身,就是一次慢直觉。

GET 笔记的「发芽」功能,我其实之前就了解过了。但那时候为什么没有动手去做一个类似的东西?

因为当时脑子里没有另一个好的想法来跟它碰撞。

「发芽」这个概念,就这样在我的认知里安静地潜伏着。

直到那个周五晚上,一次跟技术项目毫无关系的对话里,Claude Code 提到了「母题」。

而「母题」这个概念,是我之前在卡兹克卡老师某篇公众号文章里了解到的,具体是哪篇我已经记不清了。

img

所以你看:

如果没有看过卡兹克卡老师的那篇文章,我就不会知道母题。

如果不知道母题,对话中碰到这个词也不会有什么特别的感觉。

如果没有那种被触动的感觉,就不会联想到发芽。

如果没有外化记录,很多之前的想法根本不会被保留下来,碰撞大概率不会发生。

一切都是环环相扣的。

这不是运气。这就是多样性输入 × 保持困惑 × 外化记录这个公式在起作用。

而发芽 Skill 本身做的事,本质上就是在系统性地制造这种碰撞。它从你的笔记里提炼思想内核,然后主动去找远方的回响。

写在最后

回到开头的那个例子。

当你在笔记里种下曾国藩「既往不恋,当下不杂,未来不迎」这颗种子,一个好的工具会帮你找到爱因斯坦和乌龟大师。

但工具能做的,只是扩大碰撞的表面积。

真正让碰撞发生的,是你之前就看过爱因斯坦的话,看过《功夫熊猫》,并且把它们留在了某个地方。

是你长期保持的那种好奇心和困惑感,让新信息出现的时候,能一把抓住它。

即便没有任何工具,你也可以给自己创造碰撞的条件:多看不同领域的东西,对感兴趣的问题保持追问,把想法写下来。

你脑子里那些悬而未决的问题,别着急。给它们足够多的输入,给它们碰撞的机会。它们会发芽🌱的。

附:发芽 Skill 核心 Prompt👇

普通检索给你「更多同类」:输入曾国藩,给你更多曾国藩。

**发芽不同**
——它先读懂一条记录的**思想内核**,再跨越领域、学科、时空,去找那些**不共享任何关键词、却共享同一内核**的远方共鸣。曾国藩「既往不恋,当下不杂,未来不迎」的内核是「活在当下」,于是它牵出爱因斯坦、《功夫熊猫》的乌龟大师——三者没有一个共同关键词,只共享那个内核。

一句话定位:**发芽找远方的回响。** 你种下一颗种子,它结出意料之外的果子。

产出是一份**发芽报告**,分三区:

-
 **🌱 远方的回响(主角)**:外部世界知识里的跨域共鸣。这是发芽的价值所在——扩你的知识面。
-
 **⚓ 锚回你的Vault(骨架)**:若某个回响恰好和你库里已有的笔记撞上,提议互链,把发芽结果接回你的知识图谱。
-
 **🌰 可种的新种子**:值得单独沉淀的内核,导向你现成的内化流程。

## 两条不可破的纪律


1.
 **只提议,不自动写进真相源。** 报告本身写进Vault源材料区,这是唯一自动落盘的东西。
2.
 **不杜撰引文。** **确有把握**的引文照引并标出处;**拿不准确切措辞**的,转述其思想并标明「谁 / 出自哪」,不编逐字引文;实在不确定的标 `(待核)`

## 工作流


### 1. 确定种子


种子可以是:

-
 **一条Vault内笔记**:用户指名(`[[LSP]]`、某路径,或「给刚写的那条发芽」)→ 读它正文。
-
 **一段文本**:用户粘一句金句 / 一段话(不必在库里)。
-
 **一批最近笔记**(增量发芽,进阶):对最近 N 条逐条发芽,或归纳共性内核合成一份。当前以单种子为主,这个口子为后续「定时发芽」预留。

读完种子,进下一步。

### 2. 提取思想内核(最关键的一步)


这是发芽成败的地方。**不要复述种子的表层话题**,而要提炼出可迁移的底层理念 / 原理 / 张力——那个能脱离原语境、到别的领域也成立的「母题」。

-
 曾国藩「既往不恋,当下不杂,未来不迎」→ 内核:**专注当下,不被已逝与未至牵扯**
-
 LSP → 内核:**加一层标准协议,把 M×N 的复杂度坍缩成 M+N**
-
 「刻意练习」→ 内核:**在能力边缘、带反馈地重复,才长本事**

种子够丰富时,可抽 1–3 个**不同侧面**的内核,各自能发出不同的芽。把内核**写成一句领域中立的话**——它越中立,越能跨域旅行。

### 3. 远方的回响(B · 主角)


围绕内核,向**尽量远**的领域发散,找世界知识里的共鸣:哲学、自然科学、文学、影视、历史、宗教、艺术、商业、生物、神话……

每条回响给四样:**领域 · 谁/什么 · 共鸣的那个意思(有把握再附引文)· 为什么和内核共振**

质量标准(宁缺毋滥,4–7 条、覆盖**不同**领域即可):

-
 **要够远**:跨过真实的领域鸿沟。还在原领域里打转 = 邻居,不是回响。
-
 **要真共振**:共享的是内核,不是表面词。「都提到水」不算,「都在讲不可逆」才算。
-
 **守第 2 条纪律**:引文拿不准就转述 + 标人,别编。

### 4. 锚回你的Vault(A · 骨架)


例:内核「活在当下」→ 搜 `当下,正念,专注,此刻,临在`,可能撞出库里的 `[[正念]]`

命中里**只留真正共享内核**的,别为凑数硬挂沾边的。把它们作为**建议互链**列出,待用户点头。若库内确无共鸣,注明,并可建议把内核本身新建成原子笔记。

### 5. 写发芽报告


写到 `发芽报告/YYYY-MM-DD-<种子一句话>.md`(日期用真实当天)。用下方模板。

### 6. 收尾


告诉用户报告落在哪,并给出**下一步选项**(都不自动做):把某些建议互链落到对应笔记?把某个内核继续内化成原子笔记?某句引文要联网核实?

## 报告模板


```markdown
# 发芽报告 · <种子一句话>
> 种子:[[来源笔记]] 或「粘贴的文本」 · YYYY-MM-DD
> 思想内核:<一句领域中立的内核>

## 🌱 远方的回响
- **<领域> · <谁/什么>**:<共鸣的意思>(<引文,或转述 + 标人;拿不准标「待核」>)—— 与内核共振在<哪一点>
- ……

## ⚓ 锚回你的山脉(建议互链,待你确认)
- [[某条已有笔记]] —— 共享<内核>,建议互链
- (若无:库内暂无强共鸣,可考虑新建 [[<内核>]])

## 🌰 可种的新种子(可选)
- <值得单独沉淀的内核> —— 建议进一步内化
```


## 一个完整例子(节选)


种子:曾国藩「既往不恋,当下不杂,未来不迎」
思想内核:专注当下,不被已逝与未至牵扯

🌱 远方的回响:

-
 **物理 · 爱因斯坦**:把心力收在此刻,别预支对未来的焦虑(名言「我从不想未来,它来得已经够快了」,措辞待核)—— 同样把注意力锚在当下
-
 **影视 ·《功夫熊猫》乌龟大师**:「昨天是历史,明天是谜题,今天是礼物」—— 用「礼物」点出当下的唯一可贵
-
 **心理学 · 正念**:不加评判地觉察此刻 —— 把「活在当下」做成了可训练的方法

 

图片

以上,就是本文全部内容,如果觉得这篇文章对你有启发,点赞、比心、分享三连就是对我最大的支持,谢谢~

往期推荐阅读
•  Obsidian 从入门到进阶合集

• AI把我推成“知名”博主后,我发现了一条产业链

• 用 Gemini 解锁 YouTube 新用法,信息获取效率提升 10 倍

• 有了 NotebookLM 后,还需要 Obsidian 吗?

• 我试了 NotebookLM 学习法后,彻底抛弃传统学习方式

• NotebookLM 再次升级,来自谷歌的年终礼物

• 我用 NotebookLM 解锁 PPT 的 5 种玩法,实现了 PPT 自由

• AI 时代,你的上下文才是最值钱的资产

• 2026 年如何用好 AI,我发现这些能力更重要

• Openclaw 这么火,可你真的需要它吗?

• 全网都在抄 Karpathy 的知识库,但大多数人只学到了皮毛

• CodexBar × CodeBurn,我找到了追踪 Token 消耗的最佳组合

• 如何用 Claude Code 开启10 倍学习法?

京东开源AI长视频框架JoyAI Echo 5分钟角色一致高清长视频

京东开源长视频生成框架JoyAI-Echo,解决多镜头角色变脸和音色漂移问题,支持生成5分钟高一致性视频。推理速度提升7.5倍,实时超分输出1K-2K高清,并提供对话式编辑Agent。适合AI视频创作者、数字人、营销等场景,开源免费使用。

Tags:

梦瑶 闻乐 发自 凹非寺
量子位 | 公众号 QbitAI

AIGC发展到今天,生成几秒钟的AI视频真的已经不算新鲜事儿了。

但!难的地方在于,让同一个角色在几分钟里始终保持一致(扎心.jpg)——

多镜头切换,脸可能变了,换场景,衣服发型开始漂;人物开口,音色前后接不上!!

问题不在模型「不会造梦」,而在于它很难「记住」这个梦……

图片
AI生成

也正因如此,长视频生成迟迟未能进入全行业的生产流程,更别说大规模商业化。

在长视频生成集体卡壳的当下,刚刚,有团队给出了一套新解法——

开源长音视频生成框架JoyAI-Echo,并杀入全球长视频生成领域全球「第一梯队」。

把长视频创作里角色一致性、音色稳定性、生成速度画面质量等生成痛点,一把梭哈~

哪怕是几分钟的视频,多镜头、多场景、多段语音连续切换,人物形象和声音也能狠狠稳住。

图片

不仅如此,支持对话式编辑的Agent能力也一起安排上了,以后我们做视频就像和导演聊天一样了!

然后嘛,我再仔细一看,这套高性能开源框架,竟然来自——

京东?!属实藏得太深……(震惊.jpg)

评测显示,JoyAI-Echo在跨镜头一致性、语音准确率(0.8646)等指标上全面领先行业,甚至用户偏好达59.4%~81.7%。

这下好了,AI视频也能所见即所得了。

一个可交互、高一致性、可持续迭代的长视频时代来了!

长视频不再“跑偏”:高一致性、低延迟、实时超分

过去一年,AI视频模型的竞争重点多集中在几秒到几十秒片段:画质、运镜、风格、物理合理性。

各家模型卷得飞起,效果确实肉眼可见地next level,各类Benchmark评测表现也都非常漂亮。

然鹅吧,在AI视频生成似乎已经进入成熟期的今天,一个问题依然没有被真正解决——长视频生成

原因很简单:长视频,对整个行业来说都《太难了》…….(扎心jpg)

图片

相比短视频生成,长视频不仅是在时间维度上的简单拉长,更意味着跨镜头、跨场景、跨动作的连续叙事。

但目前行业里的长视频生成,仍然普遍存在几个长期困境:

说话人的音色忽高忽低;生成速度也慢得离谱,往往要等上好几分钟才能看到结果。

这些问题背后,暴露的则是当前模型在长时序生成上的天然挑战:

模型错误累积、长程时序一致性弱、推理延迟高。

最终带来的结果就是,视频里的人物会变脸,声音会飘,生成还得等很久。

这些问题也直接限制了AI视频在虚拟叙事、数字人助手、实时内容创作等场景中的进一步落地和「规模化应用」。

图片
AI生成

而JoyAI-Echo给出的解法是,通过跨模态音视频记忆库、记忆驱动后训练、轻量化实时超分让长视频生成更稳。

哪怕是几分钟的视频,我们也能丝滑拿下!!拒绝反复抽卡!!

跨模态音视频记忆库:角色再也不“变脸”

长视频生成最让人头疼、行业最难啃的一块骨头,就是角色和声音的「前后不一致」。

在JoyAI-Echo团队看来,问题的根源在于现有模型缺乏真正意义上的长期记忆能力

行业里传统方案、通常依赖上下文窗口保存历史信息,但随着视频长度增加,早期内容会逐渐被后续信息稀释。

模型虽然能够记住最近几个镜头,却很难稳定保存数分钟之前的人物特征!!

JoyAI-Echo的做法是——

直接在框架里塞进了一套「跨模态音视频记忆库」

与其让模型记住所有历史内容,不如把最关键的身份信息保存下来,并在后续生成过程中持续调用。

这样一来,即便视频长度来到5分钟,角色的身份、外观和声音依然能够保持高度一致!!!

这套记忆库最大的特点在于,它记录的不只是人物长相,还会同步记录说话人的音色,并将两者绑定在一起。

当角色首次登场时,系统会提取其视觉特征和声音特征写入记忆库;后续每生成一个镜头,都会从记忆库中调取这些信息作为参考。

为了兼顾效果和效率,系统也不会无限扩展记忆,而是保留故事开头的关键镜头,以及最近生成的镜头。

这样既不会忘记主角最初长什么样,也始终知道剧情刚刚推进到了哪里:

图片

所以说JoyAI-Echo并不是让模型拥有更大的记忆力,而是让模型学会像人一样记忆——

只保留最重要的信息,并在需要的时候准确调用。

而这套跨模态音视频记忆机制,也成为JoyAI-Echo实现5分钟长视频高一致性生成的核心基础~

记忆驱动后训练:速度提升7.5倍

对于长视频生成来说,一致性只是第一步,生成速度同样决定了产品能不能真正落地。

为此JoyAI-Echo团队在模型训练之外,又专门设计了一套记忆驱动的后训练流程,在不牺牲生成质量的前提下,把推理效率再往前推一步~

整个流程主要分为三步,首先通过SFT监督微调,让模型学习高质量音视频生成能力。

随后利用人类反馈强化学习进一步优化人物一致性、画面质量以及音画同步效果。

最后再通过DMD(Distribution Matching Distillation)技术,将复杂的大模型能力压缩到更高效的推理模型中。

图片
AI生成

在整个后训练体系中,DMD是最关键的一环。

而且最最最最需要夸的一点是,仅DMD相关优化就带来了约7.5倍的推理速度提升!!

我们可以把DMD理解成一次「能力浓缩」——

先让一个能力更强、但推理速度较慢的教师模型完成完整生成流程,再让一个更加轻量的学生模型去学习和复现教师模型的生成结果。

图片

这样一来,原本需要大量扩散步骤才能完成的生成任务,被压缩成更少的推理步骤,模型却依然能够保持接近的生成效果。

如果说跨模态音视频记忆库解决的是「不要忘」,那么这套后训练体系解决的就是「别太慢」。

一个负责守住长视频的一致性,一个负责提升长视频的生成效率。

两者结合,才让JoyAI-Echo真正具备了迈向长视频生产工具的基础能力~

轻量化实时超分:高清输出不卡顿

一致性有了,速度也上来了,但长视频生成还有最后一道坎儿——清晰度

毕竟真到了数字人、品牌营销、短剧创作这些场景里,谁也不希望最后拿到的是一个糊糊的视频……

但问题是,当前业内通常采用「视频生成+离线超分」的两阶段架构。

视频先生成,再交给独立超分模型处理。

这种方案虽然也能提高分辨率,但额外引入了一轮推理流程,不仅增加等待时间,还容易造成生成结果和超分结果的偏差。

意思就是,高清是高清了,可等待时间也跟着上去了。

图片
AI生成

而JoyAI-Echo给出的解决方法是,创新性地把超分能力直接塞进生成链路里

具体来说,系统会先生成720P视频和对应音频,再通过轻量化实时超分模块一步完成高清视频和音频细节增强。

整个超分过程只需要一次向前推理,就能直接输出1K甚至2K分辨率结果~

这样不仅画面细节更丰富,音频质量也会同步优化,be like:

整个过程还不会明显增加生成延迟,用户也终于可以不用在「速度」和「清晰度」之间做选择了。

对于数字人直播、实时创作、内容互动这些对延迟极其敏感的场景来说,高清输出不卡顿,真的太香了……

Director Agent,专属于你的AI视频导演搭子!

大家都懂,现实中的影视制作,从来不是一次完成的。

过去的AI视频生成,大多停留在一次性出片的阶段。

从剧本、分镜到拍摄、审片,再到返工和重拍,每一个环节都需要反复打磨。

如果其中某个镜头出现问题,创作者往往只能重新生成整条视频,不仅耗时,也很难保证前后内容的一致性。

这也是AI长视频长期难以真正进入生产环节的原因之一!!!

所以,创作者需要的并不只是一次性结果,还需要像真实拍摄一样,拥有能够规划、生成、返工,甚至局部重拍的工具。

这个问题,JoyAI-Echo技术团队也想到了,于是给视频模型配了一位「AI导演」——Director Agent

我们只需要用自然语言说需求,它会自动帮忙拆分成剧本、角色、场景和镜头~

图片

具体来说,Director Agent整个技术链路被拆成:策划、生成、点评修改三个阶段。

在策划阶段,Agent更像一位「编剧兼导演」。

它会先理解用户意图,将一句自然语言需求扩展成完整的故事框架,补充角色设定、场景信息和叙事逻辑,再进一步拆解为镜头级规划,最终生成符合模型训练格式的结构化条件。

进入生成阶段后,Agent又变成了一位「现场导演」。

它会根据当前镜头内容,从已经生成的历史镜头中检索最相关的信息,并将这些参考内容与当前剧本状态一起整理成模型需要的输入条件,让生成模型能够准确调用角色、场景和剧情上下文。

图片
AI生成

最后来到「点评修改」阶段,这里反倒更像影视制作里的审片环节~

无论是用户反馈,还是自动评价模型发现问题,只要角色形象、动作表现、对白内容或音画同步出现偏差,Agent都能快速定位到具体镜头,重新调整对应条件和记忆信息!!!

而且最重要的是,Agent只对受影响的部分进行重生成,而不需要推倒重来,修改后的结果还会同步更新到后续剧情中,确保整个故事始终保持连贯一致~

也正因为如此,JoyAI-Echo不再只是一个负责生成视频的模型,而更像是一套完整的长视频创作系统。

杀入全球第一梯队,长视频生成开始靠近真实生产

光说不练假把式,从官方评测数据来看,JoyAI-Echo在长视频生成的多个关键指标上,都展现出了领先表现。

在用户盲测环节,研究团队将JoyAI-Echo与目前代表性的长视频模型进行了对比,结果显示——

长视频任务中,用户有63.6%的情况下更喜欢JoyAI-Echo生成的视频画面。

音频质量维度这一优势甚至达到81.7%,提示词遵循偏好为80.6%,IP一致性偏好为59.4%。

即使放在人像短视频这一竞争最激烈的赛道中,与主流视频模型相比,JoyAI-Echo依然获得了更高的视觉美学用户偏好(58.8%vs26.5%)。

而JoyAI-Echo的发布,也同样标志着京东在长视频生成领域进入「全球第一梯队」:

图片

过去几年,AI视频生成虽然发展迅速,但长视频始终停留在一个略显尴尬的位置:

演示效果惊艳,真正投入生产却困难重重。

角色容易变脸、声音容易漂移、生成速度过慢、修改成本极高……这些问题决定了大多数长视频作品更像是技术Demo,而非真正意义上的生产工具。

而JoyAI-Echo试图解决的,恰恰是这些长期困扰行业的核心瓶颈。

更重要的是,与许多闭源模型不同,JoyAI-Echo选择了「开源」

这意味着长视频生成不再只是少数头部公司的专属能力,而开始成为一个能够被开发者、创作者和研究者共同验证、调用和迭代的开放工具。

图片
AI生成

技术框架提供了起点,开放则让更多可能性慢慢长出来。

当一致性、高分辨率、Agent等能力被开源持续验证和优化后,行业内长视频生成的技术迭代速度可能进一步加快。

无论是虚拟IP故事、数字人内容、品牌营销视频,还是教育课件、知识讲解、游戏动画和互动剧情,高一致性、可控、可迭代的长视频生产都能够成为可能。

如果说过去的大模型解决的是「能不能生成视频」的问题,那么JoyAI-Echo正在尝试回答另一个更重要的问题:

AI能不能真正参与长视频的内容生产创作?

从目前的结果来看,答案已经越来越接近肯定。

JoyAI-Echo带来的,不仅是一款新的长视频模型,更是一次AI视频生产范式的推进。

当稳定记忆、实时交互、可控修改和高效生成开始同时出现时,AI长视频正在从技术展示走向生产工具。

一个更稳定、更可控的AI长视频时代,正在被推到台前。

GitHub地址:https://github.com/jd-opensource/JoyAI-Echo

项目主页:https://echo-team-joy-future-academy-jd.github.io/Echo-LongVideo-Page/

一键三连「点赞」「转发」「小心心」

欢迎在评论区留下你的想法!

—  —

🌟 点亮星标 🌟

科技前沿进展每日见

RunningHub :1毛钱成本生成高质量商品详情海报,注册送1000RH币

无需专业设计技能,1毛钱成本生成商品详情海报。通过RunningHub注册(邀请码rh-v1542)送1000RH币,支持一键工作流。适合电商卖家。通过本文链接注册可获1000RH币,体验AI生成海报工作流,每张海报成本仅0.1元,无需设计师。注意:RH币可用于调用工作流。立即尝...