长文本能力问题

[Harris-Xie]

非常精彩的项目，我有些问题想请教下
跳转链接如下：
https://github.com/jingyaogong/minimind/blob/master/README.md#:~:text=%E5%9C%A8%E8%AE%AD%E7%BB%83%E6%97%B6,%E6%95%B0%E4%B8%BA6%E3%80%82
想问下代码中是否有改变RoPE线形插值的部分？
后续会有长文本方面的教学吗？

[jingyaogong]

本周稍晚时会更新一个基于104M版本MiniMind模型
【分析+长文本的外推实验】
届时会@😊

[Harris-Xie]

十分感谢🙏

…

---- 回复的原邮件 ---- | 发件人 | ***@***.***> | | 发送日期 | 2025年01月13日 22:29 | | 收件人 | jingyaogong/minimind ***@***.***> | | 抄送人 | Xie ***@***.***>, Author ***@***.***> | | 主题 | Re: [jingyaogong/minimind] 长文本能力问题 (Issue #112) | 本周稍晚时会更新一个基于104M版本MiniMind模型 【分析+长文本的外推实验】 届时会@😊 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: ***@***.***>