软件下载帮助文档新闻资讯

Skill UI

浏览并发现 19764+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索 ALiBi ，共找到 2 条记录

默认排序最新上传最多下载

长上下文扩展技术

Orchestra-Research/AI-Research-SKILLs

通过 RoPE、YaRN、ALiBi 和位置插值等技术扩展 transformer 的上下文窗口，便于处理 32k-128k+ 令牌长文档、延长预训练模型的上下文能力，并实现更高效的位置编码与外推策略。

长上下文扩展技术

emerging-techniques-long-context

davila7/claude-code-templates

掌握使用 RoPE、YaRN 和 ALiBi 等技术扩展 Transformer 模型上下文窗口的技能。适用于处理长文档（32k-128k+ 令牌）及实现高效的 LLM 位置编码。涵盖旋转嵌入、注意力偏差和插值策略，突破预训练模型原有限制。

1

语言