离线版OpenELM有哪些特色功能

离线版OpenELM的特色功能如下：

• 设备端独立运行：可在iPhone、Mac等设备上本地运行，无需云服务器支持，能即时处理文本。
• 分层缩放策略：对Transformer模型每层参数精细分配，提升计算效率和模型准确性，如在约十亿参数预算下，比OLMo准确率高2.36%，且预训练数据减少一半。
• 多种规格可选：有2.7亿、4.5亿、11亿和30亿参数等多种版本，满足不同设备性能需求。
• 预训练与指令调优：基于约1.8万亿token的公开数据集预训练，部分版本经指令调优，可精准响应特定需求。
• 开源生态支持：提供完整训练、推理框架及代码，方便开发者基于此进行二次开发和优化。