有意思，大语言模型也可以杂交了，还可以用进化算法来筛选，AI训练越来越像自然进化了

**Sakana AI - 利用演化算法自动合并模型：构建新的基础模型**

**一句话总结**
Sakana AI的研究重点是应用自然启发的理念，如进化和集体智能，通过演化算法自动发现不同模型的最佳组合方式，以创造适用于特定应用领域的新基础模型。

➡️blog：https://t.cn/A6TUHeEK
➡️paper：https://t.cn/A6TApBJv

✨**重点**
● Sakana AI正在开发的技术目标是利用进化原理来自动化开发具有特定能力的基础模型，从而不仅仅是训练特定的个别模型，而是创造自动生成基础模型的机制。
● 他们介绍了一种通用的“演化模型合并”方法，使用演化技术高效地探索从广泛的开源模型中组合不同模型的最佳方式，这些模型具有多样化的能力，可自动创造出用户指定能力的新基础模型。
● 该方法能自动发现将来自广泛不同领域（如非英语语言和数学、非英语语言和视觉）的不同模型以非常规方式合并的新方法，这些方法可能对人类专家来说难以发现。
● 他们测试的日语大型语言模型（LLM）和日语视觉语言模型（VLM）在几个LLM和视觉基准测试上取得了最先进的结果，尽管这些模型并没有明确地优化以在这些基准上表现良好。
● 特别是他们演化出的日语数学LLM，在各种其他日语LLM基准测试上取得了顶尖性能，甚至超过了一些之前70B参数的日语LLM的性能，表明这种模型足以作为通用的日语LLM使用。
● 他们还发现这种方法可以扩展到图像生成扩散模型，报告了他们演化出的高质量、极速的4步扩散的日语SDXL模型的初步结果。
● ⚡ 他们的方法在不需要任何基于梯度的训练的情况下，自动生产了新的基础模型，这一发现挑战了当前昂贵的模型开发范式。
● 他们提出，人类智能的发展不是基于单一智能体，而是基于集体智能；同样，人工智能的发展也将走向类似的集体路径，未来的AI将由一系列小型AI系统组成，每个系统都有自己的专长和特点。
● Sakana AI的研究方向是在神经演化、集体智能和基础模型的交叉领域内，他们认为通过利用开源生态系统中丰富多样的基础模型，可以探索更具成本效益的演化方法，这为快速创新周期铺平了道路。

我会一步一步走向你，坚定执着地走向你。
我会了解最真实的你[心][心]
永远都不知道明天和意外哪个先来，我只在这世上走一遭，所以一定要大胆说爱！我最最最最最最最喜欢你！
怪不得，我不会喜欢上任何一个人，是因为我的心早已被另一个人占据，我爱你的第1492天，今天的我比昨天的我更喜欢你[心][心]#我想我会一直喜欢你#

“雪崩的时候，没有一片雪花是无辜的”你曾梦见过这样无边无际的月光下的水域吗?无声起伏的黑色的巨浪，在地平线上爆发出沉默的力量.....
这段《悲伤逆流成河》中的楔子文，再次入目，仍有悲痛之感在心底蔓延。
无法只言片语的讲述主人公易遥是如何独自一人面对别人的欺凌，暴力，流言蜚语，最终义无反顾的跳进深海中，走向了死亡的结局。
要是这个世界多一些温暖，只要一点点，我心里都不会这样的难受，书中的易遥正应了这句话：“仙人掌做不了花，是没办法让人捧在手心里的”。
可生活在同一片天空下，我们仰望的是同一片星星，人与人之间又有何不同，我们不该站在制高点去指责任何一个人。
正如同现在的网络暴力，你生活在光亮里，你就觉得全世界都是光亮的，肆意的说着自己的观点，全然不顾对方的感受，如果有什么速度可以逼近光速的话，那一定是流言，然而世态炎凉，我们不应给予任何嘲讽。
不要轻易去揣测别人，因为你始终不是别人，在我看来，其实压死别人的不是最后一根稻草，而是每一根，正如：“雪崩的时候没有一片雪花是无辜的”。
#反对校园霸凌,争做文明学生# 我是许桐歌，我为反对校园霸凌发声。