漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2024-07-11 talkingdev

HF Transformers模型初始化速度提升30倍

现在,你可以通过在模型的首次运行中将一些懒加载移动到模型上,以极小的每秒令牌损失来显著提升模型初始化的速度。这种改进将大大提升模型运行效率,为用户带来更流畅的体验。

Read More
2024-05-15 talkingdev

如何让Postgres查询速度提升1千倍

Postgres是一个流行的关系型数据库,但在处理大型数据集时可能会变得缓慢。一项新的研究表明,通过使用特定的查询优化技术,可以将Postgres查询速度提高1千倍。研究人员发现,通过使用特定的索引和优化查询语句,可...

Read More
2024-05-01 talkingdev

QUICK:加速LLM的新CUDA内核开源

QUICK是一套新的优化CUDA内核,通过解决内存问题,提升了大型语言模型的效率。这导致了NVIDIA GPU上的显著速度提升,使AI模型运行更快,效率更高。QUICK的出现,无疑为AI领域带来了新的可能性,通过优化内存处理方式...

Read More
2024-04-29 talkingdev

Llamafile速度提升,性能提升一倍

Llamafile是一种自包含的可执行文件,可以在任何平台上直接运行模型。它的最新更新带来了两倍的速度提升,以及在可移植性方面的显著改进。这意味着用户可以更快地运行和处理复杂的数据模型,无需担心不同平台之间的...

Read More
2024-04-12 talkingdev

持续集成测试的演变与未来优化之路

持续集成测试(CI测试)是软件开发中的一项重要技术,它的历史可以追溯到20世纪80年代。本文将探讨CI测试的发展历程,以及未来可能的优化方向。CI测试的核心在于频繁地将代码集成到共享仓库中,以便及时发现并解决问...

Read More
2024-03-29 talkingdev

阿斯顿大学实现光纤系统未用波段 传输速度提升450万倍

英国阿斯顿大学的研究团队通过利用光纤系统中尚未使用的波长带,成功实现了每秒301太比特的互联网数据传输速度。这一创纪录的速度是现有最快的光纤网络的450万倍,有望彻底改变未来互联网通信的面貌。此次技术的突破...

Read More
2024-03-29 talkingdev

阿斯顿大学研究实现:互联网速度提升450万倍

英国阿斯顿大学的研究团队通过使用光纤系统中尚未利用的波长带,实现了每秒301太比特的互联网数据传输速度。这一突破性的成就,为未来高速互联网的实现提供了可能性。研究团队通过优化光纤传输技术,显著提高了数据...

Read More
2024-03-11 talkingdev

微软DeepSpeed更新,fp6模型推理速度提升超过2倍

微软的强大DeepSpeed训练库更新了,可以让模型每个参数使用6位。这可以将推理速度提升超过2倍。

Read More
  1. 1
  2. 2
  3. 3
  4. Next Page