A股市场又有热闹的事情。
中国人工智能行业传来重磅消息。据通用人工智能创业公司——月之暗面官方微信公众号最新消息,支持200万字上下文的Kimi智能助手即日启动“内测”。根据机器之心数据显示,尚未上线的GPT-4.5Turbo上下文窗口指定为25.6万个token(指文本中最小的语义单元),能同时能够处理约20万个单词,Kimi此次升级后长文本能力为其10倍。
在二级市场上,投资大模型的公司爆发。电广传媒连续拉板,九安医疗亦有不错表现。与此同时,应用层面上,福昕软件、金山办公、万兴科技等亦明显强于大盘。在英伟达股票昨晚表现不佳的背景之下,这类股票依然如此强势,着实不易。
那么,该事件的影响究竟会有多大呢?
月之暗面大爆发
最近,记者一直在试用Kimi,综合用下来,发现一些功能并不比ChatGPT4.0差。
而就在昨天,Kimi的开发商月之暗面发布了最新消息。Kimi智能助手2023年10月初次亮相时,凭借约20万汉字的无损上下文能力,帮助用户解锁了很多新的使用场景,包括专业学术论文的翻译和理解、辅助分析法律问题、一次性整理几十张发票、快速理解API开发文档等,获得了良好的用户口碑和用户量的快速增长。“不到半年时间过去,我们今天宣布Kimi智能助手在长上下文窗口技术上再次取得突破,无损上下文长度提升了一个数量级到200万字。”
从20万字到200万字,由于没有采用常规的渐进式提升路线,月之暗面团队遇到的技术难度也是指数级增加的。为了达到更好的长窗口无损压缩性能,他们的研发和技术团队从模型预训练到对齐、推理环节均进行了原生的重新设计和开发,不走“滑动窗口”“降采样”等技术捷径,攻克了很多底层技术难点。