基础模型、长文本、数据库、应用落地……一篇文章读懂今天大模型行业的关键问题丨2024 GDC

703 0 0

文章摘要

2024年全球开发者先锋大会（GDC）在上海成功举办，聚集了众多国内外人工智能领域的前沿创业者和技术专家。本次大会由上海市人工智能行业协会（SAIA）主办，旨在展示AI领域的最新科研成果和技术创新，为全球开发者精英提供了交流和分享的平台。大会期间，多家国内AI企业展示了其最新的AI产品和互动展区，并通过Workshop和闭门交流会等形式，深入探讨了AI技术在不同行业应用的关键问题。

波形智能的联合创始人兼CTO周王春澍分享了大模型在超长文本写作方面的创新技术与应用。他介绍了RecurrentGPT技术，这是一种能够处理并生成无限长文本的方法，通过高效/稀疏注意力机制、递归神经网络（RNNs）和状态空间模型，提升了模型处理长文本的能力。此外，他还阐述了记忆增强的代理（Memory-Augmented Agent）的概念，包括短期记忆和长期记忆的应用，以及Recurrent Prompting技术，提高了文本的连贯性。波形智能的Weaver大模型通过Instruction BackTranslation和Constitutional DPO等技术，生成的内容更具人类特色。

Dify.AI的产品负责人何文斯探讨了从传统的prompt工程向流程工程（Flow Engineering）的转型，并分享了Dify.AI在这一领域的实践和成果。流程工程通过将复杂任务分解为更小、更易管理的步骤，降低了系统复杂度，提高了大型语言模型在处理复杂任务时的性能。何文斯还讨论了流程工程适用的应用情景，将其分为严肃情景和创意情景，强调了流程工程在提高生产力方面的重要性。

百川智能的算法总监高雨辰谈到了公司采用的技术策略与解决方案，强调了大模型落地面临的挑战，包括人才、算力、训练周期、效果稳定性和更新升级等方面。百川智能提出了“大语言模型+搜索增强”的技术路线，通过结合互联网实时信息和企业知识库，解决了大模型实时数据不足和专业数据不足的问题。

Zilliz的开发者生态及市场运营负责人Jerry介绍了向量数据库的概念和发展，以及Milvus作为全球首款开源向量数据库的特点和应用。他强调了向量在表示非结构化数据特征方面的重要性，以及Milvus在社区中的受欢迎程度。同时，他也指出了向量数据库面临的挑战，包括非结构化数据与向量存储之间的割裂等问题。

月之暗面的开发者关系负责人唐飞虎分享了公司在大模型应用实战案例，介绍了Kimi产品的长上下文窗口技术上的突破，以及大模型在游戏中作为模式的应用。他强调了模型微调和提示工程在大模型应用中的关键作用，并鼓励开发者利用Moonshot AI的开放平台进行尝试。

Kyligence的合伙人兼副总裁李栋围绕“指标+AI”这一核心议题展开，阐述了大数据与大模型如何结合并实际落地。他强调了企业数据产品在BI向AI转变过程中的重要性，并通过Kyligence Zen和Kyligence Copilot等产品，展示了公司如何通过创新技术提升AI在企业中的应用可靠性。

Xmind AI的产品负责人夏袭韵和产品经理王安之分享了AI在思维导图和UGC内容社区中的应用。他们介绍了Xmind AI和Chatmind两款产品的特色和优势，以及AI技术在思维导图中的应用，提高了输入效率和输出内容的多样化。王安之还分享了AI大藏经和AI塔罗牌应用Quin，展示了AI在文化和个人决策辅助方面的潜力。

看见概念的创始人胡修涵提出了AI时代下UGC内容社区的愿景，强调了内容生产是驱动需求变化的关键因素。他探讨了AI作为创作伙伴的角色，尤其是在世界观构建、角色设计和情节生成方面。胡修涵还分享了团队进行的内容实验，探索了AI内容在最少人为参与下获得持续流量的可能性。

本次GDC大会为大模型领域的企业提供了一个展示技术创新的平台，促进了行业内的技术交流和知识的传播。通过互动展台等形式，大会为公众提供了了解和体验大模型技术的机会，有助于提升公众对大模型技术及其应用的认知。大会的成功举办也反映了中国政府对人工智能和大模型领域的重视和支持，为中国大模型领域与全球市场的接轨提供了平台。