支付宝申请大模型微调专利:技术与企业概况 探秘支付宝新专利:多阶段大模型微调

本文将为大家介绍支付宝(杭州)信息技术有限公司申请的一项专利,同时也会提及该公司的基本企业情况。

据金融界2025年1月28日的消息,从国家知识产权局的信息来看,支付宝(杭州)信息技术有限公司申请了一个名为“一种分布感知的多阶段大模型微调方法及装置”的专利,其公开号为CN 119358625 A,申请日期是2024年9月。

在这个专利的摘要里提到,本说明书的实施例给出了一种分布感知的多阶段大模型微调方法及装置。要进行微调的大模型包含预训练后的骨干网络和预测层。在微调方法里,首先使用数据集中的样本对大模型开展第一训练,从而得到第一大模型。这里的第一训练具体是指更新大模型中预测层的参数,而不更新大模型中骨干网络的参数。然后,再使用数据集中的样本对大模型进行第二训练,进而得到第二大模型。这里的第二训练包括更新大模型中骨干网络的参数和预测层中的参数。这样一来,就得到了两个经过训练的大模型,接下来就可以在这两个训练后的大模型中的对应参数构成的范围里进行参数取值,最终得到微调后的大模型。需要注意的是,数据集中包含隐私数据,在数据处理过程中必须进行隐私保护。

根据天眼查的资料,支付宝(杭州)信息技术有限公司在2016年成立,公司位于杭州市,主要从事软件和信息技术服务业。该企业的注册资本为10000万人民币,实缴资本是1000万人民币。经过天眼查的大数据分析,支付宝(杭州)信息技术有限公司对外投资了12家企业,参与招投标项目30次,拥有专利信息5000条,除此之外,企业还拥有56个行政许可。

支付宝(杭州)信息技术有限公司申请的大模型微调专利的相关情况,包括专利的训练方法等内容,同时也介绍了该公司的基本企业信息,如注册资本、对外投资、招投标情况等。

原创文章,作者:东海凝丝,如若转载,请注明出处:https://www.gouwuzhinan.com/archives/4272.html

(0)
东海凝丝东海凝丝
上一篇 2025年1月28日
下一篇 2025年1月28日

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注