科融科技(北京)有限公司金方悦获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉科融科技(北京)有限公司申请的专利一种互联网大数据提取方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120705380B 。
龙图腾网通过国家知识产权局官网在2025-12-12发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510831388.8,技术领域涉及:G06F16/951;该发明授权一种互联网大数据提取方法是由金方悦;孙炜皓;徐菀鸿;李海鹏;朱娟娟;金明;曹梦孜设计研发完成,并于2025-06-20向国家知识产权局提交的专利申请。
本一种互联网大数据提取方法在说明书摘要公布了:本发明公开了一种互联网大数据提取方法,涉及大数据技术领域,包括以下提取步骤:通过数据采集模块从网站上抓取目标数据,并将目标数据输入至处理模块中;通过处理模块对目标数据进行清洗,以去除标签、广告和无效字符,并将文本数据和图片数据转换为结构化数据,输出数据集DA。本发明具备了能对数据质量进行全面的评估,确保提取出的数据具有较高的可信度和准确性,有助于消除虚假、过时和无效信息对后续分析和决策的影响,提高数据的实用性和价值,并且通过特征提取与优化,本发明能实现对数据特征的深入挖掘和全面提取,有助于提取出更加准确和全面的特征向量,为后续的数据分析和挖掘提供更加丰富的数据基础。
本发明授权一种互联网大数据提取方法在权利要求书中公布了:1.一种互联网大数据提取方法,其特征在于:包括以下提取步骤: 步骤一、通过数据采集模块从网站上抓取目标数据,并将目标数据输入至处理模块中; 步骤二、通过处理模块对目标数据进行清洗,以去除标签、广告和无效字符,并将文本数据和图片数据转换为结构化数据,输出数据集DA; 步骤三、将数据集DA输入至计算模块中,计算模块先对数据集DA计算每条数据的可信度,输出数据可信度CVBDAi,然后根据可信度阈值筛选出可信度高的数据DBi,对DBi进行优化输出优化后的特征向量FGHDBi,然后输出优化后的数据DCi,通过优化后的数据DCi输出数据的综合评估值SDFDCi,根据综合评估值SDFDCi对数据进行排序,选择综合评估值高的数据作为最终提取结果; 步骤四、通过存储模块将最终提取结果进行存储,以便于后续的分析和应用; 所述计算模块包括:数据可信度评估子模块、特征提取子模块和评估分析子模块; 所述数据可信度评估子模块的计算公式如下: ; 其中: CVBDAi指代数据可信度; DAi指代数据集中的第i条数据、n指代数据DAi的属性总数、CAAj指代第j个属性的权重、CABj指代数据DAi的第j个属性值、CABj,max指代属性CABj在整个数据集中的最大值、CACj指代第j个属性的基础可信度、TN指代当前时间、TP指代数据DAi的时间戳、指代数据DAi的总可信度、代时间衰减函数用于考虑数据的时间新鲜度; 所述可信度子模块的处理过程如下:将数据集DA输入至可信度子模块中,根据数据集DA中的第i条数据DAi,以及其包含的属性DAi的第j个属性值CABj,并基于第j个属性的基础可信度CACj输出数据可信度CVBDAi; 根据CVBDAi的值,筛选出可信度高的数据DBi; 所述特征提取子模块的计算公式如下: ; 其中: FGHDBi指代优化后的特征向量; DBi指代由CVBDAi中筛选出的可信度高的数据、FAj指代数据DBi的第j个特征值、CVBDBi指代数据DBi的可信度、m指代数据DBi的特征总数、FAs指代数据DBi所有特征值的平均值、指代对每个特征值进行加权,权重为log1+CVBDBi以强调可信度较高的数据在特征提取中的重要性、指代特征向量的标准差,表示特征值的离散程度、指代对可信度进行归一化处理,以平滑其对特征优化的影响; 所述特征提取子模块的处理过程如下:将可信度高的数据DBi输入至特征提取子模块,并基于数据DBi的可信度CVBDBi和数据DBi的第j个特征值FAj输出优化后的特征向量FGHDBi; 优化后的数据为DCi,也就是DBi经特征提取子模块优化后的数据。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人科融科技(北京)有限公司,其通讯地址为:100144 北京市石景山区八大处路49号院4号楼4层4955;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励