首页 > 实时讯息 >
DeepSeek公布广度数据采集方法相关专利，有益于提高数据质量及下载效率
0次浏览 发布时间：2025-04-02 11:03:00企查查APP显示，近日，DeepSeek关联公司杭州深度求索人工智能基础技术研究有限公司申请的“一种广度数据采集的方法及其系统”专利公布。
专利摘要显示，本发明涉及数据采集领域，包括建立网页元信息库；确定每日调度单元下载配额及当日下载总额度；从网页元信息库中选取相应数量的链接，分配下载额度；下载过程控制；下载文本进行后处理及数据清洗后进入回灌队列，通过信息回灌实现网页元信息库更新。本发明的有益效果在于：发现尽可能多的网页链接，并减少对网站的流量冲击；对已经下载的内容进行分析，对未下载的连接进行质量推断，通过择优下载分配额度的方式，减少低质量网页下载和重复下载，提高数据质量及下载效率，减少在数据采集过程中网络资源的消耗；采用单独的信息回灌队列，保证网页元信息库修改操作的原子性和稳定性。
（企查查）
相关文章
- 晋中市市场监管局积极开展医疗器械监督抽检工作 04-21
- 至千哩科技取得基于 uIP 的芯片测试系统和测试方法专利 04-19
- 推动产品质量升级 业界聚焦检验检测设备自主可控 04-17
- 奇艺世纪取得字符串字面量的处理方法等专利 04-08
- 丽清电子取得双色导光透镜结构专利，大大减少了车灯空间 04-05
- 中国汽车市场快速回暖，广汽汽车销量环比增长七成 04-05
- 宁德时代申请电池SOC调控专利，可延缓电池膨胀力老化 04-04
- 西北工业集团申请一种用于切割注塑弹体断裂槽的装置专利，有效控制切口深度统一性 04-04
