数据采集教程
本教程详细介绍如何从资源站点采集视频数据到系统中。
一、添加资源站点
进入「资源站点」页面：
- 点击「添加站点」按钮
- 填写站点名称（便于识别，如"资源站A"）
- 填写采集接口地址（URL），通常是资源站提供的 API 地址
- 选择站点类型（综合/电影/电视剧/综艺/动漫）
- 保存站点信息
二、测试连接
在开始采集之前，建议先点击「测试连接」按钮确认：
- 接口地址是否正确
- 远程服务器是否可访问
- 数据格式是否正常
- 接口返回的视频总数
如果测试连接失败，请检查接口地址是否正确，或联系资源站确认接口是否可用。
三、执行采集
测试通过后，点击「采集」按钮开始数据采集：
- 选择采集类型（当天更新/本周更新/全部）
- 系统开始从资源站拉取数据
- 采集过程中会显示进度和状态
- 采集完成后会显示新增、更新、失败的数量
四、采集配置
在「系统设置」中可配置采集参数：
- 采集超时时间：设置单次请求超时秒数
- 单次采集数量：设置每批拉取的视频条数
- 自动采集间隔：设置定时采集的小时间隔
- 采集过滤：设置关键词过滤规则，自动过滤不需要的内容
五、采集后处理
采集完成后，建议执行以下操作：
- 重复合并：在视频管理中运行重复合并工具，合并不同站点的相同视频
- 图片本地化：将封面图片下载到本服务器，避免图片外链失效
- 失效检测：检测播放地址是否有效，标记失效视频
注意：采集大量数据时（如百万级），建议分批执行，避免服务器负载过高。
