以采集B站学习区为例,采集地址为:
https://live.bilibili.com/p/eden/area-tags?parentAreaId=11&areaId=372&visit_id=5et73kocyqw0
1.创建任务
按1-7创建任务,如下:
【新建任务】
2.创建表结构
【创建表结构】
当所采集的直播数据时,表结构中视频内容的字段属性需勾选“巨型字段”。
3.关联数据表单
【关联数据表单】
4.关联数据表
【新建并关联数据表】
5.设置视频采集
6.字段取值
【识别视频列表】
【视频字段取值】
以上,即完成了对直播及其播放链接的采集配置。
7.自定义采集视频大小及时长
采集视频数据时,点击“采集配置”下的“高级配置”,打开视频采集设置,根据采集需要,自行设置采集最大限制或视频时长限制。
勾选视频并行采集时,则采集过程中可以同步下载多个视频,提高采集效率。
【视频采集配置】