以采集B站學習區為例,采集地址為:
https://live.bilibili.com/p/eden/area-tags?parentAreaId=11&areaId=372&visit_id=5et73kocyqw0
1.創建任務
按1-7創建任務,如下:
【新建任務】
2.創建表結構
【創建表結構】
當所采集的直播數據時,表結構中視頻內容的字段屬性需勾選“巨型字段”。
3.關聯數據表單
【關聯數據表單】
4.關聯數據表
【新建并關聯數據表】
5.設置視頻采集
6.字段取值
【識別視頻列表】
【視頻字段取值】
以上,即完成了對直播及其播放鏈接的采集配置。
7.自定義采集視頻大小及時長
采集視頻數據時,點擊“采集配置”下的“高級配置”,打開視頻采集設置,根據采集需要,自行設置采集最大限制或視頻時長限制。
勾選視頻并行采集時,則采集過程中可以同步下載多個視頻,提高采集效率。
【視頻采集配置】