Discuz! Board

标题: 电视猫节目抓取来源 [打印本页]
作者: yang.liu@whaley    时间: 2016-7-28 21:22
标题: 电视猫节目抓取来源
电视剧抓取来源：
序号
内容分类
源站
抓取来源
抓取周期
抓取队列示例
1
全部
baidu
全部列表页节目，另有脚本每天根据baidu id自动抓新节目
http://v.baidu.com/tv/list/order-pubtime+pn-50
列表页1h
详情页2h
http://v.baidu.com/tv/17838.htm?frp=search
2
360
全部列表页节目
http://www.360kan.com/dianshi/li ... amp;rank=createtime
列表页1h
详情页2h
http://www.360kan.com/tv/QbdwbKLXSWPuMn.html
3
youku
全部列表页节目
http://www.youku.com/v_olist/c_97.html（只抓节目的粤语源）
列表页1h
详情页2h
http://www.youku.com/show_page/id_z7ab92e3462ab11e196ac.html_TYPE|tv
4
qq
编辑人工添加
2h
http://v.qq.com/detail/6/65h9msov9d701ul.html_TYPE|tv
5
douban
全站电视剧节目metadata
2周
http://movie.douban.com/subject/4735188/
电影抓取来源：
序号
内容分类
源站
抓取来源
抓取周期
抓取队列示例
1
全部
baidu
全部列表页节目
http://v.baidu.com/movie/list/order-pubtime+pn-1
列表页1h
详情页1个月
http://v.baidu.com/movie/19263.htm?frp=search
2
360
列表页节目前10页
http://www.360kan.com/dianying/l ... amp;rank=createtime
列表页1h
详情页1个月
http://www.360kan.com/m/gqPpYhH1QHTATB.html
3
douban
全站电影节目metadata
2周
http://movie.douban.com/subject/1947549/

综艺抓取来源：
序号
内容分类
源站
抓取来源
抓取周期
抓取队列示例
1
全部
baidu
全部列表页节目，另有脚本每天根据baidu id自动抓新节目
http://v.baidu.com/show/list/order-pubtime+pn-112
列表页1h
详情页2h
http://v.baidu.com/show/12492.htm?frp=search
2
360
全部列表页节目
http://www.360kan.com/zongyi/lis ... amp;rank=createtime
列表页1h
详情页2h
http://www.360kan.com/va/ZcYlcaNw7pg5Dz.html
3
tudou
编辑人工添加节目
2h
http://www.tudou.com/albumcover/3i2H7LhKpdg.html_TYPE|zongyi
4
youku
编辑人工添加节目
2h
http://www.youku.com/show_page/id_z2d041068f30411e4b522.html_TYPE|zongyi
5
iqiyi
编辑人工添加节目
2h
http://www.iqiyi.com/a_19rrgiio5t.html_TYPE|zongyi
6
qq
编辑人工添加节目
2h
http://v.qq.com/cover/p/pwvjc340w7p2en4.html_TYPE|zongyi
http://v.qq.com/vplus/yitiao/foldervideos/bnj000001vt27lt_TYPE|zongyi
7
douban
全站综艺节目metadata
2周
http://movie.douban.com/subject/11520120/







欢迎光临 Discuz! Board (http://123.59.83.120:8080/) Powered by Discuz! X3.2