##市面上，度娘，公众号对TvBox直播源都是胡乱的嗮在一起，检测工具也就检测连通性，而且检测较慢，自己搞了下脚本，用的还行，分享
检测过程及结果说明:
[文件越大，相同host越多，越到后面速度越快]
#待检测的tvbox直播源本地文件
/storage/emulated/0/TVBoxx/lives/agit_live.txt
#待保存的新文件
/storage/emulated/0/TVBoxx/lives/agit_live_ttd.txt
#无效地址 直播名称
[无效] CCTV1
#连接速度数据越小，速度越快
0.12CCTV1
# -号无效集合里的host,已检测无需再次检测，以提高速度
[无效] CCTV3 –
# 0.00 有效集合里数据，host已检测无需再次检测，可用
0.00伤感DJ串烧为爱流泪 +
[无效] 津南一套
[无效] 湖南张家界宝峰湖
[无效] 四川峨眉山云海日出 –
#已检测的无效有效host集合:
无效集合√:
[‘117.169.121.162:6610’, ‘115.231.128.81’, ‘115.231.128.80’, ‘yixing-tv-ori-hls.jstv.com’, ‘stream.ysbtv.net’, ‘117.169.124.149:8080’]
有效集合X:
[‘112.45.133.129:90’, ‘pluslive.wrbtv.cn’, ‘118.122.78.172:89’, ‘tv.drs.hhtv.cc:8100’, ‘m3u8.channel.wsrtv.com.cn’, ‘stream10.jlntv.cn’, ‘live.cms.anhuinews.com’, ‘stream.hrbtv.net’,’pili-live-hls.hfmt.net’]
#import 自己看不需要的可以#批注掉#invalids, validslist用于收集检测失败或成功的直播源,已检测的同样的host,不再检测,提高效率!#filename,newfile路径设置，win和linux肯定不一样#newfile将是检测后可用的直播源，后缀_ttd，如需自行修改import time,re,json,requests,randomimport os.pathfrom urllib.parse import urlparsefrom pprint import pprintfrom lxml import etreeimport pandas as pddef get_lives_data(filename):f=open(filename,'r+')r = f.readlines()lives_data = [x.strip() for x in r if x.strip() != '']# lives_data= list(map(lambda x: x.strip(), r))# lives_data=lives_data.remove('')f.close()return lives_data def test_url(newfile,lives_data):# ll是电视直播源的链接列表# ll=['http://........','https://.......']invalids, valids = [], []# 用于检测失败或成功的net,不再检测,提高效率#l=lives_data.index('电影直播,#genre#')with open(newfile, 'a+') as f:#for line in lives_data[:]:for line in lives_data:if line.find(',http') != -1:name = line.split(',http')[0]urls = 'http' + line.split(',http')[-1]if urls.find('#') != -1:hrefs = urls.split('#')else:hrefs = [urls]if len(hrefs) == 1:url_parse = urlparse(hrefs[0]).netloc# print(url_parse,invalids,valids)if url_parse not in invalids:# print('url_parse not in invalids')result = get_parse_href_result(name, hrefs[0], valids, f)invalids = list(set(invalids + result[0]))valids = list(set(valids + result[1]))else:print(f'[无效] {name} -')# print(f'{hrefs[0]}')else:# 包含#content = name + ','for i in range(len(hrefs)):url_parse = urlparse(hrefs[i]).netlocif url_parse not in invalids:result2 = \get_parse_href_result2(name, hrefs[i], valids, f)nvalids = list(set(invalids + result2[0]))valids = list(set(valids + result2[1]))content += result2[2]else:print(f'[无效] {name} -')# print(f'{hrefs[i]}')if content[:-1] != name:f.write(content[:-1] + '\n')else:if line[-7:] == '#genre#':f.write('\n' + line + '\n')else:f.write(line + '\n')f.close()print(f'\n效集合√:\n{invalids}')print(f'\n效集合X:\n{valids}')def local_live_check():filename = '/storage/emulated/0/TVBoxx//公测版/live_local.txt'path = os.path.abspath(filename)print(path)dir, file = os.path.split(path)# dir,file = os.path.split(file_path)# print(dir,file)“# basename=os.path.basename(filename)files = os.path.splitext(file)newfile = os.path.join(dir, files[0] + '_ttd' + files[1])print(newfile)if not os.path.isfile(newfile):f = open(newfile, 'w')f.close()# print(os.path.isfile(newfile))lives_data = get_lives_data(filename)# print(lives_data)test_url(newfile, lives_data)if __name__ == '__main__':local_live_check()本地直播源高效检测是指通过高效的节目检测和扫源机制，每秒钟接近处理100个节目，快速地扫描出全套节目。只要知道某套节目中一个地址，便能快速的扫描出全套节目，无论是检测的…。这种技术可以应用于直播源的检测和筛选，提高直播源的质量和稳定性。在抖音等应用中，也可以通过类似的技术实现原创视频的检测和认定。