说实话,一开始我压根没想过，Golang能和石家庄vs国安直播视频扯上关系，这事儿还得从上周末说起。
那天下午,我正窝在沙发上刷手机，突然看到有人说“今晚石家庄功夫主场踢北京国安，直播链接在哪找？”我心想，这不就是个普通的中超或者足协杯比赛嘛，但问题是，很多人跟我一样，翻遍了央视频、咪咕、懂球帝，要么卡顿，要么找不到清晰源，我在程序员群里随口抱怨了一句：“要是有个工具能自动抓直播源就好了。”
结果群里一个老哥回我：“你用Golang写个爬虫不就行了？”
我当时一愣——对啊，Golang并发强、性能好，用来抓直播视频流，理论上完全可行，我决定动手试试，顺便把整个过程写下来，这篇文章不是教你写完美代码，而是告诉你，Golang和看球这事儿，到底能碰撞出什么火花。
为什么选Golang？一个球迷程序员的真实想法
先说说我为什么选Golang，你要问我Python行不行，当然也行，但Golang有个好处：编译出来是单个二进制文件，丢到服务器上就能跑，不用装环境，对于我这种懒人，太重要了。
Golang的并发模型——goroutine，天然适合做流媒体抓取，你想啊，一个直播视频源可能有多个备选地址，有的快有的慢，有的会断流，如果用Golang，我可以同时开十几个goroutine去试探不同源，谁先返回就用谁，效率直接拉满。
这个思路后来在抓石家庄vs国安直播视频时，帮了大忙。
第一步：找到直播源在哪（别笑，这是最难的）
你可能会说：“找直播源还不简单？百度一下不就行了？”天真了，现在的直播源藏得一个比一个深，很多网站用的是m3u8格式，也就是把视频切成无数个小片段，用索引文件串起来，你直接打开网页，看到的只是播放器壳子，真正的视频流藏在网络请求里。
我写了个小脚本,用Golang的net/http包模拟浏览器请求，抓取页面里所有可能的m3u8链接，代码大概长这样：
resp, _ := http.Get("某直播网站")
body, _ := ioutil.ReadAll(resp.Body)
// 用正则匹配 .m3u8 结尾的链接
具体网站你得自己找,我这里只是演示思路，你试试跑一下，可能蹦出来十几个链接，但百分之九十是广告或者失效的，这时候，Golang的并发就派上用场了。
我写了一个函数,同时去ping这些链接，能返回200并且内容合法的，才留下，整个过程不到两秒，比我用手点快多了。
第二步：处理m3u8文件，把视频流“拽”下来
找到了m3u8文件，接下来就是解析它，这个文件本质上就是个文本，里面写了每段视频的时长和地址。Golang标准库没有直接解析m3u8的包，但有个第三方库叫go-m3u8，用起来很方便。
我把它集成进来,读取直播源里的所有ts片段（就是视频文件块），然后逐个下载，这里有个坑：直播是实时的，老的片段会不断被新的替换，所以你不能一次性下载所有，得实时拉取最新的。
我的做法是：开一个goroutine循环监听m3u8文件的更新，每三秒拉一次，把新增的ts片段加入下载队列，再开几个worker goroutine负责下载，形成一个小型的生产者-消费者模型，代码跑起来，就好像你一边看直播，一边在后台偷偷录屏。
这里涉及到很多细节,比如HLS协议的时序、缓冲策略，我只是做了个简化版，但已经能跑通了，那天晚上，我成功把石家庄vs国安直播视频的片段存到了本地，虽然画质有点糊，但那种“自己动手丰衣足食”的感觉，真爽。
第三步：播放？其实我更推荐直接转流
有人可能会问：“存成ts片段有什么用？又不能直接看。”
对,所以下一步，我写了个小工具，把下载好的ts片段合并成一个完整的mp4文件。Golang里可以用os包直接合并二进制文件，或者调用ffmpeg，我是懒人，选择了后者——在代码里执行ffmpeg命令，让它帮我做合并和转码。
但说实话,这只是练手，真正看直播，谁愿意等全部下载完再看？所以更好的方案是：用Golang搭一个微型的HTTP服务器，实时把ts片段推送到网页上，这样，你打开浏览器输入localhost:8080，就能看到直播了。
我用net/http包写了个简单的路由，把ts片段流式写入response，前端用video.js或者hls.js接收，整个过程不超过五十行代码，但效果拔群，那个晚上，我躺在沙发上，用自己写的工具看完了下半场，虽然石家庄没赢，但心里特别满足。
一些你可能遇到的问题（我都替你踩过坑了）
说几个常见的问题,免得你走弯路：
-
反爬虫机制：很多直播网站会检测User-Agent或者Referer，你可以在Golang的request里加上这些头，假装自己是Chrome浏览器，我试了，成功率很高。
-
IP限制：有些源会限制同一个IP的请求频率，我的解决办法是：用
sync.WaitGroup控制并发数量，别一下开太多goroutine，温柔一点。 -
链接失效：直播源随时可能失效，尤其是比赛进行中，这时候，Golang的错误处理机制就很重要了，我习惯用
defer和recover来捕获panic，保证程序不会因为一个源挂了就整个崩溃。
下面是我整理的一个简单对比表,看看不同方法的优劣：
| 方法 | 上手难度 | 稳定性 | 延迟 | 可玩性 |
|---|---|---|---|---|
| 直接用网页看 | 低 | 中 | 低 | 低 |
| 用Golang抓m3u8 | 中 | 高 | 中 | 高 |
| 自己转流搭建服务 | 高 | 高 | 低 | 极高 |
看出来了吧？Golang这套方案，虽然门槛高一点点，但稳定性和可玩性远超普通的看球方式。
写在后面：工具终究是工具，球赛才是主角
写了一大堆,其实我想说的是，Golang也好，直播视频也好，技术只是手段，真正让我兴奋的，是那种“我能掌控一切”的感觉，以前看石家庄vs国安直播视频，我只能被动接受平台的安排，源卡了？没办法，等呗，现在不一样了，我可以自己找源、自己处理、自己播放，哪怕结果一样卡，但心态完全不同。
你不一定要像我一样写代码,才知道怎么回事，如果你感兴趣，完全可以下载一个Golang试试，哪怕只是跑通我上面说的最简单的抓取m3u8的脚本，你会发现，编程和看球并不冲突，反而让看球多了一层乐趣。
记得尊重版权,自己玩玩可以，别用来搞商业或者大规模分发，球赛嘛，开心最重要。
本文来自作者[kyadmin]投稿，不代表中国·AC米兰(Milan)体育官方网站-Official Website立场，如若转载，请注明出处：http://www.pi-pa-yq.com/ty/1161.html
评论列表（4条）
我是中国·AC米兰(Milan)体育官方网站-Official Website的签约作者“kyadmin”！
希望本篇文章《用Golang看石家庄vs国安直播？我试了试，结果真有点意思》能对你有所帮助！
本站[中国·AC米兰(Milan)体育官方网站-Official Website]内容主要涵盖：AC米兰,ac米兰官网,AC米兰官网
本文概览：说实话,一开始我压根没想过，Golang能和石家庄vs国安直播视频扯上关系，这事儿还得从上周末说起。那天下午,我正窝在沙发上刷手机，...