通过技术手段，分析油管上的歪果仁都喜欢什么博主
什么是代理ip?
代理IP又称代理服务器(Proxy Server)，形象的讲，代理服务器是网络信息的中转站，它是介于浏览器和Web服务器之间的一台服务器，有了它之后，Request信号会先送到代理服务器，由代理服务器来取回浏览器所需要的信息并传送给你的浏览器。是一种重要的安全功能，它的工作主要在开放系统互联（OSI）模型的对话层，从而起到防火墙的作用。IP是上网需要唯一的身份地址，身份凭证，而代理IP就是我们上网过程中的一个中间平台，是由你的电脑先访问代理IP，之后再由代理IP访问你点开的页面，所以在这个页面的访问记录里留下的是就是代理IP的地址，而不是你的电脑本机IP。 
代理IP可以提高网络速度
你知道吗？那些飞快如闪电的上网速度，还有那个只属于你一个人的代理IP，它们背后的秘密就在于“独享”这两个字。别以为代理IP就是大家一起挤的那条“网红”线路，这个独享的可是VIP通道，只为那些眼光独到、愿意投资的你准备。这样一来，你的上网体验就像坐私人飞机，再也不怕别人抢你的网速了。工作、下载、冲浪，想怎么快就怎么快，其他用户只能眼巴巴地看着你在网络世界里畅游，哈哈，这就是独享代理IP带给你的专属加速乐趣！
代理IP有更高的安全性
使用独享代理 IP 的用户一般都是自己独自使用的一个代理服务器，这无形中就保证了 IP 资源的安全性。
代理IP有更高的可靠性
使用普通代理 IP 上网也许会在我们上网或者下载资料的时候，IP 地址突然被封掉，会导致我们正在做的事情受到非常大的影响，甚至造成一定的损失。不过独享的代理 IP 就完全没有这方面的风险，可以放心的上网。
使用IPIDEA爬油管博主信息
歪果仁平时都看什么视频呢？是否也是鬼畜、动画、美女等等等。出于好奇心，桃花带你们去看一看！本次主要是想爬取相关YouTube博主的各种信息，字段包括：视频标题、视频链接、博主名称、博主链接、国家、telegram链接、whatsapp链接、twitter链接、facebook链接、instagram链接。
准备工作
爬取YouTube博主信息我们首先要准备两点，一是需要访问YouTube网站，二是需要爬取的脚本。
访问YouTube网站的方法有很多，这里我使用动态住宅 IP。动态住宅 IP 是私有 IP 地址。当你发送请求时，该请求会在访问 Web 时 通过真实用户而不是通过数据中心进行。这意味着在请求访问时被阻止的可能性较小并且成功率更高。
爬取网页的脚步我选择用python来写，python 之所以强大，一个重要的原因就是，拿来即用的代码库丰富！其中，访问网页，最好用的就是 requests，没有之一。
使用IPIDEA代理IP
想要使用动态代理IP我们首先要注册一个账号，注册后可以免费试用，测试IP质量，使用起来也更放心。
个人认证
获取代理 ip
此时就生成了你的代理Ip链接，如果你是第一次使用，那么他会提醒你将本机当前Ip加入到白名单，这里直接确认即可。
然后将拿到的链接去浏览器粘贴访问就可以获得我们需要的代理Ip以及端口。
代码实现
当涉及到使用代理IP爬取网页数据时，可以使用Python的requests库和代理IP池来实现
展示部分核心代码：
初始化csv文件：
-
ef init(self):
-
with
open(
f'{self.query}.csv',
'a', newline=
'', encoding=
'utf_8_sig')
as f:
-
writer = csv.writer(f)
-
writer.writerow([
'视频标题',
'视频链接',
'博主名称',
'博主链接',
'国家',
'telegram链接',
'whatsapp链接',
'twitter链接',
'facebook链接',
'instagram链接'])
通过代理ip发送
-
mporrequests
-
-
# 代理IP地址和端口
-
proxy {
-
'http':
'http://127.0.0.1:8888',
-
'https':
'http://127.0.0.1:8888'
-
}
-
-
# 目标博主的URL
-
url =
'tps://example.com/blogger'
-
-
# 发送请求
-
response = quests.get(url, proxies=proxy)
爬博主信息：
-
先解析出链接
-
conct_url_els =elf.browser.find_elements(By.XPATH,
'//*[@id="link-list-container"]/a')
-
for j
in contact_url_els:
-
url = j.get_attribute(
'href')
-
if
"t.me"
in url:
# 电报链接
-
de_url = unquote(url)
-
de_url_dict = parse_qs(urlparse(de_url).query)
-
url = de_url_dict.get(
"q")[
0]
-
telegram_url = url
-
if
"wa.link"
in url
or
"api.whatsapp.com"
in url:
# whatsapp链接
-
de_url = unquote(url)
-
de_url_dict = parse_qs(urlparse(de_url).query)
-
url = de_url_dict.get(
"q")[
0]
-
whatsapp_url = url
-
if
"twitter.com"
in url:
# twitter链接
-
de_url = unquote(url)
-
de_url_dict = parse_qs(urlparse(de_url).query)
-
url = de_url_dict.get(
"q")[
0]
-
twitter_url = url
-
if
"facebook.com"
in url:
# facebook链接
-
de_url = unquote(url)
-
de_url_dict = parse_qs(urlparse(de_url).query)
-
url = de_url_dict.get(
"q")[
0]
-
facebook_url = url
-
if
"instagram.com"
in url:
# instagram链接
-
de_url = unquote(url)
-
de_url_dict = parse_qs(urlparse(de_url).query)
-
url = de_url_dict.get(
"q")[
0]
-
instagram_url = url
爬取YouTube博主信息
如何选择代理IP？
在业务进行之前选择合适的代理IP是一的决策，因为它会直接影响您的在线活动和业务进程是否顺利。代理IP根据不同的特性可以分为多种不同的类型，在确定好需要的代理IP类型后，可以参考以下几个核心因素进行选择：
1. IP质量
IP没有被滥用过或是被第三方网站标记过，纯净度会比较高。择代理IP时，可以通过一些代理检测工具来判断IP的纯净度。高质量的IP可以降低被网站识别的风险，尤其是在进行爬虫、数据采集或其他对纯净度要求较高的网络活动时。
2. 速度和稳定性
代理IP的速度和稳定性直接能够影响到用户的网络体验。在同等的情况下，独享IP的速度和稳定性会比共享IP的更好，业务成功率更高，因此我们要尽量选择独享IP。较慢或不稳定的代理IP会频繁出现连接问题、延迟，甚至造成业务中断，这些都是可以避免的。
3. IP池大小
大型的IP池拥有更多数量的代理IP，为用户提供更多的选择，可用性较高，可以满足多种需求。大型IP池还有助于减轻拥挤和过度使用的问题，避免和其他用户使用的IP冲突。IP池大需要维护的成本会更高，从侧面上也反映了代理服务商的综合实力。
4. 覆盖业务地区
在实际业务中可以根据您的需求选择覆盖特定或国家的代理服务商。选择业务当地的地区IP，能够方便对当地市场进行深入研究与调研，可信度也会更高。
5. 是否高度匿名
某些任务可能需要高度匿名的代理，以确保您实身份和定位得以保护。
6. 可用率
IP池不仅要大，可用率还要高。高可用率的代理I以省去去验证IP可用性的时间成本，减少连接中断的风险，有效提高爬虫等程序的效率和稳定性。
7. 客户支持
寻找提供优质客户支持的代理提供商。当出现问题要帮助时以快速获得支持，避免延误业务进度。
经过多方比较，我找到了一个即满足上述所有核心因素、又性价比很高的产品，也就是我上面用到的代理IP服务商IPIDEA。
IPIDEA代理覆盖全球，并且提供多种代理类型、具有高速稳定的连接、支持多种协议还可以24/7小时得到技术支持。
IPIDEA提供的代理类型
IPIDEA提供多种代理类型，可满足用户的各种不同业务需求，我们来看看IPIDEA提供的几种常用代理：
• 动态住宅代理： IP地址动态分配，由当地真实用户的住宅IP地址组成，可API提取或账密认证获取，支持一次性更换或定时自动切换。适用于数据采集、市场调研、爬虫等需要频繁更换 IP 地址或高匿名性的业务场景，支持全球混拨和无限并发会话。
• 静态住宅代理： 提供个人独享的纯净原生静态住宅，定位精准，IP地址可保持稳定不变，适用于需要长时间保持相同IP地址的场景，如跨境电商、需要长时间登录或IP白名单访问等等。
• 独享数据中心代理： 个人专享的高性能服务器IP，是完全长效的服务器IP，适用于对IP有长时效、运行速度和稳定性有更高要求的业务场景，如跨境电商、在线游戏、高频交易等。
总结
通过爬取YouTube博主信息可以看到歪果仁喜容类型们还是有很大区别，但也有一些重叠。以下是一些可能的区别：
- 娱乐和生活方式：外国人可能更喜欢观看与娱乐和生活相关频，如音乐、舞蹈、旅行、美食、健身等。这些视频可以展示不同文化和生活方式，吸引他们的兴趣。而中国人则可能更喜欢观看搞笑、情感、社会热点等类型的短视频。
- 时尚和美妆：时尚和美妆类短视频在外国也很受欢迎，尤其是年观众。这些视频可以提供时尚搭配、化妆技巧、美容护肤等方面的内容，满足他们对美的追求。而在中国，虽然时尚和美妆类短视频也很受欢迎，但可能更侧重于实用性和性价比。
- 科技和创新：外国人可能更喜欢观看与科技和创新相关的短视频技产品评测、创新发明、科学实验等。这些视频可以满足他们对新技术和知识的兴趣。而在中国，科技类短视频可能更侧重于实用性和娱乐性。
- 社会和文化：外国人可能对中国的传统文化和社会现象感兴趣，些展示中国文化、历史、民俗等方面的短视频可能在外国受到欢迎。而在中国，社会和文化类短视频可能更侧重于社会热点、人文关怀等方面。
- 关于代理IP的应用，还能用于各行各业，例如，可以使用代理IP爬取更多信息、网络测试等操作。通过IPIDEA，我们都能很好的实现我们的需求，无论是从个人用户角度或者是公司企业的角度。