Brightdata入门-环境搭建&自动化数字营销工具推荐
那么我们在数字营销的过程中有些什么痛点呢?
我大概捋一捋:
1.各类流量媒体的账号不容易管理,特别是facebook账号乃至广告户容易被封锁不能使用,影响广告效率;
2.很难精准获取搜索引擎或者是平台中想要的信息,逐条检索效率低下;
3.小卖家很难配备技术人员,关于数据分析收集等方面比较被动;
4.对于实时动态不能敏感捕捉,不能及时针对性优化;
5......还有很多
那么针对这些痛点,我们要怎么解决呢?
有关于第一个痛点,之前写过一篇相关的Brightdata的配置指南文,让很多人第一次知道了Brightdata,并且解决了社交媒体账号管理中养facebook容易挂号的难题。
但是大部分的人只是照葫芦画瓢,并不懂得其中的原理,遇到问题就解决不了;
另外,他们家也有几样非常适合我们数字营销人去使用的数据收集工具就比较适合解决后面的问题,即使你不懂编程,只要后面跟我认真学,你也能够使用;
由于本身比较复杂,所以我尽量转化为通俗易懂的描述,带领大家真正认识Brightdata,
总之我的坚持的理念就是,透彻理解才能做的更加出色!
今天老规矩,一文到底,详细带你了解你Brightdata强大的功能实用性以及如何帮助我们解决痛点。
目录:
什么是Brightdata?
Brightdata的5大核心服务。
先来了解IP的那些事
Brightdata的代理IP到底是什么?
Brightdata的搜索引擎爬虫是什么?
Brightdata的亮数据解锁器是什么?
Brightdata的代理浏览器扩展是什么?
为什么选择Brightdata来配合我们的数字营销工具?
总结
Brightdata中文经理服务的注册链接:https://brightdata.grsm.io/huayu888
Adspower95折注册链接:https://bit.ly/3EZwdQ5
相关网络环境配置索引:高端养号环境搭建指南-Brightdata+Adspower(第2版)【手把手图解跨境独立站指南】
那么我们就正式进入介绍:
Brightdata是全球领先的代理网络服务商
拥有超过7500万个IP,覆盖195个国家,所有的代理都不限速,100%加速,带宽支持1~50000GB以及无限计划,代理类型多样,满足几乎所有需求;
(图中是Brightdata获得的奖项荣誉)
Brightdata不仅仅只是一个拥有多种类型的代理,
它还在代理IP的基础上构建了数据收集的基础设施,
这样不仅能够利用brightdata搭建高质量的需求环境,还能获取最真实的实时数据以便于数字营销策略的及时优化。
【强大高质量代理IP供应
+
以IP为基础的自动化数据收集生态】
Brightdata一共有5个核心服务,分别是:
代理IP
数据收集器
亮数据解锁、
搜索引擎爬虫
浏览器扩展
今天我会依次尽量以最直白容易理解的表达方式将每种功能的和应用场景讲解清楚,
后续会针对每一个功能单独分享详细的使用和配置指南,大家可以持续关注一波。
ok~
跨境玩家经常会听到ip相关的信息,因为IP对我们来说是极其重要的。
但如果不是专业人士,很少有人明白什么是IP?什么是代理ip?什么是服务器等等、为什么我们需要着重注意网络环境?并且使用代理IP来操作我们的跨境网络项目。
这里我来简单说一说
(站在小白角度描述,专业人士跳过)。
“连接互联网的所有设备都会有一个独一无二的数字,这个数字就是我们的IP地址,具有唯一存在性。IP就像我们的个人身份证,是唯一的关系”
那么IP地址有什么用呢?
IP就类似一张出门的门卡,有了ip地址,我们才能够跟互联网互通,能够访问其他的网站。
简单了解访问网站的过程&为什么我们要使用代理IP来访问网站?
首先如下图1是我们客户端直接通过服务器访问目标网站的路径,
可以看到,非常简单,几乎用户端是直对目标网站,
这就意味着,用户端的真实信息是能够被目标网站随意获取的。
在正常情况下是没有什么问题的
但是如果你访问的是一个钓鱼网站或者有意获取你的信息的网站,那么用户端相当于是直接暴露在外,非常不安全。
这个过程中,用户端的信息包括行为轨迹都是能够被抓取的,只是看对方愿不愿意罢了。
图2是我们使用代理IP后的网络访问路径,
可以看到,当用户端出来后,首先是发送请求到了代理IP服务器,相当于出去的时候是以一个全新的身份“真实用户X”去发送请求给服务器,后面过程大同小异。
在这个过程中,你会发现,目标网站最终能够获取到的只有代理IP的信息,并不能直接抓取到用户端的信息,其实从安全角度来说,
用户端的信息安全能够很大程度得到保护;
并且,我们在实际应用中例如注册、查询、抓取数据等需要多次频繁访问目标网站等等,
那么一些防御高的网站或许会设置访问限制,标记当前访问ip不允许进入等等,如果这个时候你使用的是用户端IP,一旦被封锁,相当于整条线路都废了,需要重新换;
如果我们用的代理IP,就会非常灵活,直接更换即可。
我要先讲解IP的问题,是为什么呢?大家可以想想。
我们在数字营销中,Facebook是不是我们需要经常访问的网站?
So,我们用户端访问目标网站(facebook)的流程是一样的,
当我们发送请求后,facebook收到请求就会开始审核用户端的信息,如果用户端的IP是垃圾IP(已被标记、被多人使用、有过投放黑历史、已关小黑屋等等IP),
那么facebook就会判断你的登录请求存在异常有可能是盗号、营销号之类的不良用户,大概率会禁止登录或者说账号登录之后直接跳验证封号。
另外,你在facebook中的行为也是一直被监控的,
登录状态中,你频繁的发送营销类信息,刷屏、加好友等等或者是有一些异常的营销举动被检测到或者是广告被举报过多,同样封号拒登跳验证。
如果到了这一步,你仍然使用这个被标记的IP,那么你登录100个账号都会全部挂掉。
记得我刚刚说的一个点吗?只要这条线连通,你在其中做的所有事情都有可能被发现,
简单理解,当我们登录facebook的状态,如果在同一个ip下去做其他事情,其实都有可能被facebook抓取到行为。
这就不难理解为什么近期用谷歌多开vps养号的方式基本上死的惨绝人寰,因为你除了登录账号,还在用电脑做其他的事情,我们的账号都是外国佬,结果我们全是中文行为,时不时vps还不稳定被检测出本地IP,你说facebook不封你封谁呢??
众所周知,IP是唯一存在的,我们每个人的家里,或者上班公司里也就那么几条而已,如果全部被facebook标记,你用什么去登录?更别说投放广告了。
虚拟机多开配合,或者是远程电脑登录也是比较常见的方法,如果ip选的可以,那还是可以用用的。
现在我们是如何Facebook养号和投放广告呢?
方法很多,但是经过测试,我目前使用的是代理IP并且借助防隔离多开浏览器,例如Adspower(注册链接:https://bit.ly/3EZwdQ5),这样就能够在一台电脑上同时打开无数个账号,且相互隔离不会关联,
优势在于:
1.代理ip灵活性大,我想要几个要几个,挂了直接删除重新开,简单粗暴;
2.浏览器多开系统,减少设备成本提高效率,防隔离功能减小账号间关联性;
所以在长期的测试中,我们的账号乃至广告账户、bm的存活时间都增加了很多(当然也和品有关,你跑违规,挂就是早晚的事。)
本章节就是简单讲解下ip相关内容,有关于facebook账号管理以及facebook养号环境相关的详细教程请看:
具体手把手step by step配置教程请看《高端养号环境搭建指南-Brightdata+Adspower(第2版)【手把手图解跨境独立站指南】》
。
Brightdata中文经理对接的注册渠道:https://brightdata.grsm.io/huayu888
有关于IP我们需要了解的信息就暂时是这些,大概明白IP,以及代理IP的重要性后,我将带你们开始了解Brightdata的4种功能不同的代理IP:
数据中心
静态住宅
动态住宅
静态移动
每一种都有不同的功能针对性,我接下来逐一讲解:
首先我们要了解的2个知识点是:
什么是住宅IP?
就是国外居民楼、办公室、公寓这种类型网线所对应的IP,
他具有真实、固定、活跃的优点,
那么在目标网站监测我们的时候,就会直接判定我们是一个国外某个居民楼里的真实用户,而不是随便一监控结果是个机房ip或者faker。
Brightdata如何获取这些优质的住宅IP的呢?
他们通过合法的方式,让用户同意在闲余时段,将自己的住宅IP分享出来,同时服务商也会提供相应的一些报酬之类的,
这些IP使用过后会进入一段时间的静默期,不会直接轮转供给下面的用户,所以不需要担心IP的不合规性和滥用性;
Brightdata中文经理对接的注册渠道:https://brightdata.grsm.io/huayu888
接下来,我来详细讲解下几种代理IP之间的区别和适合的应用场景
1.【数据中心IP】
数据中心IP是机房IP,
是指大量IP被分配到一台服务器,通过该服务器路由流量,因为数据中心IP通常含有上万个IP地址,所以惯常会说IP池。
需要指出的是,这是静态IP。
主要优点:
这种IP是需要长期固定IP地址使用者首选,比如商业账户管理。
经济实惠,相对于真人住宅IP,这种IP非常便宜。
通过和目标站点位置对应的数据中心IP发送的请求可以更快地到达目标网站。
主要缺点:
数据中心IP更适用于防范不是特别高的网站,对那些防范特别严密的网站,这种IP可能容易被屏蔽。
这种IP因为其特性(非真人住宅IP),更容易被“侦察”到。
这种IP可以分为共享和专享两种,如果选择共享IP池,可能会遭遇有些IP有“不良”收集记录而极容易被屏蔽。当然,选择使用独享IP则可以避免这种情况。
主要使用场景:
常规来说,数据中心代理适用于所有的网络代理使用场景,从电子商务、网络数据提取、旅行信息、品牌保护到公共数据收集等。
如果目标网站不是高度防范,且没有相关反爬取设置以“扫描”类似人类行为机制,集合到经济实惠这一点,数据中心IP是非常好的选择。
使用亮数据的数据中心IP,你可以精确定位覆盖全球95个国家/地区的静态固定IP, 可以长期甚至终身使用。
2.【ISP静态住宅】
是brightdata的优势资源,这种合法获取自国外住宅公寓中的真人IP地址,
具有很强的真实性固定稳定,
且在放弃使用后,IP会进入一定时间的静默期,不会被快速复用,所以非常适合我们的账号养护,投放广告等需要极度干净网络环境的项目。
主要优点:
● 静态住宅IP包含数据中心IP的所有优点:快速,经济实惠,特别适用于固定IP需求。
● 除了数据中心的优点,另外一个特别的优点,这种IP是以真人显示,目标网站屏蔽你的可能性非常小。你能通过这种IP享受很多好处:从用户的角度查看内容,执行广告验证等。
● 选择购买专属/私有的静态真人住宅IP,使用在特定的域,而不用担心其它人在相同的目标站点使用同一IP,这可以极大提高成功率并消除潜在的可能障碍。
主要缺点:
● 静态真人住宅IP因其是静态的不是轮动的,所以,在有些轮动IP能发挥更好的使用场景种,这种真人住宅IP会失去其优势。
● 在更适合移动手机代理网络的使用场景中,这种IP的优势也不明显。
使用场景:
跨国零售:在社交媒体、分类电子商务网站、电子商务平台上创建和管理账户。
网页数据提取:使用指定的国家/城市的真人静态住宅IP来收集有关价格、客户反馈、行业趋势和社交媒体等信息。
投资:收集可靠的股票和市场数据,以支持明智的投资决策。
另外,你还可以验证贷方、债权人并对其进行深入背景调查,以便你能更有信心地进行投资
【静态住宅IP是我们养Facebook账号最佳的选择!】
详细facebook环境配置教程请点击:《高端养号环境搭建指南-Brightdata+Adspower(第2版)【手把手图解跨境独立站指南】》
Brightdata中文经理对接的注册渠道:https://brightdata.grsm.io/huayu888
3.【动态住宅】
同样也是国外住宅的真人IP地址,但是不同于静态住宅,动态住宅ip可以通过请求随时变换,比较适合爬行复杂的目标网站,通过不断切换住宅动态,可连续获取目标网站的真实数据。
主要优点:
● 能进入防范极高的网站。
● 能模拟完全真人使用场景,爬取网页,查看信息,收集数据等。
同时并发请求,让数据收集变得非常快捷。
(下面这张图非常形象地描述了这种优点:发送数据请求就像排队等候啤酒的人,左边的运作缓慢低效,因为每次只能发送一个请求,右边运作快速高效,因为每次可以并发多个请求。)
使用场景
广告验证:验证你投放的广告位置、是否合规、广告效果(广告支出回报率ROAS),验证反向链接、联盟链接、重定向广告以及语言是否正确使用等。
旅游情报:帮助在线旅行社 (OTA)、航空公司和旅游企业收集实时数据,使他们能够制定动态的竞争定价策略,了解当前和未来的消费者情绪和需求,并开展以旅游为中心的交叉销售和追加销售。
品牌保护:公司监控和识别并阻止对其品牌知识产权的恶意侵犯,也使品牌能够轻松跟踪盗版、商标抢注和品牌利用。
4.【移动数据】
涵盖各国主要移动运营商的大型蜂窝网络,是由真实的3G/4G手机IP网络组成,覆盖全球国家和城市。这种代理网络IP无法被目标网站“侦察”到,在需要通过手机收集和验证信息时极为有效。
主要优点:
● 能够在你的电脑桌面上查看手机应用程序、广告以及其它手机环境下的任何运作,且能保证像真人手机用户那样获得准确信息。
● 通过移动手机代理网络IP的操作极难“追踪”到,也极难被检测到,绝对安全。
主要缺点:
● 唯一的缺点就是贵,不过就像汽车里的保时捷一样,它虽然贵,但是却好用极了。
主要使用场景
使用ASN甚至精准定位到运行商的以下活动:在电脑上进行蜂窝广告验证;移动应用程序用户体验验证;应用程序质量保证;跟踪直销活动和应用促销。
以上就是4种代理IP的不同和使用场景以及他们优缺点的分析总结,我们目前日常用到的一般就是静态住宅IP,非常适用于我们facebook养号,感兴趣的可以试一试。
Brightdata中文经理对接的注册渠道:https://brightdata.grsm.io/huayu888
那么接下来,我主要介绍的是Brightdata的其他功能性产品:
这个主要是通过使用代理IP以真实用户的身份,在任何搜索引擎上,以不同地点、不同身份、不同语言去发送真实请求以获取真实的所需关键字的搜索结果。
从关键字研究、结果排名、品牌保护、广告情报、市场研究,到版权侵权检测以及价格比较,支持在Google,Yahoo和bing上使用。
搜索引擎爬虫专为从搜索引擎上获取数据而生,我们可以使用它以真人用户的身份在主流搜索引擎上针对关键词进行一个全面的数据抓取,3秒之内得到结果。
数据包括:网页、图片、地图、视频、酒店信息等等。能够让我们实时获取最新数据,并且进行真实客观地判断和制定新的策略。可
能讲的比较深奥,我举个例子。
举例:例如一家覆盖全球的线上美妆店想要了解跟踪店铺在全球不同地区的排名,那么这个时候就能通过搜索相关关键词例如产品种类、产品名称等等来获取信息,这些数据信息能够帮助他们了解行业现状,并且针对结果去优化提升在搜索引擎上的表现。
详细的搜索引擎爬虫的配置和使用指南我会在接下来的文章中发布分享。
主要是以自动化的方式实时收集目标网站的真实数据,自定义收集模板或者使用现有的数据收集模板进行数据获取。可以按需定制。
我们可以用数据收集器来对社交媒体网站、电商平台、旅行服务等进行针对性的数据收集,同时brightdata也制作了不少的模板供我们选择。
模板的样式很多,搜索途径可以分为域名和使用场景,
可以看到里面确实包含了不少的现成模板,我们只需要点击想要收集的选项,并且按照指示去操作,最后的结果可以以表格或者json的方式导出
如果觉得还是难以理解,
那么举个例子,比如我们想要在ins上进行一系列的post的追踪分析,我们在数据收集器中将目标post的链接放入,
点击开始,数据收集器就以极快的速度开始批量收集目标post中我们想要了解的信息,
如下图所示:(可以看到自定义的收集了post的地址,媒体存放地址,post的文字内容,点赞数,评论数量等等)
然后等待收集结束后,我们可以以表格的方式导出,
这个时候你就能批量且直观的去分析这一批目标post的各项数据指标,比较高效率的做进一步的优化或者选择。
另外像旅游酒店报价、评论等等,都能够一键快速获取,筛选目标。
这个功能需要有一定的技术才能使用,主要是针对某些已屏蔽信息的网站,可以100%对其进行解锁以获取其真实的网站内容。
大多用于例如品牌要在全球保护自己的知识产权,就需要不断地访问相关的一些站点定期检查
但是有些网站网站会针对性设置屏蔽锁定该公司相关ip的审查,那这个时候就可以使用解锁器进行解锁,并且使用检查其真实的内容。
Brightdata的亮数据解锁器,特点是“全自动”,使用者无需任何经验,只需轻点发送请求,就可以获得目标网站上的准确数据。
● IP轮换
● 请求重试
● 请求标头
● 浏览器用户代理
● 防指纹处理
同时我们也能对比以下Brightdata的解锁器以及自建之间的差距
可以看到Brightdata的性能方面确实是不错的。
我们在chrome浏览器中安装代理插件后,进入目标网站页面,打开选择我们提前创建好的zone,那么我们当下浏览器的ip所在位置就会变成zone所对应的IP,我们以对应IP所在环境进行访问目标站点,并且选取目标网站中需要采集的元素,那么brightdata的插件就会开始自动化批量抓取信息。
比如产品名称、图片、价格、关键词等等
这五大功能主要都是跟代理IP相关的业务,我们根据我们的业务需求进行选择即可,那么以上就是Brightdata的5个核心产品的详细介绍
接下来我就说说为什么要选择Brightdata?
静态住宅IP有利于facebook养号,和adspower配合后,封号率有明显下降;
可以借助Brightdata数据收集器针对性对对标网站/品牌进行快速收集分析,能够提高很多效率;
搜索引擎优化能够借助自动化的搜索引擎爬虫实时拉去数据后,及时分析,制定新的计划,减少信息的滞后;
有超过7200万IP可供选择;
24/7客户支持;
他们一直被公认为拥有行业中最好的代理;
可以利用他们的大型跨功能性代理池来可靠地集成和旋转代理
对数字营销方面,通过自动化的手段能够大大降低人工和时间成本,提高营销效率;
等等还有很难躲理由,这里就不一一列举。
Brightdata中文经理服务的注册链接:https://brightdata.grsm.io/huayu888
Adspower95折注册链接:https://bit.ly/3EZwdQ5
相关网络环境配置索引:高端养号环境搭建指南-Brightdata+Adspower(第2版)【手把手图解跨境独立站指南】
其实分享了那么多,今天主要是将brightdata的 重要业务部分进行了详细的讲解和分析,我认为一个合格的数字营销人,应该善于实践测试,并且运用各种工具来帮助自己提高营销效率。