第一课:2秒钟内获取50个邮箱【外贸邮件开发客户】

第一课:2秒钟内获取50个邮箱【外贸邮件开发客户】

【引言】

最近有点时间,而且小丸子又逼的紧,所以想着还是写点什么东西吧,比较巧,手上的一个项目快要开发完了(大家可以看之前的一篇:“在默哀魏则西的同时,我们外贸人员在搜索引擎上还有选择吗?”),我们团队针对文章中提到的想法已经进行了实现,近期就会上线,另外我们还围绕这个命题进行了一系列的扩展工具开发,其中最重要的就要“邮箱自动抓取功能”,当然那个功能属于商用功能,需要购置一批额外的硬件设备才能工作。

商用管商用,但本ID实际上今天想在这里给大家上几节课,教学目标基本围绕着“怎样自己开发一个邮箱抓取工具”,尽量做到简单易懂,让大家都能愉快的上手,最主要是不花钱,但考虑到大家毕竟不都是科班出身,而且女生占了我们微信粉丝的大半江山(说到这里了,我们是不是考虑要开发个外贸婚介功能啊,哈哈),所以在方法精细度上删减了很多,以后等大家水平都上去了,我们再慢慢补回来。另外本课程需要各位有一定的动手能力,最起码会照着打字吧,再不行去找个程序GGMM回来。

还有,这里有些建议对于第一次上课的同学,想要最快,最好的完成本节课程,你可以这么做:

1. 很快速的通读一遍这篇文章,如果你确定文章最后展现的那个结果你是想要的,那么做第二步

2. 很慢的细读一遍,读完后脑子里已经对需要做的事情有个明确了解了,也能明白操作顺序是怎么衔接的,然后进入第三步

3. 打开电脑,照着手机的步骤一步步细心的执行,同时心里默念“52wmb52wmb52wmb

【环境搭建】

开发工具选择,我们这里有学程序半路出家的吧,或者大家也多多少少听到过一些程序语言的名字吧,例如C,JAVA(安卓的开发语言),PHP(外贸建站的基本都用这个)等等等等,这些是很好很强大,但我们今天不用,理由是太复杂了,如果本ID今天用上面这些东西来上课,那我们这个微信号就可以改名字了,叫“程序这点事”好了,杀鸡岂能用牛刀,今天要用的是瑞士军刀-PYTHON,其实本来还有一个更好的选择RUBY,但那个东西是小日本搞出来的,本ID只接受日本的两样东西,所以还是算了。下载地址在这里: https://www.python.org/downloads/release/python-2712/,下截图里的这个版本:

下载下来的是这个文件“python-2.7.12.msi”,下不下来的也没关系,文章最后有网盘双击运行,特别注意的是在组件选择的那页需要把一个关闭的选项打开来,别的界面一路next,有黑色弹出窗口也不要关闭,装完自动会关闭,碰到系统弹出问题你“是”或“否”,都选“是”,参照下图安装示意操作:

图一: 点next

图二: 点next

图三:右侧下拉条往下拉,拉到能看到中间红色椭圆的内容显示出来

图四:鼠标点击红色椭圆处,出现下拉菜单

图五:鼠标移到下拉菜单的第二条 Entire feautre will .......... 这行,点击确定

图六:检查中间那个红椭圆是不是已经和上图一致了,点next

图七:点了图六的next后,系统会弹出问你“确定”或“取消”,因为是系统界面,截不了图,记住点“确定”就是了,然后就会出现图七的进度条

图八:结束画面

装完后(就是最后点了Finish),程序自己关闭,然后我们需要运行“命令提示符”,可以直接在开始菜单的“运行”中输入CMD,或者在所有应用里找到下面的这个,再找不到问问同事,总会有人知道的,下面第一个截图是windows10的入口,第二个是windows7的入口:


启动“命令提示符”后,按照下面命令分别输入

pip install requests  (回车,然后等下面第一个图一样的结果出来)

pip install beautifulsoup4  (回车,参照下面第二个图)

另外如果提示你“pip 不是有效的命令”这种文字,重启下电脑再执行命令就好了,这是windows的bug,但不是每一个人都会碰到的:

动手能力强的同学看到黄色字了么,这个是告诉我们要升级版本(不升级也没关系),照着打python -m pip install --upgrade pip 就可以了,女同学可以无视。

恭喜你,到这里本课程的2/3已经上完了,其实上面这些东西倒翻个5年,装什么软件基本都是这样的,只不过现在大家都懒了,也被那些个大软件绑架习惯了,像什么360,QQ之类的,装一个基本就给你自动装一批了,有好也有不好的地方。至此,PYTHON已经正确的安装和配置完成了,可以把显示屏上所有新开出来的窗口都关闭了,就像什么也没发生过一样。同学们也不用看上面这么多截图感到怕怕,其实实际操作起来,也就是3分钟的事情,碰到问题大不了从头来一遍好了,没什么可怕的,重要的是敢于实际操作,我们外贸都搞了,还怕个毛线程序啊,对吧。

【运行第一个脚本】

本节课的剩下部分就是教你运行第一个脚本了,其实这是个奖励关卡,因为我们现在什么都不懂,所以本ID就省掉了教大家一条条命令输入了,只要运行本ID给你们的这个文件就可以马上看到结果---2秒50个邮箱,也算是奖励各位同学顺利完成搭建运行环境这部分。去文章最后的网盘中下载class_1.py这个文件到计算机本地,放哪里无所谓,但记住位置,比如我们现在就把这个文件存到了“桌面“上,然后我们鼠标右键点击这个文件,在弹出的菜单中选择“Edit with IDLE”


然后我们就会看到以下这个界面了,里面充实着很多现在看不懂的语言,不要急,我们现在不需要全看懂,只要知道这就是今天最后我们要运行的这个脚本就可以了,通过运行它,我们可能就会感叹“我TMD的之前累死累活的找邮箱到底是为了什么?”

注意,我们最后还需要修改一点东西才能符合你想要的,很简单的,看到key =u'Ferreyros Saa'这行字了吗,这是本ID随便输入的一家公司名字,你可以换成任何你想搜索的公司名字或者产品关键字,比如我想搜LED,那么这行文字可以变成 key = u'led',想要更多的公司名字或者产品关键字,来www.52wmb.com吧,好了,这就是今天你所需要知道的全部东西了,最后让我们一起来见证奇迹,我们搞了这么久不就是为了这高的一刻吗?(还看到email = u'hotmail.com'这行吗?聪明的你应该想到这是干嘛的,后面有提示)

最后一步,按下键盘的F5快捷键,如果有任何弹出界面问你确定或者取消,老规矩,都点确定!看到了吗?本ID没有骗你们吧,是不是出现了一个新的窗口,里面打印出了很多邮箱啊,看下面结果图(也是今天最后一张图了)

感谢你能耐心看到这里,如果你能在电脑上运行出和本ID一样的界面,我会真的感到很欣慰,因为程序界的明天可能又多了一个天才或者软妹子,当然对于你自己来说,如果今天这些东西可以把你的工作效率提高一倍以上,本ID会非常非常非常的为你开心的。还有,所有完成本课程的同学都在评论里签到一下吧,这样会鼓励更多的同学去实践,去尝试。

【课后作业】

1. 实际抓取的邮箱数并没有到50个(根据关键字不同,数量会不同),如果我想抓1000个怎么办?

2. 为什么抓取的都是hotmail的邮箱,我如果想同时抓gmail和yahoo怎么办?(注意,是同时抓取,如果你想一类一类分开来抓取,只需要修改脚本里的email字段就可以了)

3. 为什么是bing,而不是google,能改吗?

4. 我想直接导出EXCEL,可以吗?

5. 能不能直接就给这些邮箱自动发询盘邮件呢?

这些作业也是我们以后会上课的内容,大家可以先想想,如果能自己动手解决里面的2个问题以上的同学,而又想以后转行做程序的,请务必给本ID留言。

百度网盘: http://pan.baidu.com/s/1mi2d1Ba

第二课:从50个邮箱到1000个:http://yue.52wmb.com/article/1994

第三课:从google抓取邮箱:http://yue.52wmb.com/article/1995


评论
登录 后参与评论
  • 喔吁喔吁
    喔吁喔吁0

    多谢大神关于楼下问题的赐教

    在此再请教一下 如果我想搜索除了gmail, hotmail和yahoo之外的邮箱该怎么改写代码?
    例如我需要搜索出来的邮箱后缀里边包含类似plastic.com(真实的邮箱是@fullplastic.com或者@realplastic.com等等),那么应该用什么样的通用符呢?是 *plastic.com这样吗?

    email = [u'*plasticos.com',u'*plast.com'] 这样写试了试 搜不出来邮箱

    1天前
  • 喔吁喔吁
    喔吁喔吁0

    修改:
    # 搜索关键字
    location = India
    key = u'pvc'

    返回结果:
    Traceback (most recent call last):
    File "G:\emails\class_3.py", line 16, in <module>
    location = India
    NameError: name 'India' is not defined

    请问这怎解解

    3天前
    作者回复

    我的错,之前写错了,应该是在搜索词后加 location:countryname 这种格式,为了弥补我的错,直接上代码,找到第三课脚本中的process_google方法中的 【u'q': u'%s @%s' % (key, e),】 这行,改成这种 【u'q': u'%s location:china @%s' % (key, e),】就可以了,根据自己需要更改china这个值吧

    2天前
  • 喔吁喔吁
    喔吁喔吁0

    根据你的提示 我有个思路 就是比方说我不做的国家只有十个 那我是不是可以这样写 #location:(十个非目标市场)这样搜索返回的结果就只来自目标市场

    3天前
  • 刘大🐑
    刘大🐑0

    环境 勾选在哪呢,总是出现出现的是'pip'不是内部或外部命令,也不是可运行的程序或批处理文件

    4天前
    作者回复

    图五那步

    4天前
  • 刘大🐑
    刘大🐑0

    提示 不是内部或外部命令,也不是可运行的程序或批处理的文件 怎么办?
    安装的时候没有没有在环境那步做勾选,
    我按你说的步骤一步一步选,你说的环境那步的勾选在哪呢?

    4天前
  • 喔吁喔吁
    喔吁喔吁0

    你好 能否提供一个能够自定义筛选邮箱的脚本 比方说我想让抓取的邮箱是来自某个或者某些国家的公司 因为有些市场我们是不做的 根据第三课里边的脚本 会抓取到大量的邮箱 但却不是目标市场的

    在此先谢过

    5天前
    作者回复

    哈哈,有点意思,脚本就不给了,给个思路好了,在搜索词后加入 location:countryname 这种前缀,就可以限定返回的国家了

    4天前
  • 所有的云都跑到我这里🌩
    所有的云都跑到我这里🌩0

    哇,第一遍不成功,第二遍就OK了。觉得自己是个天才少女哈哈哈哈

    1星期前
    作者回复

    为你点个赞

    1星期前
  • 斯麦尔·道格
    斯麦尔·道格0

    Python 2.7.12 (v2.7.12:d33e0cf91556, Jun 27 2016, 15:19:22) [MSC v.1500 32 bit (Intel)] on win32
    Type "copyright", "credits" or "license()" for more information.
    >>>
    =========== RESTART: C:\Users\Administrator\Desktop\class_1(1).py ===========
    >>>


    这又是什么。。。没邮箱呢

    1星期前
    作者回复

    尝试更换关键字,这种情况一般是单次搜索返回的结果比较少(解决办法在第二课),或者网络的问题,需要跟换网络再试。

    1星期前
  • 斯麦尔·道格
    斯麦尔·道格0

    Traceback (most recent call last):
    File "C:\Users\Administrator\Desktop\class_1(1).py", line 9, in <module>
    import requests
    ImportError: No module named requests
    >>>

    这是什么情况啊

    1星期前
    作者回复

    那是没有安装成功requests这个库。。。(怎么和上面那位同学的回答这么像。。。)
    请各位同学务必仔细跟着教程来,一步步,不要急,有问题就停下来问,不要有问题继续往下做。

    1星期前
  • 所有的云都跑到我这里🌩
    所有的云都跑到我这里🌩0

    按了F5之后,出来的是importerror: no module named bs4......我一脸懵逼

    1星期前
    作者回复

    那是没有安装成功beautifulsoup这个库。。。

    1星期前
  • 陈Jack鹏
    陈Jack鹏0

    之前就有这个思路用pythons抓取。。不过我不会这个比编程。。。

    2星期前
    作者回复

    做着做着就会了

    2星期前
  • Mr.Mask
    Mr.Mask0

    我们之前就是全局代理的,之前都是在翻墙的情况下查的关键词,然而早上还没事,下午查到第四个词的时候就变成这样了,请问有可能有搜的太快被封的可能吗

    3星期前
    作者回复

    肯定的,有一个办法可以试试,用浏览器(翻墙的情况下)搜索那个没有结果的关键字,争取触发人工验证,然后再运行程序,如果还是不行只能乖乖等明天了,每天都有默认额度的

    3星期前
  • Mr.Mask
    Mr.Mask0

    什么都不变的情况下,用google和bing搜,bing有很多邮箱反馈出来,google就是这样一个也没有,是不是ip被google封了

    3星期前
    作者回复

    google需要翻墙,设置代理服务器的,这个是硬伤,现在无解,具体看第三课吧

    3星期前
  • Mr.Mask
    Mr.Mask0

    我今天试了一下,一开始是可以的,然后我查了三个词之后,第四个词按了f5之后直接跳出了结束的三个大于号就没了,请问这是什么技术上的问题吗

    3星期前
    作者回复

    只要没有报错,就不是技术问题i,要找找别的问题,比如尝试更换关键词或者邮箱后缀,另外如果排除掉了关键字确实没有返回的问题外,需要去看第二课,加大返回的数量

    3星期前
  • Mr.Mask
    Mr.Mask0

    你好

    3星期前