V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
baiman521
V2EX  ›  Python

Python 爬虫工程师前景如何?工作流程?

  •  
  •   baiman521 · 2018-09-10 17:04:39 +08:00 · 3748 次点击
    这是一个创建于 2301 天前的主题,其中的信息可能已经有所发展或是发生改变。

    小弟不才,python 后端的工作没能找到,准备补一下 python 爬虫的技术入行爬虫,看了下爬虫工程师的薪资还挺高的,而且大部分都是用的 python , 很纳闷区区一个爬虫薪资怎么能这么高呢? 没做过爬虫这行,不知道爬虫这行做久了前景怎么样? 有没有有相关工作经验的大佬能出面解答一下啊 感激不尽!!!

    ClutchBear
        1
    ClutchBear  
       2018-09-10 17:40:38 +08:00
    1: 我主要是 python 写爬虫, 但是工资不高.
    2: 工作的话, 说最新的吧, 因为风投公司要求, 周六 周日加班两天根据 itchat 写了一个微信机器人的 demo, 用自己网站 api 把所需的数据提供给要求的人.
    huaerxiela
        2
    huaerxiela  
       2018-09-10 20:01:15 +08:00
    从区区一个爬虫看出来你踩的坑还比较少
    baiman521
        3
    baiman521  
    OP
       2018-09-10 20:11:51 +08:00
    @huaerxiela 我做的都是比较简单的爬虫 最顶天的就是用 scrapy 分布式爬虫 ..
    huaerxiela
        4
    huaerxiela  
       2018-09-10 20:17:56 +08:00
    @baiman521 web 端爬虫瓶颈是 js 反爬,app 端就要掌握点 app 逆向的知识了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2771 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 12:49 · PVG 20:49 · LAX 04:49 · JFK 07:49
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.