V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
faceair
V2EX  ›  分享创造

根据v2ex上1200个招聘帖统计的招聘地区和程序语言相关信息

  •  
  •   faceair ·
    faceair · 2013-11-07 15:54:29 +08:00 · 4774 次点击
    这是一个创建于 4063 天前的主题,其中的信息可能已经有所发展或是发生改变。
    最近在学python,没事写了个小爬虫来统计了下招聘贴的消息。
    共统计了招聘贴前60页,约最近200天,共1200个主题。
    代码:

    只取了标题,所以有些招聘信息不在标题的没有统计进来。
    标题经过哑巴分词再计入数据库,后面的数字为在标题中出现的次数。

    地名根据搜狗全国地名词库统计。

    工作地区不完全排行榜:
    1.北京 304 + 帝都 21 = 325
    2.上海 220
    3.杭州 85
    4.深圳 79
    5.广州 51
    6.成都 29
    7.武汉 19
    8.南京 16
    9.苏州 8
    10.长沙 7
    11.珠海 5
    12.西安 4

    技术名词都是我手动查找的,可能不全,但大致就这样了。

    技术名词不完全排行榜:
    1.前端 165 + 前端开发 52 = 217
    2.php 151 + PHPer 11 = 162
    3.android 145
    4.ios 144
    5.web 104
    6.python 94
    7.java 72
    8.UI 69
    9.c++ 23
    10.测试 20
    11.Linux 19
    12.Ruby 18
    13.后端 15
    14.Node.js 14
    15.DBA 10
    16.Javascript 9
    17.html5 9


    可以看到一般公司集中在北京上海,再就是明显前端需求旺盛啊。。
    26 条回复    2014-07-13 13:02:41 +08:00
    Livid
        1
    Livid  
    MOD
       2013-11-07 16:00:01 +08:00
    V2EX 的分享创造节点最欢迎这样的主题 :-)
    family
        2
    family  
       2013-11-07 16:00:54 +08:00
    必火?
    shiny
        3
    shiny  
       2013-11-07 16:04:48 +08:00
    bot 抓主题太频繁不会被 v2ex 封 ip 吗?
    faceair
        4
    faceair  
    OP
       2013-11-07 16:07:05 +08:00   ❤️ 1
    @shiny 刚开始抓的时候确实被封了几分钟,后来time.sleep(3)就好了。分词插入数据库还占一段时间,所以抓取实际间隔7。8秒左右吧
    romoo
        5
    romoo  
       2013-11-07 16:07:44 +08:00
    好多前端。
    ChiangDi
        6
    ChiangDi  
       2013-11-07 16:09:31 +08:00 via Android
    哈哈,壮哉我大杭州
    shadowind
        7
    shadowind  
       2013-11-07 16:14:48 +08:00
    看了这个帖子,觉得更应该学习下前端和PHP了。
    SErHo
        8
    SErHo  
       2013-11-07 16:18:03 +08:00   ❤️ 2
    结巴分词,不是哑巴。。。
    zorceta
        9
    zorceta  
       2013-11-07 16:20:52 +08:00 via Android
    直接mc不行么 看着MySQL好不习惯
    cctvsmg
        10
    cctvsmg  
       2013-11-07 16:22:24 +08:00
    @SErHo 莫名其妙戳中笑点
    faceair
        11
    faceair  
    OP
       2013-11-07 16:30:57 +08:00
    @SErHo
    @cctvsmg 哈哈哈,不要在意这些细节啦~~
    wxstorm
        12
    wxstorm  
       2013-11-07 16:33:57 +08:00
    @SErHo 哈哈哈~
    subpo
        13
    subpo  
       2013-11-07 16:40:05 +08:00
    这数据可以证明好多东西
    justff
        14
    justff  
       2013-11-08 02:28:49 +08:00 via iPhone
    运维 呢
    faceair
        15
    faceair  
    OP
       2013-11-08 06:15:09 +08:00
    @justff 运维 12,人工查找难免遗漏
    hewwcn
        16
    hewwcn  
       2013-11-08 11:46:37 +08:00
    前端比较多有部分原因还是跟社区有关系吧。V2比较偏前端。
    Sherlockhlt
        17
    Sherlockhlt  
       2013-11-08 15:41:26 +08:00
    突然才发现v2ex可以发代码
    faceair
        18
    faceair  
    OP
       2013-11-08 17:33:39 +08:00
    @Sherlockhlt 贴的gist.github.com的链接自动转换的
    mengyang
        19
    mengyang  
       2013-11-09 15:13:54 +08:00
    哭了,招运维的真是少啊。。
    weakish
        20
    weakish  
       2013-11-09 20:46:45 +08:00
    @mengyang Ruby也纔18……
    weakish
        21
    weakish  
       2013-11-09 20:48:02 +08:00
    @faceair 可以把抓取的數據公佈出來麼? 這樣大家可以自行統計自己感興趣的內容。
    faceair
        22
    faceair  
    OP
       2013-11-09 20:50:19 +08:00
    @weakish 数据统计完就删了。。代码都在,自己跑一遍就出来了
    seeker
        23
    seeker  
       2013-11-09 22:02:51 +08:00 via Android
    求饼图
    DeeCheung
        24
    DeeCheung  
       2013-11-10 23:40:31 +08:00
    -.- 正考虑过了年之后要不要去帝都搞前端。最近 V2EX 招聘都很给力。是时候挪窝了。
    llhh
        25
    llhh  
       2013-11-12 07:52:36 +08:00 via Android
    不错的东东,直观
    isaced
        26
    isaced  
       2014-07-13 13:02:41 +08:00
    厉害!
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   946 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 19:26 · PVG 03:26 · LAX 11:26 · JFK 14:26
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.