sagagas

问问各位调参工程师的状况

  •  
  •   sagagas · Mar 30, 2020 · 9496 views
    This topic created in 2410 days ago, the information mentioned may be changed or developed.
    被某条拒了,有点失落,面试印象最深的是问我有什么模型优化的工作经验没有,当场懵圈,我特么就是个调参工程师啊。虽然平时也会看看 paper,但工作中真的很少会去改模型结构,遑论从 0 创造一个模型出来,都是用成熟的模型开箱即用。不知道各位调参工程师平时工作都是咋样的?难道都在手撸模型?
    90 replies  •  2020-03-31 19:55:26 +08:00
    xuzhzzz
    xuzhzzz
    Mar 30, 2020
    1
    不知道,我是低端 yaml 工程师
    ty89
    ty89
    Mar 30, 2020
    2
    不知道,我是低端 webpack 工程师
    after1990s
    after1990s
    Mar 30, 2020 via Android
    3
    不知道,我是远古 mfc 工程师
    kkkkkrua
    kkkkkrua
    Mar 30, 2020
    4
    不知道,我是低端 crud boy
    nnqijiu
    nnqijiu
    Mar 30, 2020
    5
    数据清洗及 ppt 制作
    klh
    klh
    Mar 30, 2020 via Android
    6
    不知道,我是低端网管
    masker0817
    masker0817
    Mar 30, 2020 via Android
    7
    不知道,我是大龄失业人员
    hirasawayui
    hirasawayui
    Mar 30, 2020
    8
    不知道,我是低端切图仔,还是不会兼容 ie 的那种
    DonnyChao
    DonnyChao
    Mar 30, 2020 via Android
    9
    低端运维维路过....
    ezrealinxh
    ezrealinxh
    Mar 30, 2020
    10
    不知道, 我是垃圾移动 App 开发
    lbunderway
    lbunderway
    Mar 30, 2020
    11
    不知道,我是天天摸鱼工程师
    miscnote
    miscnote
    Mar 30, 2020
    12
    不知道,今天外卖送了 8 单了。
    IsaacYoung
    IsaacYoung
    Mar 30, 2020
    13
    不知道,我是切图仔
    Pho3nix
    Pho3nix
    Mar 30, 2020
    14
    数据清洗及 ppt 制作及瞎 jb 调
    dilu
    dilu
    Mar 30, 2020
    15
    不知道 我是个厨师
    Woodywuuu
    Woodywuuu
    Mar 30, 2020
    16
    不知道,我是铁牌僵尸
    pompeii
    pompeii
    Mar 30, 2020
    17
    不知道,我是 cv 机器人
    LaCroqueta12
    LaCroqueta12
    Mar 30, 2020
    18
    模型优化也不一定非要去改模型结构吧,参数有哪些优化思路、经验、坑,都可以谈谈吧,要不就扯些贝叶斯之类的。
    backfrw
    backfrw
    Mar 30, 2020
    19
    不知道,我是 java 半路物联网工程师
    zhiguang
    zhiguang
    Mar 30, 2020
    20
    不知道,我是个码农
    rainfallmax
    rainfallmax
    Mar 30, 2020❤️3
    21
    不知道,我只是个连连看工程师( LabVIEW )
    ansenJ
    ansenJ
    Mar 30, 2020
    22
    不知道 我只是个切图仔
    cassyfar
    cassyfar
    Mar 30, 2020
    23
    不知道,我只是个管道工
    spicecch
    spicecch
    Mar 30, 2020
    24
    不知道,我只是个拍黄片的靓仔
    leewi9coder
    leewi9coder
    Mar 30, 2020 via iPhone
    25
    不知道,我只会面向 google 编程
    ningbo2018
    ningbo2018
    Mar 30, 2020 via iPhone
    26
    不知道,我只是个 outlook 工程师
    hillwall
    hillwall
    Mar 30, 2020
    27
    不知道 我只是个 CV 工人
    crackhopper
    crackhopper
    Mar 30, 2020❤️4
    28
    听你这个像是 DL 的调参。说起来很多 paper 上讲的那些 story,差不多就是你需要回答的。可以结合实际项目来。我做的是普通 ML 的分析,最多工作量就是数据清洗,分析相关性,提取一些处理不好的 case 。调性能主要就是做特征,分析各种 case 。超参一般就 grid search 一下,不太像 DL 玄学调参。

    针对你的问题,模型优化主要就是:1. 做数据,增强,清洗异常值等等; 2. 做特征,结合业务背景; 3. 讲一些 DL 常见 trick,优化过程里的梯度问题:BN 、ReLU 、跨层连接,局部化先验:conv,压缩:1x1 conv 也叫 matrix factorization,注意力机制的 trick ;结合业务可以讲一些优化,比如图像分割网络里面的连接方式就是为了 local+global 信息兼顾之类的,这些点都是可以谈的优化点; 4. 速度上和模型精简上也有很多优化可以谈,不过这个不是调参工程师的范畴,但基本的还是要知道的吧,quantilize 等等的; 5. 超参选择上还可以扯点 meta-learning 等等各种手段。6. 训练过程中的 lr 设定,pre-stop,诊断网络训练情况的手段和工具之类的。我觉得还挺能说一大堆的。虽然我不做 DL 。
    crackhopper
    crackhopper
    Mar 30, 2020
    29
    模型结构创新,应该不是对方问你的重点。毕竟,很多想出来的结构脱离数据和业务,根本就不 work 。
    WFDAK
    WFDAK
    Mar 30, 2020
    30
    不知道,我只是个互联网失业人员
    noparking188
    noparking188
    Mar 30, 2020
    31
    @nnqijiu 清洗数据,没有 ppt 制作
    choudidi
    choudidi
    Mar 30, 2020
    32
    不知道,我是天天摸鱼工程师
    p2pCoder
    p2pCoder
    Mar 30, 2020❤️1
    33
    能调参就不错了,大部分人都在做 数据 特征
    只有三分之一的人拥有调参的权利
    一般来说,都是用的大佬撸的一两套模型,在这个基础上修改,开发特征,调整网络当然我是个推荐引擎开发,对此认知有限
    tingyunsay
    tingyunsay
    Mar 30, 2020
    34
    不知道,我之前是个批发水果的
    maomao1996
    maomao1996
    Mar 30, 2020
    35
    不知道,我只是个养猪的
    fourierlove
    fourierlove
    Mar 30, 2020 via Android
    36
    不知道,我是 log 收集者
    chiu
    chiu
    Mar 30, 2020 via Android
    37
    不知道,我是低端 IO R/W 工程师
    bwipoa
    bwipoa
    Mar 30, 2020
    38
    不知道,我是低端 调包侠
    xwbz2018
    xwbz2018
    Mar 30, 2020 via Android
    39
    不知道,我是入门电脑操作员
    Ncanback
    Ncanback
    Mar 30, 2020
    40
    不知道,我是键盘侠
    wangxiaoaer
    wangxiaoaer
    Mar 30, 2020 via Android❤️8
    41
    不知道,我今天换了三个姿势冲。
    xe2vherd
    xe2vherd
    Mar 30, 2020
    42
    不知道,我即将从某条离职了。
    easing
    easing
    Mar 30, 2020
    43
    不知道,我就是个铲屎的
    tmachineff
    tmachineff
    Mar 30, 2020 via Android
    44
    不知道,失业四个月了
    sagagas
    sagagas
    OP
    Mar 30, 2020
    45
    @crackhopper 嗯嗯,就是在面试官问了以上所有问题之后,再来了一句有没有模型优化方面的工作我才懵圈的。回答了什么是 l1/l2,回答了各种 normalization,介绍了用了啥 optimizer,倒是没细到 meta-learning 之类的。然后我懵圈了之后面试官倒说了没关系,然后就开始做题。就是觉得冲击比较大,觉得是不是现在换工作都得手撸模型才行了。
    sagagas
    sagagas
    OP
    Mar 30, 2020
    46
    @zmxnv123 为啥,我感觉面我的几个人倒都还挺牛 x 的样子,至少感觉跟这样的人一起工作,不会被坑吧
    defunct9
    defunct9
    Mar 30, 2020
    47
    不知道,我是个养花的
    Wealong
    Wealong
    Mar 30, 2020
    48
    不知道,我都不知道自己是啥
    codingAlex
    codingAlex
    Mar 30, 2020
    49
    不知道,我是划水的
    becauseOf
    becauseOf
    Mar 30, 2020 via Android
    50
    要不要试试快手
    WispZhan
    WispZhan
    Mar 30, 2020
    51
    不知道,我是低端杂工。
    sreal
    sreal
    Mar 30, 2020 via Android
    52
    怎么这么多人酸。。。。
    27
    27
    Mar 30, 2020
    53
    @p2pCoder 过于真实。。大部分人都在做 数据 特征
    fukongqi
    fukongqi
    Mar 30, 2020
    54
    推荐我厂的 openvino 工具箱,常见视觉模型优化都可以支持
    la2la
    la2la
    Mar 30, 2020
    55
    不知道,我是扫地工程师
    CantSee
    CantSee
    Mar 31, 2020
    56
    不知道,我是 API 工程师
    hatw
    hatw
    Mar 31, 2020
    57
    不知道,我是全干工程师
    xiaoriri666
    xiaoriri666
    Mar 31, 2020
    58
    不知道,我是拍黄片的。
    guolaopi
    guolaopi
    Mar 31, 2020
    59
    不知道,我是 CRUD boy
    raptor
    raptor
    Mar 31, 2020
    60
    不知道,我是 CRUD daye
    zcfnc
    zcfnc
    Mar 31, 2020
    61
    python 调参侠 公司有几个专门构建模型的 我就是把他们的模型拿出来复现或者他们高兴了会把代码写好给我 我再修改修改拿去现场上线使用 我调参的方法就是先对比数据直接调参数看会不会有好的结果,如果不行的话就看他们的数据预处理部分有没有哪些问题,再不行得话就要改他们模型的思路了。反正我这边能现场上线使用,公司经理也不会管我给模型改成什么样子。。。。。。。。。。。。。
    zcfnc
    zcfnc
    Mar 31, 2020
    62
    但是公司专门构建模型的那几个人也都喜欢直接掉包。。。。。令我诧异
    sjuneou
    sjuneou
    Mar 31, 2020
    63
    不知道,我路过打酱油的
    bluefalconjun
    bluefalconjun
    Mar 31, 2020
    64
    不知道 我是嵌入式 printf 工程师
    GoLand
    GoLand
    Mar 31, 2020❤️5
    65
    不知道,我是一个保安,爱吃小熊饼干,工资只够早餐,上班只为了下班,整天郁郁寡欢,爱情与我无关。
    prolic
    prolic
    Mar 31, 2020
    66
    不知道,我连参都不调,天天做数据
    402124773
    402124773
    Mar 31, 2020
    67
    @bluefalconjun
    这个 666
    asAnotherJack
    asAnotherJack
    Mar 31, 2020
    68
    不知道,我是扫地的,麻烦把脚抬一下
    rj2
    rj2
    Mar 31, 2020
    69
    不知道 我是端茶倒水的 杯子需要加水么
    labulaka521
    labulaka521
    Mar 31, 2020 via Android
    70
    cov 路过
    laojiaqing
    laojiaqing
    Mar 31, 2020
    71
    不知道,我是个调参侠
    zhuangqhc
    zhuangqhc
    Mar 31, 2020
    72
    不知道,为什么不问问神奇海螺呢
    opengps
    opengps
    Mar 31, 2020 via Android
    73
    个顶个的面试问底层,工作不沾边
    我但是从零到一做过一套 gps 系统,然而行业内的面试都给不出合适的工资
    zooo
    zooo
    Mar 31, 2020
    74
    不知道,我是鉴黄工程师
    invinci
    invinci
    Mar 31, 2020
    75
    不知道,我只是一个带饭工程师,每天负责去食堂帮领导带饭
    chocotan
    chocotan
    Mar 31, 2020
    76
    不知道,我是技术支持工程师
    daozhihun
    daozhihun
    Mar 31, 2020
    77
    不知道,我是收钱工程师
    GoNtte
    GoNtte
    Mar 31, 2020
    78
    不知道,我只是个滚键盘的
    leewlab
    leewlab
    Mar 31, 2020
    79
    不知道,我只是个搬砖的
    zcljy
    zcljy
    Mar 31, 2020
    80
    不知道,我是滴滴司机,上车请坐后边戴口罩
    LudwigWS
    LudwigWS
    Mar 31, 2020
    81
    不知道,我只是比较帅而已
    wangyzj
    wangyzj
    Mar 31, 2020
    82
    整好我也有类似疑问
    我也要开个贴问一下
    CzaOrz
    CzaOrz
    Mar 31, 2020
    83
    不知道,我只是个摸鱼的😂
    smallpine
    smallpine
    Mar 31, 2020
    84
    不知道,我只是一名( bug )斐波拉切程序猿
    paoqi2048
    paoqi2048
    Mar 31, 2020
    85
    @wangxiaoaer 冲,就嗯冲
    MinQ
    MinQ
    Mar 31, 2020
    86
    造模型是不会造模型的,这辈子都造不出模型,只能从 github 上下下代码跑跑看能不能 work,才能勉强维持得了生活的样子
    hcocoa
    hcocoa
    Mar 31, 2020
    87
    w1lkin
    w1lkin
    Mar 31, 2020
    88
    不知道,我黄片鉴定工程师
    cominghome
    cominghome
    Mar 31, 2020
    89
    不知道,人肉运维路过
    aheadlead
    aheadlead
    Mar 31, 2020
    90
    不知道,我只会“擦电 开机 换南桥”
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2894 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 238ms · UTC 12:40 · PVG 20:40 · LAX 04:40 · JFK 07:40
    ♥ Do have faith in what you're doing.