作者pelicanper (派立肯)
看板Soft_Job
标题Re: [请益] 请问数据分析方向能够接案吗？
时间Fri Jul 3 20:02:44 2020
这是一个很有趣的话题,不过先不要下结论
我目前在纽西兰的一家线上信贷公司,讲潮一点就是FinTech
从早期P2P到今年因为想要当金主的太多,四月的时候正式停止散户的金主
现在出钱来借的反而都是银行基金信托等等...
至於借款人所有的流程都在网路上,从一开始的身分审查,到财务评估等等
我们用第三方服务审查身分和连结信用联徵中心调阅个人信用资料
通过身分审查後客户授权我们到个人银行帐户调阅过去一年交易资料
最後我们评估客户的信用指数,贷款利率和金额然後通过贷款
在假设一切资料都足够的情况下从申请到拨款全部都是线上系统处理
资料产生除了客户个人资料和银行交易资料外,还有联徵中心提供的信用纪录资料
此外还有前台第三方服务的资料,像是我们会用全世界流通的Email侦查金融犯罪的服务
或是根据客户提供的地址调查该地区平均各项消费的指数,收入,教育程度等等
此外,我们也撷取客户在使用前台服务的时候产生的各种Cookies
来研究各种用户体验和行为,
这些资料我们现在大部分用在两个模型,第一个是用来衡量客户倒债的机率来评估风险
结果就是计算最好的利率和贷款额度,第二个跟Google合作,
我们预测该客户能提供公司的利润然後即时传送结果给Google,
Google在即时用他们的演算法搜寻最佳的标的放送广告提高点阅率
这个合作的模式让我们公司去年Marketing的Return提高超过150%,
也就是说每花一块钱的数位广告能够提升传统Google Search的1.5倍效益
这些资料量大不大?其实很恐怖...一个人一年的银行交易资料就是数千笔
一万个人就是上千万或亿笔,加上联徵各种金融产品两年的纪录,前台网页Cookies,
第三方服务的资料等等,还有Real-time data的特性等等...
我想讲的重点是现今的资料科学涵盖很广,要把东西做出来很多时候都是从零开始
没有资料就去抓,抓回来就要想办法让它能用,甚麽分析模型都是建立在
有整理好的资料下,再来就是资料分析是很吃Business Domain的
很多时候你要面对的都是有决策的管理阶层,他们不太在乎你用的东西酷不酷炫
而是你能不能回答他们的问题,举个例来说因为COVID-19很多人失业或是被减薪
这个时候就会申请Hardship延迟付款,通常时效是三个月或六个月,
疫情至今很多Hardship逐渐到期,我们公司会主动调查客户的财务状况
可是因为这个疫情没有人有经验,时效上为了速度没有办法等研发前台功能
大家都用Google Sheet来Team Work,上面就希望我们能够抓Google Sheet的资料
连结资料库来做即时资料视觉报表,就这样
Google Service Account/Google Sheet API/Python/Snowflake/Tableau/SQL Agent
一天干出一套即时报表让上面的可以随时因应现今的状况来决定Hardship的政策
前线的客服继续用Google Sheet做他们的工作,老板们可以在Tableau上看着图做决策
至於我们就快快乐乐地继续领我们的薪水~~~
这些在大公司因为制度和官僚不太这样闪电式的发生,只有像是在我们这种相对小型的企业
才会这样搞,我们组只有三个人但是包山包海,我觉得这种工作其实也蛮有趣的
------------------------------------------------------------------------
回到原本的话题...资料分析能不能外包?
我以前在银行的经验是可以,但是都包给专门做银行专案的Contractor,
以前认识一个Contractor每几个月就换一个楼层,从我进银行到离开他都在@@
在现在的公司就比较没办法外包,因为大部分的技术和商业知识都在少数几个人上面
所以我真的建议如果有兴趣往资料管理方向,这边我比较习惯用Data Management
来涵盖跟所有资料有关的技能,而不是用像是BI, Data Analytics, Data Science,
Data Visualisation...,尽量让自己能够多多涉猎,除非真的在某一项有绝对过人之处
要不然大部分现今企业还是有可能比较需要能够知道如何解决问题的人
讲到这边外不外包好像就不是这麽重要了~~~
以上
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 121.99.177.32 (纽西兰)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Soft_Job/M.1593777766.A.C6D.html
1F：推 nicha115: 我想做的数据分析比较偏向科学计算，因为我是理科背景 07/03 20:58
2F：→ nicha115: 如果这样，应该比较没有机密的问题。 07/03 20:59
3F：→ nicha115: 只是好像都是学校在做就是了... 07/03 20:59
4F：推 s111100001: 我也想做科学计算那种但是不知道从那边去入门或是找工 07/03 21:24
5F：→ s111100001: 作 07/03 21:24
6F：推 WTFCN: 推推 07/03 22:10
7F：推 nicha115: 楼楼上，推udemy的Fred Baptiste讲师，deepdive 07/03 23:23
8F：→ nicha115: 至於找工作，我也在摸索中。我觉得台湾目前这种工作少 07/03 23:23
9F：→ nicha115: 但我觉得未来会越来越多 07/03 23:24
10F：→ s111100001: 感谢楼上 正在尝试能不能做出东西来 07/03 23:27
11F：推 azzc1031: 同为data analysts ，好奇一下1.你们需要做data cleanin 07/04 03:03
12F：→ azzc1031: g吗？感觉调来的资料都是乾净的(?) 2.资料是一般的结构 07/04 03:03
13F：→ azzc1031: 式还是非结构式(noSQL)资料？3.会用到爬虫吗？你们需要 07/04 03:03
14F：→ azzc1031: 会爬虫的技能吗？还是直接套现有的module? 谢谢 07/04 03:03
15F：推 azzc1031: 另外真的超同意data management 这个概念，部门长官会认 07/04 03:08
16F：→ azzc1031: 为跟data或自动化有关的project都会assign给你做。我们 07/04 03:08
17F：→ azzc1031: 部门今年开始写c#读Excel进去SQL，然後各种增删改查、巢 07/04 03:08
18F：→ azzc1031: 状SQL指令、连表，变成一张大表後寄给user们。 07/04 03:08
19F：推 hmsDEBBIE: GDPR如果各国跟进欧盟实施的话，就不能抓cookies来玩了 07/05 14:27