易觀算法大賽自7月份開(kāi)展選手報(bào)名通道以來(lái)，已精心準(zhǔn)備了100天，距離最終的冠軍之夜只剩下最后的一周，最終決賽將在“數(shù)造未來(lái)·精益成長(zhǎng)”易觀A10峰會(huì)上如期舉行。這場(chǎng)開(kāi)發(fā)者盛會(huì)，算法高手們將共同探討時(shí)代浪潮下的數(shù)據(jù)分析。在比賽進(jìn)入最后的沖刺階段，我們有幸采訪(fǎng)到易觀CTO郭煒，深耕大數(shù)據(jù)領(lǐng)域18年的資深技術(shù)人，這次又為我們帶來(lái)了哪些新看法？
易觀CTO郭煒
郭煒，易觀CTO，全球中小企業(yè)創(chuàng)業(yè)聯(lián)合會(huì)副會(huì)長(zhǎng)，中國(guó)軟件行業(yè)協(xié)會(huì)智能應(yīng)用服務(wù)分會(huì)副主任委員，TGO北京分會(huì)會(huì)長(zhǎng)。曾任聯(lián)想研究院大數(shù)據(jù)總監(jiān)，萬(wàn)達(dá)電商數(shù)據(jù)部總經(jīng)理，并曾在中金、IBM、Teradata公司擔(dān)任大數(shù)據(jù)重要崗位，對(duì)大數(shù)據(jù)前沿領(lǐng)域有過(guò)卓越貢獻(xiàn)。其在2018年提出大數(shù)據(jù)IOTA架構(gòu)（Big Data IOTA）、企業(yè)“數(shù)據(jù)河”（Data River）的概念，帶領(lǐng)團(tuán)隊(duì)打造了秒算數(shù)據(jù)計(jì)算引擎。
以下為采訪(fǎng)實(shí)錄：
Q1：您曾在多家企業(yè)任職，最終為什么會(huì)選擇加入易觀？
郭煒：我在大數(shù)據(jù)領(lǐng)域內(nèi)堅(jiān)持了18年，在這殘酷的商業(yè)競(jìng)爭(zhēng)中，易觀始終堅(jiān)持深耕大數(shù)據(jù)領(lǐng)域，在這點(diǎn)上我非常佩服。在易觀CEO于揚(yáng)先生的邀請(qǐng)下，我加入易觀任職CTO，打造易觀的技術(shù)團(tuán)隊(duì)，我相信在大家的共同努力下，易觀也會(huì)越來(lái)越好。
Q2：在您看來(lái)，易觀堅(jiān)持舉辦算法大賽的最大價(jià)值是什么？
郭煒：易觀每年組織OLAP算法大賽，不僅是對(duì)大家數(shù)據(jù)上的挑戰(zhàn)，也是給行業(yè)一個(gè)參考標(biāo)準(zhǔn)，讓大家知道目前開(kāi)源生態(tài)和商業(yè)生態(tài)中，最好的選手和公司是什么樣子。在比賽中會(huì)有很多有意思的黑馬出現(xiàn)，像首屆OLAP大賽中的開(kāi)源組第一名 ，就將俄羅斯最先進(jìn)的數(shù)據(jù)引擎ClickHouse引進(jìn)中國(guó)。易觀和各位開(kāi)發(fā)者共同推進(jìn)了中國(guó)大數(shù)據(jù)行業(yè)的進(jìn)展。
Q3：大數(shù)據(jù)的算法升級(jí)與創(chuàng)新，您覺(jué)得會(huì)給企業(yè)帶來(lái)什么價(jià)值？
郭煒：大數(shù)據(jù)就像是一個(gè)連接器，將企業(yè)的數(shù)字客戶(hù)直接連接到企業(yè)管理層和運(yùn)營(yíng)層，通過(guò)每一個(gè)用戶(hù)的行為讓企業(yè)管理者了解到最新動(dòng)態(tài)。同時(shí)，通過(guò)數(shù)據(jù)實(shí)時(shí)分析，計(jì)算出每個(gè)用戶(hù)的特征，從而控制風(fēng)險(xiǎn)、提供千人千面的營(yíng)銷(xiāo)，有效提高企業(yè)收入和拉新效果，讓企業(yè)數(shù)據(jù)驅(qū)動(dòng)實(shí)現(xiàn)營(yíng)銷(xiāo)閉環(huán)。
Q4：本次算法大賽的數(shù)據(jù)來(lái)源是什么？易觀在數(shù)據(jù)分析上，具體是怎么做的？
郭煒：本次大賽的數(shù)據(jù)是參與體驗(yàn)計(jì)劃的用戶(hù)設(shè)備數(shù)據(jù)經(jīng)過(guò)模糊化之后得來(lái)的。目前易觀用戶(hù)體驗(yàn)計(jì)劃SDK覆蓋了5.8億月活用戶(hù)，數(shù)據(jù)存儲(chǔ)量已超過(guò)6.8Pb。在數(shù)據(jù)分析上，易觀自有的算法團(tuán)隊(duì)都是來(lái)自阿里、百度、百分點(diǎn)、TalkingData等公司的高手，我們也希望在行業(yè)內(nèi)提出一些有意思和挑戰(zhàn)性的問(wèn)題，讓大家一起溝通交流。
Q5：本次算法大賽的賽題包括漏斗計(jì)算和性別年齡預(yù)測(cè)賽題，您認(rèn)為這兩個(gè)賽題的難點(diǎn)分別在哪？
郭煒：本次漏斗題目，在基礎(chǔ)漏斗的功能基礎(chǔ)上，增加了很多實(shí)際業(yè)務(wù)需求。例如選手們需要考慮到重復(fù)事件，漏斗在默認(rèn)日期分組條件下，能支持按照任意步驟的任意屬性進(jìn)行分組。此外，漏斗計(jì)算規(guī)則也更加復(fù)雜，因?yàn)橛脩?hù)的實(shí)際行為完全隨機(jī)，中間會(huì)有多條事件符合轉(zhuǎn)換步驟定義，而選手們必須按照約定的通用規(guī)則計(jì)算最優(yōu)轉(zhuǎn)化路徑。
而對(duì)于性別年齡預(yù)測(cè)賽題，其主要挑戰(zhàn)在APP高基數(shù)類(lèi)別特征的處理上。由于樣本不平衡的問(wèn)題導(dǎo)致小樣本預(yù)測(cè)的概率較低，因此在時(shí)間表的處理上加深了難度；此外，22分類(lèi)數(shù)量較多，以性別和年齡作為標(biāo)簽，也加深了預(yù)測(cè)難度。
Q6：距易觀算法大賽決賽只剩下1周的時(shí)間，對(duì)參賽選手們您有什么建議（通關(guān)秘籍）？
郭煒：最后一周已進(jìn)入了在線(xiàn)調(diào)試階段，希望選手們?cè)俳釉賲?，在有監(jiān)督錄屏的環(huán)境下，扎扎實(shí)實(shí)做好自己的比賽，最終獲得佳績(jī)。對(duì)于通關(guān)秘訣，其實(shí)就是厚積薄發(fā)。
Q7：截至目前，算法大賽給您留下了哪些深刻印象？
郭煒：去年OLAP大賽冠軍使用的ClickHouse在易觀OLAP大賽的推動(dòng)下一炮打響。坊間打趣道：“易觀OLAP大賽一聲炮響，送來(lái)了喀秋莎數(shù)據(jù)庫(kù)（ClickHouse）”。隨后易觀2月份又組織了MeetUp，俄羅斯ClickHouse創(chuàng)始團(tuán)隊(duì)來(lái)到北京，大力稱(chēng)贊OLAP大賽和易觀對(duì)于大數(shù)據(jù)新技術(shù)推廣的貢獻(xiàn)。通過(guò)易觀OLAP大賽，讓國(guó)內(nèi)大數(shù)據(jù)開(kāi)發(fā)者和全世界最新最火的技術(shù)直接相連，使大數(shù)據(jù)行業(yè)進(jìn)一步發(fā)展。
Q8：選手們參加算法大賽將能夠獲得什么回報(bào)？
郭煒：對(duì)于開(kāi)源組，我們準(zhǔn)備了10萬(wàn)元現(xiàn)金大獎(jiǎng)，同時(shí)公布排名情況。商業(yè)組也將公布排名，并頒發(fā)榮譽(yù)證書(shū)，打造業(yè)內(nèi)企業(yè)的數(shù)據(jù)硬實(shí)力。大賽對(duì)學(xué)生們來(lái)說(shuō)是一次很好的鍛煉機(jī)會(huì)，未來(lái)應(yīng)聘更易贏得大公司的青睞。同時(shí)，所有參賽者都可以參加易觀A10峰會(huì)技術(shù)場(chǎng)全天活動(dòng)和第二天的國(guó)際開(kāi)源組Meetup活動(dòng)。這場(chǎng)開(kāi)發(fā)者的行業(yè)盛會(huì)，絕對(duì)精彩無(wú)限。
易觀算法大賽倒計(jì)時(shí)最后一周，優(yōu)秀選手呼之欲出。選手排名將會(huì)在10月27日易觀A10峰會(huì)上重磅揭曉，這場(chǎng)一年一度的大數(shù)據(jù)盛典，到底誰(shuí)能成為技術(shù)黑馬脫穎而出？敬請(qǐng)期待易觀A10峰會(huì)盛典，屆時(shí)將為你揭曉謎底！
注：漏斗計(jì)算規(guī)則賽題服務(wù)器由UCloud 贊助，總價(jià)值20萬(wàn)人民幣，供參賽選手比賽使用。
UCloud，國(guó)內(nèi)領(lǐng)先的云計(jì)算服務(wù)平臺(tái)，自主研發(fā)并提供計(jì)算資源、存儲(chǔ)資源、網(wǎng)絡(luò)資源等企業(yè)必需的基礎(chǔ)IT架構(gòu)服務(wù)，深入了解互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、傳統(tǒng)企業(yè)不同場(chǎng)景下的業(yè)務(wù)需求，提供全局解決方案。UCloud深耕用戶(hù)需求，秉持產(chǎn)品快速定制、貼身應(yīng)需服務(wù)的理念，推出適合行業(yè)特性的產(chǎn)品與服務(wù)。
2018易觀A10峰會(huì)
