第十二屆BigData NoSQL Meetup落幕:快手用戶特征數(shù)據(jù)每天數(shù)百億,怎么做到秒級(jí)分析?
近日,第十二屆BigData NoSQL Meetup在快手總部圓滿落幕。來自快手、阿里云、京東、滴滴、貝殼找房的技術(shù)專家與近300位開發(fā)者齊聚一堂,交流分享NoSQL等大數(shù)據(jù)技術(shù)的應(yīng)用與實(shí)踐。本次活動(dòng)由快手技術(shù)沙龍、云棲社區(qū)等技術(shù)社區(qū)共同舉辦。快手技術(shù)沙龍是由快手舉辦的線下技術(shù)交流活動(dòng),每期活動(dòng)將以AI、大數(shù)據(jù)、音視頻技術(shù)等技術(shù)方向?yàn)橹黝},邀請(qǐng)產(chǎn)業(yè)、學(xué)界的專家、技術(shù)人員進(jìn)行分享,打造前沿技術(shù)的交
2019-07-02 15:56:43
來源:釘科技??

近日,第十二屆BigData NoSQL Meetup在快手總部圓滿落幕。來自快手、阿里云、京東、滴滴、貝殼找房的技術(shù)專家與近300位開發(fā)者齊聚一堂,交流分享NoSQL等大數(shù)據(jù)技術(shù)的應(yīng)用與實(shí)踐。

QQ截圖20190702151549.png

本次活動(dòng)由快手技術(shù)沙龍、云棲社區(qū)等技術(shù)社區(qū)共同舉辦??焓旨夹g(shù)沙龍是由快手舉辦的線下技術(shù)交流活動(dòng),每期活動(dòng)將以AI、大數(shù)據(jù)、音視頻技術(shù)等技術(shù)方向?yàn)橹黝},邀請(qǐng)產(chǎn)業(yè)、學(xué)界的專家、技術(shù)人員進(jìn)行分享,打造前沿技術(shù)的交流平臺(tái)。

QQ截圖20190702151631.png

快手大數(shù)據(jù)高級(jí)研發(fā)工程師陳楊

本次活動(dòng)上,快手大數(shù)據(jù)高級(jí)研發(fā)工程師陳楊首先分享了《HBase在千億級(jí)用戶特征數(shù)據(jù)分析中的應(yīng)用與實(shí)踐》。陳楊介紹,快手每天產(chǎn)生數(shù)百億用戶特征數(shù)據(jù),分析師需要在跨30-90天的數(shù)千億特征數(shù)據(jù)中,任意選擇多維度組合秒級(jí)分析用戶行為。針對(duì)這一需求, 快手基于HBase自主研發(fā)了支持bitmap轉(zhuǎn)化、存儲(chǔ)、索引、快速計(jì)算的分析服務(wù)——BitBase,并成功應(yīng)用于留存分析、用戶增長(zhǎng)、廣告營(yíng)銷、ABTest 等多個(gè)業(yè)務(wù)場(chǎng)景。

QQ截圖20190702155224.png

阿里云數(shù)據(jù)庫專家吳陽平

阿里云數(shù)據(jù)庫專家吳陽平的演講主題為《阿里云HBase x-pack數(shù)據(jù)存儲(chǔ)檢索分析平臺(tái)》,演講分享了阿里云HBase x-pack 的平臺(tái)能力——基于 Apache HBase、Phoenix、Spark 深度擴(kuò)展,融合 Solr 等技術(shù),支持海量數(shù)據(jù)的一站式存儲(chǔ)、檢索與分析,被廣泛應(yīng)用于風(fēng)控、推薦、檢索、畫像、 社交、物聯(lián)網(wǎng)、離線數(shù)倉等場(chǎng)景,助力企業(yè)數(shù)據(jù)智能化。

QQ截圖20190702155301.png

京東大數(shù)據(jù)技術(shù)專家吳怡燃

京東大數(shù)據(jù)專家吳怡燃分享了《NoSQL在京東的使用》。演講首先介紹了NoSQL在京東的使用場(chǎng)景;講解了HBase支撐在線系統(tǒng)時(shí)遇到的挑戰(zhàn)與改進(jìn),如支持異構(gòu)配置的RSGroup、RPC優(yōu)化RWS隊(duì)列、跨集群雙活集群等;并分享了HDFS參數(shù)優(yōu)化、Zookeeper配置優(yōu)化、HBase參數(shù)優(yōu)化等經(jīng)驗(yàn)。

QQ截圖20190702155333.png

滴滴大數(shù)據(jù)工程師初曉

滴滴大數(shù)據(jù)工程師初曉分享了《基于HBase的NewSQL落地實(shí)踐》,主要分享了HBase及其生態(tài)組件Phoenix、Kylin 在滴滴的使用場(chǎng)景及落地中遇到的問題及解決方法。

QQ截圖20190702155420.png

貝殼大數(shù)據(jù)架構(gòu)團(tuán)隊(duì)負(fù)責(zé)人趙國(guó)賢

貝殼大數(shù)據(jù)架構(gòu)團(tuán)隊(duì)負(fù)責(zé)人趙國(guó)賢分享了《流式數(shù)據(jù)的平臺(tái)化實(shí)踐與挑戰(zhàn)》,介紹了貝殼流式數(shù)據(jù)從產(chǎn)生、處理、應(yīng)用整個(gè)生命周期的管理與平臺(tái)化實(shí)踐。包括流式數(shù)據(jù)的挑戰(zhàn)、流式數(shù)據(jù)的平臺(tái)化建設(shè)以及流式數(shù)據(jù)的應(yīng)用案例。

一直以來,快手十分重視、關(guān)注NoSQL等大數(shù)據(jù)技術(shù)的發(fā)展。本次快手技術(shù)沙龍與云棲社區(qū)聯(lián)合舉辦BigData NoSQL Meetup活動(dòng),正是希望能夠進(jìn)一步推動(dòng)相關(guān)技術(shù)的溝通與交流,看到更多經(jīng)驗(yàn)分享、更多對(duì)技術(shù)挑戰(zhàn)的突破。

最新文章
1
性能真旗艦 續(xù)航超旗艦 iQOO Z9 Turbo+ 2199元起正式發(fā)布
2
科技點(diǎn)亮未來,創(chuàng)新賦能下一代:索尼探夢(mèng)科普萬里行再進(jìn)湖北
3
索尼研究公司與新加坡全國(guó)人工智能核心簽署備忘錄,合作研究東南亞大語言模型
4
索尼宣布與Cellares聯(lián)合開發(fā)基于流式分選和在線分析技術(shù)的自動(dòng)化、高通量 細(xì)胞治療生產(chǎn)平臺(tái)
5
以技術(shù)為基,索尼與墨爾本大學(xué)共同開發(fā)領(lǐng)先的外科培訓(xùn)項(xiàng)目
6
“快舟·inne號(hào)”火箭發(fā)射升空,探索育兒與科技創(chuàng)新的無限可能
7
掃地機(jī)市場(chǎng)競(jìng)爭(zhēng)烈度加劇,科沃斯石頭追覓云鯨小米表現(xiàn)如何?
8
消費(fèi)電子行業(yè)的即時(shí)零售,“人貨場(chǎng)”是如何進(jìn)化的?
9
又明年有望?全新Siri加持Apple Intelligence,明年1月或?qū)⒌菆?chǎng)
10
2024年凈化器雙十一預(yù)測(cè):雙十一仍將保持20%高增長(zhǎng)
11
10月排產(chǎn)增長(zhǎng)23%,空調(diào)市場(chǎng)又好起來了?
12
全球首個(gè)真空噪聲芯片發(fā)布
13
高端電視同比實(shí)現(xiàn)增長(zhǎng),Mini LED出貨量和收入占比達(dá)到54%
14
699元!華為路由BE7 Pro開售:全2.5GE網(wǎng)口、主動(dòng)颶風(fēng)散熱
15
首發(fā)供應(yīng)!博主確認(rèn)iPhone 16 Pro有京東方屏幕
16
快手電商新增近800個(gè)“0元開店”類目,推出多項(xiàng)新商入駐權(quán)益
17
快手可靈AI攜手東方衛(wèi)視中秋晚會(huì) 打造文化與科技交融的視聽盛宴
18
3i與科沃斯的“全球首款”爭(zhēng)議背后:清潔電器進(jìn)入創(chuàng)新慢周期?
19
康佳G9Pro新品電視9月23日晚20點(diǎn)正售開啟,多重好禮福利大放送
20
年底新旗艦手機(jī)中,一加13將獨(dú)家搭載24GB LPDDR5X內(nèi)存?
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512