北京2012年12月3日電 /美通社/ -- 2012年11月30日-12月1日,中國 IT 界技術盛會 —— Hadoop 與大數據技術大會(Hadoop&BigData Technology Conference 2012,簡稱“HBTC 2012”)在北京新云南皇冠假日酒店隆重開幕。
在移動互聯、云計算的大趨勢下,整個信息服務產業面臨巨大挑戰,通過開放技術、構建和加入生態系統,打造核心技術競爭力已經成為產業發展的新焦點。IT 技術尤其是網絡技術的高速發展使得大數據已經成為企業發展中亟待解決的首要問題。為了有效應對大數據帶來的挑戰,同時充分利用大數據帶來的機遇,國內外的產業界與科技界、甚至各國政府部門都在積極布局、制定戰略規劃。今年3月,美國政府整合6個部門宣布了2億美元的“大數據研究與發展計劃”,把對大數據的研究上升為國家意志。歐盟也有類似的舉措。
在這樣的背景下,由中國計算機學會 (CCF) 主辦,中國計算機學會大數據專家委員會承辦,普澤天璣、渠達傳媒和 CSDN 協辦的 HBTC 2012在京隆重舉行。大會以“大數據共享與開放技術”為主題,設定了“Hadoop 生態系統”、“大數據行業應用”、“大數據共享平臺與應用”、“NoSQL 與 NewSQL”以及“大數據的技術挑戰與發展趨勢”五個分論壇。HBTC 2012聚焦 Hadoop 和大數據,并特別邀請了國際著名大數據公司 Hortonworks 的首席技術官 Eric Baldeschwieler,MemSQL 的創始人與首席技術官 Nikita Shamgunov,美國俄亥俄州立大學計算機系主任、IEEE Fellow 張曉東教授,哈爾濱工業大學的李建中教授,中科院計算所程學旗研究員,國際著名的 IT 研究與顧問咨詢公司Gartner 張瑾,以及中國移動通信、IBM、英特爾、Teradata、VMware、Yahoo!、ebay、華為、Informatica、天云、阿里巴巴、百度、騰訊、奇虎360、網易、普澤天璣、精誠資訊等國內外著名互聯網公司和 IT 企業的資深技術與研究人員到場演講并進行深入交流。
大會背景
本次大會的前身是 Hadoop 中國云計算大會與 CSDN 大數據技術大會。Hadoop高可靠、高容錯、高擴展、高效率的特性使其在同類的分布式系統中異軍突起,并在眾多行業和科研領域中被廣泛采用。為了更好地發揚Hadoop 的開源精神,擴大 Hadoop 技術在中國的影響,促進 Hadoop 技術愛好者之間的交流,中科院計算所于2008年發起并組織了第一屆 Hadoop 技術沙龍,并于2009年創建了Hadoop 開源社區 (hadooper.cn),同年11月,Hadoop in China 2009大會在京成功召開。此后,隨著 Hadoop 技術越來越受到各界的青睞,Hadoop 中國云計算大會也從沙龍發展成一個知名的技術會議,2011年第五屆“Hadoop 中國2011云計算大會”更是達到千人技術大會的盛景。
2012年,面對大數據所帶來的巨大挑戰與機遇,中國計算機學會于10月正式成立了大數據專家委員會,意在探討大數據的核心科學與技術問題,推動大數據學科方向的建設與發展,同時構建面向大數據產學研用的學術交流、技術合作與數據共享平臺。為了迎接大數據時代的到來,Hadoop 中國云計算大會與 CSDN 大數據技術大會合并,名稱正式調整為“Hadoop 與大數據技術大會”。
主題豐富 激揚技術與趨勢
作為已成功舉辦了多屆的技術會議,HBTC 2012匯聚了業內精華,講師陣容強大,主題豐富多彩,講題精準有序,更加突出實踐與經驗分享。
第一天為主會場演講,匯聚十余位重磅講師,激揚技術與趨勢。其中,Hortonworks的首席技術官 Eric Baldeschwieler 曾是 Inktomi 公司 Web 服務引擎的技術領導者、雅虎 Web 搜索總設計師和雅虎 Apache Hadoop 項目的負責人,曾將20個節點的原型系統發展為42000個節點。他重點分享了“Hadoop 的現在與未來”。MemSQL CTO 聯合創始人 Nikita Shamgunov 擁有計算機科學本科、碩士和博士學位,是世界 ACM 編程競賽的冠軍。在創建 MemSQL 之前,Nikita 曾在微軟公司擁有6年的 SQL Server 高級數據庫工程師的工作經驗,是多項專利的所有者。他針對 MemSQL 在大數據中的作用、適用范圍和案例做了純技術層面的經驗分享。
CCF 大數據專家委員會副主任李建中教授和 CCF 大數據專家委員會秘書長程學旗研究員分別就“大數據計算”和“大數據的熱點問題與發展趨勢”做了主題演講,深入揭示大數據計算的基本概念、重點研究問題和解決方案,以及大數據研究與應用中的熱點問題與產業趨勢。作為長期專注研究高性能計算以及分布式系統,包括數據管理以及系統擴展方面的專家,俄亥俄州立大學計算機科學與工程系主任、IEEE Fellow 張曉東教授在演講中闡述了并行處理在大數據分析中所面對的挑戰。中國移動通信研究院云計算研究所所長孫少陵則就中國移動“大云”應用 Hadoop 技術應用和實踐經驗做了深入分享。除此以外,還有來自Teradata、IBM、華為、VMware、英特爾、Yahoo! 的技術團隊負責人的純技術性的分享與實踐。
技術論壇 聚焦應用和實踐
第二天分為五個分論壇:“Hadoop 生態系統”、“大數據行業應用”、“大數據共享平臺與應用”、“NOSQL 與 NewSQL”以及“大數據的技術挑戰與發展趨勢”,國內外數十位 Hadoop 及大數據技術應用的產學界人士和實踐企業代表探討了大數據技術生態系統的現狀和發展趨勢,并圍繞 Hadoop 與大數據熱點技術和應用實踐進行深入解析和經驗分享。
“Hadoop 生態系統”匯聚業內騰訊、華為、普澤天璣、Facebook、阿里巴巴、VMware、Hortonworks、中國移動研究院等一線專家,重在研討技術問題與解決方案,分享優化方法與實踐經驗。其中,Facebook 分布式系統專家,曾任職于微軟軟件開發部門,現是 Facebook 軟件工程師 Siying Dong 就“ Facebook開發 HDFS 和 HBase 的新進展”做了經驗分享。騰訊趙偉側重分享“HIVE 在騰訊分布式數據倉庫”的實踐,淘寶王琤詳細介紹了“Hadoop Namenode 性能診斷及優化”的方法,Hortonworks 核心技術人員戴建勇的“Apache Pig 的性能優化”以及阿里巴巴高級研發工程師梁李印的“阿里 Hadoop 集群架構及服務體系”從不同層面深入探討互聯網行業的 Hadoop 應用實踐。中國移動研究院的“HBase Coprocessor優化與實驗”,IBM的“BigInsights 高級分析技術”與華為的“HDFS Name Node High Availability”則更多地展示應用優化和技術趨勢。
“大數據行業應用”意在探討 Hadoop 發展前景,分享實戰成果。其中,IDG 資本副總裁牛奎光就“大數據商業模式”進行了探討;阿里代志遠分享“海量數據分布式數據庫的探索:Wasp”的技術細節;中國移動研究院云計算研究員鄧超關注“The Advance and Applications of Big Cloud based Parallel Data Mining Platform in CMRI”;Carbonite China 技術總監兼高級架構師盧億雷分享了“Hadoop 在網盤和在線備份的應用與挑戰”,網易高級經理蔡迎東的“大型內容推薦系統實踐”與奇虎360系統部工程師趙健博的“Hbase 系統在搜索網頁庫的應用”,普澤天璣劉佳的“HBase 用例分析”,VMware 堵俊平的“Hadoop Virtualization Extensions”,IBM 中國研發中心首席架構師陳奇的“大數據時間之旅”會從分別從不同層面進行各自的實戰分享。
“大數據共享平臺與應用”關注的是平臺技術與大數據應用。其中,中國移動研究院齊驥重點分享“大云數據倉庫在移動互聯網領域”的最新實踐,精誠資訊陳昭宇,京東商城架構師李松林,英特爾中國研究主任研究員楊棟,阿里巴巴集團數據交換平臺資深專家強琦,Informatica 核心技術部資深產品管理總監鄭瑋以及網易顧費勇,百度基礎架構部數據平臺技術經理劉立萍會為開發者描述行業中不同的應用場景,揭示行業中的技術應用現狀。
“NoSQL 和 NewSQL”主題論壇圍繞數據庫技術進行專業研討。作為 Apache HBase 的 PMC 32名成員之一,擁有14年軟件開發經驗及兩年以上 HBase 開發經驗的 Ted Yu 會就“Hbase For Enterprise”做深入分享。而甲骨文亞太研發中心研發經理黃超,阿里王玉法和華為高級技術經理Anoop Sam John會就不同技術做深度剖析,分享技術開發者最為關注的數據庫應用經驗。
“大數據的技術挑戰與發展趨勢”邀請了清華大學教授朱文武,華東師范大學教授周傲英,南京大學教授黃宜華,啟明星辰公司副總裁、首席戰略官潘柱廷,北京天云融創科技有限公司副總裁雷濤,百分點創始人柏林森,北京西普在線軟件有限公司總經理齊紅威和 SAS 軟件研究開發(北京)有限公司總經理劉政,他們會從大數據的安全、共享、高性能分析以及大數據的民主化與社交媒體計算等諸多不同側面來闡述大數據所面臨的技術挑戰,展望大數據的技術發展趨勢。
開源與分享
秉承開源與分享的精神,HBTC 2012還同步公開了講師演講 PPT,所有技術愛好者都可以與1000余名開發者一起第一時間獲得核心技術資料,分享到來自一線專家的實踐經驗,展望 Hadoop 和大數據璀璨的發展未來。
我們期望本次大會能夠成為 Hadoop 技術與大數據應用深度結合的新起點,成為產業界、科技界與政府部門密切合作的新平臺,最終為推動我國大數據的產學研用作出重大貢獻。