發布時間: 2017-11-09 14:40:07
前言:在距離今年雙11已經不到2天的這個時刻,一場看不見硝煙的戰爭早已打響。隨著一年一度購物狂歡的即將到來,網絡上出現了很多阿里技術應對雙11的段子。“阿里工程師拜關公求服務器不宕機”,“技術人員圍著被子敲代碼”等傳聞也被消費者們所津津樂道。那么,針對雙11期間較為嚴苛的技術壓力,阿里巴巴究竟是用怎樣的方式進行解決的呢?在接下來的文段中,就讓我們一起來對阿里巴巴在2017雙11背后的技術進行一次細致的了解和探訪。

容器服務:云上資源助力亟速擴容
在阿里云雙11訪談容器服務專場中,阿里云容器服務高級專家戒空為大家介紹了阿里云容器服務以及容器鏡像服務的基本情況和各自的優勢所在,并且針對“雙11”這樣大流量的場景分享了容器技術和容器鏡像技術的最佳實踐。
容器服務是阿里云在2015年推出的容器應用管理服務,對一千多家企業客戶同時進行支持。其主要支持Docker應用的全生命周期的管理。在公有云上面整合了阿里云的虛擬化、存儲以及網絡等方面的能力,簡化了用戶在容器應用運維上的復雜性。不僅同時支持Swarm和Kubernetes。還提供了公有云和專有云兩個版本,允許用戶通過專有云的方式在自己的數據中里面構建一個完整的容器運維能力。
雙11期間,針對過于洶涌的流量沖擊導致資源量不足的情況,容器服務可以做到較大化方便企業將原來部署在自己機房中的應用部署到云上,無需準備物理機器,也無需安裝操作系統和依賴,只要拉下鏡像直接運行即可,就這么簡單。
視頻云:人工智能同視頻產品迸發火花
在阿里云雙11訪談之視頻云中,阿里云視頻云產品經理沐暄和阿里云視頻云產品經理王利軍跟大家一起探討如何更輕松的構建視頻的全面能力。他們從視頻生產、分發、消費三個環節來分享開發者更關注哪些技術點,以及阿里云能夠為開發者提供怎樣的計算能力。
視頻云是阿里云提供的一站式大視頻解決方案。能夠一站式的提供“海量存儲、高效分發、極速網絡”等優質而強大的服務,讓用戶輕松獲得較高量級的傳播能力。其廣泛應用于游戲直播、娛樂直播、泛生活直播、教育類、遠程醫療、企業遠程視頻會議等典型場景。
針對視頻生產環節,阿里云點播服務能夠提供從視頻的導入到短視頻的拍攝、錄制、圖片處理、在線編輯、視頻審核等全鏈路服務。窄帶高清2.0的轉碼則可以令端到端的轉碼時效達到最高,同時也就確保了信息傳播的最高時效。
在視頻直播場景下,針對內容解析、人臉識別、語音識別,視頻大數據分析的探索能對客戶的優化運營提供場景、端口、數據分析方面的全面支撐。
在視頻點播場景中,利用阿里云擁有強大的AI技術和海量資源支撐,視頻云很好的實現了以視頻為入口的智能化處理。穩定成熟的內容分析,兼顧美學和關鍵性的封面選圖,精準的視頻指紋分析和深度學習帶來的高效審核都極大的提高了工作效率,從而令對大規模視頻的無人化處理變成現實。
中間件:為企業架構創造價值
阿里云中間件對外服務已有很多年的歷程了,也由此發展推出了很多的產品。在阿里云雙11訪談之中間件專場中,阿里云中間件產品運營雁溪和阿里云中間件產品專家銀時跟大家介紹一些中間件產品,分享中間件在企業架構中的價值。
中間件最初是用于支撐阿里云自身的一系列系統,為了服務客戶而對外開放。包括恢復框架、消息隊列、實時監控、性能測試等一系列互聯網中間件產品。在EADS平臺的基礎上提供了快速構建微服架構、應用開發、服務治理、高可用管控、限流降級等一系列功能。通過可視化平臺,幫助用戶分批次、可中斷、有發布單的呈現方式,使用戶能夠快速進行大批量應用的部署。
對于消息隊列(MQ)的中間件,削峰填谷的功能也將在雙11時期全力投入使用。這一組件的引入能夠幫助在阿里云在流量高峰時平緩峰值、減輕壓力,再將任務置于流量低峰的時段進行消費。為了確保其足夠穩定,阿里云對每條消息都進行了三次備份,并完善了對持續消息、順序消息、事物消息、定時消息等一系列消息類型的支撐。
針對分布式里最關鍵的像數據庫領域,阿里云DRDS分布式數據庫產品一定是繞不開的。在整個中間件團隊,對外推出了分布式關聯數據庫DRDS。該產品專注于解決分布式領域讀寫分離、分庫分表、無線水平擴容等一系列分布式數據庫問題和流量高峰期分布式上存在的問題。對業務透明友好,并能對特定業務提供個性化支持。
最后,PTS壓力測試也同樣是一項優秀的性能測試領域產品。其將整個壓測服務spss化。客戶在公共云上不需要部署任何組件,只需提供整個應用的入口就能快速使用壓測服務。并具備指令測試豐富,流程進展快速,模型自動化分配等特有的優勢。
云存儲:面向對象,面向文件
在阿里云雙11訪談云存儲專場中,阿里云對象存儲OSS產品經理周皓、阿里云文件存儲NAS產品經理王登宇共同為大家介紹了以對象存儲OSS和文件存儲NAS為代表的阿里云存儲系列產品的優勢以及各個產品的適用場景。
在阿里云的存儲業務中,對象存儲OSS和文件儲存NAS可以說是自家內部的當家花旦。其中,對象存儲以面向互聯網,數據海量,高安全性、經濟性、數據可靠等特點為人稱道,文件存儲則因其強大的性能和對大容量、多協議的支持而受到用戶的廣泛好評。
OSS的應用場景主要有三:針對圖片和視頻的多媒體存儲、大大簡化的數據備份歸檔過程、結合計算平臺從而挖掘數據價值。對多媒體從業者來說,OSS的上下行具備的彈性伸縮能力可以讓他們對業務高峰的大量并發請求進行有效的處理, 其自帶的簽名機制不僅確保了數據的安全性,同時也減輕了用戶服務器的負擔。
NAS則有所區別,作為針對分布式的文件存儲業務,其可以利用計算和文件存儲的彈性解決特殊行業大數據量計算的痛點,并給予用戶短時間訓練AI模型的能力,做到高性能存儲和文件可共享訪問的并行不悖。
ECS:彈性即是計算的特性
在阿里云雙11訪談之ECS彈性計算專場中,阿里云ECS彈性產品專家藏暉和阿里云ECS彈性計算產品運營專家夏能為大家簡單介紹了阿里云新近發布的ECS新產品以及新產品的形態特點。
2017年,阿里云不僅完成了ECS企業級產品的發布,而且完成了一次軟件和硬件的數據迭代,推出了新一代硬件架構和軟件架構產品,通過對現有功能和產品形態優勢的持續優化和挖掘,將彈性發揮到了極致。
簡單來說,彈性是整個彈性計算產品中一個較大的亮點。它體現在兩個方面,一是資源唾手可得、二是按量付費。用戶無論什么時候想要計算資源都能拿到,時間上是很彈性的。同時,由于完全根據使用量來計費的,所以付費方式也是很彈性的。對用戶來說,無論在業務承載能力上還是在成本構成上,這都是一項極大的提升和優化。
數據智能:我就是智能城市的大腦
在阿里云雙11訪談之數據智能專場中,阿里云交互設計師梓銘、阿里云人工智能資深產品運營席嘉和阿里云DataV資深產品運營葦如為大家簡單分享了數據智能的應用,介紹了阿里云新近發布的產品ET城市大腦以及它所用到的技術支撐和在其他領域的應用。
ET城市大腦可謂是阿里云展示的眾多黑科技中耀眼的一項。杭州大腦的上線使高架道路出行時間節省了四點六分鐘,解決了高峰時段的城市擁堵問題,還讓蕭山120救護車到達急救現場的時間減少了一半。
在城市大腦的背后,必然離不開數據采集整合以及算法應用的技術支持。ET城市大腦將散落的數據匯合在一起,例如公交線路數據、高德地圖數據、車輛的GPS數據等,同時跟企業、公安、政府、運營商等多方收集的數據匯集,借助記憶學習和人工智能算法,通過視頻識別交通事故和交通擁堵狀態,再融合警察接警數據,對城市進行全面多發的感知。構筑出一座基于數據驅動的3D城市,并將其微縮模型投放在屏幕上。這不僅非常炫酷,也為城市治理者提供了一個更加友好、人性化的態勢監控界面。
ET城市大腦分為三大塊:數據整合層、記憶學習和智能算法層、應用層。并形成了城市大腦這一產品化的輸出框架。在行業內部,ET有智能語音,人臉圖像,OCR(光學字符識別)等智能產品。包括語音方面的實時文本轉換,智能法庭/語音智能客服;身份驗證場景的實名認證、人臉檢測、圖像場景打標、圖片鑒黃;印刷文字領域的身份證,駕駛證,行駛證,工商管理證等的文字識別等廣泛的應用。并能夠利用dataV數據可視化神器提供數據展現,以滿足城市、各級大小企業和機構日常業務展示以及業務監控的需要。
MaxCompute:快速架構大數據倉控
在阿里云雙11訪談MaxCompute專場中,MaxCompute資深運營專家祎休為大家簡單介紹了阿里云的MaxCompute平臺的基本情況,并且為大家分享了MaxCompute如何幫助用戶快速架構大數據倉控的。
MaxCompute是一項大數據的計算服務,它能夠為企業提供快速、完全托管的TB/PB級數據倉庫解決方案。MaxCompute向用戶提供了完善的數據導入方案以及多種經典的分布式計算模型,能夠更快速的解決用戶海量數據計算問題,有效降低企業成本,并保障數據安全。
MaxCompute的應用場景可以大致分為三種:基于MaxCompute搭建企業的大數據倉庫、機器學習、和基于加工后的數據實現個性化推薦。其具備強數據安全,從數據訪問到最終的數據加工和處理,都能夠實時地通過實名認證體現出用戶的真實身份。
迄今為止,MaxCompute在傳統行業、互聯網行業以及初創公司中都有很多成功應用的案例,比如墨跡天氣、集團內的菜鳥網絡、螞蟻金服等,外部的新浪微博、ofo小黃車、美柚、天弘基金、眾安保險以及金立手機等都在使用MaxCompute作為自己的大數據服務。
Elasticsearch:定制化大數據解決方案
在阿里云雙11訪談Elasticsearch專場中,阿里云大數據Elasticsearch資深產品經理洪陽為大家簡單介紹了阿里云Elasticsearch的基本情況,并且分享了阿里云Elasticsearch的優勢以及在日志處理分析、搜索以及安全等領域實際應用。
阿里云· Elasticsearch是基于開源Elasticsearch及商業版X-Pack插件,致力于數據分析、數據搜索等場景的一項服務。其在開源Elasticsearch基礎上提供企業級權限管控、安全監控告警、自動報表生成等功能。
作為基于開源項目的大數據服務,Elasticsearch產品不僅本身與開源社區完全兼容。還提供了Kibana以及X-Pack這樣商業化插件的預置,以及ik等分詞插件提高用戶體驗。相對于企業進行自建,阿里云Elasticsearch能夠節約大量的運維和部署成本。并能獲得來自Elasticsearch 24小時不間斷的穩定技術支持。
總結而言,阿里云Elasticsearch產品有三個亮點:功能更加豐富、成本更加低廉、能夠提供更多服務支持,從而完美解決用戶在日志分析場景下各種各樣的訴求,并最終被應用于安全,搜索等多個領域。
雙11大促來啦,這些技術你想不想擁有呢?
驚不驚喜?沒想到吧,“雙11購物節”不僅是消費者買買買的狂歡,也是阿里巴巴內部的一場技術盛宴,背后有著多樣而穩定的各類技術進行保障。你想不想擁有這些技術呢?容器Docker、中間件、云存儲、彈性計算、數據智能分析、數據倉庫、大數據,想學的到騰科來,這些技術通通有!快到騰科來儲備技術能量吧,豐富的技術資源和優惠的價格相得益彰之下,你還等什么呢??!
上一篇: 選Oracle培訓有門道,Oracle認證哪個機構好
下一篇: 創建一個數據庫需注意哪些原則