“利用AWS豐富的功能和靈活的計(jì)費(fèi)模式，我們不僅提升了系統(tǒng)的穩(wěn)定性、可靠性和動(dòng)態(tài)擴(kuò)容能力，從而輕松應(yīng)對(duì)業(yè)務(wù)的爆發(fā)式增長(zhǎng)，同時(shí)還使計(jì)算成本降低了1/3、運(yùn)維成本降低了60%?！?/strong>
——馮華寅，芝麻科技聯(lián)合創(chuàng)始人&CTO
一家快速成長(zhǎng)的初創(chuàng)企業(yè)
南京芝麻信息科技有限公司（以下簡(jiǎn)稱“芝麻科技”）是國(guó)內(nèi)知名的線下大數(shù)據(jù)服務(wù)公司，致力于線下消費(fèi)者大數(shù)據(jù)的采集與精細(xì)分析，通過(guò)數(shù)據(jù)服務(wù)驅(qū)動(dòng)商業(yè)效率的提升。芝麻科技的主要產(chǎn)品線是MOLLI，這是一組專門(mén)針對(duì)購(gòu)物中心提升業(yè)務(wù)效率的數(shù)據(jù)分析解決方案，涵蓋客流分析、廣告營(yíng)銷等多個(gè)方面，目標(biāo)是解決商場(chǎng)的引流問(wèn)題以及品牌客戶的精準(zhǔn)廣告投放問(wèn)題。
目前，芝麻科技已經(jīng)在全國(guó)覆蓋10萬(wàn)余消費(fèi)生活場(chǎng)所、七億部移動(dòng)設(shè)備，日處理數(shù)據(jù)近百億條。芝麻科技服務(wù)的客戶包括寶潔、歐萊雅、歐時(shí)力、赫基、勁霸、北汽、福特、碧桂園、紅星美凱龍、靜安嘉里中心、佳兆業(yè)商業(yè)、虹悅城等國(guó)內(nèi)外知名企業(yè)，服務(wù)的主要行業(yè)包括母嬰、化妝品、汽車(chē)、房產(chǎn)、時(shí)尚等。
業(yè)務(wù)爆發(fā)式增長(zhǎng)帶來(lái)的挑戰(zhàn)
芝麻科技成立于2013年，是一家創(chuàng)業(yè)公司，為了快速開(kāi)展業(yè)務(wù)，芝麻科技在成立之初就決定在云平臺(tái)進(jìn)行產(chǎn)品開(kāi)發(fā)和部署。
在遷移至AWS之前，芝麻科技使用了其他云服務(wù)商的云平臺(tái)，通過(guò)在虛擬機(jī)上自建服務(wù)的方式來(lái)構(gòu)建應(yīng)用系統(tǒng)。隨著業(yè)務(wù)的快速發(fā)展，這種方式的弊端開(kāi)始顯現(xiàn)出來(lái)，主要體現(xiàn)在三個(gè)方面：
一、用于數(shù)據(jù)采集的Kafka集群、用于數(shù)據(jù)分析的Hadoop集群都需要自己搭建并配備專門(mén)的運(yùn)維團(tuán)隊(duì)，導(dǎo)致前期的學(xué)習(xí)成本和運(yùn)維成本相對(duì)較高；
二、系統(tǒng)架構(gòu)動(dòng)態(tài)擴(kuò)容不方便，為了滿足系統(tǒng)的峰值需求，必須高配資源，這造成了極大的資源浪費(fèi)，最嚴(yán)重的時(shí)候有2/3的計(jì)算資源都是閑置的；
三、為了提高系統(tǒng)的穩(wěn)定性和可靠性，需要自行設(shè)計(jì)很多基礎(chǔ)服務(wù)的高可用和高性能基礎(chǔ)架構(gòu)方案，顯著增加系統(tǒng)的復(fù)雜性，使系統(tǒng)穩(wěn)定性難以得到保障。
“芝麻科技是創(chuàng)業(yè)公司，為了應(yīng)對(duì)瞬息萬(wàn)變的市場(chǎng)需求，我們希望能把人力資源聚焦在應(yīng)用的迭代開(kāi)發(fā)上，而不是把大量的時(shí)間和精力都花費(fèi)在IT基礎(chǔ)設(shè)施的運(yùn)維工作上?！敝ヂ榭萍悸?lián)合創(chuàng)始人&CTO馮華寅說(shuō)。
2016年9月，芝麻科技加入了“AWS云創(chuàng)計(jì)劃”，獲得了免費(fèi)的起步云資源、技術(shù)培訓(xùn)及支持服務(wù)，開(kāi)始熟悉和了解AWS云服務(wù)。經(jīng)過(guò)近一年的試用，芝麻科技從2017年底開(kāi)始將其整個(gè)應(yīng)用系統(tǒng)遷移至AWS ，借助AWS豐富的PaaS層服務(wù)，不僅極大地減少了對(duì)基礎(chǔ)架構(gòu)的人力投入，同時(shí)還大幅度提升了系統(tǒng)的穩(wěn)定性、可靠性和動(dòng)態(tài)擴(kuò)容能力，促進(jìn)了業(yè)務(wù)的快速增長(zhǎng)。
芝麻科技選擇AWS的原因
作為創(chuàng)業(yè)公司，芝麻科技的目標(biāo)是能實(shí)現(xiàn)產(chǎn)品的快速迭代，確保應(yīng)用系統(tǒng)穩(wěn)定可靠并具備優(yōu)異的動(dòng)態(tài)擴(kuò)容能力，同時(shí)還能大幅度節(jié)省成本?；谶@一目標(biāo)，芝麻科技對(duì)比了市場(chǎng)上主流的云服務(wù)提供商，最終AWS以豐富的產(chǎn)品和服務(wù)、靈活的計(jì)費(fèi)方式、完善的安全機(jī)制成為芝麻科技的不二之選。
1、豐富的產(chǎn)品和服務(wù)
AWS提供了豐富的產(chǎn)品和服務(wù)，完整地涵蓋了計(jì)算、存儲(chǔ)、數(shù)據(jù)庫(kù)、遷移、網(wǎng)絡(luò)和內(nèi)容分發(fā)、移動(dòng)服務(wù)、分析、管理、安全等用戶需要的各個(gè)方面，這些產(chǎn)品和服務(wù)不僅極大地簡(jiǎn)化了應(yīng)用系統(tǒng)的開(kāi)發(fā)，同時(shí)還保證了應(yīng)用系統(tǒng)的穩(wěn)定性和可靠性。
芝麻科技在遷移到AWS后，對(duì)原有的應(yīng)用系統(tǒng)進(jìn)行了結(jié)構(gòu)升級(jí)，用Amazon Kinesis替代了原來(lái)的Kafka集群，用Amazon EMR替代了自建的Hadoop集群，利用Kinesis完成數(shù)據(jù)的實(shí)時(shí)聚合，它每小時(shí)可以從數(shù)萬(wàn)種來(lái)源（如網(wǎng)站點(diǎn)擊流、財(cái)務(wù)交易、社交媒體源、定位追蹤事件等）中持續(xù)捕獲和存儲(chǔ)TB級(jí)數(shù)據(jù)，并將數(shù)據(jù)傳輸給后續(xù)的Amazon EMR大數(shù)據(jù)處理系統(tǒng)進(jìn)行分析處理。在這一過(guò)程中，進(jìn)入系統(tǒng)的實(shí)時(shí)數(shù)據(jù)在處理之前都存儲(chǔ)在Kinesis中，確保了整個(gè)系統(tǒng)的持久性和彈性?！癆WS上豐富的托管服務(wù)使我們的開(kāi)發(fā)人員無(wú)需再把大量的精力用于基礎(chǔ)架構(gòu)的維護(hù)，轉(zhuǎn)而專注于核心業(yè)務(wù)系統(tǒng)的創(chuàng)新和開(kāi)發(fā)?！瘪T華寅說(shuō)。
2、靈活的計(jì)費(fèi)方式
對(duì)所有創(chuàng)業(yè)公司來(lái)說(shuō)，如何降低成本至關(guān)重要。在云資源的使用上，AWS提供了三種計(jì)費(fèi)方式供用戶選擇，包括預(yù)留實(shí)例、按需實(shí)例和競(jìng)價(jià)實(shí)例，不同類型的實(shí)例價(jià)格差別很大，用戶可以根據(jù)自己的實(shí)際應(yīng)用需求進(jìn)行選擇，并利用AWS豐富的監(jiān)控和管理工具，以自動(dòng)化的方式隨時(shí)進(jìn)行調(diào)整，在確保系統(tǒng)可靠性和穩(wěn)定性的前提下盡可能降低成本。
例如，在芝麻科技的MOLLI系統(tǒng)中，大量的數(shù)據(jù)分析并不需要實(shí)時(shí)進(jìn)行，因此可以在集中進(jìn)行大數(shù)據(jù)處理時(shí)臨時(shí)啟動(dòng)多個(gè)競(jìng)價(jià)實(shí)例來(lái)快速完成處理任務(wù)?！爸ヂ榭萍嫉臉I(yè)務(wù)發(fā)展非常迅速，我們很難提前數(shù)月預(yù)估所需要的計(jì)算資源，因此那種按年購(gòu)買(mǎi)云資源的模式不適合我們?！瘪T華寅說(shuō)。
3、完善的安全機(jī)制
芝麻科技為企業(yè)客戶提供服務(wù)，因此系統(tǒng)與數(shù)據(jù)的安全性必須得到充分保障。AWS本身的架構(gòu)設(shè)計(jì)、安全管理和豐富的安全服務(wù)功能為用戶提供了基礎(chǔ)架構(gòu)層面的安全保障，用戶只需要負(fù)責(zé)其應(yīng)用系統(tǒng)本身的安全性即可。
此外，AWS專業(yè)的技術(shù)支持服務(wù)、極高的品牌知名度和豐富的云服務(wù)運(yùn)營(yíng)經(jīng)驗(yàn)也是芝麻科技選擇AWS的原因。
使用AWS云服務(wù)的成效
芝麻科技在2016年加入AWS針對(duì)創(chuàng)業(yè)型公司的云創(chuàng)計(jì)劃，試用了大部分AWS云服務(wù)，并結(jié)合自身業(yè)務(wù)需求，重點(diǎn)評(píng)估了Amazon EMR、Kinesis、Amazon Relational Database Service (Amazon RDS)等服務(wù)。隨后從2017年8月開(kāi)始將整個(gè)系統(tǒng)向AWS遷移，經(jīng)過(guò)遷移評(píng)估、架構(gòu)設(shè)計(jì)、遷移規(guī)劃、試運(yùn)行、系統(tǒng)切換等一系列過(guò)程，成功地完成了整個(gè)系統(tǒng)的遷移和架構(gòu)升級(jí)，所使用的AWS云服務(wù)包括Amazon Elastic Compute Cloud (Amazon EC2)、AWS Auto Scaling、Elastic Load Balancing、Amazon Simple Storage Service (Amazon S3)、Amazon Glacier、Kinesis、Amazon EMR、Amazon RDS、Amazon CloudWatch、Amazon Redshift、AWS Lambda等。圖1是芝麻科技使用AWS云服務(wù)的架構(gòu)示意圖。
芝麻科技使用AWS云服務(wù)的架構(gòu)示意圖
將整個(gè)應(yīng)用系統(tǒng)完整地遷移到AWS上，使芝麻科技在多方面獲益。
首先，是大幅度降低了計(jì)算資源使用成本和運(yùn)維成本。芝麻科技將AWS特有的按需、預(yù)留和競(jìng)價(jià)實(shí)例與自身的業(yè)務(wù)特性相結(jié)合，通過(guò)組合不同種類的實(shí)例，獲得了超高的性價(jià)比，僅在后端用Amazon EMR進(jìn)行大數(shù)據(jù)處理方面，由于采用了競(jìng)價(jià)實(shí)例和彈性伸縮技術(shù)，在充分滿足業(yè)務(wù)對(duì)計(jì)算性能要求的前提下，將計(jì)算成本減少到之前自建Hadoop集群時(shí)的一半。同時(shí)，利用AWS Auto Scaling、ELB等服務(wù)，應(yīng)用系統(tǒng)僅在需要時(shí)增添實(shí)例，一旦完成處理，即可立刻釋放實(shí)例，這使得總的計(jì)算資源使用成本降低了1/3。在運(yùn)維方面，通過(guò)使用AWS上的PaaS層服務(wù)，減少了運(yùn)維人員的投入，運(yùn)維人員從原來(lái)的5人縮減為2人，節(jié)省了60%的人力成本。
其次，是縮短了系統(tǒng)開(kāi)發(fā)、測(cè)試及部署時(shí)間，項(xiàng)目的迭代周期從原來(lái)的4個(gè)月縮短到2個(gè)月。系統(tǒng)的性能也得到大幅度提升，MOLLI系統(tǒng)大量采用了AWS的托管服務(wù)，組件的高可用性由AWS保證，減少了自行設(shè)計(jì)帶來(lái)的復(fù)雜度，數(shù)據(jù)存儲(chǔ)的持久性、系統(tǒng)的彈性及安全性都得到充分的保證?！案匾氖鞘褂肁WS提升了系統(tǒng)的穩(wěn)定性和動(dòng)態(tài)擴(kuò)容能力，使我們能夠輕松應(yīng)對(duì)業(yè)務(wù)的爆發(fā)式增長(zhǎng)?！瘪T華寅說(shuō)道。
免責(zé)聲明：此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評(píng)論性文章，所有文字和圖片版權(quán)歸作者所有，且僅代表作者個(gè)人觀點(diǎn)，與極客網(wǎng)無(wú)關(guān)。文章僅供讀者參考，并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。投訴郵箱：editor@fromgeek.com。
- 蜜度索驥：以跨模態(tài)檢索技術(shù)助力“企宣”向上生長(zhǎng)
- 一半是產(chǎn)品，一半是服務(wù)，華為品牌帶給消費(fèi)者的有贊嘆更有溫暖
- 在人群里，看見(jiàn)「鯤鵬開(kāi)發(fā)者」
- 游戲體驗(yàn)天花板，一加 Ace 5 系列售價(jià) 2299 元起
- 為創(chuàng)意和管理提效，新廣告投放（3.0）驅(qū)動(dòng)消費(fèi)品商家高效增長(zhǎng)
- 榮耀Magic7系列全面升級(jí)大王影像，首發(fā)AI超級(jí)長(zhǎng)焦拍遠(yuǎn)更清晰
- 2024過(guò)去了，留下十個(gè)科技記憶
- 年貨節(jié)如何大爆單？別錯(cuò)過(guò)巨量千川這三波紅利
- 美國(guó)無(wú)人機(jī)禁令升級(jí)？當(dāng)?shù)乜茖W(xué)家率先“喊疼”：我們離不開(kāi)大疆
- iQOO Neo10 Pro：性能特長(zhǎng)之外，亦有全能實(shí)力
- 自動(dòng)駕駛第一股的轉(zhuǎn)型迷途：圖森未來(lái)賭上了AIGC
免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。
