人工智能平臺公司啟元世界正在借助亞馬遜云科技的“智能湖倉”進行云上創新，實現數據的融合和統一治理，加快其全生命周期產品矩陣理念的落地和規模發展。同時，在流數據處理、批數據處理和即席查詢等不同數據場景下，利用“智能湖倉”架構專門構建的理念，對流數據處理系統實現了分鐘級部署，并能夠輕松承載百萬QPS（每秒查詢率）流數據；還將批處理運行時間減少80%，運營總成本下降50%。

啟元世界成立于2017年8月，是一家領先的人工智能平臺公司，將先進的人工智能技術應用于智能決策和數字娛樂領域。公司擁有深度學習、強化學習、云計算等領域自主研發的核心技術、產品，積累了豐富的行業應用經驗，為公共科技、數字娛樂、電力能源、交通物流等行業提供基于平臺產品的人工智能解決方案。目前，啟元世界已與數十家行業知名客戶和機構建立合作關系。

啟元世界的目標是打造游戲全生命周期的產品矩陣，用領先的AI和數據分析能力，幫助游戲快速上線，改善游戲體驗，提升客戶留存，獲得更大成功。作為服務全球客戶的人工智能平臺公司，啟元世界的技術架構必須做到全球部署，并且需要有極高的可靠性和可擴展性。為了突出和強化在人工智能領域的優勢，啟元世界還希望把更多精力聚焦在算法迭代與產品打磨上，這就需要一個成熟、穩定、免運維的大數據托管服務。此外，服務上線后，伴隨業務規模的快速增長，游戲運營過程中的波峰、波谷也會愈發明顯，這就需要一個靈活敏捷且具有彈性伸縮能力的技術架構。

亞馬遜云科技的“智能湖倉”架構將全面而深入地數據服務無縫集成，打通了數據湖和數據倉庫之間的數據移動及訪問。并且進一步實現了數據在數據湖、數據倉庫，以及在數據查詢、數據分析、機器學習等各類專門構建的服務之間按需移動，從而形成統一且連續的整體，滿足客戶各種實際業務場景下的不同需求。

亞馬遜云科技的“智能湖倉”架構涵蓋數據源、數據攝取層、存儲層、目錄層、數據處理層和消費層六層架構，可幫助客戶輕松應對海量業務數據，充分挖掘數據價值。

在流處理方面，Amazon Kinesis云原生流數據全棧解決方案可以一站式解決游戲數據收集、分析、歸檔問題，從運維敏捷性和性能上都為啟元世界提供了非常優秀的體驗。Amazon Kinesis自身就具有面向公網收集流數據的能力，并且高可用，易于擴展，有完善的鑒權機制，也不需要管理底層硬件。另外，鑒權機制還可以一鍵把數據歸檔到Amazon Simple Storage Service (Amazon S3)，或者使用Flink框架直接對流數據進行業務分析。使用Amazon Kinesis之后，啟元世界流數據處理系統實現了分鐘級部署，并能夠輕松承載百萬QPS（每秒查詢率）流數據。

在批處理方面，原先啟元世界習慣于使用Spark進行大數據分析，但管理Spark集群耗費團隊太多精力，且每天等待數據處理時間過于漫長，導致無法高效地把主要精力投入到業務創新。得益于亞馬遜云科技擁抱開源的產品理念，Amazon EMR能夠在云上輕松部署彈性可擴展的Spark集群環境，進行SQL開發工作，完全不用擔心集群維護和計算能力受限。此外，亞馬遜云科技托管的 Apache Airflow，也能夠幫助啟元世界實現批處理過程的自動化。通過使用Amazon EMR 和亞馬遜云科技托管的 Apache Airflow，批處理運行時間減少80%，在不改變采用開源組件開發體驗的前提下，啟元世界運營總成本下降50%，能夠承載的查詢數量與復雜度上升數倍。

在即席查詢方面，啟元世界業務的快速增長需要越來越多的報表，業務管理和決策也會頻繁提出臨時的查詢需求，這些都給大數據團隊帶來挑戰。因此公司需要真正的交互式大數據查詢及報表分析功能，讓業務人員和管理人員能夠時刻受益于大數據的潛在價值。通過采用Amazon Glue和Amazon Athena，啟元世界可以在控制臺上快速使用SQL查詢數據；Amazon QuickSight可以幫助啟元世界快速構建數據報表，或根據自己的需求完成數據查詢。秒級響應各種數據查詢及分析請求，數據報表生成加快一倍。

fqj