??? 隨著城市建設的不斷升級，智能交通系統建設規模正在不斷擴大，交通數據采集的范圍、廣度和深度急劇增加，從以往的卡口、微波雷達、GPS、視頻等，向電子車牌、車聯網等綜合方式發展。交通數據生產的速度越來越快，種類越來越多，對于數據架構提出了空前的挑戰。傳統的交通數據存儲模式已經漸漸不能滿足日益提高的存儲和分析的要求。
??? 在這樣的背景下，企業如果不進行數據架構能力的升級，勢必會在競爭中黯然失色。出于戰略性的考慮，銀江研究院在2014年底布局了以交通大數據為切入點的技術研發規劃。大數據研究所經過1年多的研發積累，成功地將交通大數據的架構進行了升級，研發的銀江交通大數據管理平臺于近日通過了官方性能測試，標志著銀江研究院關于交通大數據項目的方案解決能力和項目建設能力達到了行業領先水平。

銀江交通大數據管理平臺介紹

??? 銀江交通大數據管理平臺采用了Hadoop + Hbase+ Elasticsearch + Zookeeper的技術架構。在研發過程中采用了大量的優化策略，使得平臺性能進一步提升，并通過標準化的存儲模型、統一的API服務，提高了平臺的易用性，傳統研發人員無需了解平臺架構，即可在該平臺上進行開發。
??? 其中，Hadoop是一個專門對大量數據進行分布式處理的軟件框架，能夠處理PB級數據，具有高可靠性、高擴展性、高效性和高容錯性等特點。HBase是一個高可靠、高性能、面向列、可伸縮的分布式存儲系統，既能存儲結構化數據，也能存儲非結構化數據。平臺采用CentOS系統，能夠運行在普通PC Server上搭建起大規模結構化存儲集群上，可以支持PB級數據存儲和查詢。
??? 根據浙江省智能技術質量檢驗中心的檢測報告顯示，銀江交通大數據管理平臺單節點單客戶端的并發寫入速度為7100條/秒（2KB/條），50億條卡口數據查詢響應時間平均小于0.1秒，相比于某些廠商10億數據秒級的查詢響應時間，銀江交通大數據管理平臺真正做到了實時響應，此外，圖片并發讀寫可以充分利用網絡帶寬，逼近I/O性能極限。平臺能輕松應對千億條以上規模數據的存儲和管理，能夠滿足當前城市級別的交通結構化數據在若干年內的存儲和管理需求。

銀江交通大數據管理平臺優勢

1. 存儲無上限，超大規模存儲成本優勢明顯
??? 銀江交通大數據管理平臺設計采用低成本PC存儲服務器集群方式，相比專用的小型機，成本明顯降低。當系統存儲空間不足時，在保證系統服務連續的前提下，可以通過添加節點，對系統進行在線動態擴容。以浙江某城市為例，用普通的關系型數據庫最多只能存儲3個月的交通數據，采用銀江交通大數據管理平臺，可以將存儲時間延長到24個月甚至更久。
2. 冗余設計，更加可靠
??? 平臺采用多備份存儲機制，保證在服務器出現故障時，系統仍然能夠響應業務應用的數據訪問請求，同時后端系統可自動進行故障數據的遷移和恢復。
3. 并行設計，超高速寫入
??? 相比于單臺服務器限制于帶寬，平臺充分利用集群多節點的優勢，將大量的數據及訪問請求進行合理的水平、垂直分割，充分發揮網絡以及服務器的I/O吞吐能力。
4. 多種搜索分析引擎，滿足不同開發需求
??? 平臺支持Elasticsearch全文搜索引擎，實現毫秒級查詢響應；支持Hive/ Spark等面向分析的計算引擎，實現離線復雜分析和近實時的分析模型；支持Rest API服務風格的交通數據獲取，能夠滿足不同的開發需求。

應用前景

??? 隨著銀江交通大數據管理平臺通過測試，大數據研究所形成了包括大數據存儲、管理、挖掘在內的一套完整的大數據管理平臺解決方案。目前已經與杭州、南昌等地交警部門展開合作，將陸續推出快速路網信號決策優化系統、卡口大數據研判與實戰平臺等大數據產品。
??? 隨著物聯網建設的不斷深化，除了交通領域，在醫療，智能建筑、金融、體育等其他領域，大數據也將迎來爆發。例如，在醫療領域，預計到2020年，人均傳感器將從現在的不足0.2個增加到10個以上，意味著傳感器產生的醫療數據至少增加50倍?！?015年中國大數據發展調查報告》顯示，2015年中國大數據市場規模達到116億元，增速達38%，預計到2020年，中國大數據產業市場規模將達到8200億元。
??? 展望未來，銀江研究院將會對數據架構升級加大投入，交通大數據管理平臺將會得到深度的研發和進一步的拓展，并在智慧醫療、數據開放等各個領域發揮重要作用。

?