2014KickoffMeeting事业群报告-凌群电脑THESYSCOMGROUP.PDFVIP

挑戰極限 凌羣高速資料儲存大未來研討會 解密新一代高頻交易解決方案 報告人：陳在正 2017.4.28 大綱 • 趨勢與挑戰 • Low-Latency流程探討 • 相關技術方案 • 凌羣整合解決方案 • 問題討論 2 趨勢與挑戰 • 高頻交易 High-frequency trading • 低延遲交易 Low-Latency Trading • 演算法交易Algo trading • High-performance computing • Large-scale web applications • Big Data • … 3 Low-Latency探討-1 來回延遲時間的深入探討：(交易所-證券商) 1. 從事件發生到放上網路 • 交易所系統需要處理事件(例如下單),然後儘快地送上網路以保持該消 息在市場上的有用性 • 有時交易所提供最快的行情服務給高級使用者 2. 交易所到交易軟體 因有距離,內部路由的處理量,不同網路間的轉換, 從多個行情來源的海 消息需要傳送,接收與處理,可能造成TCP-Incast • 從交易所的地點傳送到交易軟體的地點 • 資料分發網路的延誤 • 內部網路中的傳送與處理 • 內部轉發系統中的處理 • 外部與內部網路的頻寬,消息包大小 • 傳送與接收的資料量 4 Low-Latency探討-2 來回延遲時間的深入探討：(證券商-交易所) 3. 應用軟體的決策 不真正該算到低延遲,而是交易商使用高性能交易系統處理資料的能力 • 應用介面的處理 • 應用軟體的處理 • 內部系統間的傳送 • 內部系統間的網路處理/頻寬/包大小/傳送 (packet lost) 4. 下單到交易所 類似交易所與應用軟體間的延遲 證券商的競爭優勢,與證券商櫃檯與訂單管理系統的速度有直接關係 • 內部訂單管理系統的處理 • 券商系統的處理 • 應用軟體與操盤手之間的傳送 • 操盤手與交易所之間的傳送 5. 訂單撮合 • 交易所撮合該訂單所需要的時間 (queue) 5 u/ 相關技術方案 • HW: CPU/Cache(L1/2/3)/Memory/SSD(All- Flash)/Network(10/40/100GbE).. • RDMA (Remote Direct Memory Access) • FPGA 程式技術自行設計下單晶片(mellanox 、solarflare) • DCTCP (Data Center TCP) – Low Latency 、High Throughput • Multi-core Programming  Atomic Library  Semaphores  Concurrent FIFO Queues  Non-Blocking Synchronization • Shared Memory (for IPC • Pipelining -- Adaptive Data Forward Count/Time • Buffer/timeout/… system/network parameters tuning  … Goal: Reduce queuing delays to zero. 6 凌羣整合解決方案 • 更好的硬體(CPU 、Cache) 、並行處理Parallel Computing(QCT)—應用在VM (local) 、Co-Location • 更快的網卡 LAN optimation (m