久草视频2-久草视-久草社区视频-久草色在线-久草色视频-久草软件

換個思路看12306,其核心模型設計思路到底復雜在哪里?

36氪  ?  掃碼分享
我是創始人李巖:很抱歉!給自己產品做個廣告,點擊進來看看。  
不就是一個訂票網站嗎,12306 的核心模型設計思路究竟復雜在哪里?

編者按:本文作者湯雪華,網名 netfocus,2006年 畢業于浙江大學,目前住在杭州。對 DDD,以及 CQRS 架構比較感興趣。目前一直致力于開發和完善 ENode、EQueue。文章首發于微信公眾號InfoQ(ID:infoqchina),授權 36 氪轉載。

元宵節結束,年就真的過完了。揮別故里,回到打拼的城市,理性思維是否也跟著工作狀態一起回歸了呢?每一年的春運都是對 12306 的一次大考,拋去盲從和偏見,讓我們用工程師的思維重新打量、從業務分析的角度去探討,12306 的核心模型設計思路和架構設計到底復雜在哪里?

為什么我要研究這個問題?

春節期間,無意中看到一篇文章,文章中講到 12306 的業務復雜度遠遠比淘寶天貓這種電商網站要復雜。后來自己想想,也確實如此。所以,很想挑戰一下 12306 這個系統的核心領域模型的設計。一般的電商網站,購買都是基于商品的概念,每個商品有一定量的庫存,用戶的購買行為是針對商品的。當用戶發起購買行為時,系統只需要生成訂單并對用戶要購買的商品減庫存即可。但是,12306 就不是那么簡單了,具體復雜在哪里,我下面會進一步分析。

另外一個讓我寫這篇文章的原因,是我發現也許是否是因為目前 12306 的核心領域模型設計的不夠好,導致用戶購票時要處理的業務邏輯異常復雜,維護數據一致性的難度也幾百倍的上升,同時面對高并發的訂票也難以支持很高的 TPS。我覺得,越是復雜的業務,就越要重視業務分析,重視領域模型的抽象和設計。如果不假思索,憑以往經驗行事,則很可能會被以往的設計經驗先入為主,陷入死胡同。

技術人員往往更注重技術層面的解決方案,比如一上來就分析如何集群、如何負載均衡、如何排隊、如何分庫分表、如何用鎖,如何用緩存等技術問題,而忽略了最根本的業務層面的思考,如分析業務、領域建模。我認為越是復雜的業務系統,則越要設計一個健壯的領域模型。如果一個系統的架構我們設計錯了,還有補救的余地,因為架構最終沉淀的只是代碼,調整架構即可(一個系統的架構本身就是不斷演進的);而如果領域模型設計錯了,那要補救的代價是非常大的,因為領域模型沉淀的是數據結構及其對應的大量數據,對任何一個大型系統,要改核心領域模型都是成本非常高的。

本文的重點不是在如何解決高并發的問題,而是希望從業務角度去分析,12306 的理想模型應該是怎么樣的。網上目前談 12306 的文章貌似都是千篇一律的只談技術,不談業務分析和如何建模的。所以我想寫一下自己的設計和大家交流學習。

1、需求概述

12306 這個系統,核心要解決的問題是網上售票。涉及到 2 個角色使用該系統:用戶、鐵道部。用戶的核心訴求是查詢余票、購票;鐵道部的核心訴求是售票。購票和售票其實是一個場景,對用戶來說是購票,對鐵道部來說是售票。因此,我們要設計一個在線的網站系統,解決用戶的查詢余票、購票,以及鐵道部的售票這 3 個核心訴求。看起來,這 3 個場景都是圍繞火車票展開的。

查詢余票:用戶輸入出發地、目的地、出發日三個條件,查詢可能存在的車次,用戶可以看到每個車次經過的站點名稱,以及每種座位的余票數量。

購票:購票分為訂票和付款兩個階段,本文重點分析訂票的模型設計和實現思路。

其實還有很多其他的需求,比如給不同的車次設定銷售座位數配額,以及不同的區段設置不同的限額。但相比前面兩個需求來說,我覺得這個需求相對次要一些。

2、需求分析

確實, 12306 也是一個電商系統 ,而且看起來商品就是票了。因為如果把一張票看成是一個商品,那購票就類似于購買商品,然后每張票都有庫存,商品也有庫存的概念。但是如果我們仔細想想,會發現 12306 要復雜很多,因為我們無法預先確定好所有的票,如果非要確定,那只能通過窮舉法了。

我們以北京西到深圳北的 G71 車次高鐵為例(這里只考慮南下的方向,不考慮深圳北到北京西的,那是另外一個車次,叫 G72),它有 17 個站(北京西是 01號站,深圳北是 17號站),3 種座位(商務、一等、二等)。表面看起來,這不就是 3 個商品嗎?G71 商務座、G71 一等座、G71 二等座。大部分輕易噴 12306 的技術人員(包括某些中等規模公司的專家、CTO)就是在這里栽第一個跟頭的。實際上,G71 有 136*3=408 種商品(408 個 SKU),怎么算來的?如下:

如果賣北京西始發的,有 16 種賣法(因為后面有 16 個站),北京西到:保定、石家莊、鄭州、武漢、長沙、廣州、虎門、深圳。。。。都是一個獨立的商品,同理,石家莊上車的,有 15 種下車的可能,以此類推,單以上下車的站來計算,有 136 種票:16+15+14....+2+1=136。每種票都有 3 種座位,一共是 408 個商品。

為了方便后面的討論,我們先明確一下票是什么?

一張票的核心信息包括:出發時間、出發地、目的地、車次、座位號。持有票的人就擁有了一個憑證,該憑證表示持有它的人可以坐某個車次的某個座位號,從某地到某地。所以,一張票,對用戶來說是一個憑證,對鐵道部來說是一個承諾;那對系統來說是什么呢?不知道。這就是我們要分析業務,領域建模的原因,我們再繼續思考吧。

明白了票的核心信息后,我們再看看 G71 這個車次的高鐵,可以賣多少張票?

討論前先說明一下,一輛火車的物理座位數(站票也可以看成是一種座位,因為站票也有數量配額)不等于可用的最大配合。所有的物理座位不可能都通過 12306 網站來銷售,而是只會銷售一部分,比如 40%。其余的還是會通過線下的方式銷售。不僅如此,可能有些站點上車的人會比較多,有些比較少,所以我們還會給不同的區間配置不同的限額。

比如 D31 北京南至上海共有 765 張,北京南有 260 張,楊柳青有 80 張,泰安有 76 張。如果楊柳青的 80 張票售完就會顯示無票,就算其他站有票也會顯示無票的。每個車次肯定會有各種座位的配額和限額的配置的,這種配置我目前無法預料,但我已經把這些規則都封裝近車次聚合根里了,所有的配置策略都是基于座位類型、站點、區間配置的。關于票的配置抽象出來,我覺得主要有 3 種:

  1. 某個區段最多允許出多少張;

  2. 某個區段最少允許出多少張;

  3. 某個站點上車的最多多少張。

當用戶訂票時,把用戶指定的區段和這 3 種配置條件進行比較,3 個條件都滿足,則可以出票。不滿足,則認為無票了。下面舉個例子:

ABCDEFG,這是所有站點。座位總配額是 100,假設 B 站點上車,E 站下車的人比較少,那我們就可以設定 BE 這個區段最多只能出 10 張票。所以,只要是用戶的訂票是在這個區段內的,就最多出 10 張。再比如,一列車次,總共 100 個座位配額,希望全程票最少滿足 80 張,那我們只要給 AG 這個區段設定最少 80 張。那任何訂票請求,如果是子區間的,就不能超過 100-80,即 20 張。這兩種條件必須同時滿足,才允許出票。

但是,不管如何做配額和限額,我們總是針對某個車次進行配置,這些配置只是車次內部售票時的一些額外的判斷條件(業務規則),不影響車次模型的核心地位和對外暴露的功能。所以,為了本文討論的清楚起見,我后續的討論都不涉及配額和限額的問題,而是認為任何區段都可以享受火車最大的物理座位數。

并且,為了討論問題方便,我們減少一些站點來討論。假設某個車次有 A,B,C,D 四個站點。那 001 這個人購買了 A,B 這個區間,系統會分配給 001 一個座位 x;但是因為 001 坐到 B 站點后會下車,所以相當于 x 這個座位又空出來了,也就是說,從 B 站點開始,系統又可以認為 x 這個座位是可用的。所以,我們得出結論:同一個座位,其實可以同時出售 AB,BC 這兩張票。通過這個簡單的分析,我們知道,一列火車雖然只有有限的座位數,比如 1000 個座位。但可以賣出的票遠遠不止 1000 個。

還是以 A,B,C,D 四個站點為例,假如火車總共有 1000 個座位,那 AB 可以賣 1000 張,BC 也可以賣 1000 張,同樣,CD 也可以賣 1000 張。也就是說,理論上最多可以賣出 3000 張票。但是如果換一種賣法,所有人都是買 ABCD 的票,也就是說所有的票都是經過所有站點的,那就是最多只能賣出 1000 張票了。而實際的場景,一定是介于 1000 到 3000 之間。然后實際的 G71 這個車次,有 17 個站,那到底可以賣出多少個票,大家應該可以算了吧。理論上這 17 個站中的任意兩個站點之間所形成的線段,都可以出售為一張票。我數學不好,算不太清楚,麻煩有數學好的人幫我算算,呵呵。

通過上面的分析,我們知道一張票的本質是某個車次的某一段區間(一條線段),這個區間包含了若干個站點。然后我們還發現,只要區間不重疊,那座位就不會發生競爭,可以被回收利用,也就是說,可以同時預先出售。

另外,經過更深入的分析,我們還發現區間有 4 種關系:

  • 不重疊;

  • 部分重疊;

  • 完全重疊;

  • 覆蓋。

不重疊的情況我們已經討論過了,而覆蓋也是重疊的一種。所以我們發現如果重疊,比如有兩個區間發生重疊,那重疊部分的區間(可能夸一個或多個站點)是在爭搶座位的。因為假設一列火車有 100 個座位,那每個原子區間(兩個相鄰站點的連線),最多允許重疊 99 次。

所以,經過上面的分析,我們知道了一個車次能夠出售一張車票的核心業務規則是什么?就是:這張車票所包含的每個原子區間的重疊次數加 1 都不能超過車次的總座位數,實際上重疊次數 +1 也可以理解為線段的厚度。

3、模型設計

上面我分析了一下票的本質是什么。那接下來我們再來看看怎么設計模型,來快速實現購票的需求,重點是怎么設計商品聚合以及減庫存的邏輯。

傳統電商的思路

如果按照普通電商的思路,把票(站點區間)設計為商品(聚合根),然后為票設計庫存數量。我個人覺得是很糟糕的。因為一方面這種聚合根非常多(上面的 G71 就有 408 個);另一方面,即便枚舉出來了,一次購票也一定會影響非常多其他聚合根的庫存數量(只要被部分或全部重疊的區間都受影響)。這樣的一次訂單處理的復雜度是難以評估的。而且這么多聚合根的更新要在一個事務里,這不是為難數據庫嗎?而且,這種設計必然帶來大量的事務的并發沖突,很可能導致數據庫死鎖。

總之,我認為這種是典型的由于領域模型的設計錯誤,導致并發沖突高、數據持久化落地困難。或者如果要解決并發問題,只能排隊單線程處理,但是仍然解決不了要在一個事務里修改大量聚合根的尷尬局面。

聽說 12306 是采用了 Pivotal Gemfire 這種高大上的內存數據庫,我對這個不太了解。我不可想象要是不使用內存數據庫,他們要怎么實現車次內的票之間的數據強一致性(就是保證所有出售的票都是符合上面討論的業務規則的)?所以,這種設計,我個人認為是思維定勢了,把火車票看成是普通電商的商品來看待。所以,我們有時做設計又要依賴于經驗,又要不能被以往經驗所束縛,真的不容易,關鍵還是要根據具體的業務場景多多深入分析,盡量分析抽象出問題的本質出來,這樣才能對癥下藥。那是否有其他的設計思路呢?

我的思路

1、聚合設計

通過上面的分析我們知道,其實任何一次購票都是針對某個車次的,我認為車次是負責處理訂票的聚合根。我們看看一個車次包含了哪些信息?一個車次包括了:

  1. 車次名稱,如 G71;

  2. 座位數,實際座位數會分類型,比如商務座 20 個,一等座 200 個;二等座 500 個;我們這里為了簡化問題,可以暫時忽略類型,我認為這個類型不影響核心的模型的設計決策。需要格外注意的是:這里的座位數不要理解為真實的物理座位數,很有可能比真實的座位數要少。因為我們不可能把一個車次的所有座位都在網上通過 12306 來出售,而是只出售一部分,具體出售多少,要由工作人員人工指定。

  3. 經過的站點信息(包括站點的 ID、站點名稱等),注意:車次還會記錄這些站點之間的順序關系;

  4. 出發時間;看過 GRASP 九大模式中的信息專家模式的同學應該知道,將職責分配給擁有執行該職責所需信息的類。

我們這個場景,車次具有一次出票的所有信息,所以我們應該把出票的職責交給車次。另外學過 DDD 的同學應該知道,聚合設計有一個原則,就是:聚合內強一致性,聚合之間最終一致性。經過上面的分析,我們知道要產生一張票,其實要影響很多和這個票對應的線段相交的其他票的可用數量。因為所有的站點信息都在車次聚合內部,所以車次聚合內部自然可以維護所有的原子區間,以及每個原子區間的可用票數(相當于是庫存數)。當一個原子區間的可用票數為 0 的時候,意味著火車針對這個區間的票已經賣完了。所以,我們完全可以讓車次這個聚合根來保證出票時對所有原子區間的可用票數的更新的強一致性。對于車次聚合根來說,這很簡單,因為只是幾次簡單的內存操作而已,耗時可以忽略。一列火車假如有 ABCD 四個站點,那原子區間就是 3 個。對于 G71,則是 16 個。

2、怎么判斷是否能出票?

基于上面的聚合設計,出票時扣減庫存的邏輯是:

根據訂單信息,拿到出發地和目的地,然后獲取這段區間里的所有的原子區間。然后嘗試將每個原子區間的可用票數減 1,如果所有的原子區間都夠減,則購票成功;否則購票失敗,提示用戶該票已經賣完了。是不是很簡單呢?知道了出票的邏輯,那退票的邏輯也就很簡單了,就是把這個票的所有原子區間的可用票數加 1 就 OK 了。如果我們從線段的厚度的角度去考慮,那出票時,每個原子區間的厚度就是 +1,退票時就是減一。就是相反的操作,但本質是一樣的。

所以,通過這樣的思路,我們將一次訂票的處理控制在了一個聚合根里,用聚合根內的強一致性的特性保證了訂票處理的強一致性,同時也保證了性能,免去了并發沖突的可能性。傳統電商那種把票單做類似商品的核心聚合根的設計,我當時第一眼看到就覺得不妥。因為這違背了 DDD 強調的強一致性應該由聚合根來保證、聚合根之間的最終一致性通過 Saga 來保證的原則。

還有一個很重要的概念我想說一下我的看法,就是座位和區間的關系。因為有些朋友和我講,考慮座位號的問題,雖然都能減 1,座位號也必須是同一個。我覺得座位是全局共享的,和區段無關(也許我的理解完全有誤,請大家指正)。座位是一個物理概念,一個用戶成功購買了一張票后,座位就會少一個,一張票唯一對應一個座位,但是一個座位有可能會對應多張票;而區間是一個邏輯上的概念,區間的作用有兩個:1)表示票的出發地和目的地;2)記錄票的可用數額。如果區間能連通(即該區間內的每個原子區間的可用數額都大于 0),則表示允許擁有一個座位。所以,我覺得座位和票(區間)是兩個維度的概念。

3、如何為票分配座位?

我覺得車次聚合根內部應該維護所有該車次已經售出的票,已經出售的票的的本質是區間和座位的對應關系。系統處理訂票時,用戶提交過來的是一段區間。所以,系統應該做兩個事情:

  1. 先根據區間去判斷是否有可用的座位;

  2. 如果有可用座位,則再通過算法去選擇一個可用的座位;

當得到一個可用座位后,就可以生成一張票了,然后保存這個票到車次聚合根內部即可。下面舉個例子:

假設現在的情況是座位有 3 個,站點有 4 個:

座位:1,2,3

站點:abcd

票的賣法 1:

票 1:ab,1

票 2:bc,2

票 3:cd,3

票 4:ac,3

票 5:bd,1

這種選座位的方式應該比較高效,因為總是優先從座位池里去拿座位,只有在萬不得已的時候才會去回收可重復利用的票。

上面的 4,5 兩個票,就是考慮回收利用的結果。

票的賣法 2:

票 1:ab,1

票 2:bc,1

票 3:cd,1

票 4:ac,2

票 5:bd,3

這種選座位的方式應該相對低效,因為總是優先會去掃描是否有可回收的座位,而掃描相對直接從座位池里去拿票總是成本相對要高的。

上面的 2,3 兩個票,就是考慮回收利用的結果。

但是, 優先從座位池里拿票的算法有缺陷,就是會出現雖然第一步判斷認為有可用的座位,但是這個座位可能不是全程都是同一個座位。 舉例:

假設現在的情況是座位有 3 個,站點有 4 個:

座位:1,2,3

站點:abcd

票的賣法 3:

票 1:ab,1

票 2:bc,2

票 3:cd,3

現在如果有人要買 ad 的票,那可用的座位有 2,或者 3。但是無論是 2 還是 3,都要這個乘客中途換車位。比如賣給他座位 2,那他 ab 是坐的座位 2,但是 bc 的時候要坐座位 1 的。否則拿票 2 的那個人上車時,發現座位 2 已經有人了。而通過優先回收利用的算法,是沒這個問題的。

所以,從上面的分析我們也知道選座位的算法該怎么寫了,就是采用優先回收利用座位的算法。我認為不管我們這里怎么設計算法,都不影響大局,因為這一切都只發生在車次聚合根內部,這就是預先設計好聚合根,明確出票職責在哪個對象上的好處。

4、模型分析總結

  1. 我認為票不是核心聚合根,票只是一次出票的結果,一個憑證而已。

  2. 12306 真正的核心聚合根應該是車次,車次具有出票的職責,一次出票具體做的事情有:

  • 判斷是否可出票;

  • 選擇可用的座位;

  • 更新一次出票時所有原子區間的可用票數,用于判斷下次是否能出票;

  • 維護所有已售出的票,用于為選擇可用座位提供依據。

通過這樣的模型設計,我們可以確保一次出票處理只會在一個車次聚合根內進行。這樣的好處是:

  1. 不需要依賴數據庫事務就能實現數據修改的強一致性,因為所有修改只在一個聚合根內發生;

  2. 在保證數據強一致性的同時還能提供很高的并發處理能力,具體設計見下面的架構設計。

4、架構設計

我覺得 12306 這樣的業務場景,非常適合使用 CQRS 架構;因為首先它是一個查多寫少、但是寫的業務邏輯非常復雜的系統。所以,非常適合做架構層面的讀寫分離,即采用 CQRS 架構。 而且應該使用數據存儲也分離的 CQRS。這樣 CQ 兩端才可以完全不需要顧及對方的問題,各自優化自己的問題即可。我們可以在 C 端使用 DDD 領域模型的思路,用良好設計的領域模型實現復雜的業務規則和業務邏輯。而 Q 端則使用分布式緩存方案,實現可伸縮的查詢能力。

1、訂票的實現思路

同時借助像 ENode 這樣的框架,我們可以實現 in-memory + Event Sourcing 的架構。Event Sourcing 技術,可以讓領域模型的所有狀態修改的持久化統一起來,本來要用 ORM 的方式保存聚合根最新狀態的,現在只需要簡單的通用的方式保存一個事件即可(一次訂票只涉及一個車次聚合根的修改,修改只產生一個事件,只需要持久化一個事件(一個 JSON 串)即可,保證了高性能,無須依賴事務,而且通過 ENode 可以解決并發問題)。

我們只要保存了聚合根每次變化的事件(事件的結構怎么設計,本文不做多的介紹了,大家可以思考下),就相當于保存了聚合根的最新狀態。而正是由于 Event Sourcing 技術的引入,讓我們的模型可以一直存活在內存中,即可以使用 in-memory 技術。不要小看 in-memory 技術,in-memory 技術在某些方面對提高命令的處理性能非常有幫助。

比如就以我們車次聚合根處理出票的邏輯,假設某個車次有大量的命令發送到分布式消息隊列,然后有一臺機器訂閱了這個隊列的消息,然后這臺機器處理這個車次的訂票命令時,由于這個車次聚合根一直在內存,所以就省去了每次要去數據庫取出聚合根的步驟,相當于少了一次數據庫 IO。

這樣的好處是,因為一個車次能夠真正出售的票是有限的,因為座位就那么幾個,比如就 1000 個座位,估計一般正常情況也就出個 2000 個左右的票吧(具體能出多少張票要取決于區間的相交程度,上面分析過)。也就是說,這個聚合根只會產生 2000 個事件,也就是說只會有 2000 個訂票命令的處理是會產生事件,并持久化事件;而其余的大量命令,因為車次在內存計算后發現沒有余票了,就不會做任何修改,也不會產生領域事件,這樣就可以直接處理下一個訂票命令了。這樣就可以大大提高處理訂票命令的性能。

另外一個問題我覺得還需要提一下,因為用戶訂票成功后,還需要付款。但用戶有可能不去付款或者沒有在規定的時間內完成付款。那這種情況下,系統會自動釋放該用戶之前訂購的票。所以基于這樣的需求,我們在業務上需要支持業務級別的 2pc。即先預扣庫存,也就是先占住這張票一定時間(比如 15 分鐘),然后付款成功后再真實給你這張票,系統做真正的庫存修改。

通過這樣的預扣處理,可以保證不會出現超賣的情況。這個思路其實和傳統電商比如淘寶這樣的系統類似,我就不多展開了,我之前寫的 Conference 案例也是這樣的思路,大家有興趣的可以去看一下我之前錄制的視頻。

2、查詢余票的實現思路

我覺得余票的查詢的實現相對簡單。雖然對于 12306 來說,查詢的請求占了 80%,提交訂單的請求只占 20%。但查詢由于對數據沒有修改,所以我們完全可以使用分布式緩存來實現。我們只需要精心設計好緩存的 key 即可;緩存 key 的多少要看成本,如果所有可能的查詢都設計對應的 key,那時間復雜度為 1,查詢性能自然高;但代價也大,因為 key 多了。如果想 key 少一點,那查詢的復雜度自然要上去一點。所以緩存設計無非就是空間換時間的思路。然后,緩存的更新無非就是:自動失效、定時更新、主動通知 3 種。通過 CQRS 架構,由于 CQ 兩端是事件驅動的,當 C 端有任何狀態變化,都會產生對應的事件去通知 Q 端,所以我們幾乎可以做到 Q 端的準實時更新。

同時由于 CQ 兩端的完全解耦,Q 端我們可以設計多種存儲,如數據庫和緩存(Redis 等);數據庫用于線下維護關系型數據,緩存用戶實時查詢。數據庫和緩存的更新速度相互不受影響,因為是并行的。對同一個事件,可以 10 臺機器負責更新緩存,100 臺機器負責更新數據庫。即便數據庫的更新很慢,也不會影響緩存的更新進度。這就是 CQRS 架構的好處,CQ 的架構完全不同,且我們隨時可以重建一種新的 Q 端存儲。不知道大家體會到了沒有?

關于緩存 key 的設計,我覺得主要從查詢余票時傳遞的信息來考慮。12306 的關鍵查詢是:出發地、目的地、出發日期三個信息。我覺得有兩種 key 的設計思路:

  1. 直接設計了該查詢條件的 key,然后快速拿到車次信息,直接返回;這種方式就是要求我們系統已經枚舉了所有車次的所有可能出現的票(區間)的緩存 key,相信你一定知道這樣的 key 是非常多的。

  2. 不是枚舉所有區間,而是把每個車次的每個原子區間(相鄰的兩個站點所連成的直線)的可用票數作為 key。這樣,key 就非常少了,因為車次假如有 10000 個,然后每個車次平均 15 個區間,那也就 15W 個 key 而已。當我們要查詢時,只需要把用戶輸入的出發地和目的地之間的所有原子區間的可用票數都查出來,然后比較出最小可用票數的那個原子區間。則這個原子區間的可用票數就是用戶輸入的區間的可用票數了。當然,到這里我提到考慮出發日期。我認為出發日期是用來決定具體是哪個車次聚合根的。同一個車次,不同的日期,對應的聚合根實例是不同的,即便是同一天,也可能有多個車次聚合根,因為有些車次一天有幾班的,比如上午 9 點發車的一班,下午 3 點發車的一般。所以,我們也只要把日期也作為緩存 key 的一部分即可。

總結

本文完全是憑自己對 12306 這個網站的核心業務的簡單思考而得到的一些設計結果。如果真正的 DDD 領域建模,更多的是要和業務一線的工作人員、領域專家進行深入溝通,才能更深入的了解該領域內的業務知識,從而才能設計出更靠譜的領域模型和架構設計。

非常慚愧,我沒有上 12306 買過火車票,家離的比較近,就算要買也是家人給我買:)所以,本文所分享的內容難免是紙上談兵。但我覺得 12306 這個系統的業務確實比傳統的電商系統要復雜,且并發又這么高。所以,我覺得這個系統真的很值得大家重視模型的設計,而不只是只關注技術層面的實現。

原創文章,作者:Retric,如若轉載,請注明出處:http://36kr.com/p/5043608.html

“看完這篇還不夠?如果你也在創業,并且希望自己的項目被報道,請 戳這里 告訴我們!”

本文被轉載2次

首發媒體 36氪 | 轉發媒體

隨意打賞

提交建議
微信掃一掃,分享給好友吧。
主站蜘蛛池模板: 国产日韩欧美视频在线观看 | 国产精品久久婷婷 | 男女在楼梯上高潮做啪啪 | 色哟哟在线视频 | 日本强伦姧人妻一区二区 | 亚洲精品一区二区三区四区乱码 | 久久视了 | 肉色欧美久久久久久久免费看 | www.av在线免费观看 | 亚洲精品综合一区二区 | 成+人+黄+色有声+小说免费 | 99蜜桃臀精品视频在线观看 | 粉嫩av一区二区三区四区免费 | 色婷婷香蕉在线一区二区 | 丰满大乳少妇毛片视频 | 狠狠躁日日躁夜夜躁2022麻豆 | 国产91精品久久久久久久 | 特黄视频免费看 | 一区免费视频 | 白嫩少妇bbw撒尿视频 | 小12萝8禁在线喷水观看 | 日本一级中文字幕久久久久久 | 少妇熟女视频一区二区三区 | 亚洲va欧美va天堂v国产综合 | 国产三级精品三级在线观看 | 嫩草嫩草嫩草嫩草嫩草 | 亚洲成av人在线观看天堂无码 | 99久久久成人国产精品 | 北条麻妃在线一区二区免费播放 | 97网站 | 免费毛片a线观看 | 天天添天天射 | 国产艳妇疯狂做爰视频 | 亚洲a久久| 国产又色又爽又黄刺激视频 | 高h1v1翁妇肉乱怀孕 | 蜜臀av性久久久久蜜臀aⅴ麻豆 | 黄色网www | 亚洲啪啪网 | 日日天日日夜日日摸 | 天堂va蜜桃一区二区三区 | 午夜免费播放观看在线视频 | 日韩精品一卡2卡3卡4卡分类 | 国产91在线播放精品91 | 亚洲色大网站www永久网站 | 999精品嫩草久久久久久99 | 台湾性dvd性色av | 亚洲va中文字幕无码久久 | 国产精华av午夜在线观看 | 久久久久无码国产精品不卡 | 亚洲一区二区三区自拍公司 | 在线免费成人 | 成人免费视频免费观看 | 天天躁狠狠躁狠狠躁夜夜躁 | 国内三级在线 | 在线播放91灌醉迷j高跟美女 | 最近中文在线观看 | 成人永久aaa | 深夜福利视频在线观看 | 99久久婷婷国产综合精品草原 | аⅴ天堂中文在线网 | 国产精品点击进入在线影院高清 | 蒂法3d一区二区三区 | 人人爽人人做 | 波多野结衣高清视频 | 亚洲国产精品18久久久久久 | 伊人久久青青 | 99久久精品日本一区二区免费 | 亚洲成人第一区 | a级黄色影片 | 一二三四日本高清社区5 | 不卡的毛片 | 全色导航| 性色av一区二区三区咪爱四虎 | 国产精品成人片在线观看 | 日本电影一区二区三区 | 黄色三级图片 | 久草一级片 | 欧美少妇xxx | 天天色天天艹 | 97超碰国产在线 | 国产精品久久久久久久久久直播 | 欧美专区在线观看 | 岛国不卡 | 日本熟妇色xxxxx日本免费看 | 国产一区久久 | 乌克兰少妇xxxhd做受 | 精品欧美乱码久久久久久1区2区 | 性生交生活大片免费看 | 山东少妇露脸刺激对白在线 | 久久综合视频网 | 中国美女乱淫免费看视频 | 久久看毛片 | 日本不卡视频在线观看 | 女人裸体特黄做爰的视频 | 韩国成人在线 | 一本一道久久a久久精品 | 天天插天天透 | 亚洲春色在线 | 日韩高清在线 | 我们高清中文字幕mv的更新时间 | 亚洲天堂在线观看视频 | 九九九九九精品 | 中文字幕无线观看中文字幕 | 中文字幕亚洲中文字幕无码码 | 天天鲁夜夜免费观看视频 | 国产三级精品一区二区三区视频 | 国产午夜在线观看 | 久久精品国产亚洲精品 | 国产成人无码精品久久久性色 | 人妻另类 专区 欧美 制服 | 99久久精品国产系列 | 巨爆乳无码视频在线观看 | 做爰xxxⅹ性69免费软件 | 欧美大片免费观看网址 | 日本xxxx高潮少妇 | 色噜噜狠狠一区二区三区狼国成人 | 国产69精品久久99卡顿的解决方法 | 日韩精品久久久肉伦网站 | 中国一级免费毛片 | 56国语精品自产拍在线观看 | 亚洲欧美国产精品18p | 亚洲精品一区二区三区樱花 | 欧美色图片区 | 色综亚洲国产vv在线观看 | 国产精品大全 | 国产精选91| 亚洲精品国产综合久久久久紧 | 97久久精品无码一区二区 | 精品成人国产 | 农村偷拍xxxxx| 荷兰女人裸体性做爰 | 麻豆亚洲一区 | 成 人 色综合 | 精品久久久久久中文字幕大豆网 | av影视在线观看 | 乱色欧美激惰 | 日本三级久久久 | 亚洲成人av在线 | 放荡的美妇在线播放 | 国模小丫大尺度啪啪人体 | 成人午夜一区二区 | 国产成人精品女人久久久 | 国产女人久久精品视 | 欧美日韩乱 | 成人性生交大片免费卡看 | 人妻 校园 激情 另类 | 久久视频一区 | 新疆毛片 | 男女的隐私视频网站 | 欧美日激情日韩精品嗯 | 色五月丁香五月综合五月4438 | 97精品视频在线播放 | 久久久久久久极品内射 | 黄色影院久久 | 成人网6969conwww | 日韩免费视频一区二区 | 午夜精品一区二区三区三上悠亚 | 国产成人小视频 | 成人国产免费 | jizz丰满的韩国女人 | 波多野成人无码精品电影 | 国产精品粉嫩懂色av | 日本高清视频网站www | 香蕉av福利精品导航 | 欧美性一区二区 | 麻豆蜜桃91天美入口 | 免费观看亚洲 | 日本不卡一区二区三区 | 摸丰满大乳奶水www免费 | 精品成人乱色一区二区 | 欧美雌雄另类xxxxx | 一级黄色a级片 | 国产白嫩精品又爽又深呻吟 | 亚洲肥老太bbw中国熟女 | 久久福利免费视频 | 黄色av免费播放 | 五月天综合色 | 亚洲 欧美 激情 小说 另类 | 麻豆一区二区 | 国产卡一卡二卡三 | 狠狠撸在线视频 | 欧美精品xxx | 欧美性生活精品 | 嫩草嫩草嫩草嫩草嫩草 | 亚洲中文字幕在线第六区 | 亚洲国产精品久久久久婷蜜芽 | 九一亚色视频 | 国产午夜精品一区二区三 | 深爱激情久久 | 色噜噜狠狠一区二区三区果冻av | 国产91小视频 | 国产夫妇肉麻对白 | 99精品欧美一区二区蜜桃美图 | 中文字幕人成乱码熟女 | 免费的黄色大片 | 丰满少妇一级片 | 免费观看污网站 | 国产精品一色哟哟哟 | 国产午夜无码视频在线观看 | 国产欧美日韩综合精品二区 | 免费高清a级南片在线观看 免费高清成人 | 日韩一级片网站 | 久草网站| 国产精品无码素人福利 | 国产女人与拘做受视频9 | 性天堂网 | 国产夫妻自拍小视频 | 亚洲精品无码av中文字幕电影网站 | 午夜蜜汁一区二区三区av | 国产av寂寞骚妇 | 久久久久久久久久久免费av | a级黄色毛片三个搞一 | 精品熟人一区二区三区四区 | 俄罗斯乱妇 | 国产成人精品久久 | 免费无遮挡无码视频网站 | 久久久国产精华液 | 亚洲午夜18毛片在线看 | 西班牙美女做爰视频 | 91久久精品国产 | 免费无码一区二区三区蜜桃 | 国产免费一级视频 | 九色porny丨入口在线 | 国产精品99久久免费观看 | 日本人做爰大片免费网站 | 99久久久国产精品免费调教网站 | 女仆高潮hd理论片 | 国产精品一区二区性色av | 欧美一区二区三区在线免费观看 | 91中文字幕在线视频 | 一级大片视频 | 五月天av网 | 久久综合激激的五月天 | 秋霞一级黄色片 | 无码中文av有码中文a | 性a视频 | 国产91精品一区二区麻豆亚洲 | 日韩一卡2卡3卡新区乱码来袭 | 伊人久久免费 | 婷婷久久综合九色综合绿巨人 | 人人91| 伊人久操 | 免费无码av片在线观看中文 | 丝袜人妻一区二区三区网站 | 国产艳情片 | 五月天激情婷婷 | 色婷婷av国产精品 | 免费无码又爽又刺激网站 | 午夜激情视频在线 | 日韩 欧美 综合 | av在线免费网站 | 99国产伦精品一区二区三区 | 国产日本一区二区三区 | 婷婷五月综合丁香在线 | 麻豆视频在线观看免费网站黄 | 精品国产乱码久久久久乱码 | 午夜亚洲国产 | 欧美人与物videos另类xxxxx | 天天爽夜夜爽一区二区三区 | 亚洲丶国产丶欧美一区二区三区 | 欧美激情 亚洲 | 欧美视频一区二区在线观看 | 天美麻花果冻视频大全英文版 | 伊甸园精品99久久久久久 | 免费人成视频在线观看网站 | 高中生自慰www网站 日本护士毛茸茸高潮 | www..99热| 国产精品av久久久久久无 | av在线影音 | 日韩中文字幕视频 | 成人精品一区二区三区视频播放 | 国产露脸无套对白在线播放 | 欧美一级做a爰片免费视频 欧美一级做性受免费大片免费 | 日韩少妇视频 | 久久久精品成人免费观看 | av超碰在线观看 | 欧美性猛交xxxx乱大交丰满 | 亚洲成av人片天堂网无码】 | 强壮公侵犯使我夜夜高潮 | 特级黄录像视频 | 国产激情片 | 女人天堂网 | 超碰在线超碰 | h小视频在线观看 | 日日操天天射 | 肉欲性毛片交国产 | 国产精品v欧美精品v日韩精品 | 一本久久a久久精品亚洲 | 成熟女人牲交片免费观看视频 | 青青草黄色 | 91黄色短视频 | 国产黄a三级三级三级av在线看 | 亚洲欧美在线免费 | 全黄久久久久a级全毛片 | 欧美国产中文字幕 | 国产精品后入内射日本在线观看 | 亚洲成人一 | 一本大道色婷婷在线 | 亚洲视频一区 | 全部av―极品视觉盛宴 | 午夜男女很黄的视频 | 性开放肉日记高hnp 性开放少妇xxx视频 | 国产超碰91人人做人人爽 | 丰满少妇在线观看网站 | 国产精品欧美久久久久久 | 丰满多毛的大隂户毛茸茸 | 黄在线视频| 少妇免费视频 | 一线天 粉嫩 在线播放 | 综合精品在线 | 三级av网| 1v1高辣巨肉h各种play | 亚洲熟妇无码一区二区三区 | 欧洲美女tickling免费网站 | 青青草99热| 嫩b人妻精品一区二区三区 色噜噜亚洲男人的天堂 | 一区二区日韩 | 边啃奶头边躁狠狠躁 | 天天躁狠狠躁狠狠躁性色牛牛影视 | 国产网址在线 | 亚洲欧美日韩在线 | q2002日韩午夜伦高清 | 乱人伦中文视频在线 | 高清av网站 | 69影院少妇在线观看 | 一本精品999爽爽久久久 | 影音先锋每日av色资源站 | 国产精品美女www爽爽爽动态图 | 91国产视频在线 | 黄色午夜| 久久人人爽人人爽人人片av东京热 | 一级a性色生活片毛片 | 国产成人久久 | 日本亚洲高清 | 久久sese| jizz色| 99毛片| 国产精品蜜臀av免费观看四虎 | 中文字幕3区 | 狠狠干快播 | 麻豆av免费观看 | 99re这里都是精品 | 在线爽| 无码专区一ⅴa亚洲v天堂 | 日本aaaaa女人裸体h片 | 人成乱码一区二区三区 | 免费在线观看小视频 | 成人欧美一区二区三区在线观看 | 久久久午夜精品福利内容 | 亚洲1区2区精华液 | 古装三级做爰在线观看 | 真人作爱免费视频 | 日韩字幕在线观看 | 在线成人黄色 | 调教驯服丰满美艳麻麻在线视频 | 日本午夜小视频 | 日本高清www | 久久精品国产99精品国产亚洲性色 | 亚洲三级欧美 | 欧美乱大交xxxxx疯狂俱乐部 | 国产一级黄色av | 葵司免费一区二区三区四区五区 | 粉嫩老牛aⅴ一区二区三区 粉嫩欧美一区二区三区 | 日韩精品v | 久久色在线观看 | 人人揉人人捏人人添 | 红猫大本营在线观看的 | 国产精品久久久久久无毒偷食禁果 | 精品亚洲成av人在线观看 | 国产肉体xxxx裸体137大胆 | 日本理论片中文字幕 | 精品国产一区二区三区久久久 | 日日日网站 | 91亚洲精品久久久中文字幕 | 男女一级黄色 | 黄色大片中文字幕 | 又嫩又硬又黄又爽的视频 | 中文字幕+乱码+中文字幕明步 | 91极品在线 | 午夜高清视频 | 日本妞vs黑人巨大xxxxx | 日韩中文字幕区一区有砖一区 | 日韩99在线 | 中文 | 亚洲欧美日韩中文无线码 | 欧美精品久 | 久久三区 | 91麻豆视频| 亚洲精品乱码久久久久久 | 久久亚洲精华国产精华液 | 成人小说亚洲一区二区三区 | 亚洲欧美综合精品久久成人网无毒不卡 | 国产51自产区 | 91九色在线视频 | 成人精品视频 | 欧美午夜精品理论片 | 日产精品久久久一区二区 | 午夜视频久久久 | 国产资源在线免费观看 | 久久久www成人免费毛片麻豆 | 国产网红主播一区二区三区 | 免费人妻av无码专区 | 国产成人性色生活片 | 香蕉在线播放 | 岛国av免费 | 欧美性折磨bdsm另类 | 国产伦精品一区二区三区妓女 | h在线免费观看 | 日韩欧美二区 | 91porn国产成人 | 欧美黑人精品一区二区不卡 | 69堂国产成人免费视频 | 人妻无码中文专区久久五月婷 | 亚洲国产成人久久精品大牛影视 | 寡妇av| 亚洲精品视频久久 | 萌白酱国产一区二区 | 日日噜噜夜夜狠狠久久丁香五月 | 日韩国产欧美在线观看 | 成年人黄视频 | 亚洲男人天堂2020 | 国产网红主播无码精品 | 午夜毛片| 精品人妻少妇一区二区 | 狠狠色丁香婷婷综合尤物 | 性欧美精品久久久久久久 | 少妇寂寞小伙满足少妇在线观看 | 印度精品av三级 | 成人毛片免费网站 | 老头吃奶性行交 | 日韩性插| 午夜精品久久久久久不卡8050 | 爱爱视频网站免费 | 大桥久未无码吹潮在线观看 | av无码av无码专区 | 免费成年人视频网站 | 亚洲欧美另类中文字幕 | 成人免费在线观看av | 99re8在线精品视频免费播放 | 无码免费一区二区三区免费播放 | 17c在线观看视频 | 亚洲精品一线二线三线 | 亚洲视频综合网 | 超碰在线免费公开 | 97人人澡人人爽人人模亚洲 | 国产精品无码素人福利 | 免费看毛片网站 | 午夜视频福利在线 | 窝窝视频在线 | 成人福利在线视频 | 妹子色综合 | 一本久久a精品一合区久久久 | 国产一级二级视频 | 日韩中文字幕一区 | 日韩精品一区二区三区在线观看视频网站 | 精品国产免费一区二区三区香蕉 | 久久久久久久久久亚洲 | 国语对白一区二区 | 欧美日韩激情在线一区二区三区 | √天堂8在线网 | 91在线短视频 | 四虎国产精品成人免费影视 | 少妇一级淫片高潮性生活 | 欧美a√在线 | 日本久久高清一区二区三区毛片 | 久久国产精品无码一区二区三区 | 一本之道高清狼码 | 潘金莲三级野外 | 麻麻张开腿让我爽了一夜 | avtt香蕉久久| 免费人成在线观看视频高潮 | 黄色一级片视频 | 特黄特色大片免费播放器下 | 91丨九色丨喷水 | 国产人人爱 | 超碰97免费 | 亚洲色偷偷男人的天堂 | 99久久久无码国产精品6 | 日本熟妇乱子伦xxxx | 亚洲精选一区二区 | 777视频在线观看 | 欧美日韩www | 男人阁久久 | 亚洲欧美在线观看视频 | 国产高清免费看 | 久久九九精品99国产精品 | 忘忧草精品久久久久久久高清 | 久久久久久毛片 | av看片网站 | 丰满大爆乳波霸奶 | 免费人妻无码不卡中文字幕系 | 青青草国产精品一区二区 | 日韩毛片在线播放 | 精品国产乱码久久久久夜深人妻 | 国产亚洲精品久久久网站好莱 | 岛国av资源 | 亚洲色诱| 国产娇小性色xxxxx视频 | 国产好爽又高潮了毛片91 | 又粗又硬又大又爽免费视频播放 | 秋霞一区 | 以色列最猛性xxxxx视频 | 日韩影视在线 | 青青草免费公开视频 | 色播久久人人爽人人爽人人片av | 国产经典久久久 | 日日噜噜噜噜人人爽日本精品 | 三级不卡视频 | 在线看三级 | 日本黄色免费 | 成人免费视频国产免费麻豆 | 乱码一区二区三区四区 | 久热亚洲 | www.色com情11| 国产精品三级一区二区 | 乱人伦xxxx国语对白 | 麻豆黄色网址 | 92看片淫黄大片看国产片图片 | 无码av中文字幕免费放 | 久久精品久久久久观看99水蜜桃 | 九九久久精品视频 | 久久久久久人妻精品一区 | 污视频在线免费观看 | 九九九热 | 西野翔中文久久精品国产 | 午夜性色福利视频 | 日日日日做夜夜夜夜做无码 | 日本一卡二卡视频 | 秋霞久久精品 | 一本色道久久88加勒比—综合 | 永井玛利亚 精品 国产 一区 | 国产精品五区 | 日本不卡一区二区三区视频 | 久久国产精品成人影院 | 国产午夜精品一区二区三区不卡 | 久久99精品久久久久久三级 | 精品国产乱码一区二区三区99 | 少妇高潮疯狂叫床在线91 | 欧美三级理论片 | 秦大爷的性生生活1一7 | 国产69精品久久久久99 | 古装三级做爰在线观看 | 搡老岳熟女国产熟妇 | 久久一级大片 | 好硬好湿好爽好深视频 | 在线色av| 亚洲中文字幕无码天然素人在线 | 亚洲天天综合网 | 美女高潮黄又色高清视频免费 | 欧美疯狂性受xxxxx喷水 | 成人国产网站 | 久久天堂av综合色无码专区 | 92久久| 衣服被扒开强摸双乳18禁网站 | 亚洲精品少妇一区二区 | 亚洲精品成人无码中文毛片不卡 | 少妇激情在线 | 色爱av综合 | 国产成人精| 亚洲国产精品激情在线观看 | 久久久一本精品99久久精品66 | 成人在线免费观看网址 | 国产va在线观看 | 欧美日韩在线播放 | 夜夜高潮夜夜爽精品欧美做爰 | 国产精品久久久久永久免费看 | 又色又爽又黄无遮挡的免费视频 | 国产乱码精品一区二三赶尸艳谈 | 免费一级黄色毛片 | 亚洲 日本 欧美 中文幕 | 天堂网www中文在线 伊人久久大香线蕉综合网站 | 99riav6国产情侣在线看 | 日韩欧美资源 | 国产超碰自拍 | 香蕉视频在线观看亚洲 | 37p粉嫩大胆色噜噜噜 | 丰满熟妇乱又伦 | 成年人午夜视频 | 中文字幕无线码一区 | a级黄毛片 | 国产免费观看久久黄av片 | 日日碰狠狠添天天爽 | 少妇一级淫片免费视频 | www99在线 | aⅴ一区二区三区无卡无码 aⅴ在线免费观看 | 二级黄色毛片 | 日韩mv欧美mv亚洲mv | 欧美日韩国产一区 | 亚洲综合色视频 | 热re99久久精品国产99热 | 天堂久久一区 | 超碰aⅴ人人做人人爽欧美 狠狠亚洲婷婷综合色香五月 | 李华月全部毛片 | 亚洲精品国产精品国自产 | 成人欧美一区二区三区动漫 | 国语精品 | 亚洲色图10p | 无码午夜人妻一区二区三区不卡视频 | 国产激情无码一区二区三区 | 国产欧美日韩综合精品一区二区 | 中文字幕人妻熟女在线 | 亚洲欧美精品午睡沙发 | 色又黄又爽18禁免费视频 | 日韩 欧美 亚洲 精品 少妇 | 色欲综合久久中文字幕网 | 麻豆成人在线视频 | 国产特级毛片潘金莲 | 免费看48女人真人毛片 | 亚洲国产精品无码久久青草 | 麻豆黄色影院 | 欧美a久久 | 亚洲国产精品肉丝袜久久 | 中文字幕永久2021 | 91精品国产日韩91久久久久久 | 国产在线观看一区 |