Json數據轉換為ADO.NET DataSet其實方法有很多,Newtonsoft.Json也提供了DataSet的Converter用以轉換Json數據。但是有些情況下DataSet Converter並不管用,而且也不一定能夠滿足項目需要。這裡介紹另一種簡單有效的方法,能夠方便快速地將Json數據轉為ADO.NET DataSet。
設計
事實上Newtonsoft.Json已經提供了一套完整的Json數據文檔結構,Newtonsoft.Json.Linq命名空間下提供了這種文檔結構的對象模型,因此我們可以借用這樣的模型,在其上應用訪問者(Visitor,GoF95)模式,對樹狀結構的對象模型進行遍歷,以達到ADO.NET DataTable、DataRelation的創建以及DataSet的生成。基本對象模型如下:
其實實現起來還是非常簡單的,我已經把完整的項目和單元測試開源到GitHub上。具體的代碼可以參考https://github.com/daxnet/Json2DataSet開源項目。
性能
性能方面,在實現的過程中,我發現有兩個地方是性能瓶頸:
1.正則表達式
2.JToken.Path屬性
如果在你的代碼中需要高頻率地反復調用這兩種操作,那麼你就需要考慮性能問題。尤其是JToken.Path屬性,它的內部實現牽涉到鏈表數據結構、復雜循環等,因此效率不是很高,應該盡量避免使用這一屬性(當然我開源的代碼中還有一處在調用該屬性,可以進一步優化)。
另一方面,對於ADO.NET DataTable和DataRelation的構建,性能還是相當高的,無需擔心。總體上看,將15MB的Json數據轉換為DataSet僅需4秒左右,有興趣的朋友還可以在該代碼基礎上進一步優化。
調用
在該開源項目主頁上已經說明了調用方式。很簡單:
復制代碼 代碼如下:
var json = File.ReadAllText(@"d:\test.json");
var dataSet = Json2DataSetConverter.Convert(json);
比如通過調用某個RESTful API,獲得Json Response以後,直接將返回結果轉換為DataSet,並在Visual Studio Debug Visualizer for DataSet中看到某公司的客戶信息,以及這些客戶所完成的訂單數據:
應用
TIBCO Spotfire是一種世界先進的數據分析軟件,不僅功能強大,還可以為其定制數據導入插件,方便地將外部數據導入其中進行分析。它是以表的形式對數據進行整合和分析的,因此,它對ADO.NET DataSet的支持是非常好的,能夠很方便地將ADO.NET DataSet中所包含的表數據導入。
現有一個RESTful API,它能夠獲取全世界所有國家的列表信息,包括國家名稱、語言、人口、與該國接壤的國家數量等等。該API的地址是:
復制代碼 代碼如下:
GET http://restcountries.eu/rest/v1/all
好了,現在我開發了一個非常簡單的插件,可以通過GET命令,從RESTful API導入數據到TIBCO Spotfire中:
導入數據後,我可以立刻分析出哪個國家人口比重最大,哪個國家與其接壤的國家數量最多:
看,我國不僅人口最多(占世界人口的19%),而且與我國接壤的國家數量最多(15個)。