我正在尝试将大数据列表读取为平面CSV。每行的一个字段是XML数据——XML规定了每行中的附加属性。因此,每行可以有稍微不同的Properties。
我已经在一个初始结构化类中得到了我的列表:
private class Response {
public Response() {
Values = new Dictionary<string, string>();
}
public string Owner { get; set; }
public string Author { get; set; }
public string Email { get; set; }
public string Data { get; set; } // XML data in here
public Dictionary<string, string> Values { get; set; }
public DateTime Created { get; set; }
}
然后我想让我的列表动态处理不同的属性:
var responses = new List<dynamic>();
foreach (var response in query) {
if (!string.IsNullOrEmpty(response.Data))
{
var doc = new XmlDocument();
doc.LoadXml(response.Data);
foreach (XmlNode node in doc.GetElementsByTagName("field")) {
try
{
response.Values.Add(node.FirstChild.InnerText, node.LastChild.InnerText);
}
catch (Exception ex) {
// log
}
}
}
dynamic fullResponse = new ExpandoObject();
fullResponse.Owner = response.Owner;
fullResponse.Author = response.Author;
fullResponse.Email = response.Email;
fullResponse.Created = response.Created;
IDictionary<string, object> map = fullResponse;
foreach (var value in response.Values) {
if (map.ContainsKey(value.Key)) {
map[value.Key] = value.Value;
}
else {
map.Add(value.Key, value.Value);
}
}
responses.Add(fullResponse);
}
…这也很好。但现在我想把这个列表变平,然后导出为CSV文件,因为我知道动态列表的每一行可能有稍微不同的属性。
抓取动态类型PropertyInfo
,显然会一无所获。我是否需要循环遍历列表以手动提取唯一属性到DataTable之类的东西中?或者我可以通过调用Reflection来更有效地完成这项工作?
我最终使用一个普通的旧DataTable来排序:
using (var dt = new DataTable())
{
var keys = responses.SelectMany(x => ((IDictionary<string, object>)x).Keys).Distinct();
var columns = keys.Select(x => new DataColumn(x)).ToArray();
dt.Columns.AddRange(columns);
foreach(IDictionary<string, object> response in responses)
{
var row = dt.NewRow();
foreach (var kvp in response)
{
row[kvp.Key] = kvp.Value;
}
dt.Rows.Add(row);
}
// write to CSV
}
虽然我觉得我可以用反射做一些更酷的事情来达到同样的效果