在早期Bootstrap框架介紹中，我的隨筆《結(jié)合bootstrap fileinput插件和Bootstrap-table表格插件，實現(xiàn)文件上傳、預覽、提交的導入Excel數(shù)據(jù)操作流程》中介紹了利用Bootstrap FieInput插件上傳Excel文件到服務(wù)器，然后利用Bootstrap-table表格插件進行展示數(shù)據(jù)，最后導入到系統(tǒng)里面中，這個導入過程中可以預覽到要導入的數(shù)據(jù)，而且可以選擇性的導入。在實際使用過程中，發(fā)現(xiàn)使用Ajax導入大批量（幾百條記錄數(shù)據(jù)）的情況下，頁面就會罷工，估計和提交的數(shù)據(jù)大小限制有關(guān)，為了解決這個問題，并結(jié)合導入數(shù)據(jù)一般都是全部導入的情況下，我們修改下數(shù)據(jù)導入的過程，從而實現(xiàn)大量數(shù)據(jù)量的Excel數(shù)據(jù)導入。
1、使用預覽數(shù)據(jù)，并勾選導入的處理方式
Excel導入的的界面展示如下所示。
上傳文件后，數(shù)據(jù)直接展示在彈出層的列表里面，這里直接使用了 Bootstrap-table表格插件進行展示。
這樣我們就可以把Excel的記錄展示出來，實現(xiàn)了預覽的功能，勾選必要的記錄，然后保存即可提交到服務(wù)器進行保存，實現(xiàn)了Excel數(shù)據(jù)的真正導入數(shù)據(jù)庫處理。
實際的代碼就比較多一點點，詳細可以參考下隨筆《結(jié)合bootstrap fileinput插件和Bootstrap-table表格插件，實現(xiàn)文件上傳、預覽、提交的導入Excel數(shù)據(jù)操作流程》，這里就主要簡要介紹下導入的處理邏輯即可，由于是在客戶端組裝列表數(shù)據(jù)，然后通過ajax提交的，它的的代碼如下所示。（這個也就是后面需要解決的問題）。
//保存導入的數(shù)據(jù)
function SaveImport() {
var list = [];//構(gòu)造集合對象
var rows = $import.bootstrapTable('getSelections');
for (var i = 0; i < rows.length; i++) {
list.push({
'Name': rows[i].Name, 'Mobile': rows[i].Mobile, 'Email': rows[i].Email, 'Homepage': rows[i].Homepage,
'Hobby': rows[i].Hobby, 'Gender': rows[i].Gender, 'Age': rows[i].Age, 'BirthDate': rows[i].BirthDate,
'Height': rows[i].Height, 'Note': rows[i].Note
});
}
if (list.length == 0) {
showToast("請選擇一條記錄", "warning");
return;
}
var postData = { 'list': list };//可以增加其他參數(shù)，如{ 'list': list, 'Rucanghao': $("#Rucanghao").val() };
postData = JSON.stringify(postData);
$.ajax({
url: '/TestUser/SaveExcelData',
type: 'post',
dataType: 'json',
contentType: 'application/json;charset=utf-8',
traditional: true,
success: function (data) {
if (data.Success) {
//保存成功 1.關(guān)閉彈出層，2.清空記錄顯示 3.刷新主列表
showToast("保存成功");
$("#import").modal("hide");
$(bodyTag).html("");
Refresh();
}
else {
showToast("保存失敗:" + data.ErrorMessage, "error");
}
},
data: postData
});
}
在實際使用過程中，發(fā)現(xiàn)數(shù)據(jù)幾百條的時候，頁面就罷工了，不能正常插入，搜索下解決問題說是大小受限的問題，但是我在Web.Config里面也設(shè)置了上傳文件的大小，最終沒有找到配置解決思路。
<httpRuntime executionTimeout="600" maxRequestLength="951200"
useFullyQualifiedRedirectUrl="true" minFreeThreads="8"
minLocalRequestFreeThreads="4" appRequestQueueLimit="100" enableVersionHeader="true"/>
最終這個配置項也無法解決，那么我們只能找其他方式來避免數(shù)據(jù)大量提交了。
2、使用在控制器后臺讀取Excel文件導入數(shù)據(jù)庫
以上的數(shù)據(jù)導入方式，在一般數(shù)據(jù)比較少的時候，體驗還是不錯的，不過它的過程也是先上傳Excel文件，然后讀取Excel里面的記錄，轉(zhuǎn)換為對應(yīng)的List<T>類型，在序列號JSON列表在前端界面展示。
既然我們文件在服務(wù)器上，并且也可以通過把Excel文件轉(zhuǎn)換為對應(yīng)的List<T>，那么我們減少用戶勾選的步驟，確認后直接讀取導入即可，這樣處理應(yīng)該就沒有這樣的受限于頁面數(shù)據(jù)大小的問題的。
這樣我們以設(shè)備信息導入為案例，介紹這個處理過程，如下前端代碼是在文件上傳到服務(wù)器后，用戶確認后負責導入的邏輯的。
//保存導入的數(shù)據(jù)
function SaveImport() {
var postData = { 'guid': importGuid };
postData = JSON.stringify(postData);
$.ajax({
url: '/Device/SaveExcelByGuid',
type: 'post',
dataType: 'json',
contentType: 'application/json;charset=utf-8',
traditional: true,
success: function (data) {
if (data.Success) {
Refresh();
//保存成功 1.關(guān)閉彈出層，2.清空記錄顯示 3.刷新主列表
showToast("保存成功");
$("#import").modal("hide");
$(bodyTag).html("");
}
else {
showToast("保存失敗:" + data.ErrorMessage, "error");
}
},
data: postData
});
最終我們是看到處理方式是在SaveExcelByGuid的控制器方法里面的，這個方法根據(jù)服務(wù)器的GUID，獲取對應(yīng)Excel文件的信息，然后進行讀取和導入操作。
這個方法的詳細代碼如下所示。
/// <summary>
/// 在服務(wù)端保存Excel
/// </summary>
/// <param name="guid"></param>
/// <returns></returns>
public ActionResult SaveExcelByGuid(string guid)
{
CommonResult result = new CommonResult();
if(!string.IsNullOrEmpty(guid))
{
var list = GetDevice(guid);//根據(jù)guid獲取對應(yīng)的Excel文件，并把內(nèi)容轉(zhuǎn)換為對應(yīng)的List<T>
if (list != null)
{
foreach (DeviceInfo detail in list)
{
var isExist = BLLFactory<Device>.Instance.IsExistKey("DeviceId", detail.DeviceId);
if (!isExist)
{
BLLFactory<Device>.Instance.Insert(detail);
}
}
//成功操作
result.Success = true;
}
else
{
result.ErrorMessage = "導入信息不能為空";
}
}
else
{
result.ErrorMessage = "導入信息不能為空";
}
return ToJsonContent(result);
}
其中我們看到 GetDevice(guid) 就是獲取Excel文件內(nèi)容并轉(zhuǎn)換為對應(yīng)的實體類列表過程的。
其中的GetDevice就是轉(zhuǎn)換為對應(yīng)實體類集合的過程，代碼如下所示。
/// <summary>
/// 獲取設(shè)備導入文件，轉(zhuǎn)換為對應(yīng)的實體類集合
/// </summary>
/// <param name="guid">附件GUID</param>
/// <returns></returns>
private List<DeviceInfo> GetDevice(string guid)
{
List<DeviceInfo> list = new List<DeviceInfo>();
DataTable table = ConvertExcelFileToTable(guid);
if (table != null)
{
#region 數(shù)據(jù)轉(zhuǎn)換
foreach (DataRow dr in table.Rows)
{
DeviceInfo info = new DeviceInfo();
info.DeviceId = dr["設(shè)備ID"].ToString();
info.VersionInfo = dr["版本信息"].ToString();
info.MinitorInfo = dr["預留監(jiān)控信息"].ToString();
info.DeviceMsisdn = dr["公話手機號"].ToString();
list.Add(info);
}
#endregion
}
return list;
}
而 ConvertExcelFileToTable 就是利用aspose.Cell的Excel操作控件，實現(xiàn)數(shù)據(jù)轉(zhuǎn)換的。
/// <summary>
/// 從附件列表中獲取第一個Excel文件，并轉(zhuǎn)換Excel數(shù)據(jù)為對應(yīng)的DataTable返回
/// </summary>
/// <param name="guid">附件的Guid</param>
/// <returns></returns>
protected DataTable ConvertExcelFileToTable(string guid)
{
DataTable dt = null;
if (!string.IsNullOrEmpty(guid))
{
//獲取上傳附件的路徑
string serverRealPath = BLLFactory<FileUpload>.Instance.GetFirstFilePath(guid);
if (!string.IsNullOrEmpty(serverRealPath))
{
//轉(zhuǎn)換Excel文件到DatTable里面
string error = "";
dt = new DataTable();
AsposeExcelTools.ExcelFileToDataTable(serverRealPath, out dt, out error);
}
}
return dt;
}
這樣實現(xiàn)效果，不考慮用戶勾選記錄的情況，確認后直接對整個Excel文件進行判斷導入操作，一般也是符合我們實際的導入過程的，這樣處理起來，再也不會有前面介紹的那種情況了，至少我們能夠順利上傳Excel文件，在后臺讀取Excel文件并轉(zhuǎn)換是沒有什么壓力的，而且體驗效果也很不錯，非常快速。
最后看看大量數(shù)據(jù)導入后，也能夠快速刷新，并能夠在分頁控件進行展示了。
