Запросить несколько записей таблицы SQL и преобразовать в CSV ⇐ C#

[Anonymous]

Я должен получить данные из 2 таблиц, а затем объединить их в файл CSV. < /p>
Таблица 1 имеет 50 столбцов, таблица 2 имеет 20 столбцов. У меня есть 30K записей в таблице 1 и 10K в таблице 2. Запрос базы данных быстрый, он только для каждого цикла займет время из -за количества строк. < /P>
Можно ли улучшить этот код? Он будет развернут в приложении Function Function, и это займет гораздо больше времени, чем на моем компьютере. "Столбец в конце. Значение комментариев приходите с другой таблицей, поэтому я выполняю поиск в памяти и нахожу строку. Если я найду, я пишу значение столбца, иначе я пишу пусто.var records = await ExecuteQuery(all_variations_query, tableName);

using var writer = new StreamWriter($"C:\\Work\\{fileName}");
using var csvWriter = new CsvWriter(writer, CultureInfo.InvariantCulture);
var options = new TypeConverterOptions { Formats = ["dd/MM/yyyy HH:mm:ss"] };
csvWriter.Context.TypeConverterOptionsCache.AddOptions(options);
DataTable dt = records.Tables[0];
foreach (DataColumn dc in dt.Columns)
{
csvWriter.WriteField(dc.ColumnName);
}
csvWriter.WriteField("Comment");
csvWriter.NextRecord();
var commentriesDataset = await ExecuteQuery(all_commentries_query, tableName);
var commentryRows = commentriesDataset.Tables[0].Rows;
int htmlCommentaryLength = 5000;
foreach (DataRow dr in dt.Rows)
{
foreach (DataColumn dc in dt.Columns)
{
csvWriter.WriteField(dr[dc]);
}
string? commentryValue = dr["VariationReasonsCommentary"]?.ToString();
if (string.IsNullOrEmpty(commentryValue) == false)
{
bool notNumber = commentryValue.Any(x => char.IsDigit(x) == false);
if (notNumber)
{
csvWriter.WriteField(commentryValue.Length >= htmlCommentaryLength ? commentryValue[..htmlCommentaryLength] : commentryValue);
}
else
{
var commentryRow = commentryRows.Cast().Where(x => x["CommentaryID"].ToString() == commentryValue).FirstOrDefault();
if (commentryRow != null)
{
commentryValue = commentryRow?["Comment"].ToString();
csvWriter.WriteField(commentryValue?.Length >= htmlCommentaryLength ? commentryValue[..htmlCommentaryLength] : commentryValue);
}
else
{
csvWriter.WriteField("");
}
}
}
else
{
csvWriter.WriteField("");
}
csvWriter.NextRecord();
}


Подробнее здесь: https://stackoverflow.com/questions/794 ... m-into-csv