Оптимизация кода

[WoWan-SM]

Консольное приложение. Писалось на VS 2010 с использованием .NET Framework 4.

Вроде более-менее оптимизировал, но все равно генерация таблиц при переборе значения seed от 0 до 1 000 000 занимает 71 секунду и выходной файл весит под 700 метров.

Задача: уменьшит время генерации для 1 000 000 таблиц и уменьшить размер выходного файла.

using System;
using System.Text;
using System.Threading.Tasks;
using System.IO;

namespace GenerateSeed
{
    class Program
    {
       public static int[] results = new int[210];
       public static int[] TTable = new int[210];
       public static int[] Table = new int[210];
       public static Int64 rand_pos;
       public static int A;

       public static void Main()
        {
           //на экран
            Console.WriteLine("Начата генерация таблиц. Ждите");

           //Счетчик
            DateTime dt = DateTime.Now;

           //Поток на запись
            StreamWriter SW = new StreamWriter(@"C:\1.txt", true);

           //Цикл заполнения таблицы
            Parallel.For(0, 208, i =>
            {
                TTable[i] = i;
            });

           //Цикл генерации таблиц
            for (int j = 0; j != 1000000; j++)
            {
                //вызываем функцию
                Table = GenerateTable(j);
                //запись в файл
                SW.WriteLine(Table.ToString());
            };

           //Закрываем запись в файл
            SW.Close();

           //считаем затраченное время
            TimeSpan sp = DateTime.Now - dt;
           //На экран
            Console.WriteLine("Генерация закончена");
            Console.WriteLine("Время генерации 1кк таблиц: " + sp + " сек");
            Console.ReadLine();
        }


       public static int[] GenerateTable(Int64 seed)
        {
           //Используем Parrallel.For доступную только в 4 фрейморвке, для расспределения нагрузок между процессорами
            Parallel.For(2, 209, i =>
                {
                    seed=((seed)*214013+2531011) & 4294967295;
                    rand_pos = (((seed >> 16) & 32767) % i)+1;
                    A = TTable[rand_pos];
                    Table[rand_pos] = Table[i];
                    Table[i] = A;
                });

            Parallel.For(0, 210, (i, loopState) =>
            {
                if (Table[i]==19)
                {
                    Table[i]=Table[19];
                    Table[19]=19;
                    loopState.Break();
                }
            });

            Parallel.For(1, 209, i =>
            {
                results[i - 1] = Table[i];
            });
            return results;
        }

    }
}

[dampirik]

Чтобы чтото оптимизировать, определитись с местом которое оптимизировать(поставте несколько отрезков времени) и оптимизируйте самый тяжелый участок...
По поводу задания(именно задание, что вы нужно сделать то?): нужно создать 1кк случайных записей?

[dampirik]

Из прошлой темки....
Как видно самое тяжелое это запись...

string time="";
string path="data.txt";
DateTime dt=DateTime.Now;
string s[] = new string[30000000];
for(int i=0;i<s.Length;i++)
{
s[i]="dasdasdafsfsdfds";
}
time="Создание массива: ";
time+=(DateTime.Now-dt).ToString()+"\n";
DateTime cr= DateTime.Now;
using(StreamWriter sw= File.CreateText(path))
{
for(int i=0;i<s.Length;i++)
{
sw.WriteLine(s[i]);
}
}
time+="Запись  массива: ";
time+=(DateTime.Now-cr).ToString();
this.label1.Text=time;

Результаты:
Создание массива: 00:00:00.2430196
Запись массива: 00:00:03.9493975

[WoWan-SM]

Сообщение от dampirik

Чтобы чтото оптимизировать, определитись с местом которое оптимизировать(поставте несколько отрезков времени) и оптимизируйте самый тяжелый участок...
По поводу задания(именно задание, что вы нужно сделать то?): нужно создать 1кк случайных записей?

Задание написано выше Не меняя основного алгоритма, ускорить время заполнения строками текстового файла и уменьшить его объем.

Первую оптимизацию мне подсказали: это писать в буфер памяти, а из него кусками записывать в файл.

[WoWan-SM]

Нашел косяк в своем коде, он у меня тупо строки выводил "System.Int32[]". Добавли кодирование base64 (чтобы потом я мог работать с этим файлом достаточно декодировать). Время выполнения уменьшилось на 10 секунд (у меня общее время выполнения занимает 55 секунд). Объем выходного текстового файла уменьшился в 3 раза (268,5 Мбайт). Надо еще урезать где-то.

using System;
using System.Text;
using System.Threading.Tasks;
using System.IO;

namespace GenerateSeed
{
    class Program
    {
       public static byte[] results = new byte[210];
       public static byte[] TTable = new byte[210];
       public static byte[] Table = new byte[210];
       public static int rand_pos;
       public static int A;
        public static string s;

       public static void Main()
        {
            Console.WriteLine("Начата генерация таблиц. Ждите");

            DateTime dt = DateTime.Now;

            StreamWriter SWq = new StreamWriter(@"C:\1.txt", true);

            Parallel.For(0, 208, i =>
            {
                TTable[i] = (byte)i;
            });

            for (int j = 0; j != 1000000; j++)
            {
                Table =GenerateTable(j);
                //Кодируем строку чтобы меньше занимала
                s = Convert.ToBase64String(Table);
                SWq.WriteLine(s);
            };

            SWq.Close();

            TimeSpan sp = DateTime.Now - dt;
            Console.WriteLine("Генерация закончена");
            Console.WriteLine("Время генерации 1кк таблиц: " + sp + " сек");
            Console.ReadLine();
        }


       public static byte[] GenerateTable(Int64 seed)
        {

            Parallel.For(2, 209, i =>
                {
                    seed=((seed)*214013+2531011) & 4294967295;
                    rand_pos = (int)(((seed >> 16) & 32767) % i)+1;
                    A = TTable[rand_pos];
                    Table[rand_pos] = Table[i];
                    Table[i] = (byte)A;
                });

            Parallel.For(0, 210, (i, loopState) =>
            {
                if (Table[i]==19)
                {
                    Table[i]=Table[19];
                    Table[19]=19;
                    loopState.Break();
                }
            });

            Parallel.For(1, 209, i =>
            {
                results[i - 1] = Table[i];
            });
            return results;
        }

    }
}