Нужна программа которая будет, сравнивать разные тхт, делать удаление дублей, делать выборки из тхт по заданным словам, генерировать строки по заданным параметрам. Нужна быстрая работа с большими тхт файлами, один файл может быть до 40гиг.
Для многих функций есть тестовое время работы взятое из других программ, время работы должно быть примерно такое же или быстрее. Нужно хорошо знать алгоритмы сортировки и работы с тхт.
Интерфейс нужен в виде вкладок, каждая функция и ее опции на отдельной вкладке, все настройки должны сохраняться после закрытия в формате json.

Исходники нужны на C# в Visual Studio 2017
Код должен быть с комментариями на русском для всех функций и важных участков кода с осмысленными именами переменных и функция.

Подробное ТЗ вышлю заинтересованным.