Привет.
Хочу написать более менее грамотный алгоритм проверки форматно-логического контроля для excel-таблиц. Входные данные: таблицы excel со строго установленным шаблоном, которые присылают пользователи Задача: получить читаемый файл, который с большой долей вероятности можно распарсить и положить в БД Нужно:
проверить и изменить кодировку;
проверить орфографию;
убрать нечитаемые символы;
заменить табуляцию на пробелы;
два и более пробела подряд заменить на один и т.д.
Подскажите, встречался ли вам в теории или практике подобный алгоритм проверки, который из "плохих" файлов делает форматированные/читаемые?
Подобные вещи делал на VBA, ничего сложного не вижу. Это простой replace данных в ячейках на соответствующие (это про лишние пробелы, табуляцию, нечитаемые символы) - нужно просто справочники насоздавать с пониманием, что на что менять.
Пользователи постоянно будут придумывать какие-то новые косяки, но это всё будет выявляться со временем и исправляться в новых справочниках.
2zlukov, данные - нормативные акты, выдержки из законов, т.е. использоваться будет в 99% случаев (есть ссылки на адреса в интернете):
кириллица обоих регистров
. , : ; " «» № / ?
Вот эти пункты:
-проверить и изменить кодировку;
-проверить орфографию;
-убрать нечитаемые символы;
нужно очень детально расписать с примерами. Потому что сложность решения может меняться на порядки буквально в зависимости от 1-2 слов в этом задании.
Что такое проверить орфографию? Я - не знаю. Где достаточное условие проверки? Неясно.
Кодировки. Надеюсь речь не идет о симметричном шифровании. Но базовых кодировок с кирллицей
всего 4 (cp866/1251/Unicode16/utf8) и обычно задача сводится к проверке что текст статистически похож на кириллицу.
Простой
Простой
Средний
