OCR форумы Добро пожаловать, Гость. Пожалуйста, выберите Вход или Регистрация
Всем привет!
Hi all!
 
  ГлавнаяСправкаПоискВходРегистрация Администратор Библиотека  
 
Страниц: 1 2 
Послать Тему Печать
Удаление мусора (Прочитано 27271 раз)
mor
Патриарх
*****
Вне Форума



Сообщений: 1768
Пол: male
Re: Удаление мусора
Ответ #30 - 04.07.2018 :: 10:34:19
 
T2k писал(а) 04.07.2018 :: 00:44:18:
Скачал, посмотрел. Ну и где там мурашки? Это обычный мусор с предыдущей страницы. Вроде, нормально чистит.
https://cdn1.savepice.ru/uploads/2018/7/4/81a2280a2f474efcb1e67bbf2d76def0-full....


https://cdn1.savepice.ru/uploads/2018/7/4/756e46d4a98d51a404a79b5c1bc4d1b8-full....


для меня "мурашуки" вся грязь, которую сложно вычистить вручную.
Честно говоря стр.19 не очень, а можно ли увидеть полный результат автоматической работы на 20 и 21 стр.?
Наверх
 
 
IP записан
 
AAW
Патриарх
*****
На Форуме


Старую детскую и НП литературу
ничем не заменить

Сообщений: 5428
Екатеринбург
Пол: male
Re: Удаление мусора
Ответ #31 - 04.07.2018 :: 10:44:31
 
T2k писал(а) 04.07.2018 :: 10:21:12:
Но, думаю, что пользоваться этим смогут единицы.

Так нас и есть единицы.
По-видимому, смотреть надо не в сторону веб-сайта, а в сторону комплекта софта (свободных исходников) и подгружаемых пакетов коэффициентов "для такого-то типа шрифта/марашек". С возможностью обмена этими пакетами.
T2k писал(а) 04.07.2018 :: 10:21:12:
Лично мне интересна сама задача

Об этом и речь: вы себе задачу решите, и уйдёте отсюда. Я с программистами много общался, знаю как они работают. Задачку на коленке решили - ну и всё, пошли другими делами заниматься. Оформлять документацию и выводить софт в пользовательски-приемлемую оболочку никогда не станут.
Наверх
 

Если не я за себя - то кто за меня? Но если я только за себя - то зачем я нужен? И если не сейчас - то когда? (с) Гиллель, предположительно
155803224  
IP записан
 
bolega
Патриарх
*****
Вне Форума



Сообщений: 1104
Re: Удаление мусора
Ответ #32 - 04.07.2018 :: 11:25:20
 
Не уверен, что удаление спеклов нужно делать через нейронные сети. Мне кажется, использование OCR более уместно в данном случае, по йкрайней мере я в этом направлении движусь.
А вот где однозначно НС принесет пользу - это в определении на сканах зон с иллюстрациями, векторными и растровыми. Над этим надо работать. Помню, лет 8 назад ковырялся в исходниках CuneiForm (когда он прекратил существование и исходники были частично выложены в открытый доступ), видел, что layout-анализ страниц выполнялся именно с помощью НС, и там была накоплена уже приличная обученная база.
Наверх
 
 
IP записан
 
T2k
Новичок
*
Вне Форума


Всем привет!

Сообщений: 19
Ukraine
Пол: male
Re: Удаление мусора
Ответ #33 - 04.07.2018 :: 13:12:12
 
mor писал(а) 04.07.2018 :: 10:34:19:
для меня "мурашуки" вся грязь, которую сложно вычистить вручную.
Честно говоря стр.19 не очень, а можно ли увидеть полный результат автоматической работы на 20 и 21 стр.?


https://drive.google.com/open?id=1cSF2YaQPXCB2dVtalZNWQ3PdxMw0_aPe

Устал повторять, что обучал я сеть на 5 страницах своей книги. Других книг, шрифтов, проблем в виде мусора она никогда не видела. Не обучаются сети за 5 минут на 5 картинках. Чем больше страниц в обучении, тем лучше результат.
Наверх
 
 
IP записан
 
T2k
Новичок
*
Вне Форума


Всем привет!

Сообщений: 19
Ukraine
Пол: male
Re: Удаление мусора
Ответ #34 - 04.07.2018 :: 13:20:03
 
bolega писал(а) 04.07.2018 :: 11:25:20:
Не уверен, что удаление спеклов нужно делать через нейронные сети. 


https://habr.com/company/smartengines/blog/344550/
Наверх
 
 
IP записан
 
AAW
Патриарх
*****
На Форуме


Старую детскую и НП литературу
ничем не заменить

Сообщений: 5428
Екатеринбург
Пол: male
Re: Удаление мусора
Ответ #35 - 04.07.2018 :: 13:41:32
 
T2k
В общем, дело вы делаете хорошее, в смысле - нужное сканировщикам. Но жаль, что "для личного употребления". Посмотрите всё-таки в сторону организации своей деятельности с немедленным публичным эффектом. Исходник выложите, инструкцию по настройке, место для обмена картинками сделайте. Тогда получится коллективный эксперимент. Пусть даже он будет неудачным, но он будет коллективным и верифицируемым. Каждый сможет посмотреть и повторить, а может и улучшить.
Наверх
 

Если не я за себя - то кто за меня? Но если я только за себя - то зачем я нужен? И если не сейчас - то когда? (с) Гиллель, предположительно
155803224  
IP записан
 
sergiokapone
Постоялец
**
Вне Форума



Сообщений: 122
Пол: male
Re: Удаление мусора
Ответ #36 - 04.07.2018 :: 14:36:30
 
T2k писал(а) 04.07.2018 :: 13:20:03:


Интересно, а те алгоритмы на НС могут сделать что-то похожее на это
Наверх
 
 
IP записан
 
T2k
Новичок
*
Вне Форума


Всем привет!

Сообщений: 19
Ukraine
Пол: male
Re: Удаление мусора
Ответ #37 - 04.07.2018 :: 15:57:26
 
sergiokapone писал(а) 04.07.2018 :: 14:36:30:
Интересно, а те алгоритмы на НС могут сделать что-то похожее на это


А чем уникальность этой картинки? Такое и без нейросетей можно сделать в OpenCV. Бинаризировать, а потом отбросить мелкие несвязанные контуры.
Наверх
 
 
IP записан
 
Владислав_72
Активист
***
Вне Форума



Сообщений: 337
Москва
Пол: male
Re: Удаление мусора
Ответ #38 - 15.07.2018 :: 13:10:36
 
Вот несколько довоенных книг с мурашками (правда уже упакованных в пдф):
https://yadi.sk/i/Dk4WAS7w3ZBp9J
https://yadi.sk/d/MmyZj96k3ZBpEF
https://yadi.sk/d/Xy4PcRec3ZBpKC
в цвете, подойдет?
Наверх
 
 
IP записан
 
Dmitry7
Модератор
*****
Вне Форума


Соберем Серии "НВЖНиТ"!

Сообщений: 5871
Санкт-Петербург
Пол: male
Re: Удаление мусора
Ответ #39 - 15.07.2018 :: 14:05:45
 
AAW писал(а) 04.07.2018 :: 13:41:32:
T2k
В общем, дело вы делаете хорошее, в смысле - нужное сканировщикам. Но жаль, что "для личного употребления". Посмотрите всё-таки в сторону организации своей деятельности с немедленным публичным эффектом. Исходник выложите, инструкцию по настройке, место для обмена картинками сделайте. Тогда получится коллективный эксперимент. Пусть даже он будет неудачным, но он будет коллективным и верифицируемым. Каждый сможет посмотреть и повторить, а может и улучшить.

присоединяюсь.
T2k, это возможно?

Наверх
 

"Если хочешь сделать что-то хорошо, сделай это сам!"
332371574  
IP записан
 
T2k
Новичок
*
Вне Форума


Всем привет!

Сообщений: 19
Ukraine
Пол: male
Re: Удаление мусора
Ответ #40 - 16.07.2018 :: 10:24:35
 
За картинки спасибо. Руки дойдут, займусь и этим или привлеку людей на разметку.

Пока чуток занят.
Наверх
 
 
IP записан
 
bashusha
Новичок
*
Вне Форума


Всем привет!

Сообщений: 2
Re: Удаление мусора
Ответ #41 - 29.10.2018 :: 20:59:51
 
Зарегистрировалась ради этой ветки.
T2k, можно ли подробности? Архитектура сети, а лучше в тетрадке на google colab показать )
Еще вопрос, правильно ли понимаю. По идее если нужно разделить на черный текст, красный текст (киноварные пометы) и прозрачный фон, то это почти та же задача, что и бинаризация? Только два разА, grayscale и отдельно красного?
Наверх
 
 
IP записан
 
AAW
Патриарх
*****
На Форуме


Старую детскую и НП литературу
ничем не заменить

Сообщений: 5428
Екатеринбург
Пол: male
Re: Удаление мусора
Ответ #42 - 10.11.2018 :: 04:37:18
 
чистка сканов нейросетями https://habr.com/post/429328/
Наверх
 

Если не я за себя - то кто за меня? Но если я только за себя - то зачем я нужен? И если не сейчас - то когда? (с) Гиллель, предположительно
155803224  
IP записан
 
Dmitry7
Модератор
*****
Вне Форума


Соберем Серии "НВЖНиТ"!

Сообщений: 5871
Санкт-Петербург
Пол: male
Re: Удаление мусора
Ответ #43 - 10.11.2018 :: 19:39:24
 
AAW писал(а) 10.11.2018 :: 04:37:18:
чистка сканов нейросетями https://habr.com/post/429328/


это всё хорошо, но для непрограммистов желательно иметь готовую программу по чистке с краткой инструкцией....
хоть консольную

Наверх
 

"Если хочешь сделать что-то хорошо, сделай это сам!"
332371574  
IP записан
 
bashusha
Новичок
*
Вне Форума


Всем привет!

Сообщений: 2
Re: Удаление мусора
Ответ #44 - 15.11.2018 :: 07:36:13
 
Там внизу статьи есть ссылка на гитхаб, где выложен код. По идее, от кода до приложения уже немного: каким-нить pyinstaller-ом полирнуть (автору это на полминуты задачка). У автора и графический интерфейс приделан.
Сейчас читаю, что пишут (разбираю устройство сетки). Оторву от нее лишние детальки и соберу для себя (у меня игрушечный комп с линуксом, буду собирать под 32-разрядн.линукс). Автор явно имел ввиду винду, если у кого-то на винде под рукой есть среда с питоном и упомянутыми пакетами (или не влом поставить), может, сделаете готовое приложение?
Комментарии и инструкцию не обещаю, но буду стремиться.
В общем, хотелось бы пригласить автора в студию.

UPD: на игрушечном компе с 32-разрядной архитектурой не пойдет. Ожидаемо, но все равно обидно.
Наверх
« Последняя редакция: 15.11.2018 :: 18:52:22 от bashusha »  
 
IP записан
 
joker2156
Активист
***
Вне Форума



Сообщений: 279
Re: Удаление мусора
Ответ #45 - 06.02.2019 :: 03:58:19
 
Не стал заводить новую тему, коль уж тут упоминалась нейросеть..
Потенциально полезное обсуждение на хабре
Наверх
 
 
IP записан
 
Страниц: 1 2 
Послать Тему Печать