ради прикола расскажу как я делаю домашку по голландскому.
есть у меня вот такой вот учебник с заданиями который мне дала репетитор. это отсканенные страницы (картинки) зашитые в pdf файл по темам. к каждой теме есть тексты с вопросами.в конце учебника есть страница с ответами для самопроверки. но эти ответы приведены в формате 1-A, 2-B, 3-C и так далее для каждого текста. пользы от них не много, как и от любого "решебника". они скажут что ты не прав, но почему именно ты не прав непонятно.
чтоб решить эту проблему нам нужно как то показать этот PDF состоящий из сканов страниц ИИ и попросить его объяснить непонятные моменты.
для начала я написал программу которая берет PDF с картинками и протаскивает каждую страницу через OCR от Google Vision. на выходе получается вот такая вот страничка, в которой все слова и буквы стоят по тем же координатам что и в сканахпроблема в том что если просто "выбрать" этот текст курсором и вставить в текстовый редактор то получается чтото вроде этого (и это еще лучший сценарий, часто слова просто вразнобой идут, особенно если страница была отсканирована с "наклоном" в градусов 30)
для того чтоб улучшить эту мешанину я написал вторую программу. первый шаг этой программы -- отправить сломанный текст из OCR в ИИ на правку, использовав промпт типа такого: here's an OCR text output of a text in Dutch, fix it.
на выходе ИИ выдаст текст который уже можно читать.и наконец мы можем начать работу над этим текстом в паре с ИИ. но ради академического интереса (и чтобы хоть чтото выучить) мы сначала решаем задания самостоятельно. и когда наше решение готово, запрашиваем у ИИ его решение того же задания и просим пояснить его ответы, указав на что именно в тексте ИИ опирается при решении.
сравнив свои ответы с решиеним ИИ (и с правильными ответами в конце учебника) находим где мы ошиблись и учимся чему-то новому. заодно экономим время репетитору на занятиях. конечно же если даже с объяснениями ИИ текст остался непонятен (или ответы ИИ не сходятся ни с решебником ни с нашим понимаем текста) всегда можно спросить живого учителя. но мне пока такой текст не встретился…
