по следам #2921103:
— во-первых, переводить текст Никиты на хабре — это LOL
— во-вторых, шёл 2018-й год, а люди до сих пор мучаются открывать и читать большие (0.5G+) файлы редакторами (в комментах 200M, блин, те же вим и емакс легко справляются с этим, правда у них тоже есть разумный предел — на моей памяти у емакса — 1.5G, у вима — 2G — ну т.е. открывает, но ходить по файлу уже неприятно).
— далее, камушек в свой огород. брался написать анализатор XML как-то и, как водится, не довёл эту активность до конца. каюсь, грешен. интересно, подобный софт всё ещё нужен кому-то, кроме моего бывшего работодателя?!
в первой школе мне все учители твердили, что я — избранный, а ученики старших классов — пиздили, с лестницы швыряли и т.п.
во второй школе мне все классные учители ничего не говорили. все остальные учителя твердили, что я — посредственность, ни к чему не способный.. а ученики.. они видели во мне инопланетянина, но не пиздили, скорее, просто игнорировали.
собрал данные по всем таргетам.
отлаживаю оптимизирующих пространство-время дельта-пусков.
вебмастер сошёл с ума и стал редиректы считать "неосновным зеркалом", отрубил редирект с HTTP на HTTPS нахрен. посмотрим, как жить будет это в динамике.
— ты ответственен за твои болячки, эмоции, мысли и чувства!
— всё это — следствие тебя.
— ты — кожаный мешок.
— принятие себя — важный шаг на пути к исцелению.
— жалость по отношению к себе — худшее, что можно культивировать.
— время — работе, время — отдыху!
— ускорил клиента ещё в 2 раза
— клиент умеет выполнять 3 таски
— 3 таска отнимает 50 минут
— горлышко на той стороне
— надо щадить целевой ресурс
— во имя добра
— ускорил клиента в 4 раза.
— клиент умеет выполнять 2 таски.
— надо накидывать 3ю тасочку.
— сделать уже первичный сбор по всем таргетам.
— запилить сравнение с результатом предыдущего опроса.
— и узбагоиться!
тем временем, подходят к завершению дни, когда я работал в коровнике... ээ.. офисе.
со следующей недели начинаю работать удалённо, для начала в коворкинге, а там посмотрим.
по сайту упёрся в премерзкую задачу и по сути руками 680+ дублей разруливал, автоматизировать сие не представлялось возможным. заглушку передал в тестирование. а пока собираюсь кое-какой трюк провернуть, чтобы уменьшить нагрузку на сеть ну и время опроса ещё сильнее... и тупо и методично опрашивать таргет за таргетом до тех пор, пока первый прогон официально не будет считаться завершенным.
вчера таки зафиксировал багу на сайте, открытую ещё с ноября. убрал фантомжс, убрал заглушку. когда выложил фикс на тестовый стенд, мне внезапно поплохело.
по ощущениям, что-то близкое к обмороку, со спецэффектами, волнами. вышел на улицу продышаться.
нервная система очень бурно реагировала, и невралгии, сидящие плотными шариками между рёбер, почти исчезли. раз 20 за вечер исчезали и появлялись. по ощущениям, как будто мне снова 18 лет.
скрестил-таки ужа с ежом, но что-то результат мне не очень нравится.
т.е. клиент тихо возвращает 0, а сервер так же тихо его рендерит.
отладка малость усложняется тем, что для воспроизведения проблемы снова надо перехватывать траффик..
надо год забивать проектами, хочу попробовать разработку под Android, есть идеи для приложеньки? попробую воплотить самую интересную, извратившись и выбрав одну из наиболее приглянувшихся среди многих красноглазых технологий..
анализ и написание сценариев для web scraping в связке с REPL — одно удовольствие!
— продумываю уменьшение нагрузки на целевой ресурс, чтобы не засылать туда 400K запросов.
— нужен ещё один сценарий для сбора метаданных.
— нужно понять, что не так со скроллингом, он, как бы это сказать, проскальзывает. возможно, и существующие сценарии для фантома с заглушками есть шанс реанимировать. проблема с ним воспроизвелась и локально. имея на руках REPL+браузер + любимый хаскелль, в которых можно производить отладку сценариев наглядно, без JS, видеть живую страницу в любой момент времени.
