Здесь представлена новостная лента с информацией о всех событиях нашего проекта. С помощью данного раздела Вы можете следить за обновлениями наших приложений и хронологией развития как проекта в целом, так и каждого отдельного приложения.

Новости проекта

7-апреля 2021 Penguin обновлен до версии 19.1

Внимание!  Вышло обновление Penguin до версии 18.1. Изменения актуальны только для Premium версии. Внесены следующие изменения:

  • Добавлена многоуровневая кластеризация, позволяющая распределять фразы по группам внутри уже сформированных кластеров на всю глубину вложенности кластеров.
  • Добавлена возможность при кластеризации задавать словосочетания, которые нужно воспринимать, как единое целое, не разделяя по словам.
  • Улучшена кластеризация по условиям.
  • Добавлена более качественная морфология при кластеризации для Русского и Английского языков.
  • Улучшен алгоритм распределения фраз по кластерам.
  • Добавлено автоматическое определение заголовков в CSV-файлах.
  • Улучшена порезка файлов, значительно уменьшена погрешность определения требуемого размера файлов при порезке по количеству файлов.
  • Оптимизирован алгоритм поиска E-Mail адресов внутри любых файлов.
  • Улучшена многопоточная обработка файлов.
  • Улучшена система сохранения кластеров, добавлен формат для импорта кластеров и тегов в KeyCollector.
13-марта 2021 X-Parser-Light обновлен до версии 3.3.2

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 3.3.2.

  • Обновлен алгоритм получения капчи Яндекса с учетом введенных ими изменений.
  • Исправлены ошибки версии 3.2.8 в части парсинга картинок
  • Добавлен быстрый алгоритм определения мелких картинок для их фильтрации
  • Оптимизирован алгоритм парсинга
  • В настройках XmlPoxy.ru добавлена возможность парсить сразу по 100 ссылок из выдачи, что экономит бюджет в 10 раз и ускоряет парсинг
  • Обновлены настройки всех поисковых систем
10-февраля 2021 Penguin обновлен до версии 18.1

Внимание!  Вышло обновление Penguin до версии 18.1. Изменения актуальны только для Premium версии. Внесены следующие изменения:

  • Penguin [Premium Editor] полностью адаптирован под работу с клчевыми словами и семантическим ядром, а также на обработку выгрузок из таких сервисов, как Bukvarix, Ahrefs, SerpStat, KeySo, Majestic и переименован в Penguin [Keywords Tools].
  • Penguin [Standard Edition] переименован в Penguin [BigData Editor] и остался без изменений, весь перечисленный ниже функционал внедрен в версию Penguin [Keywords Tools]:
  • Добавлена возможность работы с большими csv-файлами, как с таблицами, с возможностью фильтрации табличных данных по конкретному столбцу путем выбора его кликом по заголовку.
  • Добавлена возможность удаления и перемещения столбцов таблицы.
  • Добавлена возможность сортировок столбцов таблицы.
  • Добавлена сортировка числовых значений (по частотности поискового запроса).
  • Добавлена фильтрация числовых значений (по частотности поискового запроса).
  • Добавлена возможность открытия xls и xslx файлов.
  • Добавлена кластеризация по выбранному столбцу с переносом в кластеры сопутствующих данных из соседних ячеек таблицы.
  • Добавлена возможность составления сценариев обработки данных, которые могут включать любые действия, доступных в приложении.
  • Улучшена система создания пользовательских функций, которые могут так же содержать в себе сценарии обработки.
  • Добавлены типы проектов с фильтрами по умолчанию для каждого типа проекта, для быстрого преобразования выгрузок из различных сервисов, таких как Bukvarix, Ahrefs и т.п в требуемый формат в 1 клик.
  • Добавлена возможность сохранения проекта, который включает в себя все обрабатываемые данные и результаты кластеризации, а также все фильтры и сценарии (опционально).
  • Добавлена возможность сохранения фильтров и сценариев в файл отдельно от проекта.
  • Добавлены пресеты настроек кластеризатора.
  • Добавлена возможность генерации всех возможных дублей строк для определения наиболее востребованного варианта поискового запроса.
24-января 2021 X-Parser-Light обновлен до версии 3.2.8

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 3.2.8.

  • Добавлена возможность ограничить размер смешанной статьи, как минимальный, так и максимальный
  • Обновлены настройки поисковых систем
  • Улучшен алгоритм получения картинок, когда они подгружаются при помощи скриптов
  • Устранены ряд ошибок на основании багрепортов пользователей, возникших в версиях 3.1.6 и 3.1.8
  • Улучшен алгоритм определения тела статьи, что увеличило качество получаемого контента
  • Добавлена возможность получения оригинального параметра alt у картинок
21-октября 2020 X-Parser-Light обновлен до версии 3.1.8

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 3.1.8.

  • Улучшен алгоритм формирования статьи из секций, теперь можно получать хорошо структурированные статьи из частей статей. Теперь блоки берутся по порядку и логическая структура статьи автоматически выстраивается логично и последовательно
  • Исправлена ошибка смешивания статей, когда в смешанную статью попадали статьи со следующего кейворда, возникшая в версии 3.1.6
  • Добавлен парсинг изображений из параметра data-src, характерный для Яндекс Дзен
26-сентября 2020 X-Parser-Light обновлен до версии 3.1.6

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 3.1.6.

  • Исправлены проблемы с вылетами приложения после обновления 3.0.9
  • Исправлен ряд проблем с капчей и ReCaptcha Гугла, возникшие из-за некоторых нововведений у поисковых систем
  • Поле настроек Требуемое количество контента заменено на Количество смешиваемых статей, чтобы при использовании мешапа можно было парсить больше одной итоговой статьи на кейворд
  • Добавлен лог отпарсенных ссылок
  • Исправлена работоспособность макроса [H1ToH2], утраченная при обновлении 3.0.9
  • Обновлены все настройки поисковых систем
  • Добавлен сервисы лимитированного парсина, такие как XmlProxyXmlRiver и XmlStock в качестве поисковых систем. При их использовании можно делать 1000 запросов к ПС за 5-10 рублей, и парсить без капчи.
13-мая 2020 X-Parser-Light обновлен до версии 3.0.9

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 3.0.9.

  • Добавлена возможность автоматического распознавания Google ReCaptcha при помощи сервисов распознавания капчи.
  • Добавлена возможность выбирать по сколько изображений сохранять в одной папке и нужно ли разбивать папку с изображениями на подкатегории.
  • Добавлена возможность задавать произвольный путь сохранения изображений относительно корня сайта.
  • Улучшен алгоритм парсинга нумерованных и ненумерованных списков: устранена проблема, когда списки, состоящие из одного слова на пункт могли игнорироваться.
  • Исправлена ошибка замены по регулярным выражениям в фильтрах, когда регулярное выражение не отрабатывало
  • Добавлен макрос {RANDOM_PHRASE} для вывода случайного предложения.
  • Добавлен макрос {RANDOM_SECTION} для вывода случайного блока текста от заголовка до заголовка, включая заголовок.
  • Обновлены шаблоны вывода с учетом новых макросов.
  • Добавлен макрос [DROP_HEADERS] для замены всех заголовков на заголовки на порядок ниже, <h1> на <h2>, <h2> на <h3> и т.д. 
  • Добавлен макрос [repeat=2-5][/repeat] для повторения заключенного внутри текста случайное количество раз в указанном диапазоне.
  • Добавлены фильтры для предложений и секций.
  • Исправлена ошибка формирования WordpressXML, когда в редких случаях мог получаться невалидный шаблон.
  • Добавлена остановка парсинга, если кача была неверно распознана указанное количество раз. Количество раз задается в дополнительных настройках парсинга.
18-февраля 2020 X-Parser-Light обновлен до версии 2.9.6

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.9.6.

  • Добавлен макрос {SourceCode}, позволяющий вывести в шаблона вывода исходный код отпарсеной страницы.
  • Исправлена ошибка парсинга картинок, возникающая, если включен режим парсинга таблиц.
  • Добавлен режим быстрого парсинга метаданных страницы донора, включая абзацы и заголовки без определения тела статьи интеллектуальным методом, например для мешапа по абзацам.
  • Добавлен режим быстрого парсинга только метаданных и исходного кода страницы, на случай когда нужны только метаданные страницы или исходный код.
  • Обновлены настройки всех поисковых систем.
  • Добавлены следующие поисковые системы: Teoma.com, Mysearch.com работающие на базе выдачи гугла.
  • В шаблонах вывода добавлена возможность задавать произвальные данные в формате {Значение 1|Значение 2|Значение 3}.
  • В шаблонах вывода добавлен макрос [ClearHTML][/ClearHTML] для очистки HTML при парсинге с изображениями и разметкой.
2-февраля 2020 Penguin обновлен до версии 14.6

Внимание!  Вышло обновление Penguin до версии 14.6. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

  • Добавлено пакетное добавления файлов из вложенных папок на всю глубину по маске папок и файлов.
  • Исправлена ошибка ограничения размера класткров.
  • Добавлены режимы разделения кластеров на кластеры заданной длины.
24-сентября 2019 X-Parser-Light обновлен до версии 2.8.3

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.8.3.

  • Исправлен баг с парсингом гугла, возникший в обновлении 2.8.0 при попытке найти способ отправки на распознавание Google ReCaptcha 2. Если у Вас есть информация о том, как отправить на распознавание именно капчу, выдаваемую самим гуглом, а не интегрированную на стороннем сайте, свяжитесь с разработчиком.
  • Изменен режим поведения парсера при получении капчи, которую не смогли распознать 6 работников, теперь вместо приостановки процесса, капча обновляется и отправляется повторно.
  • Добавлен макрос {RANDOM_HEADER}, позволяющий выводить случайный заголовок.
16-сентября 2019 Penguin обновлен до версии 14.2

Внимание!  Вышло обновление Penguin до версии 14.2. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

  • Исправлена ошибка, возникшая в версии 14.1, а именно: проблема вставки данных в редактор по Ctrl+V, содержащих цифры, которые попадали в поле "Количество результатов", что вызывало ошибку.
2-сентября 2019 X-Parser-Light обновлен до версии 2.8.0

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.8.0.

  • Обновлены настройки поисковых систем. В частности восстановлена работоспособность Rambler.ru.
  • Добавлен фильтр по включению в исходном коде источника.
  • Добавлен фильтр по исключению в исходном коде источника.
  • Исправлена ошибка парсинга в режиме скачивания изображений при использовании макроса {RANDOM_IMAGE}.
  • Изменен алгоритм формирования имен изображений при сохранении на более короткие имена.
  • Снижена нагрузка при конвертации контента.
  • Добавлена проверка исчерпания лимитов в Yandex.XML с приостановлением процесса в случае их исчерпания.
1-августа 2019 Penguin обновлен до версии 14.1

Внимание!  Вышло обновление Penguin до версии 14.1. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

  • Исправлена ошибка вставки данных для обработки в редакторе через сочетание горячих клавиш Ctrl+V, которая приводила к неработоспособности всех функций, так как исходные данные вставлялись в текстовое поле редактора, а не привязывались для обработки.
  • Исправлены прочие ошибки сочетаний горячих клавиш на всех текстовых полях. Просьба: если обнаружите ошибки при использовании горячих клавиш на каком-то из полей, пожалуйста, сообщите об этом нам!
14-июля 2019 Penguin обновлен до версии 14.0

Внимание!  Вышло обновление Penguin до версии 14.0. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

  • Добавлена быстрая функция транслитерации.
  • Добавлена возможность сохранения результатов в кодировке UTF-8 без BOM.
  • Улучшена быстрая фильтрация контента от мусора.
  • Добавлен функционал для работы с CSV файлами в быстрых операциях:
  • Добавлена возможность быстро конвертировать дампы SQL в CSV формат.
  • Добавлена возможность переноса столбцов в огромных CSV файлах.
  • Добавлена возможность удаления столбцов в огромных CSV файлах.
  • Добавлен функционал для обработки баз данных с телефонами и E-Mail:
  • Добавлен быстрый поиск телефонов.
  • Добавлен быстрый поиск E-Mail адресов.
  • Добавлена возможность сопоставить номера телефонов РФ с операторами и регионами РФ.
  • Исправлены проблемы с горячими клавишами на полях ввода.
8-апреля 2019 X-Parser-Light обновлен до версии 2.7.0

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.7.0.

  • Добавлен макрос {RANDOM_MOVIE}, позволяющи выводить случайное видео при смешивании контента, если оно было получено в одной из статей.
  • Добавлен макрос {RANDOM_DATE=01.01.2018-01.01.2019} для вывода случайной даты в заданном диапазоне, для осуществления отложенной публикации постов в Wordpress.
  • Улучшен алгоритм парсинга некоторых https-сайтов, которые требовали использования браузера, теперь браузер не нужен, что снижает нагрузку на CPU, если таких сайтов встречается много.
  • Улучшен алгоритм очистки скриптов, который после одного из обновлений мог в редких случаях давать сбой и мог появляться мусор из скриптов в контенте.
  • Добавлены примеры шаблонов под D-Zeus/D-Zerber5.
  • Добавлен макрос [rand=50][/rand] для вывода, заключенного внутри макроса, блока в указанном проценте случаев.
  • Добавлен поисковик Go.Mail.ru, а так же возможность добавлять несколько шаблонов ссылки.
  • Добавлен парсинг таблиц.