Новости проекта

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.1.8.

• Добавлено логирование кейвордов, по которым не было получено полного объема контента.
• Добавлен мультикей, теперь можно к кейворду добавить данные в формате [Значение 1|Значение 2] и использовать эти данные в Шаблонах вывода, как {MULTYKEY_1}, {MULTYKEY_2}...
• Добавлена проверка содержимого файла при сохранении, если имя файла совпадает с уже существующим, что дополнительно отсеивает возможные дубли контента, полученные с разных источников.
• Улучшена фильтрация заголовков от мусора
• Добавлена возможность сохранять состояние процесса во время парсинга, что позволяет восстановить процесс при любом сбое с того места в котором он был прерван.
• Улучшен режим парсинга с изображениями
• Добавлен режим парсинга контента с изображениями и видеороликами с Youtube
• Исправлено ложное срабатывание проверки изменения контента в менеджере обработки контента
• Добавлена возможность выбора ротации прокси-серверов
• Улучшено распознавание специфических языков в расширенной кодировке.

Внимание!  Вышло обновление Penguin до версии 8.2. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

• Улучшено контекстное меню в таблице кластеров, добавлены горячие клавиши.
• Исправлены неточности при удалении дублей.
• Улучшен и ускорен алгоритм удаления вхождения строк друг в друга.
• Добавлена функция поиска неявных дублей.
• Добавлена функция поиска неявных дублей с учетом морфологии.
• Добавлена функция поиска вхождения слов дуг в друга.
• Добавлены подсказки на все кнопки на панели управления.

Внимание!  Вышло обновление Penguin до версии 7.5. Изменения актуальны и для Standard, и для Premium версий. Внесены следующие изменения:

• Добавлена возможность ограничивать количество фраз в кластере, как по нижней границе, так и по верхней.
• Добавлен режим ограничения количества фраз в кластере при распределении во все кластеры.
• Улучшен алгоритм кластеризации по условиям: теперь все варианты кластеров по начальному условию группируются в один кластер по этому условию.
• Добавлен режим сохранения "Каждый кластер в строку" и еще несколько режимов сохранения кластеров.
• Добавлен режим управления регистром "Каждое слово с большой буквы".
• Добавлен режим управления регистром "Опустить первую букву в строке в нижний регистр".
• Улучшена идентификация регулярных выражений во всех полях ввода условий и поиска/замены.
• Английский язык на таблице кластеров заменен на русский.
• Исправлена работа удаления фраз с дублями слов и дублей слов.
• Добавлен ряд быстрых функций для быстрой фильтрации.

Внимание!  Вышел релиз Penguin [Premium Edition] версии 7.0, которая вобрала в себя весь функционал старой версии и получила функционал для кластеризации поисковых запросов.

Текущая версия имеет следующие возможности:

• Подбор поисковых запросов или любых других данных из текстовых файлов лбых размеров по точным условиями или регулярным выражениям
• Удаление явных, неявных, морфологических дублей, а так же вхождений строк друг в друга и поиск дублей
• Фильтрация по включениям и исключениям, как по точным условиям, так и по регулярным выражениям
• Сортировка по длине, в алфавитном порядке или перемешивание
• Групповой поиск и удаление или замена значений, как по точным условиям, так и по регулярным выражениям
• Разделение файлов по длине, кол-ву строк или кол-ву файлов, и объеденение файлов
• Кластеризация поисковых запросов с распределением результатов в пользу ВЧ или НЧ словосочетаний и с учетом морфологии

Переход с версии 6.0 и ниже или с версии Standard на версию Penguin [Premium Edition] осуществляется по скидке в 50%.

Внимание!  Вышел релиз Penguin [Standard Edition] версии 7.0, которая вобрала в себя весь функционал старой версии и получила новое ядро и интерфейс.

Текущая версия имеет следующие возможности:

• Подбор поисковых запросов или любых других данных из текстовых файлов лбых размеров по точным условиями или регулярным выражениям
• Удаление явных, неявных, морфологических дублей, а так же вхождений строк друг в друга и поиск дублей
• Фильтрация по включениям и исключениям, как по точным условиям, так и по регулярным выражениям
• Сортировка по длине, в алфавитном порядке или перемешивание
• Групповой поиск и удаление или замена значений, как по точным условиям, так и по регулярным выражениям
• Разделение файлов по длине, кол-ву строк или кол-ву файлов, и объеденение файлов

Обновление с версии 6.0 и ниже до Penguin [Standard Edition] версии 7.0 бесплатно.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.1.1.

• Улучшено качество парсинга контента без разметки. Теперь по любым даже самым неконтентным кеям, под доры собирается очень хороший и чистый контент.
• Добавлен режим парсинга контента без разметки по одному предложению на строку, для доргенов.
• Транслит парсера адаптирован под Pandorabox.
• Исправлена ошибка сбора изображений: устранено влияние фильтра по длине абзаца на количество изображений в тексте.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 2.0.1.

• Исправлена проблема ошибочного срабатывания антивирусов на систему защиты, в связи с чем после обновления нужно будет переактивировать лицензию.
• Исправлена проблема запуска на виртуальных машинах.
• Исправлена ошибка иногда возникающая при инициализации большах файлов кейвордов.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 1.9.9.

• Исправлены пути прописывания изображений, при парсинге в режиме сохранения изображений.
• Исправлена ситуация, возникшая в версии 1.9.4, приводящая к остановке процесса, если выдача не была получена.
• Исправлена ошибка в редакторе ПС, не позволяющая корректро сохранять изменения настроек.
• Исправлен режим формирования заголовков.
• Исправлена ошибка сохранения и перезаписи файлов, когда создавались файлы с индексами вместо перезаписи.
• Добавлена возможность добавлять условия фильтров списком из файла.
• Исправлены настройки поисковой системы Mail.ru

Внимание!  Вышло обновление Penguin до версии 6.0.  Внесены следующие изменения:

• Иправлена ошибка, возникшая в предыдущей версии, которая приводила к неработоспособности кнопки Новый проект.

Внимание!  Вышло обновление Penguin до версии 5.9.  Внесены следующие изменения:

• Исправлена ошибка в удалении вхождения строк друг в друга
• Добавлена возможность использовать ограничение конкретного вхождения (#условие#) при поиске вхождений слов в разном порядке (условие+найти). Теперь так же действует конструкция #слово#+#найти#.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 1.9.1.

• Оптимизирован процесс парсинга, что дало прирост скорости парсинга.
• Улучшен лог отображения процесса парсинга, добавлены ссылки и индикация, по каким ссылкам был получен контент.
• Улучшен алгоритм логирования дублей.
• Устранен ряд мелких багов на основании бегрепорта пользователей.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 1.8.7.

• Система парсинга по URL полностью синхронизирована с системой парсинга по кейвордам. Теперь можно при парсинге по списку URL можно использовать все настройки парсера. Так же теперь можно парсить комбинировано, задавая и конкретные ссылки, и просто кейворды.
• Добавлен режим добавления файлов в список кейвордов, для ускорения открытия и инициализации списков кейвордов и ссылок больших размеров.
• Исправлена проблема сохранения параметра NUM в настройках ПС.
• Исправлена капча Google.
• При сохранении имен файлов транслитом точка вместо пробелов заменена на нижний прочерк по просьбам пользователей.

Внимание!  Вышло обновление Penguin до версии 5.7.  Внесены следующие изменения:

• Добавлена возможность создавать новый проект, что позволяет быстро очистить форму приложения от всех ранее введенных данных.
• Добавлена индикация при подсчете количества строк в очереди были ли посчитаны они точно или примерно.
• Добавлена возможность удаления явных и неявных дублей в файлах весом в 10Gb и более. Примерно в трое превышающих объем ОЗУ.
• Исправлена ошибка при сохранении больших файлов, когда при сохранении оставалась 1 строка.

Внимание!  Были выпущены новые обновления X-Parser Light. Парсер обновлен до версии 1.8.4.

• Исправлена ошибка получения капчи Google
• Заменен алгоритм определения тела статьи, который дает намного более чистый контент
• Улучшено качество сбора картинок при парсинге контента с изображениями
• Восстановлена возможность использования в VirtualBox

Внимание!  Вышло обновление Penguin до версии 5.3.  Внесены следующие изменения:

• Добавлена возможность подключать файлы с условиями в списки включений и исключений, что позволяет задавать десятки тысяч условий, если это нужно.
• Добавлена возможность при групповой фильтрайии в разные файлы выбрать режим распределения включений: либо проверять включения для каждого файла независимо, либо до первого совпадения.