Парсер почты: 13 лучших инструментов парсинга адресов электронной почты для поиска клиентов в 2020 году

13 лучших инструментов парсинга адресов электронной почты для поиска клиентов в 2020 году

“Более 40% продавцов говорят, что поиск клиентов – самая сложная часть процесса продаж, за которой следуют закрытие сделок (36%) и их оценка (22%). Если вам кажется, что поиск – самая трудная часть вашей работы, вы не одиноки”.

Найти потенциальных клиентов, вырастить их и, наконец, убедить купить ваш продукт – непростая задача. Работая в сфере продаж, вы хорошо знаете, как сложен этот процесс.

В условиях современного рынка, если бы вас попросили провести традиционный холодный обзвон, вы бы наверняка отказались, потому что хорошо знаете, насколько это неэффективно. Но как торговые представители, такие как вы, могут быстрее и эффективнее искать новых покупателей?

Ответ на вопрос в этой статье. Высокие продажи – тяжелая работа, которая должна вестись в правильном направлении. Эта статья покажет вам один из методов, который увеличит конверсию продаж, а также предоставит инструменты, которые помогут вам в достижении высоких целей.

Продажи в 2020 году должны быть быстрыми, эффективными, и именно поэтому «парсинг электронной почты» – это идеальный метод, позволяющий повлиять на ваших потенциальных клиентов и продажи.

Что значит “парсинг email адресов”?

Парсинг адресов электронной почты – это онлайн процесс извлечения адресов, чтобы можно было связаться с ними позже. Например, когда вы ищете на сайте адреса электронной почты, вашим следующим действием будет переписка с ними и превращение в лидов. Это отличная техника, поскольку она помогает торговым представителям, таким как вы, искать потенциальных покупателей гораздо быстрее.

Потребность в парсинге почты возникла потому, что поиск потенциальных клиентов – длительный процесс. Проведение холодных звонков и рассылок по электронной почте с последующей аналитикой занимает у продажников много времени, а приводит это всего к нескольким продажам. Следовательно, парсинг адресов  электронной почты является отличным подспорьем, помогающим намного быстрее достигать ваших целей.

Получение почтовых адресов дает преимущества всем. Задумывались ли вы, когда видели сайт конкурента, что решение, которое вы продаете, намного лучше?

Парсинг электронной почты поможет вам продвинуть его. Это может быть полезно для:

1. Намного более быстрого получения списка заинтересованных лиц
2. Лучших продаж потенциальным лидам
3. Привлечения внимания потенциальных покупателей за счет предложения альтернатив тем продуктам, которые они уже используют

Мы выбрали 13 лучших инструментов для парсинга адресов электронной почты, которые помогут вам сделать этот процесс более легким и понятным.

1. Zoominfo 

У Zoominfo простой интерфейс, который позволяет пользователям находить адреса электронной почты предприятий с помощью всего одной ссылки. Существующие клиенты ставят Zoominfo на первое место и компания предлагает три типа решений для маркетинга, предприятия и продаж. С Zoominfo у вас есть возможность быстрее заключать сделки, контролировать их и более эффективно собирать лиды.

Функции:

1. Торговые решения
2. Маркетинговые решения
3. Корпоративные решения

Особенности:

1. Контакты и поиск в компании
2. Ориентация на аккаунтов
3. Управление базой данных
4. Оптимизация кампаний

Плюсы:

1. Отличные возможности для пользователей.
2. Удобное приложение.

Минусы:

1. Если вы хотите приобрести Zoominfo для всей вашей команды, это может опустошить ваш карман.
2. Пользователи Zoominfo время от времени сталкиваются с падением приложения, что может привести к остановке текущей работы.

Цена:

Zoominfo предлагает 3 ценовые стратегии. Первая – профессиональная, вторая – продвинутая, а третья – элитная. За исключением цены, элитный план предлагает и дополнительные функции. Чтобы понять ценообразование, вам нужно будет запросить цену, как только вы определитесь с необходимым функционалом.

Оценка:

4.3 из 5

2. Skrapp.io

Специальный инструмент для получения B2B адресов электронной почты – он помогает получать сами адреса и связываться с ними, что значительно повышает эффективность деятельности. Skyrapp понимает, насколько важен ваш бизнес, именно поэтому он гарантирует, что вы будете получать только проверенные адреса компаний. Skrapp может работать с любым источником, будь то Linkedin, веб-сайт конкретной компании и т.п..

Функции

1. Находит подтвержденные адреса на Linkedin
2. Находит лиды на сайтах компаний
3. Находит подтвержденные адреса электронной почты для всех, кого вы хотите
4. Получает адреса электронной почты любой организации
5. Находит все электронные письма в базе данных

Особенности:

1. Расширение Chrome
2. Поиск электронной почты
3. Поиск сразу множества адресов
4. Поиск по домену
5. API

Плюсы:

1. Автоматическое извлечение множества потенциальных адресов из одного источника
2. Простой интерфейс, облегчающий понимание

Минусы:

1. Пользователи утверждают, что получают и неправильные адреса
2. Плохая поддержка клиентов, связанная с запросами skyrapp.io.

Цена:

Skyrapp имеет 5 тарифов. Первый – бесплатный, второй – “Для начинающих” (49 долларов в месяц), третий – “Для ищущих” (99 долларов в месяц), четвертый – “Для предприятий” (199 долларов в месяц) и, наконец, пятый вариант оплаты – “Глобальный”, который вы можете получить за 299 долларов в месяц. В зависимости от плана, вы ограничиваетесь количеством адресов. Чем дороже пакет, тем больше адресов электронной почты и количество пользователей.

Оценка:

3.4 из 5

3. Octoparse 

Octoparse легко и эффективно проводит парсинг и обход сайтов. Это настолько простое приложение, что даже новичок может начать его использование без каких-либо затруднений. Его использует множество известных компаний, и он помогает многим брендам в вопросах поиска адресов электронной почты. Компания также предлагает безопасный парсинг с помощью ротации IP-адресов и облачных платформ.

Функции:

1. Парсинг в один клик
2. Предлагает облачные сервисы
3. Парсинг по графику
4. Изменение IP-адресов
5. Работает с любыми сайтами
6. Выдает результаты в любом формате, который вам нужен

Особенности:

1. Корпоративные решения
2. Организация данных
3. Веб-парсинг

Плюсы:

1. При использовании Octoparse пользователям вообще не нужно знать программирование
2. Подходит для парсинга больших и сложных сайтов

Минусы:

1. В бесплатном тарифе не работает API
2. Нет приложения для Mac и нативного приложения для Android

Цены:

Octoparse предлагает 4 варианта цены. Это бесплатный план, стандартный за 75 долларов в месяц, профессиональный за 209 долларов и корпоративный план, который начинается от 4899 долларов в год. Для стандартного и профессионального плана предлагается бесплатная пробная версия.

Оценка

4.6 из 5

4. Hunter.io

Hunter верит в прозрачность данных и это именно то, что стремится предоставить платформа своим пользователям. Hunter гарантирует, что любая ваша активность будет сохранена. С этим инструментом легко собрать все адреса и всё, что вам нужно сделать, это ввести доменное имя и начать поиск.

Функции:

1. Поиск по домену
2. Поиск электронной почты
3. Верификация почты
4. Работа со множествами задач сразу
5. Кампании
6. API

Особенности:

1. Сбор любых адресов электронной почты с любого сайта
2. Проверка правильности адресов
3. Получение адресов любых специалистов, которых вы хотите найти

Плюсы:

1. Удобное приложение
2. Быстрый парсинг

Минусы:

1. Функций не очень много
2. Не работает с LinkedIn – вы не сможете собирать адреса с этой социальной платформы, что может быть плохо для B2B-бизнеса

Цены:

Hunter.io предлагает 5 тарифных планов – бесплатный, для начинающих (49 долларов в месяц), для роста (99 долларов), для профессионалов (199 долларов), и для предприятий (399 долларов в месяц).

Оценка:

4.6 из 5

5. Rocket Reach

Предлагая самые точные базы адресов, Rocket Reach позволяет вам установить связь с профессионалами, которые важны для вашего бизнеса. Будь то маркетинг, продажи или рекрутинг, Rocket Reach отлично подходит для получения проверенных данных. Кроме того, Rocket Reach умеет синхронизироваться и подключаться к другим приложениям, вроде SalesForce, HubSpot и прочим CRM.

Функции:

1. Расширенный поиск
2. Расширение Chrome
3. Массовый поиск
4. API
5. Интеграция с другими приложениями

Особенности:

1. Точные данные
2. Рекомендует другие действия, которые могут упустить конкуренты при выполнении той же работы (также предоставляет личные адреса электронной почты)
3. Отчеты для получения лучших результатов
4. Информация о последних тенденциях

Плюсы:

1. Если вы хотите получить множество лидов, то это приложение для вас
2. С этим приложением легче идентифицировать потенциальных клиентов, а данные, которые оно предоставляет, надежны

Минусы:

1. Небольшое количество бесплатных поисков для пользователей, которые выбирают бесплатный тариф
2. Плохой UX

Цены:

Rocket Reach предлагает 3 тарифных плана, которые могут оплачиваться ежемесячно или ежегодно. Это планы Essentials, Pro и Ultimate. Ежемесячно они стоят 59, 119 и 299 долларов соответственно. Ежегодно это 468, 948 и 2,388 долларов. Независимо от того, какой план вы хотите купить, Rocket Reach во всех предоставляет следующее:

1. Круглосуточную поддержку
2. Поддержку CM и ATS
3. Экспорт в CSV
4. Массовый поиск
5. Полный доступ к API

Оценка:

4.1 из 5

6. Prospect.io

Prospect.io – автоматизированная платформа продаж, которая должная снять бремя поиска клиентов с продавцов. Prospect.io не просто находит адреса электронной почты для вас, но также проверяет их, чтобы у вас всегда под рукой были качественные данные. Он также отслеживает все действия, чтобы данные в дальнейшем могли улучшить сервис компании.

Функции:

1. Поиск адресов
2. Отправка писем
3. Анализ
4. Синхронизация

Особенности:

1. Проверяет адреса электронной почты
2. Проводит холодные кампании
3. Не нужен ввод данных
4. Отслеживает каждое действие

Плюсы:

1. Эффективен в автоматизации, и с ним легко можно отслеживать общение
2. Простое и удобное приложение

Минусы:

1. Есть вероятность, что при парсинге адресов могут быть получены неправильные данные
2. Цены слишком высоки и доступны не всем

Цены:

Prospects.io предлагает два плана: один для начинающих, а другой для профессионалов. Планы можно оплачивать либо ежемесячно, либо ежегодно, однако для профессионального плана вам необходимо пройти через ознакомление с сервисом. Для начинающих, если сервис оплачивается ежемесячно, стоимость составляет 79 долларов + 29 долларов в месяц для каждого дополнительного пользователя. При оплате за год это 69 долларов в месяц + 25 долларов за каждого дополнительного пользователя.

Оценка:

4.4 из 5

7. Sales Navigator

Sales Navigator – это правильное решение современных торговых представителей. Будь то поиск лидов или закрытие сделок, с этим приложением вы точно повысите свою эффективность.

Функции:

1. Находит соответствующих потенциальных клиентов, чтобы вы могли продать им свои товары или услуги

Особенности:

1. Поиск потенциальных клиентов
2. Закрывает сделки

Плюсы:

1. Предоставляет данные о любых действиях и уведомляет пользователей о любых изменениях
2. Подходит для любой клиентов и категорий бизнеса (малых, средних или больших предприятий)

Минусы:

1. Некоторые функции требуют ручного труда
2. Сохраненные данные никогда не будут находиться в том месте, где вы хотите их видеть, что затрудняет поиск тогда, когда они вам наиболее нужны

Цены:

Sales Navigator не раскрывает свои цены. Вы можете посетить их страницу и через форму связаться с отделом продаж, а также просмотреть демонстрацию.

Оценка:

4.2 из 5

8. Slik

Slik гарантирует, что данные для продаж, получаемые пользователями, являются эффективными. Slik предлагает качественные пользовательские данные, которые помогают современным торговым представителям гораздо быстрее и удобнее искать потенциальных клиентов.

Функции:

• Информация отсутствует

Особенности:

• Информация отсутствует

Плюсы:

1. Можно получить доступ к большим и актуальным базам данных с адресами потенциальных клиентов
2. Можно искать по большому количеству контактов, чтобы получать адреса электронной почты

Минусы:

1. Отсутствуют возможности интеграции
2. Точность данных все еще под вопросом

Цены:

Silk не предоставляет данных о ценах, на сайте вы можете запланировать звонок с ними, чтобы получить более полное представление о продукте и ценах.

Оценка:

Информация отсутствует

9. Scrapebox Email Scraper

Scrapebox Email Scraper предлагает множество функций, надстроек и плагинов, что делает его многофункциональным инструментом, отвечающим требованиям множества пользователей. Это бесплатный инструмент, богатый на дополнительные функции, такие как поддержка прокси, сканер сайтов, настройка пользовательских агентов и многое другое.

Функции:

1. Сбор почтовых адресов
2. Генератор имен и адресов электронной почты
3. Сбор прокси и многое другое

Особенности:

1. Быстрая многопоточная работа
2. Настраиваемый
3. Множество дополнений

Плюсы:

1. Имеет встроенную поддержку прокси, так что поиск адресов  может проводиться пользователями на любых сайтах без страха быть заблокированными
2. Поддержка https для работы с любыми социальными платформами

Минусы:

1. Сбор адресов может быть медленным, поскольку это бесплатное приложение и пользователей может быть много
2. Постоянные обновления могут раздражать пользователей

Цены:

Scrapebox – бесплатный инструмент. Если вы хотите получить пожизненную лицензию, вам необходимо произвести однократный платеж (сумма не указывается). Любые обновления или функции, перечисленные в списке, бесплатны.

Оценка:

Информация отсутствует

10. Email Extractor 

Email Extractor – это расширение Google, которое помогает извлекать электронные письма из различных источников, таких как локальные HTML-документы, текстовые файлы, электронные письма и т.п. Это автоматизированный процесс, который ускоряет вашу работу по поиску адресов электронной почты и не требует много контроля. Email Extractor предлагает офлайн-поддержку, устранение дубликатов почты, чтобы пользователи получали качественные данные.

Функции:

1. Автоматическое извлечение адресов из веб-страниц
2. Поиск адресов на Ajax-страницах, например, Google Search

Особенности:

1. Извлечение адресов из разных источников (текстовые файлы и многое другое)
2. Фильтр дубликаты адресов электронной почты
3. Автоматическое сохранение найденных адресов электронной почты

Плюсы:

1. Без рекламы
2. Устраняет любые дубликаты адресов электронной почты во время сбора, а значит дает пользователям качественные данные

Минусы:

1. Настройка приложения требует технических знаний и может быть сложна для простых пользователей

Цены:

Email Extractor – это расширение Google Chrome, оно бесплатное и может быть установлено на вашу систему в любое время, когда вы захотите.

Оценка:

4.3 из 5

11. Aeroleads

Aeroleads помогает в нахождении адресов электронной почты, номеров телефонов, а также данных компаний с помощью плагинов для Chrome. Aeroleads считается лучшим программным обеспечением для поиска потенциальных клиентов в Интернете. Он также предлагает отличную поддержку через чат, электронную почту и даже по телефону.

Функции:

1. Использует Linkedin для получения адресов электронной почты профессионалов
2. Ищет данные, относящиеся к каждому контакту (имя, профиль и многое другое)
3. Экспорт или передача данных в другие инструменты в разных форматах
4. Отличная поддержка

Особенности:

1. Софт для поиска адресов электронной почты и телефонных номеров
2. Расширения Chrome
3. Расширения Firefox

Плюсы:

1. Удобный интерфейс для пользователей
2. Продажники могут легко подключить это приложение к CRM

Минусы:

1. Ограничен поиском только деловых контактов, а не людей
2. Создание списка рассылки может быть затруднено

Цены:

Aeroleads предлагает 4 тарифных плана, которые можно оплачивать ежемесячно или ежегодно. Первый план называется «Взлет» и он стоит 49 долларов в месяц, следующий их самый популярный тариф «Подъем» стоит 149 долларов, далее идет “Круиз” за 499 долларов. Цену последнего, “Корпоративного” предложения не раскрывают, вам нужно отправить письмо по электронной почте, чтобы узнать ее. Для ежегодных платежей цена 490, 1490 и 4990 долларов соответственно. 

Оценка: 

4.8 из 5

12. Voila Norbet 

Voila Norbet фокусируется  на трех важнейших факторах, касающихся сбора адресов электронной почты: выявления потенциальных клиентов, проверка и поиск дополнительной информации о них. Независимо от того, на где вы хотите искать адреса, расширение Norbet гарантирует свою работу с источником. Будь то продажи в целом или продажи в форме контент-маркетинга, PR или в других формах, в Norbet говорят, что пользователи всегда будут получать качественную информацию, которая значительно улучшит деятельность по формированию лидов.

Функции:

1. Поиск лидов
2. Проверка электронной почты
3. “Обогащение” контактов дополнительной информацией

Особенности:

1. Продажи
2. Подбор персонала
3. Контент-маркетинг
4. Развитие бизнеса
5. PR
6. Любые другие ваши услуги также могут поддерживаться

Плюсы:

1. Точные данные электронной почты
2. Лучшие инструменты для сбора почты без каких-либо хлопот

Минусы:

1. Если вы храните много информации о потенциальном клиенте, этот инструмент может потерять некоторые поля, что может сбить вас с толку
2. Не поддерживает Mac, Windows, iOS и Android

Цены: 

Voila Norbet предлагает 4 тарифных плана, которые можно оплачивать ежемесячно или ежегодно. Ежемесячные платежи начинаются с 49 долларов в месяц, есть еще планы в 99, 249 и 499 долларов. Если вы платите за год, то это 39, 79, 199 и 399 долларов в месяц.

Оценка:

4.9 из 5

13. ListGrabber

Listgrabber специализируется на создании списков потенциальных клиентов и получении данных из множества источников. Listgrabber гарантирует получение всей важной информации. Платформа может использовать онлайн-каталоги, сайты ассоциаций, каталоги членов и списки MLS – Listgrabber обещает простой сбор нужной информации

Функции:

1. Передача данных в один клик
2. Точность
3. Быстрый поиск лидов
4. Обработка нескольких адресов электронной почты
5. Горячие клавиши
6. Автоматические обновления
7. Извлечение почты
8. Определение дубликатов

Особенности:

1. Извлекает деловые адреса из онлайн-каталогов
2. Помогает вам генерировать лиды намного быстрее
3. Помогает создавать деловые списки рассылки

Плюсы:

1. Использует Excel для извлечения информации и для ее размещения, чтобы пользователи могли проводить рассылки
2. Поддерживает Желтые страницы Австралии

Минусы:

1. Нужно покупать новые версии каждый год, чтобы продолжать использовать богатые функции, которые предлагает это приложение
2. Если вы хотите работать с большими объемами информации, скорее всего этот инструмент даст сбой

Цены:

Вы можете приобрести лицензию ListGrabber со следующими ценами, 1 лицензия – 249.95 доллара, 2 лицензии – 449 долларов, 5 лицензий – 1,059 доллара. Наконец, 20 лицензионных пакетов стоит 3,984 долларов, это скидка в 20%.

Оценка:

3 из 5

Итого

Получение адресов электронной почты потенциальных клиентов – один из самых простых способов, с помощью которого продавцы могут быстро увеличить количество покупателей. Хотя регулярный парсинг адресов с помощью этих инструментов принесет вам много пользы, но в этом есть и некоторый риск – вас могут заблокировать, если вы будете делать это слишком часто.

Идеально, если вы будете использовать прокси-сервера, которыми можно защитить используемые вами инструменты парсинга почты. Надежный прокси-сервер может скрыть вашу личность, так что всякий раз, когда вы будете проводить поиск, с ним не возникнет каких-либо проблем.

Какой инструмент парсинга электронной почты вы планируете использовать? Почему вы считаете, что выбранный вами инструмент идеально подходит для ваших продаж? Мы бы хотели получить от вас отзывы.

HTML::EmailExtractor — парсинг e-mail адресов со страниц сайтов | A-Parser

• Собираемые данные(top)

  • Собирает адреса электронной почты с указанных страниц

  Возможности(top)

  • Переход по внутренним страницам сайта до указанной глубины(опция Parse to level) — позволяет пройтись по всем страницам сайта, собирая внутренние и внешние ссылки
  • Определение кодировки сайта
  • Определение follow links для ссылок
  • Возможность указать считать сабдомены как внутренние страницы сайта

  Варианты использования(top)

  • Используется для сбора e-mail адресов, которые размещены на страницах сайтов
  • Возможность вывода количества e-mail адресов, размещенных на страницах сайта, через переменную $mailcount

  Запросы(top)

  В запросе необходимо указывать ссылку с которой нужно спарсить e-mail адрес(а)

  Нажмите, чтобы раскрыть…

  Опция Parse to level(top)

  Указывает парсеру переходить по соседним страницам сайта в глубину до указанного уровня, например:

  • Если указан 1-ый уровень то парсер перейдёт по всем ссылкам указанным на исходной странице
  • Если указан 2-ой уровень то парсер перейдёт по всем ссылкам указанным на исходной странице + по всем ссылкам собранным со страниц на первом уровне
  • т.д.

  Т.к. на соседних страницах скорее всего будут ссылки на исходную страницу или повторы ссылок, то для того чтобы парсер не зациклился и не ходил по кругу необходимо обязательно включать уникальность запросов(Unique queries).

  Результаты(top)

  • В результате отображен e-mail адрес(а) сайта

  [email protected]
  [email protected]
  [email protected]
  [email protected]

  Нажмите, чтобы раскрыть…

  Возможные настройки(top)

  Общие настройки для всех парсеров

  Параметр	Значение по умолчанию	Описание
  Good status	All	Выбор какой ответ с сервера будет считается успешным. Если при парсинге будет другой ответ от сервера, то запрос будет повторен с другим прокси
  Good code RegEx	—	Возможность указать регулярное выражения для проверки кода ответа
  Method	GET	Метод запроса
  POST body	—	Контент для передачи на сервер при использовании метода POST. Поддерживает переменные $query — url запроса, $query.orig — исходный запрос и $pagenum — номер страницы при использовании опции Use Pages
  Cookies	—	Возможность указать cookies для запроса
  User agent	Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)	Заголовок User-Agent при запросе страниц
  Additional headers	—	Возможность указать произвольные заголовки запроса, с поддержкой возможностей шаблонизатора и использованием переменных из конструктора запросов
  Read only headers	☐	Читать только заголовки. Позволяет в некоторых случаях экономить трафик, если нет необходимости обрабатывать контент.
  Detect charset on content	☐	Возможность распознавать кодировку на основе содержимого страницы
  Emulate browser headers	☐	Возможность эмулировать заголовки браузера
  Max redirects count	7	Максимальное кол-во редиректов по которым будет переходить парсер
  Max cookies count	16	Максимальное число Cookie для сохранения
  Bypass CloudFlare	☑	Автоматический обход проверки CloudFlare на браузер
  Subdomains are internal	☐	Считать ли поддомены как внутренние ссылки
  Follow links	Internal only	Определяет по каким ссылкам переходить
  Search Cloudflare protected e-mails	☑	Определяет парсить ли Cloudflare protected e-mails

Автообработка писем (парсинг) и Неразобранное — НЕРАЗОБРАННОЕ И ИСТОЧНИКИ — amoCRM

Автопочта, или парсер email’ов (парсинг) — это обработчик входящей почты. Является источником заявок.


Если пользователю на почту присылаются типовые, шаблонные письма, то с помощью обработчика можно настроить, какое
слово письма в какое поле в
карточке клиента попадет.

Для настройки обработчика нужно зайти в настройки «Digital Воронку» (раздел «Сделки» — «Настроить воронку») и выбрать
в источниках
«Автообработка писем».

Для подключения источника нужно пройти 4 этапа:

1. В зависимости от «Службы электронной почты» (Gmail, Yandex и прочие), вам предоставляется инструкция для
   настройки пересылки шаблонных
   писем с вашего ящика и он не обязательно должен быть подключен в amoCRM. На этом этапе система создает
   специальный ящик для обработки
   шаблонных писем, который автоматически подключается в аккаунте;
2. После настроек в своем почтовом ящике, нажмите кнопку «Далее» и перейдите на следующий этап настройки. Здесь вам
   на почту приходит письмо
   со ссылкой, перейдя по которой вы подтверждаете пересылку писем на специальный ящик, созданный системой;
3. На следующем этапе вам будет предложено выбрать типовое письмо, по которому и будет происходить обработка
   почты;
4. В тексте письма выделяем значения, которые хотим занести в поля карточек сделки, контакта или компании. Нужные
   поля должны быть заранее
   добавлены в карточку в ее настройках. При выделении какого-либо слова в тексте письма, появляется список полей
   карточки. Выбираем нужные поля.
   Также имеется возможность добавить нужные теги, статус, в который должны попадать письма и ответственного за
   сделку. Здесь же можно включить
   создание задачи при создании сделки.

10 инструментов, позволяющих парсить информацию с веб-сайтов, включая цены конкурентов + правовая оценка для России

Инструменты web scraping (парсинг) разработаны для извлечения, сбора любой открытой информации с веб-сайтов. Эти ресурсы нужны тогда, когда необходимо быстро получить и сохранить в структурированном виде любые данные из интернета. Парсинг сайтов – это новый метод ввода данных, который не требует повторного ввода или копипастинга.

Такого рода программное обеспечение ищет информацию под контролем пользователя или автоматически, выбирая новые или обновленные данные и сохраняя их в таком виде, чтобы у пользователя был к ним быстрый доступ. Например, используя парсинг можно собрать информацию о продуктах и их стоимости на сайте Amazon. Ниже рассмотрим варианты использования веб-инструментов извлечения данных и десятку лучших сервисов, которые помогут собрать информацию, без необходимости написания специальных программных кодов. Инструменты парсинга могут применяться с разными целями и в различных сценариях, рассмотрим наиболее распространенные случаи использования, которые могут вам пригодиться. И дадим правовую оценку парсинга в России.

1. Сбор данных для исследования рынка

Веб-сервисы извлечения данных помогут следить за ситуацией в том направлении, куда будет стремиться компания или отрасль в следующие шесть месяцев, обеспечивая мощный фундамент для исследования рынка. Программное обеспечение парсинга способно получать данные от множества провайдеров, специализирующихся на аналитике данных и у фирм по исследованию рынка, и затем сводить эту информацию в одно место для референции и анализа.

2. Извлечение контактной информации

Инструменты парсинга можно использовать, чтобы собирать и систематизировать такие данные, как почтовые адреса, контактную информацию с различных сайтов и социальных сетей. Это позволяет составлять удобные списки контактов и всей сопутствующей информации для бизнеса – данные о клиентах, поставщиках или производителях.

3. Решения по загрузке с StackOverflow

С инструментами парсинга сайтов можно создавать решения для оффлайнового использования и хранения, собрав данные с большого количества веб-ресурсов (включая StackOverflow). Таким образом можно избежать зависимости от активных интернет соединений, так как данные будут доступны независимо от того, есть ли возможность подключиться к интернету.

4. Поиск работы или сотрудников

Для работодателя, который активно ищет кандидатов для работы в своей компании, или для соискателя, который ищет определенную должность, инструменты парсинга тоже станут незаменимы: с их помощью можно настроить выборку данных на основе различных прилагаемых фильтров и эффективно получать информацию, без рутинного ручного поиска.

5. Отслеживание цен в разных магазинах

Такие сервисы будут полезны и для тех, кто активно пользуется услугами онлайн-шоппинга, отслеживает цены на продукты, ищет вещи в нескольких магазинах сразу.

В обзор ниже не попал Российский сервис парсинга сайтов и последующего мониторинга цен XMLDATAFEED (xmldatafeed.com), который разработан в Санкт-Петербурге и в основном ориентирован на сбор цен с последующим анализом. Основная задача — создать систему поддержки принятия решений по управлению ценообразованием на основе открытых данных конкурентов. Из любопытного стоит выделить публикация данные по парсингу в реальном времени 🙂

10 лучших веб-инструментов для сбора данных:

Попробуем рассмотреть 10 лучших доступных инструментов парсинга. Некоторые из них бесплатные, некоторые дают возможность бесплатного ознакомления в течение ограниченного времени, некоторые предлагают разные тарифные планы.

1. Import.io

Import.io предлагает разработчику легко формировать собственные пакеты данных: нужно только импортировать информацию с определенной веб-страницы и экспортировать ее в CSV. Можно извлекать тысячи веб-страниц за считанные минуты, не написав ни строчки кода, и создавать тысячи API согласно вашим требованиям.

Для сбора огромных количеств нужной пользователю информации, сервис использует самые новые технологии, причем по низкой цене. Вместе с веб-инструментом доступны бесплатные приложения для Windows, Mac OS X и Linux для создания экстракторов данных и поисковых роботов, которые будут обеспечивать загрузку данных и синхронизацию с онлайновой учетной записью.

2. Webhose.io

Webhose.io обеспечивает прямой доступ в реальном времени к структурированным данным, полученным в результате парсинга тысяч онлайн источников. Этот парсер способен собирать веб-данные на более чем 240 языках и сохранять результаты в различных форматах, включая XML, JSON и RSS.

Webhose.io – это веб-приложение для браузера, использующее собственную технологию парсинга данных, которая позволяет обрабатывать огромные объемы информации из многочисленных источников с единственным API. Webhose предлагает бесплатный тарифный план за обработку 1000 запросов в месяц и 50 долларов за премиальный план, покрывающий 5000 запросов в месяц.

3. Dexi.io (ранее CloudScrape)

CloudScrape способен парсить информацию с любого веб-сайта и не требует загрузки дополнительных приложений, как и Webhose. Редактор самостоятельно устанавливает своих поисковых роботов и извлекает данные в режиме реального времени. Пользователь может сохранить собранные данные в облаке, например, Google Drive и Box.net, или экспортировать данные в форматах CSV или JSON.

CloudScrape также обеспечивает анонимный доступ к данным, предлагая ряд прокси-серверов, которые помогают скрыть идентификационные данные пользователя. CloudScrape хранит данные на своих серверах в течение 2 недель, затем их архивирует. Сервис предлагает 20 часов работы бесплатно, после чего он будет стоить 29 долларов в месяц.

4. Scrapinghub

Scrapinghub – это облачный инструмент парсинга данных, который помогает выбирать и собирать необходимые данные для любых целей. Scrapinghub использует Crawlera, умный прокси-ротатор, оснащенный механизмами, способными обходить защиты от ботов. Сервис способен справляться с огромными по объему информации и защищенными от роботов сайтами.

Scrapinghub преобразовывает веб-страницы в организованный контент. Команда специалистов обеспечивает индивидуальный подход к клиентам и обещает разработать решение для любого уникального случая. Базовый бесплатный пакет дает доступ к одному поисковому роботу (обработка до 1 Гб данных, далее — 9$ в месяц), премиальный пакет дает четырех параллельных поисковых ботов.

5. ParseHub

ParseHub может парсить один или много сайтов с поддержкой JavaScript, AJAX, сеансов, cookie и редиректов. Приложение использует технологию самообучения и способно распознать самые сложные документы в сети, затем генерирует выходной файл в том формате, который нужен пользователю.

ParseHub существует отдельно от веб-приложения в качестве программы рабочего стола для Windows, Mac OS X и Linux. Программа дает бесплатно пять пробных поисковых проектов. Тарифный план Премиум за 89 долларов предполагает 20 проектов и обработку 10 тысяч веб-страниц за проект.

6. VisualScraper

VisualScraper – это еще одно ПО для парсинга больших объемов информации из сети. VisualScraper извлекает данные с нескольких веб-страниц и синтезирует результаты в режиме реального времени. Кроме того, данные можно экспортировать в форматы CSV, XML, JSON и SQL.

Пользоваться и управлять веб-данными помогает простой интерфейс типа point and click. VisualScraper предлагает пакет с обработкой более 100 тысяч страниц с минимальной стоимостью 49 долларов в месяц. Есть бесплатное приложение, похожее на Parsehub, доступное для Windows с возможностью использования дополнительных платных функций.

7. Spinn3r

Spinn3r позволяет парсить данные из блогов, новостных лент, новостных каналов RSS и Atom, социальных сетей. Spinn3r имеет «обновляемый» API, который делает 95 процентов работы по индексации. Это предполагает усовершенствованную защиту от спама и повышенный уровень безопасности данных.

Spinn3r индексирует контент, как Google, и сохраняет извлеченные данные в файлах формата JSON. Инструмент постоянно сканирует сеть и находит обновления нужной информации из множества источников, пользователь всегда имеет обновляемую в реальном времени информацию. Консоль администрирования позволяет управлять процессом исследования; имеется полнотекстовый поиск.

8. 80legs

80legs – это мощный и гибкий веб-инструмент парсинга сайтов, который можно очень точно подстроить под потребности пользователя. Сервис справляется с поразительно огромными объемами данных и имеет функцию немедленного извлечения. Клиентами 80legs являются такие гиганты как MailChimp и PayPal.

Опция «Datafiniti» позволяет находить данные сверх-быстро. Благодаря ней, 80legs обеспечивает высокоэффективную поисковую сеть, которая выбирает необходимые данные за считанные секунды. Сервис предлагает бесплатный пакет – 10 тысяч ссылок за сессию, который можно обновить до пакета INTRO за 29 долларов в месяц – 100 тысяч URL за сессию.

9. Scraper

Scraper – это расширение для Chrome с ограниченными функциями парсинга данных, но оно полезно для онлайновых исследований и экспортирования данных в Google Spreadsheets. Этот инструмент предназначен и для новичков, и для экспертов, которые могут легко скопировать данные в буфер обмена или хранилище в виде электронных таблиц, используя OAuth.

Scraper – бесплатный инструмент, который работает прямо в браузере и автоматически генерирует XPaths для определения URL, которые нужно проверить. Сервис достаточно прост, в нем нет полной автоматизации или поисковых ботов, как у Import или Webhose, но это можно рассматривать как преимущество для новичков, поскольку его не придется долго настраивать, чтобы получить нужный результат.

10. OutWit Hub

OutWit Hub – это дополнение Firefox с десятками функций извлечения данных. Этот инструмент может автоматически просматривать страницы и хранить извлеченную информацию в подходящем для пользователя формате. OutWit Hub предлагает простой интерфейс для извлечения малых или больших объемов данных по необходимости.

OutWit позволяет «вытягивать» любые веб-страницы прямо из браузера и даже создавать в панели настроек автоматические агенты для извлечения данных и сохранения их в нужном формате. Это один из самых простых бесплатных веб-инструментов по сбору данных, не требующих специальных знаний в написании кодов.

Самое главное — правомерность парсинга?!

Вправе ли организация осуществлять автоматизированный сбор информации, размещенной в открытом доступе на сайтах в сети интернете (парсинг)?

В соответствии с действующим в Российской Федерации законодательством разрешено всё, что не запрещено законодательством. Парсинг является законным, в том случае, если при его осуществлении не происходит нарушений установленных законодательством запретов. Таким образом, при автоматизированном сборе информации необходимо соблюдать действующее законодательство. Законодательством Российской Федерации установлены следующие ограничения, имеющие отношение к сети интернет:

1. Не допускается нарушение Авторских и смежных прав.

2. Не допускается неправомерный доступ к охраняемой законом компьютерной информации.

3. Не допускается сбор сведений, составляющих коммерческую тайну, незаконным способом.

4. Не допускается заведомо недобросовестное осуществление гражданских прав (злоупотребление правом).

5. Не допускается использование гражданских прав в целях ограничения конкуренции.

Из вышеуказанных запретов следует, что организация вправе осуществлять автоматизированный сбор информации, размещенной в открытом доступе на сайтах в сети интернет если соблюдаются следующие условия:

1. Информация находится в открытом доступе и не защищается законодательством об авторских и смежных правах.

2. Автоматизированный сбор осуществляется законными способами.

3. Автоматизированный сбор информации не приводит к нарушению в работе сайтов в сети интернет.

4. Автоматизированный сбор информации не приводит к ограничению конкуренции.

При соблюдении установленных ограничений Парсинг является законным.

p.s. по правовому вопросу мы подготовили отдельную статью, где рассматривается Российский и зарубежный опыт.

Какой инструмент для извлечения данных Вам нравится больше всего? Какого рода данные вы хотели бы собрать? Расскажите в комментариях о своем опыте парсинга и свое видение процесса…

Программа для сбора email адресов — LetsExtract Email Studio

100% ручная работа экспертов!: LetsExtract был разработан профессионалами с более чем 5-летним стажем в сфере разработки программного обеспечения. В LetsExtract мы использовали наш опыт из многих проектов для парсинга результатов поиска, парсинга сайтов, в том числе и социальных сетей. Мы разработали продукт, который идеально впишется в инструментарий как опытных маркетологов, так и новичков. Решение оптимизировано для максимально быстрого разбора HTML страниц. В некоторых случаях мы даже вынуждены ограничивать производительность LetsExtract, так как сайты просто не успевают отдавать данные с требуемой скоростью. Кроме того, в LetsExtract мы предлагаем оптимизированный, интуитивно-понятный интерфейс. Не требуется никаких специальных знаний, чтобы работать с этой программой.

«Умные» фишки LetsExtract Email Studio: Мы не будем раскрывать всех секретов. Приведем лишь ПАРУ примеров. Как вы поняли из описания выше, в ряде случаев программа обходит сайты, чтобы извлечь контактные данные. Так вот, прежде чем скачивать весь сайт целиком, программа смотрит — имеются ли на сайте страницы с URL вида «contacts, feedback, our members» и т.д. Это значительно экономит и время и трафик. Желаете еще один пример? Как избежать бана за спам-рассылки? Конечно, необходимо иметь максимально тематические контакты и рассылать письма небольшими партиями. Тоже самое и при сборе писем. LetsExtract понимает, какой сайт в настоящее время обрабатывается, и иммитирует браузер. Это отлично помогает в парсинге таких сайтов как Facebook, например.

«Швейцарский нож» интернет-маркетолога: Просто задайте себе вопрос, видели ли вы столько инструметов в одном продукте за такую цену? МЫ ГАРАНТИРУЕМ, что вы не найдете продукта, дешевле LetsExtract и имеющего аналогичный набор функций. Не говоря уж про онлайн сервисы — они предлагают минимум функционала, и требуют ежемесячную оплату. Это просто рекламный отстой, скажете вы? Ок, давайте сделаем подробное сравнение:

SE::MailRu — Парсер поисковой выдачи Mail.ru | A-Parser

• Собираемые данные(top)

  • Ссылки, анкоры и сниппеты из выдачи
  • Ссылки на кэш
  • Количество результатов по запросу

  Возможности(top)

  • Парсит максимальное отдаваемое число результатов — 50 страниц по 10 элементов в выдачи
  • Работа с антигейтом для разгадывания каптч
  • Поддержка сессий

  Варианты использования(top)

  • Сбор баз ссылок — для A-Poster, XRumer, AllSubmitter и т.д.
  • Оценка конкуренции для кейвордов
  • Поиск беклинков(упоминаний) сайтов
  • Проверка индексации сайтов
  • Поиск уязвимых сайтов
  • Любые другие варианты подразумевающие парсинг Mail.Ru в том или ином виде

  Запросы(top)

  • В качестве запросов необходимо указывать поисковые фразы, точно так же как если бы их вводили прямо в форму поиска Mail.Ru, например:

  окна Москва

  Нажмите, чтобы раскрыть…

  Результаты(top)

  • В результате отображен список ссылок по запросам:

  http://www.mosokna.ru/
  http://www.okna-moskva.ru/
  http://www.sm-okna.ru/
  http://www.oknamoskvy.ru/
  http://www.ramokna.ru/
  http://www.oknamaster.ru/
  http://vk.com/club63923031
  http://okna-darom.ru/
  http://www.plastika-okon.ru/
  http://orgpoisk.ru/section/id/49
  http://www.oknarosta.ru/
  http://www.zavodskieokna.ru/
  …

  Нажмите, чтобы раскрыть…

  Возможные настройки(top)

  Общие настройки для всех парсеров

  Параметр	Значение по умолчанию	Описание
  Pages count	10	Количество страниц для парсинга
  AntiGate preset	default	Подключение антигейта, необходимо предварительно настроить парсер Util::AntiGate и выбрать созданный пресет здесь
  Use sessions	☐	Cохраняет хорошие сессии что позволяет парсить еще быстрее, получая меньшее число ошибок

Красивый парсинг email оповещений из банка / Хабр

Мы продолжаем радовать вас интересными техническими решениями.

Сегодня на очереди email оповещения из банка, которые выглядят примерно так:

Pokupka, SHELL AZS OLGINO 1133, karta *347788, 23.07.11 12:09, 300.25 rub. Dostupno = 421.61 rub

или так

1000.00 RUR было списано с Вашего счета **77876.
Торговая точка: ZAO GAMMAEKSPER
Дата: 12/07/2011
Доступный баланс: 12344.11 RUR

Как вы думаете, как должна выглядеть красивая обработка таких оповещений в сервисе учета личных финансов?

Король умер

Начну с истории. Обработка email появилась в Дзен-мани больше года назад. Но тогда она обладала кучей недостатков:

• поддерживался всего один банк;
• на каждый счет в Дзен-мани существовал свой email-адрес и, если у вас было несколько счетов в одном банке, платежи по счетам не разделялись;
• если банк посылал какие-нибудь уведомления, они не доходили до вас, так как сервис перехватывал все письма.

Неудобства работы с email оповещениями и успехи нашего зарубежного собрата Mint (для пользования которым вообще не требуется вводить траты и доходы (все данные он получает с банковской карты и любезно сортирует их по категориям еда, бензин, развлечения…) побудили нас переписать механизм обработки email оповещений.

Начнем с малого, увеличим поддержку банков до четырех: ВТБ24, Ситибанк, Банк «Санкт-Петербург» и Банк24.ру. Это делается умными регулярными выражениями и упорным тестированием 🙂

Затем первое интересное решение, оставляем один электронный адрес (dropbox). Вообще один на все счета и все банки (для одного пользователя). Различие счетов происходит по последним четырем цифрам. Пользователь вводит их на этапе создания счета:

Последнее неудобство с потерей информационных писем, мы решили путем пересылки всех сообщений на личный email пользователя. И это было очень сложным решением для нас. До этой функции мы не спрашивали электронную почту, чтобы максимально сохранить приватность такой деликатной информации как личные финансы. Сейчас у вас есть выбор, указывать почту или нет.

Этих трех улучшений, еще не достаточно для _красивого_ решения. Пользователю все еще приходится определять на что была потрачена каждая транзакция: на бензин, на обучение или на что-то другое. Предлагаю вам разгадать, что мы придумали 🙂 Отгадка ниже под заголовком «Изюминка», а пока немного кода.

Механизм парсера

Парсер сообщений работает в два этапа:

• определение формата письма;
• непосредственно парсинг.

Парсить мы будет вот это письмо:

Уважаемый клиент,

1000.00 RUR было списано с Вашего счета **77876.
Торговая точка: ZAO GAMMAEKSPERT
Дата: 12/07/2011
Доступный баланс: 12344.11 RUR
Обратите внимание, что доступный баланс по текущему рублевому счету включает кредитный лимит.

Если Вы не согласны с полученной информацией, пожалуйста, свяжитесь с сотрудником CitiPhone по телефону (495) 775 75 75 (в Москве), (812) 336 75 75 (в Санкт-Петербурге), 8 (800) 700 38 38 (в др. городах РФ) в течение восьми дней.

Для получения более полной информации о наших услугах посетите наш сайт в интернете по адресу www.citibank.ru.

Для определения из какого же банка пришло письмо, и что ждать внутри мы используем следующую табличку:

id     foreign_format     check_order     marker_location      marker_pattern         datatype
43     33                 0               10                   /www\.citibank\.ru/    mail
44     33                 1               2                    /^\d/                  mail

Для каждого письма мы по очереди проверяем каждый из форматов в порядке check_order и ищем в строках marker_pattern. Как несложно проверить письмо из Ситибанка выше дает нам 33 формат.

Из второй таблички выбираем парсеры полей для 33 формата:

id    column_name     value_offset             foreign_format
49    outcome         2/^([\d\.]+)/"           33
50    datedmy         4#(\d{2}/\d{2}/\d{4})$#  33
51    payee           3/[^:]+:(.*)$/"          33

Цифра перед регекспом означаем номер строки письма. Проходим еще раз по письму и получаем нужные нам данные.

Изюминка: Автоопределение категорий

Вот мы и добрались до самого интересного — нашей реализации автоматического сопоставления категорий тратам по карте.

Сначала еще пример:

Сообщаем Вам, что 21.07.2011 в 11:12:05 по Вашей банковской карте ВТБ24 ...7780 произведена транзакция по оплате на сумму 1959.00 RUR.
Доступно к использованию: 2274.35 RUR. Детали платежа: HITZONA. Код авторизации 222635

А теперь смотрите, в каждом платеже у нас есть код магазина:

• SHELL AZS OLGINO — Бензин.
• HITZONA — развлечения (музыка, кино, игры).

То есть нам достаточно сопоставить коды магазина нашим категориям. Но где же взять эти данные? На помощь приходит краудсорсинг.

Каждый пользователь Дзен-мани сопоставляя платеж по карте одной из категорий делает вклад в общее дело. И мы получаем примерно такую табличку (имена категорий пользователи вводят сами).

10 SHELL AZS Бензин
3 SHELL AZS Автомобили
1 SHELL AZS Сладости

Когда пользователь получает оповещение о платеже в SHELL AZS мы ищем пересечение базы с его категориями и выбираем самую популярную. Есть категория «Бензин» — выбираем ее, если нет выбираем «Автомобили».

Другими словами, мы в Дзен-мани делаем все, чтобы облегчить вам ведение домашней бухгалтерии. На сегодня это получение данных из шести банков: Альфа-Банк, Райффайзенбанк, ВТБ24, Ситибанк, Банк «Санкт-Петербург», Банк24.ру и системы Яндекс.Деньги.

Попробуйте сегодня 🙂

Стоимость программного обеспечения парсера электронной почты

Что еще включено?

Все функции, которые не указаны выше, могут считаться неограниченными. Это включает, например, неограниченные правила синтаксического анализа, неограниченные загрузки файлов, неограниченные адреса псевдонимов, неограниченная интеграция, обработка вложений и многое другое.

Как работает бесплатная подписка?

Все просто — вы создаете бесплатную подписку, которой можете пользоваться столько, сколько захотите.У вас есть доступ ко всем функциям с нашей бесплатной подпиской, и вы ограничены только подсчетом почтовых ящиков и ежемесячным анализом по электронной почте. Чтобы предотвратить накопление множества неиспользуемых учетных записей, мы будем отправлять вам интерактивную ссылку каждые 30 дней, чтобы ваша подписка оставалась активной. Если вы решите, что mailparser.io вам не подходит, просто прекратите его использовать.

Есть ли особые требования?

Особых требований нет.Не нужно ничего устанавливать, и вам не нужны технические ноу-хау для настройки и использования mailparser.io. Кодирования не требуется.

Могу ли я импортировать партию старых писем?

Абсолютно! Все, что вам нужно сделать, это экспортировать свои электронные письма как файлы .eml . Затем вы можете загрузить их прямо в наше приложение, и они сразу же будут обработаны. Просто свяжитесь с нами, и мы проведем вас через весь процесс.

Какова ваша политика хранения данных?

По умолчанию мы храним ваши данные в течение 30 дней.
Вы можете определить, как долго мы храним ваши данные, в настройках почтового ящика, вы можете выбрать значение от 5 минут до 60 дней.

Могу ли я изменить тариф в любое время?

Вы можете перейти на более раннюю или более раннюю версию в любое время.После изменения плана ежемесячные платежи будут автоматически корректироваться в соответствии со следующим платежным циклом.
При обновлении вы можете сразу же использовать дополнительную квоту.

Могу ли я отменить в любой момент?

Все планы подписки можно отменить в любой момент.
После отмены ваша подписка будет автоматически прекращена к концу текущего платежного цикла, и больше никаких платежей не будет.

Какова ваша философия обслуживания?

Мы стремимся предоставить вам лучший сервис. Обычно мы отвечаем на запросы по электронной почте в течение нескольких часов.

.

Как автоматически копировать данные из вашей электронной почты

eBay отправлено по электронной почте — кто-то заказал что-то в вашем магазине. Ваш банк отправил вам ежемесячный отчет по электронной почте, ваша кредитная карта напоминает вам об оплате счета, а Apple напоминает вам о приложении, которое вы купили вчера вечером. И контактная форма на вашем сайте хороша, но каждое сообщение — это еще одна вещь, которая накапливается в вашем почтовом ящике.

Сортировать и управлять данными в электронной таблице или базе данных достаточно просто. Однако в вашем почтовом ящике уведомления — это только больше беспорядка, больше вещей, которые нужно архивировать и забыть.Проще потратить время на копирование текста из электронных писем и вставку его в полезное место, когда оно вам нужно.

Или вы можете позволить приложению делать всю работу за вас. Вот как анализировать текст из электронных писем и автоматически использовать их данные.

Если вы управляете недвижимостью через Airbnb, VRBO, HomeAway.com или любую другую платформу, вы можете использовать анализатор электронной почты Zapier, чтобы автоматизировать все повторяющиеся рабочие процессы. Вдохновляйтесь нашей статьей «Автоматизируйте Airbnb и другие рабочие процессы управления недвижимостью с помощью Zapier».

Что такое анализатор электронной почты?

Когда ваш босс или лучший друг пишет по электронной почте, вы, вероятно, читаете каждое слово.

В остальное время, скорее всего, вы просматриваете сообщение. Ваш взгляд быстро бегает по экрану, выбирая ключевые слова и фразы, такие как New Sale и 4,99 $ и Срок оплаты: пятница, 3 ноября .

Парсеры электронной почты работают таким же образом. Вы учите эти программы распознавать закономерности в ваших электронных письмах, сообщаете им, какие данные на самом деле важны, а все остальное можно игнорировать, а затем заставляете их сохранять только важные данные.Затем подключите анализатор электронной почты к инструменту автоматизации, такому как Zapier, чтобы сохранить этот важный текст в любых других приложениях, которые вы хотите регистрировать, например, в электронной таблице, или напоминать вам оплатить счет по кредитной карте завтра. Пока все электронные письма в целом составлены одинаково, анализатор электронной почты должен уметь определять, что важно, и копировать данные за вас.

Понял? В порядке. Давайте сделаем резервную копию и шаг за шагом создадим парсер электронной почты, который может копировать текст из ваших писем и запускать его в работу.Мы воспользуемся анализатором электронной почты Zapier — бесплатным инструментом для копирования текста из ваших электронных писем — а затем рассмотрим другие инструменты, которые могут сделать больше с вашими электронными письмами. Основы работают одинаково в каждом приложении, и когда вы знаете, как разбирать одно электронное письмо, вы знаете, как анализировать их все.

г.

1. Создайте новый анализатор электронной почты
2. Отправьте электронное письмо на синтаксический анализатор
3. Научите синтаксический анализатор читать вашу электронную почту
4. Автоматически пересылать электронные письма на синтаксический анализатор
5. Заставьте ваши проанализированные данные электронной почты работать

Создание нового парсера электронной почты

Первый шаг самый простой.Просто перейдите на parser.zapier.com, войдите в свою учетную запись Zapier или создайте новую учетную запись, затем нажмите кнопку Create Mailbox , чтобы добавить новый анализатор электронной почты.

Email Parser покажет вам адрес электронной почты, например [email protected] . Скопируйте этот адрес.

2. Перенаправить электронное письмо на анализатор

Теперь отправьте первое письмо для анализа. Откройте приложение электронной почты, найдите письмо, подобное тому, которое вы хотите использовать с анализатором электронной почты. Я хочу, чтобы Email Parser уведомлял меня о новых покупках в App Store, поэтому я получил электронное письмо из App Store.

Нажмите кнопку, чтобы переслать электронное письмо, введите свой адрес электронной почты @ robot.zapier.com в поле Кому: и нажмите Отправить .

3. Научите синтаксический анализатор читать вашу электронную почту

Выберите текст, который синтаксический анализатор скопирует, затем присвойте ему уникальное имя

Пора надеть шляпу учителя. Как только Zapier Email Parser получит ваше письмо, он покажет текстовую версию вашего письма в поле Initial Template . Все, что вам нужно сделать, это найти важные данные и сказать парсеру, что именно это нужно скопировать.

Прокрутите вниз до текста, который вы хотите, чтобы анализатор электронной почты скопировал, и выберите его. С помощью своих писем в App Store я хочу знать, что я купил, поэтому выбираю текст названия продукта. Введите имя для этого элемента в поле, нажмите Сохранить , и анализатор электронной почты заменит текст на имя в фигурных скобках, например .

Повторите это для всего остального, что парсер электронной почты должен копировать. Я тоже выбрал общую цену и дал ей название.

Как только это будет сделано, нажмите синюю кнопку «Сохранить адрес и шаблон » внизу — и ваш анализатор электронной почты готов к работе.

Анализатор электронной почты будет работать лучше всего, если выбранный вами текст будет написан одинаково в каждом электронном письме — возможно, числом после слова Total или ссылкой, написанной после слова Щелкните здесь . Значение может измениться, но анализатор электронной почты будет работать лучше всего, если предыдущий текст будет всегда одинаковым и в одном и том же месте.

Выберите тот же текст, который вы хотите скопировать, и дайте ему то же имя, чтобы научить анализатор электронной почты обрабатывать вариации в ваших электронных письмах.

Хотите повысить надежность парсера электронной почты? Перешлите другое аналогичное электронное письмо на тот же адрес, затем щелкните View Emails рядом с именем вашего парсера в списке Zapier Email Parser Mailboxes .Здесь отображаются ваши самые последние электронные письма с текстом, выделенным желтым цветом.

Если это неверно, щелкните ссылку Изменить дополнительный шаблон внизу. Выберите тот же текст, который вы изначально хотели скопировать из своих писем, дайте ему те же имена, а затем сохраните этот новый шаблон. Вы можете повторить это несколько раз, чтобы сделать ваш парсер более надежным.

4. Автоматическая пересылка новых писем на анализатор

Созданный вами анализатор электронной почты теперь готов копировать текст из других похожих писем — в данном случае квитанций из App Store.Каждую новую квитанцию ​​в App Store нам нужно отправлять парсеру электронной почты.

Лучший вариант — автоматизировать процессы с помощью фильтра в приложении электронной почты для автоматической пересылки сообщений, которые соответствуют тому, которое вы отправили в Email Parser. Как правило, все ваши электронные письма с уведомлениями имеют что-то общее — они исходят от одного и того же отправителя и часто имеют одну и ту же тему. Например, квитанции App Store поступают с адреса [email protected] и имеют ту же тему , что и квитанция от Apple .

Чтобы следить за этими письмами в Gmail, вам сначала нужно добавить свой адрес парсера электронной почты в Gmail для автоматической пересылки писем. Вот как:

• Откройте настройки пересылки Gmail — щелкните значок шестеренки, выберите Настройки , затем щелкните вкладку Пересылка .
• Нажмите кнопку Добавить адрес пересылки там.
• Введите адрес электронной почты парсера электронной почты @ robot.zapier.com в текстовое поле и нажмите «Далее».
• Проверьте свою электронную почту — Zapier должен отправить вам письмо с подтверждением от Gmail.Если вы его не видите, проверьте почтовый ящик приложения Email Parser — в нем должен быть адрес электронной почты. В любом случае скопируйте код подтверждения, а затем вставьте его в соответствующее поле в настройках Gmail Forwarding .

Теперь вы можете настроить автоматическую пересылку писем в Gmail парсеру электронной почты. Сначала найдите адрес электронной почты и / или тему сообщений, которые вы будете обрабатывать парсером электронной почты; Я ввожу с адреса: [email protected] И в теме: «Ваша квитанция от Apple» . Щелкните крошечную стрелку вниз справа от строки поиска, чтобы увидеть полные параметры Advanced Search — затем щелкните кнопку Create filter или ссылку в правом нижнем углу.Попросите этот фильтр пересылать электронное письмо на адрес парсера электронной почты, который вы только что добавили, и все должно быть настроено.

После небольшого упражнения с мышью и клавиатурой все готово. Каждый раз, когда Apple отправляет вам квитанцию ​​в App Store — или всякий раз, когда вы получаете любое другое электронное сообщение, которое хотите проанализировать, — Gmail отправляет его парсеру электронной почты.

Если вы используете другую службу электронной почты, проверьте свою документацию, чтобы узнать, может ли ваше приложение или служба автоматически пересылать сообщения электронной почты.

5.Используйте проанализированные данные электронной почты

Одного копирования текста из электронных писем недостаточно — вам нужно что-то делать с этими данными. Самый простой вариант — подключить ваш Email Parser к автоматизации приложений Zapier, что позволит вам отправлять данные из ваших писем в более чем 1300 других популярных рабочих приложений — от Airtable до Zoho.

Посетите Zapier и войдите в систему или зарегистрируйтесь, если вы еще этого не сделали. Затем нажмите оранжевую кнопку Make a Zap в правом верхнем углу. Выберите Email Parser в качестве триггерного приложения, затем выберите триггер New Email .Подключите свою учетную запись парсера электронной почты, если вы еще этого не сделали, и выберите адрес парсера, который вы только что настроили.

Zapier может использовать текст, найденный парсером электронной почты, как вы хотите.

После этого вы можете использовать данные электронной почты. На шаге Action выберите приложение, в которое вы хотите отправить данные электронной почты. Я хотел получать SMS-уведомление о моих квитанциях в App Store, поэтому выбрал действие Send SMS приложения SMS .

Чтобы использовать данные электронной почты, нажмите кнопку + рядом с любым полем вашего приложения.Здесь я добавил название покупки и цену из Email Parser в SMS-уведомления — вы, возможно, можете добавить имена и адреса электронной почты в информационный бюллетень электронной почты, записывать информацию о продажах в строки электронной таблицы или использовать данные электронной почты, как хотите.

Протестируйте Zap, чтобы убедиться, что все работает так, как вы хотите, включите его — и готово!

Теперь, когда приходит электронное письмо с деталями, которые необходимо сохранить, ваше почтовое приложение пересылает его парсеру электронной почты, который просматривает ваше письмо и копирует важную информацию, а затем отправляет ее в Zapier, который затем отправляет ее в приложение, которому нужны ваши данные.На данный момент это самый производительный станок Руба Голдберга.

Лучшие приложения для синтаксического анализа электронной почты

Парсер электронной почты

Zapier — не единственный способ скопировать текст из ваших писем. Это отличный инструмент, один из самых простых в настройке и использовании. Но он предназначен только для анализа текста из ваших электронных писем и может не выполнить копирование текста, если ваше форматирование электронной почты сильно изменится.

Вам нужно больше возможностей для анализа электронной почты? Есть несколько других инструментов, которые могут делать похожие вещи, отслеживая новые электронные письма и анализируя нужный вам текст — часто с даже большим количеством функций для этих самых сложных писем.

Вот лучшие приложения для анализа вашей электронной почты:

mailparser.io

для автоматического поиска данных для анализа

mailparser.io позволяет намного быстрее приступить к синтаксическому анализу электронной почты — и намного точнее. Начните так же, как и с анализатором электронной почты Zapier: создайте новый почтовый ящик, скопируйте его уникальный адрес электронной почты анализатора почты и пересылайте на него свои электронные письма. На этот раз для начала отправьте несколько похожих писем.

Как только приходят письма, mailparser.io попытается выяснить общие закономерности в ваших сообщениях — имена, даты, цены, номера заказов и т. д. Он автоматически отображает их в таблице, и если все в порядке, вы можете включить анализатор электронной почты и позволить ему работать, ничего не меняя для одношагового анализа электронной почты.

Однако есть вероятность, что вы захотите настроить и извлекать из своих сообщений определенные вещи. Откройте вкладку Parsing Rules в mailparser.io, затем выберите любое из готовых правил или добавьте новое.Там вы можете настроить mailparser.io для фильтрации обычного текста, такого как ссылки и пустые строки, а затем указать ему, что именно нужно отслеживать до и после проанализированного текста. Он может подсчитать определенное количество символов, найти следующее пустое место или строку или найти точную текстовую строку.

Он также может анализировать другие вещи в вашей электронной почте. Вам нужно скопировать все записи таблицы — даже если иногда записей больше, чем других? Добавьте текстовый фильтр Extract Tabular Data и анализатор почты.io может скопировать за вас полную таблицу или XML-контент. Он даже может копировать текст из PDF или текстовые вложения в ваши электронные письма.

• mailparser.io Цена: от 29 долларов в месяц Профессиональный план для анализа 500 писем в месяц в 30 почтовых ящиках
• Подключайте проанализированные электронные письма к другим приложениям с помощью интеграции Zapier mailparser.io.
• Чтобы подробнее узнать о возможностях mailparser.io и его ценах, ознакомьтесь с нашим обзором mailparser.io.

Совет: Необходимо автоматически извлекать данные из файлов PDF? mailparser.Приложение-сестра io, docparser, использует ту же технологию, чтобы копировать важную информацию из ваших PDF-файлов. Ознакомьтесь с нашим обзором docparser для получения дополнительной информации.

Parseur

для копирования текста из электронных писем HTML и RTF

Как Mail Parser от Zapier, так и mailparser.io превращают ваши электронные письма в обычный текст — вы получаете основные детали из своих писем без изображений и форматирования. Это работает — и mailparser.io позволяет создавать расширенные фильтры, чтобы глубже разбираться в форматировании HTML, — но это может быть сложно использовать.

Parseur упрощает работу с помощью парсера HTML, который показывает ваши сообщения именно так, как они выглядят в вашем почтовом ящике. Настройте анализатор электронной почты таким же образом — добавьте папку «Входящие», скопируйте адрес, пересылайте электронное письмо — затем вы можете создать новый шаблон в Parseur. Щелкните текст, который Parseur скопирует, добавьте имя поля на правой боковой панели и щелкните Create , затем повторите для всего остального, что вы хотите выбрать. Легко быстро выбрать, что вам нужно скопировать, с помощью стандартного представления электронной почты с расширенным текстом.

Просмотрите проанализированный текст в таблице рядом с исходным письмом

Затем вы можете использовать Parseur как почтовый ящик с архивом проанализированных писем. Щелкните вкладку Documents , чтобы просмотреть каждое полученное Parseur электронное письмо, и откройте их, чтобы увидеть исходное письмо вместе с таблицей скопированного текста.

Если Parseur не может понять, что делать с электронным письмом, он покажет его выделенным красным цветом в вашем списке Documents . Откройте письмо и щелкните значок + в правом углу, чтобы добавить новый шаблон, и Parseur затем проанализирует это письмо и в следующий раз использует дополнительный шаблон в качестве резервной копии.

Бонус: анализ сообщений электронной почты с помощью Regex и Zapier Formatter

Используя Zapier Formatter, вы можете автоматически копировать номера телефонов, ссылки, адреса электронной почты и многое другое из любого текста, включая электронную почту

Хотите копировать только номера телефонов, ссылки, адреса электронной почты и другой легко узнаваемый текст из сообщений электронной почты? Вам даже не нужен анализатор электронной почты. Все, что вам нужно, это скрипт с регулярным выражением или Reg ular Ex , который может найти текст, соответствующий нужному шаблону.

С помощью сценария регулярных выражений вы можете выполнять поиск по тексту электронной почты в текстовом редакторе, таком как Sublime Text, и копировать нужные элементы за секунды. Или, используя инструмент Zapier Formatter, вы можете заставить Zapier смотреть Gmail в поисках нового письма, использовать Formatter, чтобы найти, скажем, ссылку или номер телефона в тексте, а затем добавить другое приложение действия в Zap, которое заставит ваш текст работать.

Другой вариант: вы можете использовать этот скрипт Google Parsing Google с ctrlq.org, чтобы использовать скрипты регулярных выражений прямо внутри Gmail, которые находят данные в ваших электронных письмах и копируют их в Google Sheet.

Вот как это сделать в нашем подробном руководстве по извлечению текста с помощью регулярных выражений и Zapier Formatter.

Обеспечьте работу проанализированных писем с помощью автоматизации

Вы узнали, как анализировать электронные письма, и нашли идеальное приложение для писем, которые вам нужно анализировать. Осталось только начать использовать этот проанализированный текст в своей работе. Как и в приведенном выше примере, вы можете подключить свой анализатор электронной почты к Zapier, а затем автоматически отправлять каждое проанализированное электронное письмо в вашу CRM, инструмент электронной коммерции, приложение для управления проектами и многое другое.

Вот некоторые из наиболее популярных способов использования проанализированных данных электронной почты с Zapier:

Сохраните проанализированные данные электронной почты в электронную таблицу

Один из самых простых способов использовать данные электронной почты — сохранить их в электронной таблице. Там вы можете сортировать и фильтровать данные или легко импортировать их в другое приложение. Zapier может автоматически сохранять данные вашей электронной почты в таблицах Google или Excel или в базе данных для получения списка всего, что вам нужно, в одном месте.

Получить уведомление о проанализированных электронных письмах

Хотите получать SMS с более простой информацией из проанализированных писем? Или, возможно, вы предпочтете получить еще одно электронное письмо с важным текстом или уведомить свою команду в Slack.В любом случае вы можете сделать это автоматически.

Добавить новых подписчиков в список рассылки

Вы можете автоматически копировать адреса электронной почты людей, которые связываются с вашей компанией, и добавлять их в список рассылки, но вы упускаете много важных данных. Парсер электронной почты может помочь заполнить пробелы, скопировав всю их контактную информацию, прежде чем добавлять их в качестве новых подписчиков.

Создание контактов и интересов CRM из писем

Независимо от того, анализируете ли вы сообщения из своих контактных форм или квитанции о заказе из магазина электронной коммерции, сохраняйте данные электронной почты в CRM, чтобы сохранить как можно больше подробностей о ваших контактах и ​​клиентах.

Начать проекты и задачи с проанализированными сообщениями электронной почты

Не позволяйте работе скапливаться в вашем почтовом ящике. Анализируйте электронные письма и позвольте Zapier превратить их в задачи и проекты, которые вы будете выполнять.

Электронная почта является способом по умолчанию для большинства приложений для отправки уведомлений и другой информации и может быть лучшим способом автоматизации приложений, которые не имеют своей интеграции. С анализатором электронной почты и рабочими процессами Zapier ваш почтовый ящик может заставить ваши самые важные электронные письма работать на вас, как только они приходят — больше не нужно копировать и вставлять из вашего почтового ящика.

Хотите, чтобы ваш почтовый ящик стал еще более продуктивным? Вот несколько отличных руководств Zapier, которые помогут:

Кредиты изображений: Фотография фона океана, сделанная Димитрисом Ветсикасом через Pixabay

.