Команда розробників Screaming Frog SEO Spider повідомила про те, що інструмент оновлений до версії 6.0. Головним нововведенням став запуск переробленого краулер, функціонал якого тепер багато в чому наблизився до можливостей GoogleBot. Зокрема, тепер краулер здатний обробляти елементи на JavaScript. За замовчуванням SEO Spider відображає контент також, як браузер, який використовується в процесі запуску сканування.
Зміни торкнулися і інтерфейсу інструменту. Фахівці отримали можливість управляти колонками зі статистикою сторінок у вкладках, змінюючи їх кількість і послідовність подання. Якщо послідовність була змінена, інструмент запам'ятає це і при повторному зверненні буде виводити варіант, встановлений користувачем.
В оновленій версії Screaming Frog SEO Spider також є вилучення даних з Sitemap сайту. При цьому файли Sitemap, скільки б їх не було, інструмент знайде на підставі введеного URL:
Оновлення також дозволить фахівцям при необхідності отримувати дані зі сторінок в тегах по Xpath.
Інструмент навчився розпізнавати HTML-атрибути rel = "next" and rel = "prev" і відповідним чином сканує їх.
У Screaming Frog SEO Spider 6.0 інтегрували емулятор сніпетів в пошуковій видачі з урахуванням всіх останніх змін в Google.
Нарешті, оновився фільтр пошукових запитів (search query filter) для Search Console. Це дозволить користувачеві додавати або виключати певні ключові слова, наприклад, вітальні запити.
Більш докладно з усіма нововведеннями можна ознайомитися в офіційному блозі розробника .