metainspector

> 编程语言

开源

用于 Web 爬虫的 Ruby gem。它会爬取指定的 URL，并返回其标题、元描述、元关键字、链接、图像等信息。

1.0K stars0 点赞2 次浏览

访问官网 GitHub

工具介绍

用于 Web 爬虫的 Ruby gem。它会爬取指定的 URL，并返回其标题、元描述、元关键字、链接、图像等信息。

MetaInspector

MetaInspector 是用于 Web 抓取的一个宝石。您只需提供一个 URL,它就能轻松获取标题、链接、图像、字符集、描述、关键字、元标记等信息。

安装

从 RubyGems 安装 gem:

bash

gem install metainspector

如果您在 Rails 应用中使用它,只需将其添加到 Gemfile 中,然后运行 bundle install

ruby

gem 'metainspector'

支持的 Ruby 版本定义在 .circleci/config.yml 中。

支持 MetaInspector

MetaInspector 已经通过 RubyGems.org 下载了超过 300 万次,在 GitHub 上获得了超过 1K 个星星。

如果您使用 MetaInspector,如果您能够为项目做出贡献,以帮助确保其持续发展,将会非常感谢。

ruby

page.url                 # 页面的 URL
page.tracked?            # 如果 URL 包含已知的跟踪参数,则返回 true
page.untracked_url       # 返回去除了已知跟踪参数的 URL
page.untrack!            # 从 URL 中移除已知的跟踪参数
page.scheme              # 页面的协议 (http, https)
page.host                # 页面的主机名

[](https://circleci.com/gh/jaimeiniesta/metainspector) [](https://codeclimate.com/github/jaimeiniesta/metainspector) [](https://github.com/markets/awesome-ruby)