トライフィールズ

データサイエンス – 統計解析・機械学習

R言語 CRAN Task View：Web技術とサービス

CRAN Task View: Web Technologies and Servicesの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載しました。

Maintainer: Scott Chamberlain, Thomas Leeper, Patrick Mair, Karthik Ram, Christopher Gandrud
Contact: scott at ropensci.org
Version: 2019-06-06
URL: https://CRAN.R-project.org/view=WebTechnologies

このタスクビューには、RとWorld Wide Webを一緒に使用するための情報が含まれています。Rの基本バージョンには、Webとやり取りするための多くのツールが付属していません。ありがたいことに、Webとやりとりするツールはますます多くなっています。このタスクビューでは、Webベースのデータと情報を取得するためのパッケージ、WebベースのRアプリケーションを構築するためのフレームワーク、およびRからアクセスできるオンラインサービスに焦点を当てています。利用可能なパッケージと関数のリストを以下に示します。アクティビティ。rOpenSci Task View: Open Data には、Rからアクセスできるオンラインデータソースの詳細な説明があります。

このタスクビューの追加や改善のためのコメントや提案がある場合は、GitHubにアクセスしてsubmit an issue か、変更を加えてsubmit a pull request してください。GitHubに貢献できない場合は、send Scott an email してください。下記のいずれかのパッケージに問題がある場合は、そのパッケージのメンテナーに連絡してください。RパッケージでまだサポートされていないWebサービス、API、データソース、またはその他のオンラインリソースが分かっている場合は、the package development to do list on GitHub に追加することを検討してください。

RからWebを操作するためのツール

HTTPリクエストのコアツール

RからWebとやりとりするほとんどの使用例をカバーする2つのパッケージがあります。

httrは、HTTPメソッド（GET、POST、PUT、HEAD、DELETEなど）を実行するための使いやすいインターフェイスを提供し、最新のWeb認証プロトコル（OAuth 1.0、OAuth 2.0）をサポートします。HTTPステータスコードは、HTTPコールのデバッグに役立ちます。httrを使用すると、レスポンスオブジェクトからhttpステータスコードを取得するstop_for_status()など、これを簡単に使用できます。コールが成功しなかった場合は、機能を停止します。（warn_for_status()も参照してください）。httpコールのconfigパラメータにlibcurlオプションを追加で渡すことができます。curlは、Rとlibcurl C library の間のより密接なインタフェースを提供する下位レベルのパッケージですが、ユーザーフレンドリーではありません。これは、WebベースのXML上での操作やFTP操作の実行に役立ちます。curl :: curl()は、ベースRのurl()のSSL互換の置換えであり、http 2.0、SSL（https、ftps）、gzip、deflateなどをサポートしています。ほとんどのR関数は、安全でないHTTPを扱っているウェブサイト（すなわち、「http」という接頭辞ではなく）を使って、read.tableやread.csvなどのデータを直接抽出することができます。これは、jsonlite :: fromJSON()やXML :: parseXMLなどのアドオンパッケージ内の関数にも適用されます。具体的な状況については、以下のリソースが役立つ場合があります。

  • RCurlは、libcurlのもう一つの低レベルクライアントです。2つの低レベルカールクライアントのうち、curl を使用することをお勧めします。
    • httpRequestは、GET、POST、および複数パートのPOST動詞を実装するHTTPリクエストの別の低レベルパッケージですが、その使用はお勧めしません。
  • crul（GitHub ）は、R6ベースのHTTPクライアントであり、非同期HTTPリクエスト、ページネーションヘルパー、webmockr によるHTTP mocking、およびvcr によるリクエストのキャッシュを提供します。エンドユーザーよりも他のRパッケージの開発者をターゲットにしています。
  • curlconverter（CRANにはない）は、ブラウザの開発者のコンソールなどのcurlコマンドラインコードをRコードに変換するのに便利なパッケージです。
  • requestは、他のAPIクライアントパッケージの開発に役立つ高水準パッケージを提供します。
    • httpingは、httr 呼び出しの前後で、HTTPリクエストにpingと時刻を設定する簡単なツールを提供します。
    • httpcacheは、HTTPリクエストをキャッシュするためのメカニズムを提供します。
  • 動的に生成されたウェブページ（結果を表示するためにユーザインタラクションを必要とするウェブページ）の場合、RSelenium を使用してこれらのインタラクションを自動化し、ページコンテンツを抽出することができます。
    • これは、JsonWireProtocol を使用してSelenium 2.0 Webdriverのバインディングセットを提供します。また、自動化されたアプリケーションテスト、負荷テスト、およびWebスクレイピングにも役立ちます。
    • seleniumPipes（GitHub ）は、同じパイプライン型のインターフェイスを提供します。
    • 前の2つのパッケージに代わるものは、軽量の代替品であることを保証するsplashr です。
    • rdom（CRANにはない）は、phantomjs を使用してWebページのDOM（Document Object Model）にアクセスします。
    • decapitatedは、ヘッドレスChromeブラウザオーケストレーションを提供します。
  • Webページの静的コンテンツをキャプチャするために、postlightmercuryは、Webページを構造化されたテキストに変換するWebサービスMercury のクライアントです。
  • Webスクレイピングに役立つ高水準の代替パッケージは、一般的なWebスクラップ作業を簡単に表現できるようにmagrittrと連携するように設計されたrvest（GitHub ）です。
  • ウェブサイトがSSLを使用しない（すなわち、URLに “https”という接頭辞がない）場合、多くのベースRツールを使用してウェブコンテンツをダウンロードすることができます。download.file()は、リモートファイルをダウンロードするために使用できる汎用関数です。SSLの場合、downloader のdownload()関数はdownload.file()をラップし、すべて同じ引数をとります。
  • read.table()、read.csv()、およびfriendsを使用して、ファイルがSSL経由でホストされていないと仮定して、表形式のデータセット（例：txt、csvなど）を入力できます。別の方法として、httr :: GET（またはRCurl :: getURL）を使用して、read.table（text = …）で解析する前にファイルを文字ベクトルとしてRに最初に読み込む方法があります。ファイルをローカルディレクトリにダウンロードすることもできます。
    • rio（GitHub ）は、https：// URLから多くの一般的なデータ形式を直接読み取るimport()関数を提供します。
    • repmis 関数source_dat()は、URL（httpまたはhttpsのいずれか）からプレーンテキストデータをロードしてキャッシュできます。このパッケージには、非公開のDropboxフォルダからプレーンテキストデータをダウンロード/キャッシュするためのsource_Dropbox()と、Excel xlsxシートをダウンロード/キャッシュするためのsource_XlsxData()も含まれています。
  • 認証：Webリソースを使用するには、APIキー、OAuth、ユーザー名：パスワードの組み合わせ、または他の手段による認証が必要です。さらに、httpコールのヘッダーに認証が必要なWebリソースが存在することもあります。これには少し時間がかかります。
    • APIキーとユーザー名：パスワードコンボは、Webリソース（APIキー：http://api.foo.org/?key=yourkey;ユーザー/パス：http：//ユーザー名：パスワード @ api.foo.org）、またはRCurl またはhttr のコマンドで指定することができます。
    • OAuthは最も複雑な認証プロセスであり、httr を使用して最も簡単に行うことができます。
    • OAuth 1.0（linkedin、twitter、vimeo）の3つ、OAuth 2.0（facebook、GitHub、google）の3つのデモをhttrでご覧ください。
    • ROAuthは、OAuthとは別のRインターフェースを提供するパッケージです。
    • OAuthは、httr で簡単にできるので、そこから始めましょう。
    • googleAuthRは、Google Webサービス専用のOAuth 2.0セットアップを提供します。

HTTPエラー/コードの処理

  • fauxpasは、個々のHTTPステータスコードごとにR6クラスのようなRubyまたはPythonのセットを提供し、メッセージや警告、または停止の使用を選択できるように、単純で冗長なメッセージを許可します。
  • httpcodeは、ユーザー/パッケージが名前または番号でHTTPステータスコードと関連するメッセージを見つけるのを支援する簡単なパッケージです。

構造化されたWebデータの解析

ウェブベースのデータの大部分は、プレーンテキスト、HTML、XML、またはJSON（javascriptオブジェクト表記）として構造化されています。ウェブサービスAPIはますますJSONに依存していますが、XMLはまだ多くのアプリケーションで普及しています。これらのフォーマットで特に動作するパッケージがいくつかあります。これらの関数を使用して、安全でないWebページと直接やりとりすることができます。また、ローカルに格納された、またはメモリ内のWebファイルを解析するために使用できます。

  • XML：
    • XMLを扱うための2つのパッケージXMLとxml2（GitHub ）があります。
    • どちらもXPathクエリを含む一般的なXML（およびHTML）解析をサポートしています。
    • xml2 パッケージは、完全には機能しませんが、メモリ管理、クラス（XMLノードとノードセット、ドキュメントなど）、および名前空間に関してユーザーフレンドリーです。
    • 2つのうち、XML だけがXMLノードとドキュメントのデノボ作成をサポートしています。X
    • XML2R（GitHub ）パッケージは、XMLをデータフレームに強制するための便利な関数の集まりです。
    • XML の代わりにselectr があります。selectrはCSS3セレクタを解析し、セレクタをXPath 1.0式に変換します。
    • XML パッケージは、xmlとhtmlの解析によく使用されますが、selectrはCSSセレクタをXPathに変換するため、XPathではなくCSSセレクタを使用できます。
  • HTML：
    • XMLで動作するツールはすべてHTML用にも機能しますが、HTMLは実際には不正な形式になりがちです。一部のツールは、HTMLで動作するように特別に設計されています。xml2 :: read_html()は、HTMLを読み込むのに使う最初の良い関数です。
    • htmltoolsは、HTML要素を作成する関数を提供します。
    • htmltab（GitHub ）は、XMLパッケージのXML :: readHTMLTableと同様のHTMLテーブルから構造化情報を抽出しますが、ヘッダーとボディーセルの行と列のスパンを自動的に展開し、ヘッダーと本文の行の識別をより詳細に制御します。
    • selectorgadget browser extensionは、ページ要素を識別するために使用できます。
    • RHTMLFormsは、HTML文書を読み込み、それが含んでいる各フォームの説明と、異なる要素と隠しフィールドを取得します。
    • scrapeRは、HTML文書やXML文書からデータを取り出すための追加ツールを提供します。
    • htmltidy（GitHub ）は、乱雑なHTML文書を「整理」するためのツールを提供します。
    • htm2txtは、regexを使用して、すべてのHTMLタグを削除してhtmlドキュメントをプレーンテキストに変換します。
    • Rcrawlerは、Webページのクロールと削除を行います。
  • JSON：
    • JSONの読み書きには、rjson、RJSONIO、jsonliteというパッケージがいくつかあります。
    • jsonliteは、RJSONIO のyajlという別のパーサが含まれています。
    • jsonlite の使用をお勧めします。
    • Jeroen Ooms https://arxiv.org/abs/1403.2805 でjsonliteについて説明している記事を調べてください。
    • jqrは、高速JSONライブラリjq のバインディングを提供します。
    • jsonvalidate（GitHub ）は、”is-my-json-valid” Node.jsライブラリを使用して、スキーマに対してJSONを検証します。
    • validatejsonrは、RapidJSON C ++ライブラリを使用して同じことを行います。
    • ajvは、ajv Javascriptライブラリを使用して同じことを行います。
    • ndjson（GitHub ）は、「ndjson」形式をサポートしています。
  • RSS / Atom：
    • feedeRは、RSSフィードまたはAtomフィードの解析に使用できます。
    • tidyRSSは、RSS、Atom XML / JSON、およびgeoRSSをきちんとしたdata.frameに解析します。
  • swagger（CRANにはない）を使用して、Swagger.io 形式のドキュメントを提供するWebサービスAPIを操作するための関数を自動的に生成することができます。

URLを操作するためのツール

  • httr :: parse_url()関数を使用して、URLの一部を抽出することができます。RCurl :: URLencode()およびutils :: URLencode()関数は、URLで使用する文字列をエンコードするために使用できます。utils :: URLdecode()は元の文字列にデコードします。urltools（GitHub ）は、URLエンコーディング、デコード、解析、パラメータ抽出を処理することもできます。
  • tldextract パッケージは、ホスト名からトップレベルのドメインとサブドメインを抽出します。これは、a Python library of the same name の一部です。
  • iptoolsは、ジオロケーションでの使用を含め、IPv4アドレスの使用を容易にすることができます。
  • urlshorteneR（GitHub ）は、Bit.ly、Goo.gl、is.gdのURL展開と解析を提供します。longurlは、longurl.org APIを使用して同様の機能を提供します。
  • gdns（CRANにはない）は、Googleの安全なHTTPベースのDNS解決サービスへのアクセスを提供します。

スクレープされたWebページの内容を操作するためのツール

  • HTML文書の解析には、いくつかのパッケージを使用できます。
    • boilerpipeRは、HTMLファイルからのメインテキストコンテンツの一般的な抽出を提供します。ボイラパイプJavaライブラリを使用した広告、サイドバー、ヘッダーの削除
    • RTidyHTMLは、整形式ではないHTML文書を修正するためにlibtidyライブラリにインタフェースします。このライブラリは、HTMLドキュメントの一般的なエラーを修正します。
    • W3CMarkupValidatorは、HTMLドキュメントを検証するためのW3Cマークアップ検証サービスへのRインターフェイスを提供します。
  • XML文書の場合、XMLSchema パッケージは、XMLスキーマ文書を読み込んで処理してRクラスの定義を作成し、XMLノードをそれらのクラスのインスタンスに変換するための機能をRに用意しています。RのXMLスキーマによるメタコンピューティングのフレームワークを提供します。
    • xsltは、xsltスタイルシートを適用してXML文書を変換するxml2 パッケージの拡張です。（これは、Dan VeillardのlibxsltトランスレータとSXalan パッケージへのインタフェースであるSxslt の現代的な置き換えとして見ることができます。）これは、ウェブスクラップや、XMLマークアップを人間が読める形式や機械で読める形式（HTML、JSON、プレーンテキストなど）に変換するのに便利です。
    • SSOAPは、クライアント側のSOAP（簡易オブジェクトアクセスプロトコル）メカニズムを提供します。これは、SOAPサーバーが提供するSOAPメソッドを呼び出すための高水準インターフェースを提供することを目的としています。
    • XMLRPCは、HTTPとXMLを使用する比較的単純なリモートプロシージャコールメカニズムであるXML-RPCの実装を提供します。これは、単一のマシン上のプロセス間の通信、またはR内のWebサービスへのアクセスに使用できます。
  • Rcompression（CRANにはない）：R内でメモリ内の圧縮と解凍を実行するためのzlibとbzip2ライブラリへのインタフェース。これは、RCurlを介したWebサービスやHTTP要求などのリモートサーバへのコンテンツの受信や送信に便利です。
  • tm.plugin.webmining：XML（RSS、ATOM）とJSON形式のニュースフィード用の拡張可能なテキスト取得フレームワーク。現在、Googleブログ検索、Google Finance、Googleニュース、NYTimes記事検索、Reuters News Feed、Yahoo Finance、Yahoo Inplayなどのフィードが実装されています。
  • webshotは、PhantomJS を使用して、ブラウザなしでWebページのスクリーンショットを提供します。これは、Webサイト（Shinyアプリケーションなど）のテストに役立ちます。

セキュリティ

  • securitytxtは、Webセキュリティポリシーファイルを識別して解析します。

その他の便利なパッケージと関数

  • Javascript：
    • V8（GitHub ）は、Googleのオープンソースで高性能なJavaScriptエンジンとのインタフェースです。JavascriptライブラリとNPMパッケージをラップすることができます。
    • SpiderMonkey パッケージは、JavaScriptコードを評価し、JavaScriptオブジェクトを作成し、R内からJavaScript関数とメソッドを呼び出す別の手段を提供します。これは、Rセッション内にJavaScriptエンジンを埋め込むか、FirefoxなどのブラウザにRを埋め込み JavaScriptからRを呼び出し、RからJavaScriptにコールバックします。
    • js パッケージはV8 をラップし、JavaScriptコードの検証、再フォーマット、最適化、解析を行います。
  • Email：
    • mailRは、R内から電子メールを送信するApache Commons Emailへのインタフェースです。
    • sendmailRは、単純なSMTPクライアントを提供します。
    • gmailrは、Googleのgmail.com RESTful APIへのアクセスを提供します。
  • Mocking：
    • webmockrは、スタブしてHTTPリクエストの期待値を設定するためのライブラリです。これはRubys webmockからインスピレーションを受けています。このパッケージはHTTP要求を模擬するのに役立ち、要求が期待通りに合っている場合は何も返しません。返されたレスポンスによるモックテストのテストを参照してください。
  • Testing：
    • vcrは、HTTPリクエストをRパッケージのテストスイートに簡単にキャッシュするためのインタフェースを提供します（ただし、テスト用のユースケース以外でも使用できます）。
    • vcrは、webmockr に依頼してHTTPリクエストのモックを行います。
    • httptestは、HTTP APIと通信するパッケージをテストするためのフレームワークを提供し、APIを模擬するためのツールを提供し、模擬として使用するための実際のAPI応答を記録し、実行時にAPIサーバへのライブ接続を必要とせずにHTTP要求に関するアサーションを行います。
  • その他：
    • webutils（GitHub ）は、application / x-www-form-urlencodedやmultipart / form-dataのパーサを含む、Webアプリケーションを開発するためのさまざまな機能が含まれています。
    • mime（GitHub ）は、拡張子からファイルのMIMEタイプを推測します。
    • rsdmx（GitHub ）は、統計データとメタデータ交換（SDMX）フレームワークを介して交換されるデータとメタデータのドキュメントを読み込むためのツールを提供します。パッケージは現在、SDMX XML標準フォーマット（SDMX-ML）に焦点を当てています。
    • robotstxt（CRANにはない）は、robots.txtファイルの解析と検査のためのR6クラスを提供します。
    • uaparserjs（GitHub ）は、javacriptの“ua-parser” library を使用してUser-Agent HTTPヘッダーを解析します。
    • rjsonapiは、JSON API Specification に準拠したAPIを使用します。
    • rapiclientは、Open API format に従うAPIを消費するクライアントです。
    • restfulrは、RESTfulなサービスをあたかもネストされたRリストのようにモデル化します。

Webおよびサーバーフレームワーク

  • Model Operationalization（以前のDeployR）は、後で使用するためのWebサービスとしてサーバーにRおよびPythonモデルとコードをデプロイするためのサポートを提供するMicrosoft製品です。
  • shiny パッケージは、RでインタラクティブなWebアプリケーションを構築するのを容易にします。
  • 他のWebフレームワークには次のようなものがあります：
    • fieryは、より柔軟性がありますが、shiny（reqresとroutrは、それぞれHTTP要求と応答クラスを提供するfieryによって使用されるユーティリティです）、HTTPのルーティングよりも使いにくいものです。
    • prairie（CRANにはない）は、magrittr形式の構文を使用し、expressjs の後にモデル化された軽量のWebフレームワークです。
    • rcloud（CRANにはない）は、iPythonのノートブックスタイルのWebベースのRインターフェースを提供します。
    • Rookは、Rookアプリケーションの構築と実行のための仕様と便利なソフトウェアが含まれています。
  • 組み込み統計計算と再現性のある研究のためのopencpu フレームワークは、R、LaTeX、PandocをインタフェースするWeb APIを公開しています。このAPIは、たとえば、統計機能をシステムに統合し、集中サーバー上でスクリプトやレポートを共有および実行し、Rベースのアプリケーションを構築するために使用されます。
  • R用のいくつかの汎用サーバー/クライアントフレームワークが存在します。
    • Rserve およびRSclientは、TCP / IPまたはローカルソケットインタフェース用のサーバおよびクライアント機能を提供します。
    • httpuvは、R内で直接HTTPとWebSocketリクエストを処理するための低レベルのソケットとプロトコルのサポートを提供します。
    • おそらくhttpuv に置き換わる別の関連パッケージはwebsockets です。
    • servrは、httpuvに基づいて指定されたディレクトリの下でファイルを提供する簡単なHTTPサーバを提供します。
  • いくつかのパッケージは、RコードをWeb APIに変換する機能を提供します。
    • FastRWebは、このための基本的なインフラストラクチャがいくつか用意されています。
    • plumberは、既存のRソースコードを装飾してREST APIを作成することができます。
  • WADL パッケージは、Webアプリケーション記述言語（WADL）ドキュメントを処理し、それらのWADLドキュメントに記述されているRESTメソッドにインターフェイスするR関数をプログラムで生成するためのツールが用意されています。（CRANにはない）
  • RDCOMServerは、RオブジェクトをWindowsの（D）COMオブジェクトとしてエクスポートするメカニズムを提供します。Rから他のCOMサーバーへのユーザーレベルのアクセスを提供するRDCOMClient パッケージと共に使用できます。（CRANにはない）
  • rapporter.netは、クラウドにrapport 統計レポートテンプレートをホストして実行するためのオンライン環境（SaaS）を提供します。
  • radiant（GitHub ）は、サーバまたはローカルマシンからブラウザで実行されるR用のShinyベースのGUIです。
  • neocitiesは、Neocities WebホスティングサービスのAPIをラップします。（CRANにはない）
  • Tiki Wiki CMS / Groupwareフレームワークには、wikiページからRコードを実行するためのRプラグイン（PluginR ）があり、収集したWebデータベース（トラッカー）のデータを使用します。デモ：https://r.tiki.org/tiki-index.php 。
  • MediaWikiは、WikiページからRコードを実行するための拡張子（Extension:R ）があり、アップロードされたデータを使用します。メーリングリストは利用可能です：R-sig-mediawiki 。
  • whisker：R.Mustache構文のMustache に基づくロジックレステンプレートの実装については、http://mustache.github.io/mustache.5.html を参照してください。
  • CGIwithR（CRANにはない）は、Rスクリプトを動的Webコンテンツを生成するためのCGIプログラムとして使用することを可能にする。HTMLフォームおよび動的要求を提出する他のメカニズムを使用して、Webを介してRスクリプトに入力を提供し、そのRスクリプト内で決定されたコンテンツを作成することができます。

Webサービス
クラウドコンピューティングとストレージ

  • Amazon Web Servicesは、コンピューティング、ストレージ、およびインフラストラクチャの一連のツールを提供する、人気のある独自のクラウドサービスです。
  • aws.signatureは、AWS APIリクエストシグネチャを生成するための機能を提供します。
    • シンプルストレージサービス（S3）は、インターネットに接続されたあらゆるマシンからコンテンツを保存して取得することができる商用サーバーです。
      • aws.s3は、おそらく、S3用のベストRクライアントです。
      • RAmazonS3とs3mpi（CRANにはない）は、S3と通信するための基本的なインフラストラクチャを提供します。
      • awsConnect（CRANにはない）は、AWSコマンドラインインターフェイスを使用してEC2とS3を制御する別のパッケージで、LinuxとMac OSでのみ使用できます。
    • Elastic Cloud Compute（EC2）は、クラウドコンピューティングサービスです。
      • AWS.toolsとawsConnect（CRANにはない）はどちらもAWSコマンドラインインターフェイスを使用してEC2を制御します。
      • segue（CRANにはない）は、emrlapply()というElastic Map Reduce（EMR）エンジン用のlapply()の並列バージョンを含むEC2インスタンスとS3ストレージを管理するための別のパッケージです。単純な並列計算を行うために、AmazonのEMRでHadoop Streamingを使用しています。
    • シンプルノーティフィケーションサービス（SNS）は、マイクロサービス、分散システム、およびサーバーレスアプリケーションのPub / Subメッセージングおよびモバイル通知のためのサービスです。aws.sns
    • AWS Pollyは、テキストを現実的な音声に変換するTTS（Text-to-Speech）クラウドサービスです。aws.polly
    • DBREST：RAmazonDBRESTは、AmazonのSimple DB APIへのインタフェースを提供します。
    • 現在GitHubで開発中のThe cloudyr projectは、外部システムの依存関係を必要とせずに完全なAmazon Web Servicesスイートに統一されたインタフェースを提供することを目指しています。
  • googleComputeEngineRは、Google Compute Engine APIとやり取りし、Google Cloudでインスタンスを作成、開始、停止することができます。
  • Cloud Storage：
    • googleCloudStorageRは、Google Cloud Storageのインターフェースです。
    • boxr（GitHub ）は、box.com API 用の軽量で高水準のインターフェースです。
    • rdrop2は、dir / copy / move / delete操作、アカウント情報（クォータを含む）、Dropboxアカウントからのファイルのアップロードとダウンロードを含むファイル操作のフルセットへのアクセスを提供するDropboxインターフェイスです。
  • Docker：
    • analogseaは、Digital Ocean v2 APIの汎用クライアントです。さらに、パッケージには、ベースR、RStudioサーバーなど、さまざまなRツールをインストールする機能が含まれています。このパッケージを使用してリモートドロップレットのドッカーと対話するための改良されたインターフェイスがあります。
  • crunch（GitHub ）は、crunch.io ストレージおよび分析プラットフォームへのインタフェースを提供します。
    • crplyr（GitHub ）は、Crunchの上にdplyrメソッドを実装し、crunchy（GitHub ）は、Crunchの上にShinyアプリケーションを作成しやすくします。
  • rrefine（CRANにはない）は、OpenRefine（以前のGoogle Refine）データクリーニングサービスのクライアントを提供します。

ドキュメントとコードの共有

  • コード共有：
    • gistr（GitHub ）は、RのGitHubのgist（gist.github.com ）で動作し、新しい要点を作成し、新しいファイルで要点を更新し、ファイルの名前を変更し、ファイルを削除し、要点を取得したり削除したり、あなたのデフォルトブラウザで要点を開き、要点の埋め込みコードを取得し、要約を一覧表示し、認証されるとレート制限情報を取得します。
    • git2rは、gitバージョン管理システムへのバインディングを提供します。
    • ghとrgithub（CRANにはない）があり、これらのすべてがGitHubを介したコードやデータの共有を容易にすることができます。
    • gitlabrは、GitLab 固有のクライアントです。
    • pastebinは、https://pastebin.com/ のコード共有サイトのクライアントです。
  • データアーカイブ：
    • dataverse（GitHub ）は、Dataverse 4 APIへのアクセスを提供します。
    • rfigshare（GitHub ）は、Figshare.com に接続します。
    • dataoneは、メンバーノードのデータリポジトリのDataONE network からのデータとメタデータへの読み取り/書き込みアクセスを提供します。
    • dataone（GitHub ）は、DataONE リポジトリのクライアントを提供します。
  • Googleドライブ/ Googleドキュメント：
    • driver（CRANにはない）は、GoogleドライブAPIのシンクライアントです。
    • RGoogleDocs パッケージは、RCurlとXMLパッケージを使用してGoogleドキュメントAPIへのインタフェースを迅速に開発する例です。
    • RGoogleStorageは、Google Storage APIへのプログラムによるアクセスを提供します。これにより、RユーザーはGoogleのストレージにアクセスしてデータを保存できます。コンテンツのアップロードとダウンロード、フォルダ/バケットの作成、一覧表示、削除、オブジェクトやバケットに対するアクセス制御のアクセス許可の設定ができます。
  • Googleスプレッドシート：
    • googlesheets（GitHub ）は、タイトル、キー、またはURLで非公開または公開のGoogleスプレッドシートにアクセスできます。データの抽出またはデータの編集。スプレッドシートやワークシートの作成、削除、名前の変更、コピー、アップロード、ダウンロード。
    • gsheet（GitHub ）は共有リンクのみを使用してGoogleスプレッドシートをダウンロードできます。スプレッドシートは、データフレームとして、またはプレーンテキストとしてダウンロードして手動で解析することができます。
  • imguR（GitHub ）は、画像ホスティングサービスImgur.com を使用してプロットを共有するためのパッケージです。knitrには関数型プログラミング文書から画像を読み込む関数imgur_upload()もあります。
  • rscribd（CRANにはない）：文書をScribd に公開するためのAPIクライアント。

データ分析および処理サービス

  • Crowdsourcing：
    • Amazon Mechanical Turkは有料のクラウドソーシングプラットフォームであり、簡単に自動化できないタスクを半自動化するために使用できます。
    • microworkers（CRANにはない）は、Microworkers.comプラットフォームのタスクを配布し、結果を取得することができます。
  • ジオロケーション/ジオコーディング：
    • いくつかのパッケージがジオロケーション/ジオコーディングサービスに接続します。
    • rgeolocate（GitHub ）は、いくつかのオンラインツールとオフラインツールがあります。
    • rydn（CRANにはない）は、Yahoo DevelopersのネットワークジオロケーションAPIへのインターフェースです。
    • ipapi（GitHub ）は、http://ip-api.com/ APIを使用してIPv4 / 6アドレスやドメイン名の地理的位置を特定するために使用できます。
    • threewordsは、3ワードのフレーズとして地球上の3メートル×3メートルの正方形を表すWhat3Words API に接続します。
    • opencage（GitHub ）は、OpenCage ジオコーディングサービスへのアクセスを提供します。
    • geoparser（GitHub ）は、Geoparser.io Webサービスとインターフェイスを組み、プレーンテキストから地名を識別します。
    • nominatim（CRANにはない）は、逆ジオコーディングのOpenStreetMap Nominatim API に接続します。
    • PostcodesioR（CRANにはない）は、英国のポストコードルックアップとジオコーディングを提供します。
    • geosapiは、GeoServer REST APIのRクライアントです。これは、空間データを提供するために広く使用されているオープンソースの実装です。
    • geonapiは、地理メタデータを管理するためのオープンソースカタログであるGeoNetwork レガシーAPIへのインターフェイスを提供します。
    • ows4Rは、メタデータのためのデータとカタログサービス（CSW）用のWeb Feature Service（WFS）などのOGC 標準Webサービス用の新しいRクライアントです。
  • 画像処理：
    • RoogleVision（CRANにはない）は、Google Cloud Vision画像認識サービスへリンクします。
  • サービスとしての機械学習：
    • いくつかのパッケージは、クラウドベースの機械学習サービスへのアクセスを提供します。
    • AzureMLは、Microsoft Azureマシン学習サービスとリンクしています。
    • bigml（GitHub ）は、BigMLに接続します。
    • OpenML（GitHub ）は、the OpenML API の公式のクライアントです。
    • clarifai（GitHub ）は、Clarifai.com クライアントで、自動画像記述を可能にします。
    • rLTP（GitHub ）は、ltp-cloud service にアクセスします。
    • languagelayeRは、言語検出APIであるLanguagelayerのクライアントです。
    • googlepredictionapi（CRANにはない）は、Google Prediction API のRクライアントで、クラウドマシン学習ツールのスイートです。
    • yhatr を使用すると、Yhat REST APIを使用してモデルをデプロイメント、メンテナンス、および呼び出すことができます。
    • datarobotは、Data Robotの予測モデリングプラットフォームと連携します。
    • mscsweblm4r（GitHub ）は、Microsoft認知サービスWeb言語モデルAPIとインターフェイスします。
    • mscstexta4r（GitHub ）は、Microsoft認知サービステキスト分析REST APIを使用します。
    • rosetteApiは、Rosette テキスト解析APIにリンクしています。
    • googleLanguageRは、GoogleのCloud Translation API、Natural Language API、Cloud Speech API、Cloud Text-to-Speech APIへのインターフェイスを提供します。
  • マシン翻訳：
    • translateは、Google Translate API v2のバインディングを提供します。
    • translateR はGoogleとMicrosoftの両方の翻訳APIのバインディングを提供します。
    • mstranslator（GitHub ）は、Microsoft Translator API 用のRラッパーを提供します。
    • RYandexTranslate（GitHub ）はYandex Translate に接続します。
    • transcribeRは、HP IDOLサービスを使用して自動オーディオの転記を行います。
  • ドキュメント処理：
  • マッピング：
    • osmarは、異なるソースからのOpenStreetMapデータにアクセスして共通のR方式でデータを処理し、既存のRパッケージ（spやigraphオブジェクトなど）によって提供される利用可能なインフラストラクチャにデータを変換するためのインフラストラクチャを提供します。
    • osrm（GitHub ）は、OpenStreetMapから最短のパスと移動時間を提供します。
    • osmplotr（GitHub ）は、OpenStreetMapからカスタマイズ可能なマップイメージを抽出します。
    • RgoogleMapsは、静的な地図をGoogleサーバーに照会するための快適なRインターフェースを提供し、マップを背景画像として使用してR内のプロットをオーバーレイします。
    • R2GoogleMapsは、Googleマップを使用してデータを表示するRからJavaScriptコードを生成するメカニズムを提供します。
    • RKMLDeviceは、Keyhole Markup Language（KML）形式のRグラフィックスをGoogle Earth（またはGoogle Maps）で表示できるように作成でき、RKML はユーザーにKMLを生成するための高度な機能を提供します。
    • plotKMLは、Google Earthで空間および時空間オブジェクトを視覚化できます。
    • plotGoogleMaps pls SPまたはSPT（STDIF、STFDF）データをGoogleマップ上のHTMLマップマッシュアップとして表示します。
    • ggmap を使用すると、ggplot2を使用してGoogle Maps、OpenStreetMaps、Stamen Maps、CloudMade Mapsの上で空間データとモデルを簡単に視覚化できます。
    • mapsapiは、Google Maps APIとのsf互換インタフェースです。
    • leafletR：オープンソースのJavaScriptライブラリリーフレットを使用して、インタラクティブなWebマップ上に空間データを表示できます。
    • cartodb-rは、Cartodb.com へのAPIインタフェースを提供します。
    • openadds（GitHub ）は、Openaddresses クライアントです。
    • banRは、フランス語アドレス用のBase Adresses Nationale（BAN）APIへのアクセスを提供します。
  • オンライン調査：
    • qualtrics（CRANではなく）は、Qualtricsと対話するための機能を提供します。
    • WufooR（GitHub ）は、Wufoo.com フォームからデータを取得できます。
    • redcapAPI（GitHub ）は、Vanderbilt Universityで開発されたオンライン調査とデータベースの構築と管理のためのWebアプリケーションであるREDCap（Research Electronic Data CAPture）データベースに格納されたデータへのアクセスを提供します。
    • formrは、openCPU上に構築されたformr survey frameworkの使用を容易にします。
    • Rexperigenは、Experigen experimental platform のクライアントです。
  • 可視化：
    • Plot.lyは、plotly を介してアクセス可能なR（およびPython）を使用してWebでビジュアライゼーションを作成することを可能にする会社です。
    • googleVisは、RチャートツールとGoogleグラフツールの間のインターフェイスを提供します。
    • RUbigraph パッケージは、インタラクティブでダイナミックなグラフを描画するためのUbigraphサーバーへのRインターフェイスを提供します。頂点/ノードとエッジをグラフに追加したり削除したり、図形、色、サイズなどの属性や特性を変更することができます。インタラクティブなJavascript対応のグラフィックスは、データ分析のためのますます有用な出力形式です。
    • ggvisは、RのインタラクティブなWebグラフィックスを簡単に記述できるようにします。ggplot2とshiny のアイデアを融合し、Vegaを使ってWeb上にグラフィックスを描画します。
    • d3Networkは、RからD3 JavaScriptネットワーク、ツリー、樹形図、およびSankeyグラフを作成するためのツールを提供します。
    • clickme（CRANにはない）は、RのインタラクティブなJavascriptチャートを許可します。
    • animint（CRANにはありません）は、clickSelectsとshowSelectedの美しさでggplotのリストを使用してインタラクティブなアニメーションを定義し、CSV / JSON / D3 / JavaScriptを使用してWebブラウザで表示できます。
    • rVega（CRANにはない）はVegaのRラッパーです。
  • その他：
    • genderizeR（GitHub ）は、genderize.io APIを使用して、テキストベクトルから抽出されたファーストネームからジェンダーを予測します。
    • rrefineは、OpenRefine データクリーニングサービスとの間でインポートおよびエクスポートを行うことができます。

ソーシャルメディアクライアンと

  • plusserは、Google+プロフィール、ページ、投稿の検索を容易にするように設計されています。また、検索機能も備えています。現在、Google+データにアクセスするにはGoogle+ APIキーが必要です。
  • Rfacebookとfacebook.S4は、Facebook APIへのインターフェースを提供します。
  • Rflickr パッケージは、Flickr写真管理および共有アプリケーションWebサービスへのインターフェイスを提供します。（CRANにはない）
  • instaR（GitHub ）は、Instagram API のクライアントです。
  • Rlinkedin（CRANにはない）は、LinkedIn APIのクライアントです。AuthはOAuth経由です。
  • rpinterestは、Pintrest APIに接続します。
  • tumblR（GitHub ）は、Tumblr API（https://www.tumblr.com/docs/en/api/v2 ）のクライアントです。Tumblrはマイクロブログのプラットフォームとソーシャルネットワーキングのウェブサイトhttps://www.tumblr.com/ です。
  • vkRは、ロシアに拠点を置くソーシャルネットワーキングサイトであるVKのクライアントです。
  • meetuprは、Meetup.com APIのクライアントです。
  • Twitter：
    • twitteRは、Twitter Web APIへのインターフェースを提供します。
    • RTwitterAPI（CRANにはない）とrtweet（CRANにはない）は、他のTwitterクライアントです。
    • twitterreport（CRANにはない）は、Twitterデータに基づくレポート生成に重点を置いています。
    • streamRは、ユーザがTwitterのフィルタ、サンプル、ユーザストリームにアクセスし、その出力をデータフレームに解析するための一連の関数を提供します。OAuth認証がサポートされています。
    • tweet2rは、SQLiteとPostGISのデータベースを対象とした別の方法です。
    • graphTweetsは、つぶやきのdata.frameからネットワークグラフを生成します。
    • tweetscores（CRANにはない）は、指定されたTwitterユーザーのための政治的イデオロギー拡大尺度を実装します。
    • brandwatchRは、BrandwatchソーシャルリスニングAPIからデータを取得するためのパッケージです。生テキストおよび集計統計、およびプロジェクト管理機能とクエリ管理機能が利用できます。

Web Analyticsサービス

  • Googleトレンド：
    • gtrendsRは、Googleトレンドのクエリを実行して表示する機能を提供します。
    • RGoogleTrends は別の方法を提供します。
  • Google Analytics：
  • オンライン広告：
    • fbRadsは、FacebookのマーケティングAPIを通じてFacebook広告を管理できます。
    • RDoubleClick（CRANにはない）は、GoogleのDoubleClick Campaign Manager Reporting APIからデータを取得できます。
    • RSmartlyIO（GitHub ）は、Smartly.io によって提供されたFacebookとInstagram広告データを読み込みます。
  • その他のサービス：
    • RSiteCatalystは、Adobe Analytics（Omniture SiteCatalyst）レポートAPIにアクセスするための関数があります。
  • RAdwords（GitHub ）は、Google Adwordsデータを読み込むためのパッケージです。
  • webreadr（GitHub ）は、CommonおよびCombined Web Log形式やAWSログなど、さまざまな一般的な要求ログを処理できます。

Rパッケージ開発用Webサービス

  • http://log.r-hub.io/は、すべてのアーキテクチャでパッケージビルドを可能にするプロジェクトです。
  • rhubは、プラットフォーム上のパッケージを確認できるようにR-Hubとインターフェースするパッケージです。

その他のWebサービス

  • フィットネスアプリ：
  • プッシュ通知：
    • RPushbulletは、コンピュータ、電話、タブレット間で迅速かつ効率的な通知を提供するPushbulletサービス用の使いやすいインターフェイスを提供します。
    • pushoverr（GitHub ）は、Pushover を使用してモバイルデバイス（iOSとAndroid）とデスクトップにプッシュ通知を送信できます。
    • notifyme（GitHub ）は、Philips Hueの照明を制御できます。
  • 参照/参考文献/引用管理：
    • RefManageRは、RefManagerを使用してBibTeXとBibLaTeXの参照をインポートおよび管理します。
    • rorcid（GitHub ）は、Orcid.org APIのプログラムインタフェースです。科学者や出版物（DOIなど）の識別に使用できます。
    • rdataciteは、学術データセットのDOIとメタデータを管理するDataCite に接続します。
    • scholarは、Google Scholarから引用データを抽出する機能を提供しています。複数の学者を比較し、将来のh-インデックス値を予測するための便利機能も提供されます。
    • rscopusは、Elsevier Scopus APIから引用データを抽出する機能を提供します。複数の学者を比較し、将来のh指数値を予測するための便利な機能も提供されています。
    • mathpixは、LaTeXコードを生成するためにMathpix webserviceを介して式（タイプセットまたは手書き）の画像を変換します。
  • 文献：
    • rplosは、Public Library of Scienceジャーナルで検索用に提供されるWebサービスメソッドへのプログラムインタフェースです。
    • rpubmed（CRANではなく）は、PubmedおよびPubmed Centralレコードを抽出および処理するためのツールを提供します。
    • europepmc（GitHub ）は、Europe PubMed Centralサービスに接続します。
    • pubmed.mineRは、PubMedからのテキストとXMLのフェッチをサポートするPubMed Abstracts のテキストマイニング用のパッケージです。
    • jstorは、JSTORによる研究サービス用のデータからメタデータ、ngramsおよびフルテキストをインポートする関数とヘルパーを提供します。JSTORr も同様のことをします。
    • aRxivは、コンピュータサイエンス、数学、物理学、定量的生物学、定量的財務および統計のための電子プレプリントのリポジトリであるarXiv APIのクライアントです。
    • roadoiは、Unpaywall API へのインタフェースを提供し、学術論文の全文版を無料で見つけることができます。
    • rcoreoaは、オープンアクセス学術論文の検索インターフェースであるCORE API へのインターフェースです。
    • rcrossrefは、CrossrefのAPIへのインターフェイスです。
    • crminerは、CrossrefのText and Data Miningサービスで取得した学術論文からフルテキストを抽出します。
    • fulltextは、学術論文からフルテキストを検索、検索、抽出するための汎用パッケージです。
  • 自動メタデータ収穫：
    • oai（GitHub ）とOAIHarvesterは、メタデータ収穫のためのOpen Archives Initiative Protocol（OAI-PMH）標準を使用してメタデータを収集します。
    • rresyncは、ResourceSync framework のクライアントで、OAI-PMHの代替品です。
  • Wikipedia：
  • bigrquery（GitHub ）：Googleのbigqueryへのインターフェイス。
  • sparkbq（GitHub ）：Google BigQueryによるsparklyrのサポート。
  • cymruservicesは、Team Cymru のWebセキュリティサービスを照会します。
  • datamart：内部データセットとウェブベースのデータソースを統一的に処理するためのS4インフラストラクチャを提供します。例としては、dbpedia、eurostat、sourceforgeなどがあります。
  • discgolf（GitHub ）は、Discourse WebフォーラムプラットフォームのAPIと対話するクライアントを提供します。このAPIは、Discourseサイト自体のためではなく、Discourseのインストールされたインスタンス用です。
  • rdpla（（GitHub）[https://github.com/ropensci/rdpla]）は、Digital Public Library of America APIで動作します。
  • factualR：Factual.com サーバーAPI用の薄いラッパー。
  • internetarchive：インターネットアーカイブメタデータ用のAPIクライアント。
  • irced（CRANにはない）は、IRCチャットクライアントです。
  • jSonarR：クエリを実行し、その結果をdata.framesで返すことで、ユーザがMongoDBにアクセスできるようにします。jSonarRはjSonar Analytics PlatformとJSON Studio Gateway のデータ処理と変換機能を使用して、JSONを表形式に変換します。
  • LendingClubは、LendingClub API に接続します。
  • livechatRは、LiveChat API のクライアントです。
  • mockaRoo（CRANにはない）は、MockaRoo API を使用して、入力スキーマに基づいて模擬データまたは偽データを生成します。
  • pivotaltrackRは、柔軟なプロジェクト管理ツールであるPivotal Tracker のAPIへのインタフェースを提供します。
  • randNames（GitHub ）は、https://randomapi.com/ APIを使用して、ランダムな名前と個人識別情報を生成します。
  • Rblpapi（GitHub ）は、Bloomberg Finance L.Pのクライアントです。
  • rerddap：OPeNDAP（https://en.wikipedia.org/wiki/OPeNDAP ）の特別なケースであるERDDAPインスタンスとやりとりする汎用Rクライアント、または ネットワークデータアクセスプロトコル。ERDDAPインスタンスを使用するために、ベースURLをスワップアウトすることができます。
  • ripplerestrは、金融取引を行うためのRipple プロトコルへのインタフェースを提供します。
  • refimpactは、the UK Research Excellence Framework 2014 Impact Case Studies Database API に接続します。
  • restimizeapiは、tradingウェブサイトestimize.com へのインターフェースを提供します。
  • RForcecom：RForcecomはForce.comとSalesforce.comへの接続を提供します。
  • Rgoodreads（CRANにはない）は、Goodreadsとやりとりします。
  • owmrとROpenWeatherMapという2つのパッケージは、Open Weather Map API で動作します。
  • RSauceLabs（GitHub ）は、SauceLabs に接続します。
  • RSocrataは、Socrataオープンデータポータルのデータにアクセスします。
  • soqlは、Socrataクエリを構築するためのパイプ指向のツールセットです。
  • RStripeは、オンライン決済プロセッサーのStripe へのインターフェースを提供します。
  • RZabbixは、Zabbix network monitoring service APIとリンクしています。
  • rwarsは、Star Wars API (SWAPI) からデータを取得して再フォーマットします。
  • slackr（GitHub ）は、Slack.comメッセージングプラットフォームのクライアントです。
  • shutterstock（GitHub ）は、RからShutterstockライブラリーにアクセスできます。
  • SlideShaRe（CRANにはない）は、Slideshareのクライアントです。
  • stackr（CRANにはない）：Stack Exchange API の読み取り専用機能の非公式ラッパー。
  • telegram（GitHub ）は、Telegram Bot API に接続します。
  • trelloR（GitHub ）は、Trello API に接続します。
  • tuberは、YouTube APIクライアントです。
  • tubernは、YouTubeアナリティクスとレポートAPIのクライアントです。
  • useRsnap（CRANではなく）は、Webアプリケーションユーザーからのフィードバックを収集するためのツールであるUsersnap のAPIへのインタフェースを提供します。
  • yummlyr（GitHub ）は、Yummly レシピデータベースへのインターフェイスを提供します。
  • zendeskR：このパッケージは、Zendesk APIのラッパーを提供します。
  • ZillowRは、Zillow不動産サービスのクライアントです。
  • docuSignrは、DocuSign Rest API へのインタフェースを提供します。
  • giphyrは、GIFのためのGiphy API へのRインターフェースです
  • duckduckrは、RインターフェースDuckDuckGo’s Instant Answer API です。

関連する記事

  • R言語 CRAN Task View：医用画像解析R言語 CRAN Task View：医用画像解析 CRAN Task View: Medical Image Analysisの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載した。 Maintainer: Brandon Whitcher Contact: bwhitcher at […]
  • R言語 CRAN Task View：欠損データR言語 CRAN Task View：欠損データ CRAN Task View: Missing Dataの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載しました。 Maintainer: Julie Josse, Nicholas Tierney and Nathalie Vialaneix （r-miss-tastic […]
  • R言語 CRAN Task View：水文データとモデリングR言語 CRAN Task View：水文データとモデリング CRAN Task View: Hydrological Data and Modelingの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載しました。 Maintainer: Sam Zipper, Sam Albers, Ilaria Prosdocimi Contact: samuelczipper at […]
  • R言語 CRAN Task View：Rによるモデル展開R言語 CRAN Task View：Rによるモデル展開 CRAN Task View: Model Deployment with Rの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載した。 Maintainer: Yuan Tang Contact: terrytangyuan at […]
  • R言語 CRAN Task View：RグラフィカルモデルR言語 CRAN Task View：Rグラフィカルモデル CRAN Task View: gRaphical Models in Rの英語での説明文をGoogle翻訳を使用させていただき機械的に翻訳したものを掲載した。 Maintainer: Soren Hojsgaard Contact: sorenh at […]
R言語 CRAN Task View：Web技術とサービス

One thought on “R言語 CRAN Task View：Web技術とサービス”

Comments are closed.