Google Apps Script(GAS)などでは、Javascriptで表示される動的なページのスクレイピングができません。 ただ、PhantomJsCloudというツールを使うと、動的に生成されるページでもHTMLソースが取得でき、スクレイピングが可能になります。 今回、PhantomJsCloudを無料登録し、APIキーを取得する手順を解説します。 GAS標準機能は静的スクレイピングのみ可能Googleが提供するサーバーレスのスクリプトサービス、Google Apps Script(GAS)はWebページのスクレイピングによく用いられています。 無料利用でスケジュールによるトリガー実行などが可能なため、定期的にページをスクレイピングするのに重宝します。 GASでスクレイピングする方法！Parserライブラリを利用した手順を解説 ただし、GASによるスクレイピングでは、HTMLソー

本日、ユカイ工学が開発者向けに「BOCCO」のAPIを試験的に提供を始めた。API公開の目的はBOCCOユーザの利便性の向上、第三者のBOCCOプラットフォームの活用可能性を模索するとしている。 APIとは、Application Programming Interface（アプリケーションプログラミングインターフェース ）の略で、今回BOCCOのAPIを使って、外部のプログラムからBOCCOを制御することが可能になる。機能的にクローズだったBOCCOにおいて、今回のAPI提供は非常に朗報だ。デベロッパーがBOCCOを使って様々な取り組みを行うことが期待される。

はじめに IBM Bluemixの無料アカウントを取得してWatsonAPIをあれこれとデモ利用したときの作業メモです。 IBM Bluemix Paas系のサービス。その中にかの有名なWatson APIが提供されている。 利用できるAPIの種類 WatsonAPIと一口にいっても以下のように16個ものAPIが提供されている。 2015-08-22時点でデモ利用できるのは以下の通り。 デモ利用できないものはclosed Beta版で申請をしないといけないっぽい。 デモ利用可 AlchemyAPI Concept Expansion Concept Insights Dialog Language Translation Natural Language Classifier Personality Insights Question and Answer Relationship Ext

Google Apps Script と Yahoo! の日本語形態素解析API を使って、Googleスプレッドシート上で形態素解析を行います。下記の記事の内容をまとめ直したものです。 http://shirayuca.github.io/blog/2014/08/04/yahoo.html 日本語形態素解析APIの設定 まず、Yahoo!デベロッパーネットワークにて、アプリケーションIDを取得します。やり方は、下記のブログが参考になります。 http://ysklog.net/php/1581.html スクリプト /** * Yahoo! 日本語形態素解析APIの利用 */ var ss = SpreadsheetApp.getActiveSpreadsheet(); var mySheet = ss.getActiveSheet(); function yahooTextSegme

別の例では、デジタルマーケターが同APIのセンチメント分析機能を用いて、オンラインの製品レビューや、サービスセンターに寄せられる顧客の声をモニタできることが示されている。また、同APIはセンチメント分析だけではなく、エンティティ認識（テキスト中に現れる固有表現に対して、人や組織、場所といったラベルを付ける機能）や、シンタックス分析もサポートしている。 オープンベータに移行したもう1つのAPIは、音声認識APIである「Google Cloud Speech API」だ。このAPIは、「Google Search」が採用している音声認識テクノロジを用いることで、アプリやIoTデバイス向けに、80種類を超える言語の音声をテキストに変換できる。同APIのアルファ版を利用するために、既に5000社以上の企業が登録している。

Edition comparison, support, and resources for building generative playbook-based, flow-based, or Dialogflow ES agents.

ユーザーローカルは5月10日、LINEなどのユーザーと自動対話するチャットbotを開発できる「人工知能ボットAPI」を発表した。対応するサービスはLINE、Facebook Messenger、Twitter、Slackの4種類。同日から開発者向けに事前登録を始め、先着3000人に無償で提供する。 ユーザーのメッセージを単語に分割し、人工知能が自然な受け答えを返信する機能「全自動会話エンジン」を用意。過去のツイートのログ、Instagramのハッシュタグ、ニュース記事やブログなど数十億件のテキストデータで機械学習し、自然言語による高度な会話を実現したという。一問一答形式の単純な返答だけでなく、過去の対話内容に合わせたテーマで会話をさせることも可能だ。 「○○だワン」「○○ですニャ」といった語尾、ロボット風や執事風の言い回しにメッセージを変換する「キャラクター会話API」のほか、会話中の名前

Googleトレンドは、Googleの圧倒的なネットワークデータから、キーワードのトレンドや趨勢を調べることができる無料のツールです。 こんにちは、カグア！です。 Googleトレンドを使えば、どんなキーワードがGoogle検索で急上昇しているのかなどがわかり、SEO対策の重要なヒントになります。本記事では、Googleトレンドの使い方や用語の意味などをまとめてみました。 ＞＞2016年最新の人気「SEO: 本」一覧はこちら。 Amazonで詳しく見る Googleトレンドとは ＞＞＜公式＞Googleトレンド Googleトレンドは、Googleが提供する無料のキーワード調査ツールです。Googleの圧倒的な検索ボリュームから、国ごと、地域ごとに、そのトレンド（アップダウン）がわかります。SEOやキーワード戦略を重視する方には、必須のツールとなっています。 Googleトレンドの基本メニ

今や「インフラ」と表現しても過言ではないほど、多くの日本人が当たり前のように利用しているミニブログサービス、Twitter。この記事では、Twitterが提供するAPIの使い方を、初心者向けに説明しています。ぜひ、素敵なウェブサービスを作って下さいね。 Twitter DevelopersTwitter APIなどを利用する開発者のためのページ。公式リファレンスの確認や、アプリケーションの作成など。アプリケーションの登録APIを利用するために必要な「アプリケーションの登録方法」を紹介します。APIキーとAPIシークレットを取得できます。 アプリケーションとは？よくAPIを利用するのに「アプリケーションを登録して」という言葉が出てきます。このアプリケーションって何でしょう。これは、SNSでいう「ユーザーアカウント」と同じようなものだと考えると、イメージを掴みやすいと思います。 アプリケーショ

固有表現抽出APIの概要 固有表現抽出APIはリクエストで送られた日本語文字列から、人名や地名、日付表現などの固有表現を抽出します。 例えば、"鈴木さんがきょうの9時30分に横浜に行きます。"という文字列からは、人名として"鈴木"、地名として"横浜", 日付表現として"きょう"、時刻表現として"9時30分"がそれぞれ抽出されます。 このほかにも"○○株式会社"といった組織名や、"△△ビル"といった固有物名を抽出可能です。 固有表現抽出APIを利用すると、人名や地名などの固有表現を抽出するアプリケーションを作成できます。このAPIを用いることにより、最近1週間のSNS上の投稿のなかで話題になっているスポットを発見するといった分析を行うことが容易になります。 固有表現抽出とは 固有表現抽出とは、自然言語で書かれた文章（テキストデータ）から、人名、地名、組織名、日付表現などの固有表現を抽出する事

TechCrunch Daily News Every weekday and Sunday, you can get the best of TechCrunch’s coverage. Startups Weekly Startups are the core of TechCrunch, so get our best coverage delivered weekly.

交通事故対策には、どのようなデータを参照されていますか？ 警察署で把握されている事故情報や公益財団法人交通事故総合分析センター（ITARDA）で集約された交通事故データを入手・分析されるのが一般的ではないでしょうか？ 事故のデータは発生頻度が多くないため因果関係を読み解くのは難しいと言われます。そこで件数を増やすために複数年のデータを地図上で見てみますと、毎年移動しているように見えてきます。対策の効果で事故が減ることが期待されますが、別の場所では増えているということは、効果測定が難しいということになりますよね？ 一方、急減速多発地点は事故に比べて発生頻度が高く、事故との相関も強いと言われています。 参考：プローブデータによる交通事故多発危険交差点の抽出可能性に関する分析 そして複数年の急減速多発地点データを地図上で見ると事故データのように移動しない傾向が見られます。つまり潜在的に事故の前兆

図書館蔵書検索サイトを運営するカーリルは2016年4月7日、図書館の業務向け超高速横断検索API「カーリル Unitrad API（カーリル・ユニトラッド・エーピーアイ）」の運用を開始したと発表した。第1号ユーザーとして、2016年3月に図書館システムなどを刷新した京都府立図書館が導入。カーリルは「数年以内に使えない横断検索システムを駆逐したい」としている。 カーリルは2010年3月から全国の図書館の蔵書や貸し出し状況を検索できるサービスを展開。API（アプリケーションプログラミングインタフェース）を無償開放することで、ユーザーは図書館のデータと連携したアプリケーションを通じて蔵書検索ができる。ただカーリルによると、図書館の業務システムの性能は向上してきたものの、都道府県立図書館が管理する各都道府県内にある図書館の蔵書を横断的に検索するシステムは従来のままで、最大のボトルネックになっていた

TechCrunch Daily News Every weekday and Sunday, you can get the best of TechCrunch’s coverage. Startups Weekly Startups are the core of TechCrunch, so get our best coverage delivered weekly.

Convert audio into text transcriptions and integrate speech recognition into applications with easy-to-use APIs. New customers also get up to $300 in free credits to try Speech-to-Text and other Google Cloud products.

米HPE、Microsoft Azure上で機械学習APIを提供する「Haven OnDemand」発表：60以上のAPI／サービスで開始 米ヒューレット・パッカード・エンタープライズ（HPE）は2016年3月10日（米国時間）、機械学習／ディープ・ラーニングのAPIをサービスとして提供する「HPE Haven OnDemand」を正式提供開始したと発表した。同サービスは全面的にマイクロソフトのMicrosoft Azure上で、全世界的に提供される。また、フリーミアムモデルを採用している。 米ヒューレット・パッカード・エンタープライズ（HPE）は2016年3月10日（米国時間）、機械学習／ディープ・ラーニングのAPIをサービスとして提供する「HPE Haven OnDemand」を正式提供開始したと発表した。同サービスは全面的にマイクロソフトのMicrosoft Azure上で、全世界的

内容：「フリがなツール」は、入力したテキストデータに含まれる漢字にふりがなを付与してくれるサービスだ。小学校の任意の学年で習っていない漢字や、常用漢字でない漢字だけにふりがなを追加する機能も備えている。 「フリがなツール」は、入力したテキストデータに含まれる漢字にふりがなを付与してくれるサービスだ。小学校の任意の学年で習っていない漢字や、常用漢字でない漢字だけにふりがなを追加する機能も備えている。