Octoparse さん プロフィール

  •  
Octoparseさん: Octoparse
ハンドル名Octoparse さん
ブログタイトルOctoparse
ブログURLhttps://blogs.yahoo.co.jp/octoparse
サイト紹介文ノンプログラマーのための無料スクレイピングツールの紹介です。
参加カテゴリー
更新頻度(1年)情報提供25回 / 172日(平均1.0回/週) - 参加 2018/04/28 17:43

Octoparse さんのブログ記事

  • 過去の記事 …
  • 機械学習に知っておくべき8つの用語
  • 近年、機械学習に関する記事、ニュースなどで耳にした方もいると思いますが、それが本当に何かを知っていますか?簡単に言えば、人の仕事がロボットに置き換わってくるテクノロジーの一つが機械学習です。先日機械学習に知っておくべきアルゴリズムを10つを紹介しました。今回は機械学習に最も関連する8つの用語を紹介します。 この記事で紹介される8つの用語は次のとおりです。自然言語処理(NLP)データベースコンピュータビジョ [続きを読む]
  • 機械学習に知っておくべき10のアルゴリズム
  • 「ビッグデータ」という言葉は2017年に普及し、ハイテク業界で最も人気が高まってきています。前回の記事では、ビッグデータ、機械学習、データマイニングの概念を簡単に紹介しました(参照記事:「5分で分かる!ビッグデータ、機械学習、データマイニングの意味」)。コンピュータに過去のデータを分析させ、未来のデータを予測させる機械学習は身近なところに広く活用されています。機械学習を専門としないエンジニアでも活用で [続きを読む]
  • 動的Webサイトからリアルタイムデータを取得する
  • データ多様化、情報技術の革新といった時代的背景に、ソーシャルメディアなどによってもたらされる動的データをリアルタイムに分析、価値を最大限に引き出す動きが盛り上がりを見せています。この記事では、次の質問に答えます:- なぜ動的データの取得は重要なのか?- 動的データはどのようにビジネス開発を効果的に促進するの?- どのように動的データを簡単に取得できる? なぜ動的データの取得は重要なのか?一般的に、動的デ [続きを読む]
  • Twitterトレンド - 新しいiPhoneについて人々が何を話しているか?
  • Appleは現地時間の9月12日朝10時、米国カリフォルニア州クパチーノにある本社で、iPhoneをはじめとする新製品の発表会を開催し、iPhoneは新たな3モデルiPhone(Xs、Xs Max、XR)と新たなApple Watchを発表しました。毎年、Appleの新製品発表イベントは間違いなく、ソーシャルメディアですぐ話題になり、面白いコメントがたくさん出てきます。だから私たちは、今年Appleのイベントについて人々が何のツイートしているのかを簡単なデ [続きを読む]
  • Webスクレイピングに不可欠!Xpathのまとめ
  • Octoparseを利用する時、要素を することでデータの位置が自動識別されますが、ページ遷移、データ取得などのステップにXpathを直す場合もあります。Octoparseを活用するには、XPathの知識は欠かせないので、今回はXPathについてまとめします。 XPathとは XPath (XML Path Language)とは、XML形式の文書から、特定の部分を指定して抽出するための簡潔な構文(言語)です。HTMLもXMLの一種とみなすことができるため、HTML形式 [続きを読む]
  • Webデータを活用!WebサイトからデータをExcelに取り込む方法
  • Excelは、様々なデータを集計・分析できる表計算ソフトです。書式とスタイル、検索・置換、数式と関数、グラフの作成、データベースなど様々な機能があります。ほとんどの場合、Webサイトから情報を取得して、データをExcelにインポートして、いろいろな分析で、知りたいとこを得る必要があります。この記事では、WebデータをExcelにスクレイピングするいくつかの簡単な方法を紹介します。 Webクエリを使ってWebデータを取得するWe [続きを読む]
  • リンクされている画像を一括ダウンロードするのに超便利なツール5選
  • 皆さんは、大量の画像を一気にダウンロードしたい!って時はありませんか?好きなキャラとかアイドルの写真をまとめて保存したい!でも、一枚一枚やるのはかなり面倒臭い・・ !って状況がありますよね。私も画像の一括ダウンロードに関する多くのお問い合わせを受けました。私たちはできる限り機能の改善に努力していますが、今のところOctoparseはWEB上に保存されているURLとして画像を抽出することができます。そこで今回は、リ [続きを読む]
  • 働き方改革 | 2018年注目の業務自動化ツール30選
  • 今の世界では、「オートメーション」の時代に入っています。ますますのシステム運用業務が手動からツールによる自動化に移りつつあります。あなたの周りにも「実は自動化できるのでは?」と思う業務があるのではないでしょうか。そこで今回は、オートメーションソフトウェアテスト、Webスクレイピング、ロボティックスプロセスオートメーション(RPA)の分野で最も評価の高いプロセス自動化ツールを30選ご紹介します。ソフトウェア [続きを読む]
  • 2018年に注目すべき世界8大技術トレンド
  • 世界的な大手情報サービス企業であるIHS Markitは2018年1月、「8 in 2018: the top transformative technologies to watch this year」というホワイト・ブックを発表しました。この中で2018年に産業界の改革/革新に大きな影響を与える可能性が高いテクノロジーとして、8個のトレンドを予測しました。この記事では、この8個のテクノロジーを紹介したいと思います。 1. 人工知能(AI)人工知能は、記憶や学習、推論、判断など高度な [続きを読む]
  • GoogleスプレッドシートでWebからデータを取得する
  • Webサイトからデータを抜き出し、xls、csv、txt、xmlなどに変換するには、コピペが一番使われますよね。でも、データの量が多いなら、相当な労力を費やします。もしPythonなどのプログラミング技術があれば、Webスクレイピングでコピペを自動化でき、その仕事が楽になります。プログラミングの知識がないなら、コピペしかありませんか?そこで、Googleスプレッドシートを試してみてください。Googleスプレッドシートはリリース以来 [続きを読む]
  • Webスクレイピングで第10回AKB48世界選抜総選挙のデータを取得
  • 毎年6月になるとAKB48の総選挙で盛り上がりを見せています。2018年もやってきました。6月16日、「第10回AKB48世界選抜総選挙」(別名:AKB48 53rdシングル 世界選抜総選挙 〜世界のセンターは誰だ?〜)の開票イベントが、愛知・ナゴヤドームにて開催されました。総投票数は3836652票だそうで、松井珠理奈さんが194453票で1位の座を獲得しました。今年は100位まで発表され、みんなそれぞれの情報を了解したいので、この度Octopars [続きを読む]
  • WebサイトをスクレイピングするWebクローラー20選
  • 今では、Webクローリング(Webスクレイピングとも呼ばれる)は多くの分野で広く適用されています。これは、任意のWebサイトから取得されたデータを簡単にアクセスできるようにデータベースに保管することを目的としています。Webクローラーツールは、クローリングプロセスを簡単、自動化にし、Webデータリソースを誰でも簡単に利用できるようにするため、 広く知られています。Webクローラツールを使用すると、コピペをしなくなり [続きを読む]
  • まだ知らない?Webクローラーのあれこれ
  • マーケティング、SEOを担当されている方ならWebクローラーやクローリングといった言葉をよく耳にするのではないでしょうか。今回はそんなWebクローラーに関する基礎知識について紹介します。 Webクローラーとは?Webクローラーとはインターネット上に公開されているテキスト・画像・動画などの情報を自動で収集し、データベースに保管するプログラムのことです。「ボット(Bot)」、「スパイダー」、「ロボット」などとも呼ばれま [続きを読む]
  • Webスクレイピング用のソフト30選
  • Webスクレピング (Webデータ抽出、スクリーンスクレイピングとも呼ばれます)は、Webからデータを抽出し、Web上の非構造化データをデータベースやスプレッドシートに格納・分析可能な構造化データへの変換するWeb技術です。Webスクレイピング技術は、スクレイピングソフトツールによって実現されます。これらのツールは、Chromeのようなウェブブラウザを使用する場合と同じ方法でウェブサイトとやり取りします。スクレイピングソ [続きを読む]
  • Octoparseが日本語化サービスを開始
  • Octoparseは2016年3月15日に公開されたから2年も経ちました。ここ2年間では、高成長期を迎えており、今年からも多くのアップデートが行われています。Octoparseの成長に関するチャートがあります:Google TrendsにOctoparseの人気度 過去2年間にやったこと2016年3月15日、初めのユーザーが登録しました。4月に初めのユーザーが契約しました。Octoparseの公開以来、私たちはユーザー体験の向上に専念しています。1. お客様の要望 [続きを読む]
  • BIツールとは | おすすめツール5選を紹介!
  • 会社経営には、会社の将来を不安に感じたことがあると思います。例えば「今何が求められているのか」「足りないものは何なのか」など、悩みは尽きません。その悩みを解決するために「ユーザーアンケート」や「市場動向」といった情報が必要です。ですから「情報」の収集が不可欠です。前回ネット情報収集の味方「スクレイピングツール」3選(Octoparse、Import. Io、Scraper)を紹介しました。ただ、ここで問題になるのが情報の管 [続きを読む]
  • Octoparse:ノンプログラマーのためのスクレイピングツール
  • 前回Octoparseというツールを紹介し、そのツールの登録、ダウンロード、インストール、データ抽出などの利用方法を紹介しました。(前回の内容の詳細については、こちらをご覧下さい。)今回は、Octoparseをもっと理解して頂くために、主な特長、具体例による使用方法および幾つかの拡張機能を紹介します。今回は、Octoparseをもっと理解して頂くために、主な特長、具体例による使用方法および幾つかの拡張機能を紹介します。1. [続きを読む]
  • 過去の記事 …