スクレイピング

スクレイピングで使用するlinuxコマンド

投稿日:

wget ファイルをダウンロードする

$ wget http://www.yahoo.co.jp/
オプション 意味
-P 保存先ディレクトリを指定する wget -P dataset

bzcat 「bzip2」コマンドで圧縮された圧縮ファイルの中身を確認する

$ bzcat 圧縮ファイル名

less テキスト・ファイルの内容を閲覧する

$ less ファイル名

操作

↑キー ↓キー 次行を閲覧する
qキー 閲覧を終了する

類似

$ cat ファイル名

catコマンドはファイルの中身を全て出力する。lessコマンドは上下キーで一行ずつ閲覧する。

-スクレイピング

Copyright© SIerからWeb系自社開発に転職!失敗して感じたたった1つの後悔 , 2019 All Rights Reserved.