(25)【uniq】シェルスクリプトコマンド活用紹介
重複している行を削除する uniqコマンド 重複している行を削除する 大文字/小文字を区別しないで重複行を削除する 重複している行をカウントする uniqコマンド概要 uniq…
重複している行を削除する uniqコマンド 重複している行を削除する 大文字/小文字を区別しないで重複行を削除する 重複している行をカウントする uniqコマンド概要 uniq…
文章を逆順に出力する revコマンド ファイルの各行を反転させる キーボードから入力した内容を反転させる revコマンド概要 reverseの語源を持つ「rev」は、ファ…
ファイルを逆順に出力する tacコマンド ファイルを最終行から逆順に出力する tacコマンド概要 catコマンドを逆から読んだ「tac」はファイルの最終行から、行単位に逆順…
数字の列を出力する seqコマンド 連続番号を出力する 開始の数と間隔を指定する 数字を逆順で出力する 書式を指定して出力する seqコマンド概要 sequenceの語源を…
乱数や連番を作成する jotコマンド 連番を生成する 文字列と組み合わせた連番を作成する printf のフォーマットで出力する 連番の範囲を指定して出力する 乱数を出力する jotコマ…
テキストファイルを行単位で並べ替える sortコマンド テキストファイルを並べ替える 数値の大小で並べ替える フィールドを指定して並べ替える CSVデータを並べ替える sortコマンド概要…
テキストファイルの文字数や行数を数える wcコマンド 行数と単語数とバイト数を数える 文字数を数える 行数だけを表示する wcコマンド概要 「wc」はテキストファイルの行数や単語数(word…
アーカイブファイルを作成する/展開する tarコマンド アーカイブファイルを作成する アーカイブファイルを展開する tarコマンド概要 「tar」は、複数のファイルを1つにまとめた“アーカ…
文字列を編集する sedコマンド概要 「sed」は「Stream EDitor」の略で、「sed スクリプトコマンド ファイル名」で、指定したファイルをコマンドに従っ…
タブと空白を変換する expandコマンド タブを空白に変換する(expandコマンド) タブの幅を指定する expandコマンド概要 「expand」はタブを空白に変換…
行から固定長またはフィールド単位で切り出す cutコマンド 文字数を指定して切り出す フィールドを指定して切り出す 出力の区切り文字を変更する cutコマンド概要 「cut」は、ファイルを読み込…
ディスク/ディレクトリの使用量を表示する duコマンド ディレクトリごとのディスク使用量を表示する ディスク使用量の合計だけを表示する カレントディレクトリ直下のファイル、ディレクトリごと…
ディスクの空き容量を表示する dfコマンド ディスクの空き容量を調べる dfコマンド概要 「df」は、ディスクの空き領域(freeスペース)のサイズを集計して表示するコマンドで…
テキストファイルの文字を置換する trコマンド 文字を置換する 大文字/小文字を変換する 改行を除去する 固定長のデータをタブ区切りに変換する/カンマ区切りに変換する trコマンド概要…
文字コードと改行コードを変換する nkfコマンド 文字コードと改行コードを変換する 文字コードを判定する 文字コードを変換してファイルを書き換える CentOS 7にnkfをインストールするには…
シェルスクリプトでオプションを処理したい getoptsコマンド オプションを解析する エラーメッセージを表示しない 引数付きのオプションを使用する getoptsコマンド概要 「getopt…
ファイル・ディレクトリのパーミッションを変更する chmodコマンド パーミッションを表すアルファベットと数値の意味 パーミッションを変更する パーミッションの変更内容を確認するには? chmodコ…
ファイル形式を確認する fileコマンド ファイルの形式を表示する ファイルのリストから調べる シンボリックリンクの参照先を調べる 圧縮されているファイルを調べる fileコ…
指定した文字が含まれている行だけを抽出する grepコマンド コマンドの実行結果から必要な箇所だけを抽出する 単語単位で検索する 前後の行も表示する 行番号付きで表示する 複数の文字列を指定して…
pythonを勉強しながら自然言語解析をしてみたいと思います。最終的には文生成型の自動要約を目指しますが、その前に色々前処理していきます。inやdifflibを使い、元の文章と要約文章を比較して、似ているけど違う文だけを抽出しさらにその差分を出力してみたいと思います。 pythonで自然言語解析してみよう 新聞記事の要約を試みています。要約の文字数が指定されているので文抽出型の要約だけですと指定文字数よりオー…