【シェルスクリプトをオフィス業務の主役に!】シェルスクリプトでエクセル作業を効率化する超活用術まとめ


※ 当ページには【広告/PR】を含む場合があります。
2021/04/20
2023/06/30

ここでは当サイトで扱ったシェルコマンドの小技を取りまとめたまとめ記事です。

当サイトではオフィス業務のComputer-Aidedなハイブリッドな方法を模索し、より効率的なExcel業務を実現したい多忙なオフィスワーカー向けの主にAwkとSedを使うシェル講座です。

シェルスクリプトはどこでもどんなOSでも基本的に使えて、しかも一度使い方を覚えると、Excelと組み合わせて最高に効率の良いオフィスワークツールが作れることでしょう。

合同会社タコスキングダム|蛸壺の技術ブログ

なお、シェルスクリプトはデータ(CSV)を集計することが得意ですが、人間の目で見やすくまとめることには向いていませんので、最後は人の手でまとめることには変わりありません。


合同会社タコスキングダム|蛸壺の技術ブログ【効果的学習法レポート】シェルスクリプトをこれから学びたい人のためのオススメ書籍&教材特集

はじめに

厳しめの会社によってはセキュリティの観点からオフィスワークで使うソフトウェアは、基本的にMicrosoft Officeのスイート製品しかインストールを認められていないかもしれません。

「Excel以外の便利なソフトウェアをそう易易と会社のPCにインストールさせてもらえない!」と嘆いていらっしゃる方は、パソコンに標準装備しているシェルコマンドを使うだけでも、使いどころによってがどんな便利なツールより強力な集計/文字列/検索などの処理ができるようになるのです。

もちろん、そのためにはシェルスクリプトの扱いに慣れておく必要があります。

そこでこのブログでは、
「オフィスワークで使えるシェルコマンドでできる便利な小技」を気が向いたときに紹介していき、快適なオフィス業務作りを提案します。

なお、MacOSやLinuxであれば言わずもがな(Linuxベースの)シェルコマンドは標準で使えるのですが、Windowsの場合は「PowerShell」が標準のコンソールですので、シェルコマンドと微妙に文法と作法が異なります。

この差異を埋めるための
「busybox」という軽量プログラムをインストールすることでシェルコマンドを簡単導入できます。

合同会社タコスキングダム|蛸壺の技術ブログ
WindowsでもLinuxシェルスクリプトをいつでも簡単に使いたい!と思い立ったときの魔法のツール・busybox

Windowsコンソール端末でもLinuxのコマンドを簡単に利用できる環境が導入できるbusyboxを紹介します。

「PowerShell」が劣っているというわけではないのですが、このブログ内に限ってはWindowsユーザーには「busybox」のご利用を推奨しています。


合同会社タコスキングダム|蛸壺の技術ブログ【効果的学習法レポート】シェルスクリプトをこれから学びたい人のためのオススメ書籍&教材特集

テーマ別のページ紹介

以下は、これまでのページをかいつまんでテーマ別にまとめています。

基本テクニック① 〜 文字列の操作

「シェルコマンドでの文字列の基礎固め」を話の念頭においた内容になっています。

👇最低限覚えておきたい使える正規表現の活用法

            
            AwkとJqの正規表現の使い方まとめ

【こんな時にオススメ】
    ・Awkの正規表現の使い方を知りたい
    ・Jqの正規表現の使い方を知りたい
        

👇CSVファイルで読み出した文字列を複雑なルールで置換したい

            
            AwkとJqで文字列の置換を比較解説

【こんな時にオススメ】
    ・Awkで文字列の置換を基礎を知りたい
    ・Jqで文字列の置換を基礎を知りたい
        

👇複数の条件による検索して結果をCSVで返す

            
            AwkとJqでCSV形式のデータを出力の方法を紹介

【こんな時にオススメ】
    ・Awkで出力フォーマットを操作したい
    ・Jqで出力フォーマットを操作したい
        

👇文字列の後方参照を理解する

            
            AwkとJqで正規表現のマッチングとその後方参照を紹介

【こんな時にオススメ】
    ・Awkの正規表現でマッチした文字列をキャプチャしたい
    ・Jqの正規表現でマッチした文字列をキャプチャしたい
        

👇Bashの文字列のパラメーター拡張

            
            シェルスクリプトで簡単な用法で文字列操作できるパラメーター拡張の使い方集

【こんな時にオススメ】
    ・bashのパラメーター拡張を知りたい
    ・できるだけ簡潔なシェルスクリプトを書きたい
        

👇文字列の分割を極める

            
            AwkとJqで文字列分割に必須なsplit関数の使い方を解説

【こんな時にオススメ】
    ・Awkで文字列をさらに細かく分割したい
    ・Jqで文字列をさらに細かく分割したい
        

👇文字列中の特定記号を一括削除する

            
            Sedでテキスト全体を一括削除する方法

【こんな時にオススメ】
    ・Sedの正規表現の使い方を思い出したい
    ・テキストを高速に特定の文字を一括削除をしたい
        

👇不要な空白(文字列前後の空白や連続した空白)の削除

            
            Sedで文字列の中の空白文字を削除するときの取り扱いを説明

【こんな時にオススメ】
    ・Sedで空白文字が上手く削除されない理由が知りたい
    ・Sedで空白文字を細かく制御したい
        

👇特定の文字列を含む行を抽出する

            
            SedコマンドでCSVデータから列の区別なくキーを含んでる行を全抽出

【こんな時にオススメ】
    ・ CSVデータで不特定の列にキーワードが分布しているパターンを操作したい
        

👇改行も含めた正規表現パターンをキャプチャする方法

            
            Sedコマンドで複数行をまたぐ文字列パターンをマッチさせるための改行文字について

【こんな時にオススメ】
    ・Sedで改行文字を先読みさせて正規表現を使いたい
        

👇SedとAwkによるCsvファイルの行・列の操作アレコレ

            
            SedとAwkでCSVデータの行と列を操作する基本を解説しています。

【こんな時にオススメ】
    ・CSVデータ内の行と列をシェルコマンドでどう操作するか知りたい
        

👇CSVデータから効率で高速に行&列の範囲を絞り込む

            
            巨大なCSVテキストをシェルコマンドでどう効率的に扱うかを考える

【こんな時にオススメ】
    ・巨大なCSVファイルから部分的に切り取ったデータを取り出したい
    ・Head/Tail/Cut/Trコマンドでより高速にテキストを捌く方法を知りたい
    ・Head/Tail/Cut/TrコマンドのCSVデータの使い方を知りたい
        

👇検索対象が無いときの対処方〜エラーか#N/Aを返す

            
            AwkとJqでCSVデータの空データを箇所をエラー値で埋める

【こんな時にオススメ】
    ・Awkでセル内空白を空文字かヌルなのかを区別させたい
    ・Jqでセル内空白を空文字かヌルなのかを区別させたい
    ・Excel関数のようにエラー値を#N/Aで再現したい
        

👇重複している要素を見つける&重複している要素のカウントする

            
            AwkでCSVデータの全てのセル要素を解析して重複を調べる方法

【こんな時にオススメ】
    ・CSVデータの行・列区別なくセル要素の重複を調べたい
        

👇複数のCSVファイルを重複を考慮しながら合成する

            
            複数のCSVファイルを重複を考慮しながら合成する方法

【こんな時にオススメ】
    ・バラバラになって複数存在してしまったCSVファイルを一つに統合したい
        

基本テクニック② 〜 表データから検索

「シェルコマンドでツール化させたスクリプトで検索してみる」をテーマにした記事になっています。

👇条件を与えて検索結果をCSVデータで出力

            
            もっとも基礎的なCSVデータの検索ツールの作り方を解説

【こんな時にオススメ】
    ・CSVデータからデータを探すスクリプトの概要を知りたい
        

👇検索用CSVファイルから検索結果を出力

            
            検索用のインプットファイルを使ったCSVデータ検索のやり方を解説

【こんな時にオススメ】
    ・データ検索を直接入力でなく、入力ファイルで操作したい
        

👇複数条件で全列を対象に検索して表示する

            
            より自由度の高い検索ツールにするための機能拡張を紹介

【こんな時にオススメ】
    ・ CSVデータを複雑な条件で検索するツールを作りたい
        

基本テクニック③ 〜 CSV形式で集計する

「CSV(コンマ切り)形式でデータを集計できる自作ツールスクリプトを作る」をテーマにした内容です。

👇集計を対話的にするスクリプト作成の基礎

            
            対話的に集計項目を選択できるスクリプトの作成の基本を解説

【こんな時にオススメ】
    ・対話的に操作できるツールスクリプトが作成したい
        

👇複雑な文字パターンの条件で集計する

            
            正規表現を使った集計条件で集計操作を行うスクリプトの作成方法を解説

【こんな時にオススメ】
    ・セル文字列の要素に曖昧さを含んだ CSVデータでも集計を行いたい
        

👇複数の条件が重なる場合に集計を行う

            
            集計条件が複数ある場合に集計操作を行うスクリプトの作成方法を解説

【こんな時にオススメ】
    ・CSVデータで複数の列で集計条件を同時に満たす要素だけで集計がしたい
        

👇日付範囲で細かい条件指定した集計を行う

            
            エクセル時間を持つ列に対して集計操作を行う場合の基礎

【こんな時にオススメ】
    ・日付時間を集計条件に指定したい
    ・Dateコマンドの出力フォーマットを良く知りたい
        

👇平均値で集計計算する

            
            平均などの複雑な算術計算を行うための集計スクリプトの作成方法

【こんな時にオススメ】
    ・単純な計算だけでなく、数学的な操作をデータ解析したい
        

基本テクニック④ 〜 シェルスクリプトとExcelとの連携

「シェルスクリプトからExcelファイルをどう扱うか」をテーマにした内容です。

👇LinuxでExcelファイル(xls/xlsx)をCSVデータに変換するには?

            
            xlsx2csvを使ってExcelファイルの直接操作を解説

【こんな時にオススメ】
    ・OS環境に依らずLinuxでもExcelファイルを直接読み込みたい
    ・OS環境に依らずLinuxでもExcelファイルからCSVデータを保存したい
        

👇Excelデータシートのセル内改行をCsvファイルで取り扱う方法

            
            xlsx2csvでExcelファイルからCSVデータと取り出したときのセル内改行を解説

【こんな時にオススメ】
    ・CSVデータのセル内改行の扱い方を知りたい
        

👇Linuxでシェルコマンドからエクセルファイル(XSLX)を新規作成する方法〜「libreoffice」と「ssconvert」

            
            Linuxコマンドのみでcsvデータからxlsxファイルへ変換する方法を紹介

【こんな時にオススメ】
    ・Linux環境だけでもxlsxファイルを作りたい
    ・Excelなしでxlsxファイルにデータを作成・管理したい
        

Jqコマンドを利用したCSV操作

主にJqコマンドを使ったCSVファイルの編集テクニックを紹介しているページです。

👇【Jqコマンド応用編】xargsをwhile/forループの代わりとして使う場合の勘所

            
            Xargsを使ったシェルスクリプトのパイプ処理化をコツを紹介

【こんな時にオススメ】
    ・Jqを使ったスクリプトとても重い
        

👇【Jqコマンド実用編】押さえておきたいデータ入出力のためのJqのコマンドオプションまとめ

            
            JqコマンドでJSONデータを扱う際に利用するコマンドオプションを解説

【こんな時にオススメ】
    ・Jqの入力データの取り込みが思うように上手くいかない
    ・Jqの出力データのフォーマットが思うような形になっていない
        

👇Jq&AwkコマンドでJSONファイル⇔CSVファイルに相互変換する方法を考察

            
            JqコマンドとAwkコマンドを組み合わせることでJSONデータとCSVデータを相互に変換しあうテクニックを考えてみました。

【こんな時にオススメ】
    ・Jq&AwkコマンドでCSVデータをJSONデータに変換したい
    ・Jq&AwkコマンドでJSONデータをCSVデータに変換したい
        

Awkコマンドに関するテクニックを取り上げた記事

主にAwkコマンドを題材に有用なテクニックを紹介しているページです。

👇AWKを使ってテキストからjsonを生成する

            
            Jqがインストールできない人向けの苦肉の策・AwkでJsonファイルを扱うテクニックを紹介

【こんな時にオススメ】
    ・Jqを使いたいのに、インストール必須なpythonが諸事情等で使えない
        

👇gawkでカスタムソート

            
            CSVデータで複雑な並び替えを行う上で必要なカスタムソートを解説

【こんな時にオススメ】
    ・CSVデータを独自のルールで並び替えたい
        

その他の覚えておくとお得なテクニック

CSV・Excelのシェルスクリプトからの操作とは直接的には少し話題が逸れますが、覚えておいたほうが良い/場合によっては必要になってくると思われるページです。

👇Excelでの時間の計算をどう取り扱うのか 〜 DATEコマンドの計算方法

            
            Excel特有の時間形式・『エクセル時間』をDateコマンドで自在に変換

【こんな時にオススメ】
    ・シェルコマンドでエクセル時間から通常の時間表記にしたい
    ・シェルコマンドで通常の時間表記からエクセル時間にしたい
        

👇日付を含むエクセルデータをエクスポートしたときのCSVデータを取り扱う

            
            Excelファイルから取り出した生のCSVデータ内にあるエクセル時間をDateコマンドで変換

【こんな時にオススメ】
    ・エクセル時間をシェルスクリプト内でちゃんとした時間で表示したい
        

👇引数指定できるシェルスクリプトを自作方法

            
            引数を渡せるシェルスクリプトの作成方法の基本を解説します

【こんな時にオススメ】
    ・自作スクリプトで単純な引数の引き渡しの方法が知りたい
    ・getoptsを使った自作スクリプトの作り方が知りたい
    ・引数解析付きの自作スクリプトの作り方が知りたい
        

👇Windowsでも使えるシェルコマンドツール・busybox

            
            WindowsでもLinuxのシェルコマンドを使えるようにするbusyboxの紹介

【こんな時にオススメ】
    ・Windowsで簡単にシェルコマンドを実行させたい
        

👇BusyboxのDateコマンドを使う

            
            (Alpine標準の)busyboxに付属してるGnu dateコマンドを使うときの基礎

【こんな時にオススメ】
    ・Gnu dateコマンドの基礎を知りたい
    ・Awkスクリプトの中でもdateコマンドを使いたい
        

合同会社タコスキングダム|蛸壺の技術ブログ【効果的学習法レポート】シェルスクリプトをこれから学びたい人のためのオススメ書籍&教材特集

記事リンク・ダイジェスト

このブログ内で、シェルスクリプトで「Excel/CSVを扱って業務に活かそう」をテーマに扱っているページを一覧にしてまとめます。

人気記事!
合同会社タコスキングダム|蛸壺の技術ブログ

【xlsx2csvコマンド活用編】Linux環境でExcelファイル(xls/xlsx)をCSVデータに変換する

2021/04/02
ID#:122
シェルスクリプト xlsx2csv Excel業務支援

【xlsx2csvコマンド活用編】Linux環境でExcelファイル(xls/xlsx)をCSVデータに変換する

今回はExcelでCsv形式のデータをエクスポートしたいけど、WindowsOSのパソコンは無し、Linuxしか使いたくない方のためのxlsx2csvコマンドの紹介記事です。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

Linuxでシェルコマンドからエクセルファイル(XSLX)を新規作成する方法〜「libreoffice」と「ssconvert」

2023/06/30
ID#:206
シェルスクリプト Excel業務支援

Linuxでシェルコマンドからエクセルファイル(XSLX)を新規作成する方法〜「libreoffice」と「ssconvert」

LinuxユーザーのためのExcelファイル(XLSX形式)をより快適扱うためのワンポイント講座です。今回はCSVファイルから直接XLSXファイルに変換が可能な「libreoffice」と「ssconvert」コマンドを紹介します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

Excelでの時間の計算をシェルスクリプトでどう取り扱うのか〜DATEの計算方法

2021/04/13
ID#:120
シェルスクリプト Date Excel業務支援

Excelでの時間の計算をシェルスクリプトでどう取り扱うのか〜DATEの計算方法

エクセルでの日付時間とシェルスクリプトの扱うUNIX時間とは一見取り扱っているデータの表示が同じようで、日付の換算方法は異なります。ここではExcel時間表示フォーマットの話と、それをシェルスクリプトでどう補正するとCSVインポート・エクスポートが上手くいくのかを考察してみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】CSVデータから日付範囲で細かい条件指定した集計を行う

2021/04/16
ID#:115
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】CSVデータから日付範囲で細かい条件指定した集計を行う

CSVデータの集計操作系のスクリプトツールを作成してみる特集の第1回目です。今回はCSVデータの集計操作の基礎的な内容も掘り下げつつ、後半で少し応用的なツールスクリプトに仕上げる方法をじっくり解説していきます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

日付を含むエクセルデータをエクスポートしたときのCSVデータの時間表示をシェルスクリプトで取り扱う方法

2021/04/14
ID#:114
シェルスクリプト 日付データ Excel業務支援

日付を含むエクセルデータをエクスポートしたときのCSVデータの時間表示をシェルスクリプトで取り扱う方法

ExcelデータからCsv形式へインポート/エクスポートする際に気をつけておかなかればならない一つの日付を取り扱う換算ルールを特集します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】平均値の算出 〜 Awkを使った平均を計算するスクリプト

2021/04/19
ID#:113
シェルスクリプト 集計操作 Excel業務支援

【シェルスクリプト&Excel】平均値の算出 〜 Awkを使った平均を計算するスクリプト

CSVデータの自由でより高機能な集計操作を行うスクリプトツールを作成してみる特集の第3回目です。Awkでも科学計算ほどの精度は無いものの、それでもかなり高度な算術計算処理をスクリプト内で実現することができます。今回は簡単な好例として平均を計算させてみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】複数条件を満たすときのみに集計するスクリプト

2021/04/18
ID#:112
シェルスクリプト Excel業務支援 集計

【シェルスクリプト&Excel】複数条件を満たすときのみに集計するスクリプト

CSVデータの自由でより高機能な集計操作を行うスクリプトツールを作成してみる特集の第3回目です。前回はCSVデータで特定の一列から条件を満たすものを正規表現で抽出・集計する方法を紹介しました。今回は検索が複数列に渡る条件を与えた集計スクリプトの作り方を考察します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】より複雑な条件を満たすのときのみに集計するスクリプト

2021/04/17
ID#:111
シェルスクリプト Excel業務支援 集計

【シェルスクリプト&Excel】より複雑な条件を満たすのときのみに集計するスクリプト

CSVデータの自由でより高機能な集計操作を行うスクリプトツールを作成してみる特集の第2回目です。今回は正規表現を用いてより自由度の高い集計スクリプトの作り方を簡潔に考えてみましょう。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】集計を対話的にするスクリプト作成の基礎

2021/04/15
ID#:110
シェルスクリプト Excel業務支援 対話型入力

【シェルスクリプト&Excel】集計を対話的にするスクリプト作成の基礎

Excelでの定番の業務テクニックとして要素検索と並んで良く利用されているのが集計操作です。基礎固めとしてまずは集計モードを対話に選択できるようなツールスクリプトに仕立てる前段階のユーザーインタラクティブなシェルスクリプトの実装方法を考えてみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】CSVデータの複数列から複数条件で検索して行データを表示させるスクリプト

2021/04/12
ID#:107
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】CSVデータの複数列から複数条件で検索して行データを表示させるスクリプト

CSVデータの検索に特化したエクセルでいうところのVLOOKUP関数のような機能をもつスクリプトツールを作成してみる特集の第3回目です。前の回に引き続いて、もっと自由に検索列を決められて、なおかつ複数の検索条件も与えられるように再度Awkをベースに拡張してみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】CSV形式で与えてある検索条件ファイルから検索結果を出力するスクリプト

2021/04/11
ID#:106
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】CSV形式で与えてある検索条件ファイルから検索結果を出力するスクリプト

CSVデータからエクセル操作機能を代替するスクリプトツールを作成してみる特集の第2回目です。今回はAwkコマンドでCVSファイル内からキーワードリスト検索&抽出するスクリプトツールを作成してみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】条件を与えて検索結果をCSVデータで出力するスクリプト

2022/08/07
ID#:105
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】条件を与えて検索結果をCSVデータで出力するスクリプト

CSVデータの検索に特化したエクセルでいうところのVLOOKUP関数のような機能をもつスクリプトツールを作成してみる特集の第1回目です。今回は読み込んだCSVデータの特定の1列を検索キーとして、指定した検索キーリストからヒットした要素を順にピックアップしてCSV形式で表示するスクリプトを作成してみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】Head/Tail/Cut/Trコマンドを使ってCSVデータから効率で高速に行&列の範囲を絞り出す方法

2021/04/09
ID#:103
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】Head/Tail/Cut/Trコマンドを使ってCSVデータから効率で高速に行&列の範囲を絞り出す方法

容量の大きなCSVデータ等を、高速かつ効率的にパイプライン処理するために、Head、Tail、Cutとその他のLinuxコマンドを使ったテクニックを紹介します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】検索対象が無いときの対処方法〜エラー時の値を#N/Aに置き換える

2021/04/07
ID#:98
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】検索対象が無いときの対処方法〜エラー時の値を#N/Aに置き換える

検索結果が無い行を発見したときに、通常は何も表示されないで無視されることが多いですが、エラーハンドリングを定義し、エラーを発見したときの処置も実装したい場合があります。たとえば、検索結果で一致しない行には、新しい内容を新規作成してそこに挿入する...などです。今回はCSVデータ使う上でのAwkとjqを使ったシェルスクリプトのエラーの捌き方の基礎を行っていきます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】SedコマンドでCsvデータから特定の文字列を含む行を抽出する

2021/04/06
ID#:97
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】SedコマンドでCsvデータから特定の文字列を含む行を抽出する

CSV形式のデータの中の、不特定で複数の行(もしくは複数のセル)に対象の文字列を含むような曖昧さのある場合には、Awkかjqで処理するには少し冗長な操作になるときがあります。今回は先にSedで特定の文字列を含む行をフィルタリングのやり方を、Awkかjqで利用する前の下処理の方法として紹介します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】Sedコマンドで不要な空白(文字列前後の空白や連続した空白)を削除

2021/04/05
ID#:96
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】Sedコマンドで不要な空白(文字列前後の空白や連続した空白)を削除

セルに含まれる文字列には、インデントとして無駄に連続した空白が詰まっていたり、タブやスペースなどの複数のタイプの空白が混合して入っていたりする場合が有ります。今回はSedを使った余計な空白文字の除去・洗浄に関した内容を解説します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【xlsx2csvを使おう!】 Excelデータシートのセル内改行をCsvファイルで取り扱う方法

2021/04/03
ID#:95
シェルスクリプト Xlsx2csv Excel業務支援

【xlsx2csvを使おう!】 Excelデータシートのセル内改行をCsvファイルで取り扱う方法

csvをシェルスクリプトで取り扱う上でもっとも厄介なものが改行文字です。今回は、Excelデータ中に現れるセル内改行を、xlsx2csvコマンドからCsv形式のテキストファイルで扱う方法を解説します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】文字列中の特定の記号を一括削除する方法

2021/04/07
ID#:94
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】文字列中の特定の記号を一括削除する方法

Csvデータ全体に渡って、セル内に含まれる文字列に区別無く存在する不要な記号を一括して削除したい場合が有ります。このような特殊記号は当然ながら手動で検索しながら一つ一つ消していくのも面倒です。今回はCsvファイルの全体に渡るような文字列の置き換えをSedコマンドを利用して、一気に、そして高速に不要な文字を削除する方法を紹介します。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】文字列の分割を分割を極める ~ split関数の使い方

2021/04/01
ID#:93
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】文字列の分割を分割を極める ~ split関数の使い方

CSV形式と似ているけどちょっと違う、コンマ以外の様々な区切り文字(セパレーター)をもったデータファイルから、柔軟・簡単に分割(split)する方法を解説していきます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】文字列の後方参照を理解する

2021/03/31
ID#:92
シェルスクリプト Excel業務支援

【シェルスクリプト&Excel】文字列の後方参照を理解する

csvデータのセル文字列の後方参照をAwkとjqの2つのパターンでどう実現するのかを考えてみるちょっとした技術記事です。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】CSVデータ編集で使える最低限覚えておきたい正規表現の活用法

2021/03/26
ID#:91
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】CSVデータ編集で使える最低限覚えておきたい正規表現の活用法

AwkやSedといったテキストを編集する代表的なコマンドをより高度に操作するためには、正規表現(Regular Expression)の理解が欠かせなくなります。マニアックな正規表現のテクニックなどは避けながら、一般的なAwk(GNU Awk)とjqでcsvファイルを操作する際に最低限覚えておきたい正規表現をまとめてみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】SedとAwkによるCsvファイルの行・列の操作アレコレ

2021/03/30
ID#:90
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】SedとAwkによるCsvファイルの行・列の操作アレコレ

CsvファイルをSedやAwkなどのLinuxコマンドからCsvデータの行と列の操作するための基礎的なテクニックをまとめてみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】シェルスクリプトで複数の条件による検索し結果をCSVで返す

2021/03/24
ID#:89
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】シェルスクリプトで複数の条件による検索し結果をCSVで返す

シェルスクリプトで、Awkかjqコマンドを使ってCSVフォーマットのファイルを色々と処理してみたい方に向けたお役立ちテクニック特集です。この回ではターゲットとなる列の要素に複数の条件を検索して、その検索結果をcsv形式で返すようなシェルスクリプトを作成してみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプト&Excel】CSVファイルで読み出した文字列を複雑なルールで置換したい

2021/03/19
ID#:88
シェルスクリプト Excel業務支援 CSV

【シェルスクリプト&Excel】CSVファイルで読み出した文字列を複雑なルールで置換したい

シェルスクリプトで、Awkかjqコマンドを使ってCSVフォーマットのファイルを色々と処理してみたい方に向けたお役立ちテクニック特集です。今回はシェルスクリプトでCSV形式の中の文字列置換を行う方法に関して考えてみます。

クリックするとリンク先へ飛びます
関連記事
合同会社タコスキングダム|蛸壺の技術ブログ

【シェルスクリプトをオフィス業務の主役に!】シェルスクリプトでエクセル作業を効率化する超活用術まとめ

2022/02/17
ID#:87
シェルスクリプト Excel業務支援

【シェルスクリプトをオフィス業務の主役に!】シェルスクリプトでエクセル作業を効率化する超活用術まとめ

シェルスクリプトはどこでもどんなOSでも基本的に使えて、一度使い方を覚えるとパソコン上でありとあらゆる操作を可能としてくれます。そこでオフィスで日々エクセル業務と向き合う多忙なオフィスワーカー向けに、シェルスクリプトの力で劇的に生産効率を改善しする方法を提案します。

クリックするとリンク先へ飛びます


合同会社タコスキングダム|蛸壺の技術ブログ【効果的学習法レポート】シェルスクリプトをこれから学びたい人のためのオススメ書籍&教材特集

まとめ

ここではこのサイトで取り扱ってきたCSVデータを実業務に活かすために必要なシェルスクリプトの編集テクニックを学んでいく上で、様々なテクニックを紹介してきた記事のまとめになります。

今後も不定期ですが記事を修正・増量していく予定です。