19
票
Accepted
テキストファイルの最初4文字の文字化け
おそらく、バイトオーダーマーク(BOM)のついたエンコーディングになっているのだとおもいます。バイトオーダーマークについて詳しくは以下を参照してください。
バイトオーダーマーク - Wikipedia
UTF-16エンコーディングだと、プラットフォームによってエンディアンの違いが問題となるため、ファイルの先頭にエンディアンを識別するためのデータが追加されることがあります。...
- 226
7
票
Accepted
sed で [あ-ゞ] のような日本語の文字範囲を使いたい
環境変数LC_COLLATEにC.UTF-8を指定する事で解決しました。
echo "abcあいう123" |LC_COLLATE=C.UTF-8 sed -re 's/[ぁ-ゞ]/X/g'
#=> abcXXX123
sedだけでなく、(-Pオプション無しの GNU) grep やbashにも有効で、日本語の文字範囲を使えるようになりました。
echo "abcあいう123" |...
- 1.1万
7
票
sed で [あ-ゞ] のような日本語の文字範囲を使いたい
手元の環境で試してみました。バージョンは全てGNU sed 4.2.2です。
MINGW64
全て意図通りの動作
Debian
LANG=en_US.UTF-8
意図通りの動作
LANG=ja_JP.UTF-8
[あ-ん] の場合: 意図通りの動作
[あ-ゔ] の場合: エラー「無効な照合文字です」
[あ-ゞ] の場合: エラー「無効な範囲終了です」
GNU ...
- 4.1万
6
票
Accepted
sedで改行をスペースに置換出来ない
sed は、入力を1行ごとに処理するからです。
多分、今 @doanobu さんがほしいと思っているのはtr です。
tr '\n' ' '
もうちょっと補足をすると、 sed の基本的な実行フローは、
一行メモリ(pattern space) に読み込む (改行は含まない)
コマンド( s/\n/ /g などのこと)たちの実行
メモリ(pattern space) の出力(...
- 1.6万
5
票
Accepted
リモートシェルでローカルシェルの変数を参照したい
fumiyas さんもおっしゃっていますが、 sed と ssh 組み合わせてやろうとすると、いくつか制御文字が使われた場合などで、バグが発生しています。まず具体例から。
質問者さんがやりたいことは、 world -> hello であるならば、ひとまず以下で達成できます。
: ${SSH_TO:=host}
TARGET_FILE=/home/ec2-user/test.txt
...
- 1.6万
5
票
Accepted
sedコマンドでn回目に出現する文字を置換する方法
rouさんの回答を参考にさせていただきました。
sed -e '1{; :a; s/Linux/リナックス/3; t; N; ba; }' <test.txt
1行目ならコマンドブロックを開始します。
aというラベルを設定します。
3番目のLinuxをリナックスに置換します。
置換に成功したら末尾へ移動します。
次の行をパターンスペースへ追加して、aというラベルへ移動します。
...
- 1,452
4
票
sedの処理を追えるようデバッグプリントを出したい
デバッグプリントとは少し違いますが、sedsedでパターンスペースやホールドスペースを逐次表示できます。
$ echo $'a\nb\nc' | sedsed.py --debug -ne '1!G;$p;h'
PATT:a$
HOLD:$
COMM:1 !G
PATT:a$
HOLD:$
COMM:$ p
PATT:a$
HOLD:$
COMM:h
PATT:a$
HOLD:a$
PATT:b$...
- 2,858
4
票
sedで改行をスペースに置換出来ない
# GNU の sed ならば
sed -z 's/\n/ /g' hoge.txt
GNUのsedは-z, --null-dataオプションを指定すると、行の分割を\nでなくnull文字で行ないます。
- 1.1万
4
票
テキストファイルの最初4文字の文字化け
各行が「�ソ」+「ascii文字列」というパターンであることが確定しているなら、「行の先頭からascii文字列以外を削除する」というパターンで除去することができます:
$ sed -i.bak 's/^[^[:alnum:]]*//' weird_*.txt
テスト:
$ echo -n -e "\xef\xbf\xbd\xef\xbd\xbf0dd" | sed '1 s/^[^[:...
- 2,202
4
票
sedコマンド 正規表現 +の扱い
Macのsedだと+が使えないか、別の表現が必要なようです。
$ echo "helloddkkdddd" | gsed -e "s/hello..*/X/g"
X
とやるか、brewをお使いでしたら、
$ brew install coreutils
としてGNUのsed(gsed)をインストールすると+が使えます。
$ echo "helloddkkdddd" | gsed -e "...
- 41
4
票
リモートシェルでローカルシェルの変数を参照したい
sshでリモート側にローカルの環境変数を渡すためには双方に設定が必要です。
ローカル側
.ssh/config(または/etc/sshd/ssh_config)に環境変数を送信する設定
SendEnv string
リモート側
/etc/ssh/sshd_configにローカル側が送ってきた環境変数を受け入れる設定
AcceptEnv string
また、...
- 1.2万
4
票
Accepted
bashの先頭半角置換の正しい書き方
シェルの挙動
シェルは与えられたコマンドライン文字列に対して変数展開 (variable expansion)、ワード分割 (word splitting)、パス名展開 (pathname expasion) などを実行し、その結果をコマンドとして実行します。
echo ${fuga} がどのように解釈されるかというと:
変数展開が実行され echo string と解釈される
(echo と ...
- 2,821
4
票
Accepted
Linux コマンドでテキストファイルにヘッダーとフッターを追加したい
sed を使わない別の例です。
#!/bin/sh
echo "header" >> result.txt
cat test.txt >> result.txt
echo "footer" >> result.txt
- 1.9万
3
票
Accepted
改行を挿入する形で置換しようとしたとき、最後に余計な改行が入る
幾つかやり方はあると思いますが、
。 のあとに任意の文字があることを利用した、
こんなやり方はどうでしょうか。
sed -e 's/。\(.\)/。\n\1/g' sample.txt
- 5,122
3
票
sedコマンド 正規表現 +の扱い
sed で利用できる正規表現は拡張正規表現ではありません。
GNU sed であればバックスラッシュ \ を前に付与し \+ のようにすることで拡張正規表現のパターンを書けますが、GNU sed 以外の sed 実装では使えません。
よって、どのような sed でも利用できるコマンドラインは次のようになります:
$ echo "helloddkkdddd" | sed -e "s/\(...
- 2,821
3
票
[言語不問]XML中の、特定文字列を持つ子要素を持つ親要素を消す方法
sed は行指向のコマンドですので、XML のようなフォーマットを扱うのは非常に難しく、殆ど不可能です。
シェルスクリプトで XML を扱うには、
XML 専用のコマンドを使用する
XML を行指向のフォーマットに変換してから処理する
該当部分だけ、XML を扱うライブラリが用意されているプログラミング言語でコマンドとして作成する
といった事が必要です。
XML ...
- 1.1万
3
票
[言語不問]XML中の、特定文字列を持つ子要素を持つ親要素を消す方法
このようなフィルタリングはXSLTでやれば簡単ですね.御要望の条件を
「子要素のテキストに"test"を含むdependency要素を削除する.」
と解釈させていただきますと、次のようなXSLTスタイルシートで一発でできます.
<?xml version="1.0" encoding="UTF-8"?>
<xsl:stylesheet xmlns:xsl="http://...
- 1,088
3
票
sed での変数指定方法
' の位置を変えてみましょう。
sed -e $row_number',$d' $job_name
$row_number は shell によって解釈されるようになりますし、
また、$d は ' で囲まれているので shell によって解釈されません。
あと、上に挙げた方法だと、標準出力に結果が出力されます。もし $job_name に指定したファイルを書き換えたい、ということでしたら、-...
- 3,202
3
票
sedコマンドでn回目に出現する文字を置換する方法
3番目(=3行目)だけ置換する場合は以下を実行してみてください。
$ cat test.txt | sed -e '3s/Linux/リナックス/'
3行目~5行目、などのように範囲指定をする場合は以下になります。
$ cat test.txt | sed -e '3,5s/Linux/リナックス/'
- 1.9万
3
票
sedコマンドでn回目に出現する文字を置換する方法
行をまたいで条件適用させるには、N で複数行を同時にパターンスペースに読み込む必要があります。
sed -i '-e 2,${;p;d;};:a;s/Linux/リナックス/3;t;N;ba' test.txt
1: 2,${
2: p
3: d
4: }
5: :a
6: s/Linux/リナックス/3
7: t
8: N
9: ba
1~4行目と5~9行目が別ブロックになっています。...
- 412
3
票
Accepted
sedで複数条件による抽出方法
-eオプションで複数のコマンドを処理させることができます。
cat test.txt | sed -n -e '/c/p' -e '/a/p'
なお、「マッチした行を抜き出す」のが目的であればgrepコマンドの方が適切(シンプルで簡単に出来る)かなと個人的には思います。
- 1.9万
3
票
Linux コマンドでテキストファイルにヘッダーとフッターを追加したい
質問のコードに大きな間違いは有りません。このコードで「not foundになる」「test.txt・というファイル名が作られる」という現象は起きません。色々と試している時に、なにか手順を誤ったのでしょう。
小さな間違いとして、\\n が有ります。これは \n が正しいです。(\n が使えるのは GNU 拡張のようですが、そもそも -i オプションが GNU 拡張なので、使える環境だと考えられます)
- 1.1万
2
票
Accepted
複数のテキストファイルであるパターンを変換
foo.txtからfoo.csvへ変換するのであれば、
このように使ってみてはいかがでしょうか。
cat foo.txt | sed -e "s/|\(one\|other\):\|:/,\1,/" > foo.csv
- 798
2
票
sedコマンド 正規表現 +の扱い
Mac ではなく Linux の文章ですが・・・
http://linuxjm.sourceforge.jp/html/LDP_man-pages/man7/regex.7.html
古い ("基本") 正規表現は、いくつかの点において異なる。 '|', '+', and '?' は通常の文字となる。 対応する機能は存在しない。繰り返し指定の区切りは "\{" および "\}" となる。'{...
- 738
2
票
Accepted
sedとawkを用いてping平均時間を求めたい(OSX bash)
質問に書いてあったエラーが出ないので、 line 13: ¥: command not found の問題を。
sed -n "s/^.*time=¥(.*¥) ms/¥1/p" ping.txt |¥
の行末の ¥ が不要です。
#!/bin/bash
ipaddr="ja.stackoverflow.com"
count=5
echo "Ping to: $ipaddr"
echo "...
- 6,309
2
票
テキストファイルの最初4文字の文字化け
Excel(Mac)がBOM付きUnicodeに対応していないのが問題だと思います。GUIツールだとCotEditor(Mac)でBOMの除去ができます。
CotEditorでファイルを開く
メニュー -> フォーマット -> エンコーディング -> Unicode (UTF-16) を選択
ファイルを保存
- 485
Only top scored, non community-wiki answers of a minimum length are eligible