ITの隊長のブログ

ITの隊長のブログです。Pythonを使って仕事しています。最近は機械学習をさわりはじめたお(^ω^ = ^ω^)

2018-02-06から1日間の記事一覧

MacやUbuntuでgrepでひらがな・カタカナ・漢字を検索する

過去の記憶では下記のように実行するとうまくいった覚えがあるようなないような。。。 $ cat hogehoge.csv | grep -E '[ぁ-んァ-ン0-9]' | head grep: Invalid collation character しかし、Ubuntuで実行するとよくわからんエラーが。。。 で、色々探した…

BigQueryで半角文字を全角にする

JavaScriptが使える(°Д°; この記事を参考にしました。 qiita.com CREATE TEMPORARY FUNCTION normalize2(str STRING) RETURNS STRING LANGUAGE js AS """ if (str === null) return; var kanaMap = { 'ガ': 'ガ', 'ギ': 'ギ', 'グ': 'グ', 'ゲ': 'ゲ', 'ゴ…