iconvとは 人気・最新記事を集めました - はてな
Hatena Blog Tags
はてなブログ トップ
iconv
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

iconv

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
揮発性のメモ２•7ヶ月前

EUCに無い文字２

①②③、㌔㍉、㎞㎜ などは EUCJPに無い文字が EUCJP-MS, EUCJP-WIN にはある。 これらの文字を含んだテキストは iconv で変換可能 元テキスト EUCJP⇒UTF8変換 iconv -c -f EUCJP -t utf8 /tmp/kishu.txt EUCJP-WIN⇒UTF8変換 iconv -c -f EUCJP-WIN -t utf8 /tmp/kishu.txt CP51932⇒UTF8変換 髙（はしご高）、﨑（たつ崎） などはEUCJP-WINには無いが CP51932 にはあるらしい。 iconvは CP51932 に未対応なので、PHPを使ってみる …

#iconv#文字コード#eucJP-ms#PHP

ネットで話題

もっと見る
143ブックマークRubyist Magazine - 標準添付ライブラリ紹介 【第 3 回】 Kconv/NKF/Iconv『るびま』は、Ruby に関する技術記事はもちろんのこと、Rubyist へのインタビューやエッセイ、その他をお届けするウェブ雑誌です。 Rubyist Magazine について 『Rubyist Magazine』、略して『るびま』は、日本 Ruby の会の有志による Rubyist の Rubyist による、Rubyist とそうでない人のためのウェブ雑誌です。 最新...jp.rubyist.net
32ブックマークコマンド:iconv: UNIX/Linuxの部屋x68000.q-e-d.net
27ブックマークtips - Mac OS X - には iconv も piconv も入っている : 404 Blog Not Founddankogai.livedoor.blog
24ブックマーク【iconv】文字コードを変換して出力するxtech.nikkei.com
24ブックマークミラクル・リナックス：Samba 国際化プロジェクト > iconvについてオープンソースソフトウェアおよびフリーソフトウェアにおいてもソフトウェアの 国際化対応を行うために文字列処理の際に UCS(Unicode) を使う事が多くなってき ています。 UCS を用いる主な理由としては、各国のエンコーディングを考慮したコードを書か なくてもプログラム内部では UCS で処理して入出力の際にエンコー...users.miraclelinux.com
22ブックマークGitHub - bnoordhuis/node-iconv: node.js iconv bindings - text recoding for fun and profit!github.com
18ブックマークElectronic Genome - nkfとiconvによる文字コード・改行コード変換UTF-8に対応しているnkfとiconvで文字コードや改行コードを変換するメモ。実行はUbuntu7.10で、ロケールは以下のようにja_JP.UTF-8。 $ echo $LANG ja_JP.UTF-8 ■インストール nkfのインストール $ sudo apt-get install nkf パッケージリストを読み込んでいます... 依存関係ツリーを作成しています... Reading state in...itmst.blog71.fc2.com
17ブックマークiconv - Wikipediaiconv（アイコンブ）は異なる文字コード間の相互変換を行う標準API。または、そのAPIに付属する文字コード変換ユーティリティプログラム。名前は「International Codeset Conversion Library」に由来する[1]。GNUによる実装[2]が有名で、変換ライブラリ libiconv のライセンスはLGPL、変換プログラム iconv のライセンス...ja.wikipedia.org
16ブックマークHomebrew+RVMでreadline/iconvを使う - ぱろっと・すたじおparrot.hatenadiary.jp

関連ブログ

pyopyopyo - Linuxとかプログラミングの覚え書き - •2年前

コマンドラインで文字コードを自動判別する方法

シェルスクリプトやコマンドラインで，テキストファイルの文字コードを自動判別する方法です nkf を使う head -n 1000 ファイル名 | nkf -g nkf -g ファイル名でも良いですが，nkfは遅いので，ファイルサイズが大きくなると処理に時間がかかります．アホみたいに待つ羽目になります．実際に使うときは，ファイルの先頭1000行ぐらいをheadで切り取ってから nkf に渡すほうが良いでしょう uchardet を使う uchardet は比較的あたらしいツールです．高速に文字コードが判別できます．www.freedesktop.orgインストール方法は debian/ubunt…

#shell芸#iconv
雑記帳•9年前

P103 【iconv -c】不正文字存在チェック及び除去

概要 iconvの用途は文字コード変換に用いることが主目的である。 しかし、-cというオプションを指定すると、その文字コードに許されていない文字を削除できる。 実行結果例 「こん」のあとにUTF-8として不正な0xffを埋め込む echo -e 'こん\xffにちわ' | iconv -f UTF-8 -t UTF-8 位置 6 に不正な入力シーケンスがあります 上記に-cオプションを付けてやる echo -e 'こん\xffにちわ' | iconv -c -f UTF-8 -t UTF-8 こんにちわシェルプログラミング実用テクニック (Software Design plus)作者:上田 …

#iconv#シェルプログラミング実用テクニック
cateiru のブログ•25日前

Dockerサブスクリプションに含まれる docker debug 機能

Docker Hub にはサブスクリプションが存在します。個人でプランに加入するケースは少ないと思いますが、会社で使うために組織で加入しているケースがあるかと思います。 この Docker Core のサブスクリプションに最近、 docker debug が含まれました。この機能は Docker Desktop 4.33 に含まれるようです。 www.publickey1.jp docs.docker.com この機能を最近使ったところすごく便利だったので紹介します。 docker コンテナにデバックに必要なツールをインストールしつつ入れる この機能を簡単に説明するとこれです。 使い方は非常に…

arms inc. Engineers' Blog•1ヶ月前

tblsで始める楽々データベース設計書管理

こんにちは、コバヤシです。 弊社では、データベースのドキュメント作成にどのツールを使うべきか試行錯誤してきました。エクセルやGoogleスプレッドシートで作成してみたり、Figmaで描いてみたこともあります。しかし、どれも更新が手間で、更新を忘れてしまい、実態と合わなくなり、そのままでは使えなくなることもしばしばありました。 そんな悩みを抱えていた時、とても便利なツール「tbls」を見つけたので、今回はその紹介と使い方を紹介します。 tblsとは tblsは、データベーススキーマを自動でドキュメント化するツールです。 MySQLやPostgreSQLなどの主要なRDBMSに対応していて、テーブ…

ncos1のブログ•2ヶ月前

Phomemo活用の現状整理・Windows・RecieptLine

全て、WindowsからPhomemoをBluetooth接続で使用する前提での手順だがUSB接続でも可能なはず。 Windowsから、通常プリンタとして使用するには、HPRT_Mobile_Printer_Windows_Driverをインストールすれば良い。 レシート印刷の感熱紙プリンターのドライバーであれば他にも使えそうな物が多々有るが、手持ちのレシートプリンターと共通で日本語対応なので使い勝手が良い。 ncos1.hatenablog.comRecieptLineの使用方法。 github.comgitより、ダウンロード 任意のフォルダに解凍。 printer.jsonを編集（prin…

nmtysh.log•2ヶ月前

macOS SonomaにphpenvでPHP 8.3.11をインストールできるようになった

PHP 8.3.7 以降でphpenv installに失敗していたのが漸くビルドできるようになったので、そのメモ。 環境 macOS Sonoma 14.6.1 要約 下記を参考に CXXFLAGS="-std=c++17 -stdlib=libc++ -DU_USING_ICU_NAMESPACE=1" を追加したらビルドできた。 macOS に phpenv で PHP 8.3.7 以降をインストールできない場合の対処法 zenn.dev env \ PKG_CONFIG_PATH="$(brew --prefix openssl@3)/lib/pkgconfig:$(brew --pr…

st98 の日記帳 - コピー•3ヶ月前

BlackHat MEA CTF Qualification 2024 writeup

BunkyoWesternsで参加して140位。うーむ。例年通り250チームがサウジアラビアはリヤドで開催される決勝へ行け、また上位10チームには旅費が支給されるということだったけれども、かなりの激戦となっていた。 [Web 110] Free Flag (349 solves) [Web 120] Watermelon (465 solves) [Web 180] Notey (254 solves) [Web 270] Fastest Delivery Service (171 solves) [Web 110] Free Flag (349 solves) Free Free 添付ファイ…

エンジニアのソフトウェア的愛情•3ヶ月前

Elixirで国民の祝日サーバを作る

ただしサーバとは言っても 祝日一覧をダウンロードする エンコーディングを変換する CSV をパースする データを ETS に格納する データを検索する サーバを作る いつか読むはずっと読まない：全史ならぬ前史 ただしサーバとは言っても Web サーバ等ではなく、Elixir のサーバプロセスのことですのでその点はご了承を。 国民の祝日については、内閣府から情報が提供されています。 www8.cao.go.jp また、翌年までの祝日の一覧は CSV 形式のデータで提供されています。 https://www8.cao.go.jp/chosei/shukujitsu/syukujitsu.csv 今…

s1r-Jの技術ブログ•3ヶ月前

Node.jsでcsv-parseを使ってcsvファイルを読み込む

この記事に書いてあること タイトルの通り、Node.jsでcsv-parseを使ってcsvファイルを読み込む実装を紹介します。 Node.jsにはcsvファイルを読み込むライブラリが複数ありますが、おそらく一番人気っぽいcsv-parseを使ってみました。 csv vs csv-parse vs csv-parser vs fast-csv | npm trends ちゃんとTypeScriptにも対応しています。 この記事での実装の全体はGitHubに置きました。 よければ参照してください。

memorandums•5ヶ月前

Google Classroomの課題提出状況CSVをUTF8からSJISに変換するクイックアクション

背景 ちょっと前に以下を作ってちょっとした喜びを感じていました。 スクショ画像を半分にするクイックアクションの作り方（mac） - memorandums 同じように日常的な作業としてGoogle Classroomに提出された課題の一覧表（アカウント名＋提出 or 未提出）をダウンロードする、がありました。Classroomで採点すると時間がかかるので提出ファイルをダウンロードしてExcelに点数をつけるためです。ちなみにUIは以下なんですけどね。 このダウンロードしたファイルはUTF8なんです。なのでExcelで開くとこんな感じになります。あーあという感じです。 上の図の最右列が実は提出完…

にゃののん日記•6ヶ月前

日々

元自宅メインNASだったAT3N7A-IをMX1203から取り外して、昨日届いたSKTC A09に取り付け。今回もバックパネルは多少下部の押し込みが足りないものの何とか取り付けられた。電源もネジ穴が完全に合ってはいないがケースから電源を少し離してネジ先をそれぞれ差し込んで無理やり回すことで上手く4本とも固定できた。 電源を入れるとファンが回転しようとして止まるような音がしばらく続いていたが、途中から回転し続ける音に変わった。何となくCPUファンのような気がする。ケースファンも付けるつもりなのでファンを注文しておこう。ファンの件があるのでPT2の取り付けは後日やる方向で。AINEX OMEGA …

それマグで！•6ヶ月前

lua でhttp リクエスト

lua でhttp リクエスト local http_request = require("http.request") -- HTTPリクエストを作成 local headers, stream = http_request.new_from_uri("https://g.co"):go() local body = stream:get_body_as_string() if headers:get ":status" ~= "200" then error(body) end print(body) 追加パッケージのインストール無しでパッケージ管理も使わずに使えた。 なんでだろうと疑問を…

ひゃまだのblog•7ヶ月前

Bashで楽天証券からダウンロードした保有商品一覧ファイル(CSV)を加工してエクセルファイル(xlsx)にする

(2024-05-08 初稿 - 2024-08-19 追記) (2024-08-19 追記) 最近、株価だけでなくドル円の為替の変動も大きいね。(-_-;) そこで、スクリプトにドル円の為替レートも取得するように追加した。 (追記ここまで) 新NISAが始まって、株を始めた方も多いのではと思う。 筆者も、最近、株をボチボチやっているのだが、最近、株価や為替相場が乱高下して日々の株価が気になっている。 そこで、少しでも楽ができるようにBashを用いて、楽天証券からダウンロードした保有商品一覧ファイル(CSV)から筆者が必要と思うデータを抽出し、エクセルファイル(xlsx)に変換するスクリプトを…