- euc-jpとshift-jisで被るとこあんじゃん！
- どうやって判別すべき？
- いい感じにやればいいよ！
- >>3
というと？ - ライブラリないのん？
- >>4
あるけどそれをSIMD化しようと思って今別の方法で考えてる - (´꒪ͧε꒪ͧ｀) よくあるよ
- >>6
もう無視したほうがいいか - 四角い車輪の再発明
- >>7
SIMDと並列化で高速化
ハイ論破 - euc-jp使ってるやついるの？
- >>11
やっぱそういう使ってないだろってやつは除外したほうがいいのかな？
元々ある全世界の文字コード判別出来ますライブラリだとこの辺とかiso-2020系とかもゴリゴリ含んでるからあったほうがいいかなと思ったけど - >>15
そもそも要件どつなってんだよ - >>16
参考にしてる(全く参考にならん)ライブラリはこの文字コードに対応してる
https://github.com/CharsetDetector/UTF-unknown?tab=readme-ov-file#the-following-charsets-are-supported
- そんな高速に文字コード判定したいシチュエーションあんのか
てかライブラリにしてもそんな厚くないからコード見れば分かるんじゃね - >>12
いやなにやってんのかわからん
特にここ
https://github.com/CharsetDetector/UTF-unknown/blob/master/src/Core/Analyzers/MultiByte/Japanese/JapaneseContextAnalyser.cs
jp2charcontextってやつ何を示してるのか理解不能 - 既存のライブラリでSIMD対応してるやつないの？
なかったとしても判別部分は流用でよくね - SIMDで0x80以上のbyteの文字の場所を配列化します
あらかじめ文字コードごとに1文字目の範囲、2文字目の範囲、(UTF-8と仮定するなら→)3文字目の範囲、4文字目の範囲を定義します
SIMDで取得したインデックスを見てそれらの文字コードの1文字目の範囲に入ってるか確認、入ってたら次のbyteを確認して範囲に入ってるか確認こういうアルゴで行こうかと思ってるけどeuc-jpとshift-jisで被るbyteの組み合わせあるからその組み合わせだけで作ってる場合どっちに判別するのかわからんってなると思う
- 2025年にやるような話題ではない
- サクラエディタの開発者にでも聞け
- すげー今更でネットにいくらでも情報があることを
自分で調べて解決できずに5chで訊いてるような奴には無理だと思う - なんだC#の人か
とくに要件とか利用目的はない感じね - >>21
利用目的は今テキストエディタ作っててそいつをbyte[]をMemoryにするため自動エンコード機能を作ろうとしてる
SIMDで高速化されたやつね - いや大体がUTF-8かSHIFT-JISかの判定しかないじゃん
Shift-JISかeuc-jpか判別する方法載せてる記事ある？？？ - >>1
はよ4ね
クソザコ知的障がい者Unity|\.NET|ゲーム作
- お前ゲームはもう諦めたんか
- >>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作
- >>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- あ～壊れちゃったw
- う>>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- 正論言うと全員壊れてしまうねw
- ふ>>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- る>>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- 結局ゲームは諦めたん？
- >>38
諦めてないけど？ - >>41
時間ないから作れないとか言ってたのに別のものに手出すんかよ - >>45
別にお前に関係ないだろ - >>50
別に良いんだけどさ
いつみても作成途中だなって - >>56
そりゃ簡単に作れるゲーム作ってないからな - よ>>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- り>>1
はよ4ねゲェジクソザコ知的障がい者
Unity|\.NET|ゲーム作|文字コード
- そもそも諦めるってなに？
- やっぱとりあえずshift-jisとして優先させてやるしかないんかな？
- ゲーム作ってる合間に他のもんに手を出したら諦めたことになるって意味分からんか？
なら仕事してる時点で諦めることになるけどw - 与野党８党で党首を務める国会議員の令和４年分の所得総額を比較すると、自民党総裁の岸田文雄首相が３８６４万円で他の７人を引き離しトップとなった。
２位は共産党の志位和夫委員長で２０５１万円。
立憲民主党の泉健太代表は１８４７万円で６位だった。
- >>1
ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - ぬ
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - す
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - ふ
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - ら
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - み
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - も
>>1ぼく「岸田総理は増税した？」AI「した」Google「した」TikTok「した」
3 ：以下、5ちゃんねるからVIPがお送りします[]：2025/06/12(木) 07:42:43.641 ID:b0HftQ7k0
いや岸田がやった - >1
そうだよ！だからshift-jisから移行するのに楽だったわ
今はもう大体utf-8がそれ以降の文字コードしかほとんど使わないけど
【プログラミング】今文字コードの自動判別機能のプログラム作ってんだけどさ
VIP
コメント