[ruby-trunk - Bug #5533][Assigned] Pathname's raising "invalid sequence"

dubstep · November 1, 2011, 7:39am

Issue #5533 has been reported by Shyouhei U…

Bug #5533: Pathname’s raising “invalid sequence”

Author: Shyouhei U.
Status: Assigned
Priority: Normal
Assignee: Yui NARUSE
Category: M17N
Target version: 1.9.3
ruby -v: ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]

どのような経緯か存じ上げませんが1.9.3以降(trunkも)のpathnameで以下のようなスクリプトが例外になるのはなぜですか?
1.9.2までは意図したとおりに動いていました。

gist.github.com

https://gist.github.com/shyouhei/1330056

bug.rb

# -*- coding: utf-8 -*-
require 'pathname'

s1 = File.dirname(__FILE__)
s2 = File.expand_path('ディレクトリ/ファイル', s1)
s3 = File.dirname(s2)
s4 = File.expand_path(s3)
p1 = Pathname(s2)
p2 = Pathname(s4)
p3 = p2.relative_path_from(p1)

gistfile1.txt

zsh % ruby -v bug.rb
ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]
/lib/ruby/1.9.1/pathname.rb:45:in `=~': invalid byte sequence in UTF-8 (ArgumentError)
        from /lib/ruby/1.9.1/pathname.rb:45:in `chop_basename'
        from /lib/ruby/1.9.1/pathname.rb:101:in `cleanpath_aggressive'
        from /lib/ruby/1.9.1/pathname.rb:89:in `cleanpath'
        from /lib/ruby/1.9.1/pathname.rb:450:in `relative_path_from'
        from bug.rb:10:in `<main>'
zsh: exit 1     ruby -v bug.rb

Shyouhei_U · November 1, 2011, 9:19am

Issue #5533 has been updated by Yui NARUSE.

r33603 で修正しました。
File.expand_path 時の coderange 設定ミスのようです。
./ruby -e’p File.expand_path(“あ”).ascii_only?’ #=> true なのが誤り

ご提示のスクリプトの場合、s4.force_encoding(s4.encoding) などで coderange
の再スキャンが走るようにすると回避できます。

Bug #5533: Pathname’s raising “invalid sequence”

Author: Shyouhei U.
Status: Assigned
Priority: Normal
Assignee: Yui NARUSE
Category: M17N
Target version: 1.9.3
ruby -v: ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]

どのような経緯か存じ上げませんが1.9.3以降(trunkも)のpathnameで以下のようなスクリプトが例外になるのはなぜですか?
1.9.2までは意図したとおりに動いていました。

gist.github.com

https://gist.github.com/shyouhei/1330056

bug.rb

# -*- coding: utf-8 -*-
require 'pathname'

s1 = File.dirname(__FILE__)
s2 = File.expand_path('ディレクトリ/ファイル', s1)
s3 = File.dirname(s2)
s4 = File.expand_path(s3)
p1 = Pathname(s2)
p2 = Pathname(s4)
p3 = p2.relative_path_from(p1)

gistfile1.txt

zsh % ruby -v bug.rb
ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]
/lib/ruby/1.9.1/pathname.rb:45:in `=~': invalid byte sequence in UTF-8 (ArgumentError)
        from /lib/ruby/1.9.1/pathname.rb:45:in `chop_basename'
        from /lib/ruby/1.9.1/pathname.rb:101:in `cleanpath_aggressive'
        from /lib/ruby/1.9.1/pathname.rb:89:in `cleanpath'
        from /lib/ruby/1.9.1/pathname.rb:450:in `relative_path_from'
        from bug.rb:10:in `<main>'
zsh: exit 1     ruby -v bug.rb

Shyouhei_U · November 2, 2011, 4:03am

高尾です。

コメントだけになってしましますが、

On 2011/11/01, at 1:18, Yui NARUSE wrote:

r33603 で修正しました。
File.expand_path 時の coderange 設定ミスのようです。
./ruby -e’p File.expand_path(“あ”).ascii_only?’ #=> true なのが誤り

trunkにコミットされていることを確認しました。
これは1.9.3-p0にバックポートされますでしょうか。
（されるような気がしています。）

また、Redmineにて1.9.3へのバックポート対象を管理できたほうがいいかもしれないと思いました。

Shyouhei_U · November 2, 2011, 11:23am

Issue #5533 has been updated by Yui NARUSE.

Backport93トラッカーにあるというのは、1.9.3へのバックポート対象であるという意味です

Backport #5533: Pathname’s raising “invalid sequence”

Author: Shyouhei U.
Status: Assigned
Priority: Normal
Assignee: Yuki S.
Category:
Target version:

どのような経緯か存じ上げませんが1.9.3以降(trunkも)のpathnameで以下のようなスクリプトが例外になるのはなぜですか?
1.9.2までは意図したとおりに動いていました。

gist.github.com

https://gist.github.com/shyouhei/1330056

bug.rb

# -*- coding: utf-8 -*-
require 'pathname'

s1 = File.dirname(__FILE__)
s2 = File.expand_path('ディレクトリ/ファイル', s1)
s3 = File.dirname(s2)
s4 = File.expand_path(s3)
p1 = Pathname(s2)
p2 = Pathname(s4)
p3 = p2.relative_path_from(p1)

gistfile1.txt

zsh % ruby -v bug.rb
ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]
/lib/ruby/1.9.1/pathname.rb:45:in `=~': invalid byte sequence in UTF-8 (ArgumentError)
        from /lib/ruby/1.9.1/pathname.rb:45:in `chop_basename'
        from /lib/ruby/1.9.1/pathname.rb:101:in `cleanpath_aggressive'
        from /lib/ruby/1.9.1/pathname.rb:89:in `cleanpath'
        from /lib/ruby/1.9.1/pathname.rb:450:in `relative_path_from'
        from bug.rb:10:in `<main>'
zsh: exit 1     ruby -v bug.rb

Shyouhei_U · November 2, 2011, 4:57pm

Issue #5533 has been updated by Kouji T…

おっと、失礼しました。
トラッカーの変更はメールで通知されないのですね。
Redmineのほうはきちんと見ていませんでした。

Backport #5533: Pathname’s raising “invalid sequence”

Author: Shyouhei U.
Status: Assigned
Priority: Normal
Assignee: Yuki S.
Category:
Target version:

どのような経緯か存じ上げませんが1.9.3以降(trunkも)のpathnameで以下のようなスクリプトが例外になるのはなぜですか?
1.9.2までは意図したとおりに動いていました。

gist.github.com

https://gist.github.com/shyouhei/1330056

bug.rb

# -*- coding: utf-8 -*-
require 'pathname'

s1 = File.dirname(__FILE__)
s2 = File.expand_path('ディレクトリ/ファイル', s1)
s3 = File.dirname(s2)
s4 = File.expand_path(s3)
p1 = Pathname(s2)
p2 = Pathname(s4)
p3 = p2.relative_path_from(p1)

gistfile1.txt

zsh % ruby -v bug.rb
ruby 1.9.3p0 (2011-10-30 revision 33569) [x86_64-linux]
/lib/ruby/1.9.1/pathname.rb:45:in `=~': invalid byte sequence in UTF-8 (ArgumentError)
        from /lib/ruby/1.9.1/pathname.rb:45:in `chop_basename'
        from /lib/ruby/1.9.1/pathname.rb:101:in `cleanpath_aggressive'
        from /lib/ruby/1.9.1/pathname.rb:89:in `cleanpath'
        from /lib/ruby/1.9.1/pathname.rb:450:in `relative_path_from'
        from bug.rb:10:in `<main>'
zsh: exit 1     ruby -v bug.rb

ご提示のスクリプトの場合、s4.force_encoding(s4.encoding) などで coderange の再スキャンが走るようにすると回避できます。

Backport93トラッカーにあるというのは、1.9.3へのバックポート対象であるという意味です

おっと、失礼しました。 トラッカーの変更はメールで通知されないのですね。 Redmineのほうはきちんと見ていませんでした。

ご提示のスクリプトの場合、s4.force_encoding(s4.encoding) などで coderange
の再スキャンが走るようにすると回避できます。

おっと、失礼しました。
トラッカーの変更はメールで通知されないのですね。
Redmineのほうはきちんと見ていませんでした。