Das Problem ist wohl, dass der Konstruktor von IO::Socket::INET6 den Socket direkt schon bindet. Danach ist es zu spät die Option zu setzen. Wegen der fehlenden Konstante IPV6_V6ONLY in IO::Socket gab's mal einen Bugreport mit funktionierendem Beispielcode, der Socket, Socket::GetAddrInfo und IO::Socket benutzt.