]> Cypherpunks repositories - gostls13.git/commitdiff
go/types, types2: use exact unification for component types
authorRobert Griesemer <gri@golang.org>
Fri, 26 May 2023 23:27:28 +0000 (16:27 -0700)
committerGopher Robot <gobot@golang.org>
Tue, 30 May 2023 20:19:38 +0000 (20:19 +0000)
This change defines two unification modes used to control unification:

- assign  set when unifying types involved in an assignment
- exact   if set, types unify if they can be made identical

Currently, unification is inexact: when a defined type is compared
against a type literal, the underlying type of the defined type is
considered. When channel types are compared, the channel direction
is ignored. And when defined types are compared where one (or both)
are interfaces, interface unification is used.

By contrast, exact unification requires types to match exactly:
if they can be unified, the types must be identical (with suitable
type arguments).

Exact unification is required when comparing component types.
For instance, when unifying func(x P) with func(x Q), the two
signatures unify only if P is identical to Q per Go's assignment
rules.

Until now we have ignored exact unification and made due with inexact
unification everywhere, even for component types. In some cases this
led to infinite recursions in the unifier, which we guarded against
with a depth limit (and unification failure).

Go's assignmemt rules allow inexact matching at the top-level but
require exact matching for element types.

This change passes 'assign' to the unifier when unifying parameter
against argument types because those follow assignment rules.
When comparing constraints, inexact unification is used as before.

In 'assign' mode, when comparing element types, the unifyier is
called recursively, this time with the 'exact' mode set, causing
element types to be compared exactly. If unification succeeds for
element types, they are identical (with suitable type arguments).

This change fixes #60460. It also fixes a bug in the test for
issue #60377. We also don't need to rely anymore on the recursion
depth limit (a temporary fix) for #59740. Finally, because we use
exact unification when comparing element types which are channels,
errors caused by assignment failures (due to inexact inference which
succeeded when it shouldn't have) now produce the correct inference
error.

Fixes #60460.
For #60377.
For #59740.

Change-Id: Icb6a9b4dbd34294f99328a06d52135cb499cab85
Reviewed-on: https://go-review.googlesource.com/c/go/+/498895
Reviewed-by: Robert Findley <rfindley@google.com>
Auto-Submit: Robert Griesemer <gri@google.com>
Run-TryBot: Robert Griesemer <gri@google.com>
Reviewed-by: Robert Griesemer <gri@google.com>
TryBot-Result: Gopher Robot <gobot@golang.org>

src/cmd/compile/internal/types2/infer.go
src/cmd/compile/internal/types2/unify.go
src/go/types/infer.go
src/go/types/unify.go
src/internal/types/testdata/examples/functions.go
src/internal/types/testdata/fixedbugs/issue60377.go
src/internal/types/testdata/fixedbugs/issue60460.go [new file with mode: 0644]

index efa5727681374da90621d343aa1abd8d6e2194a1..c323344ca7138f8903c2ca6b4e55e7a6e8789dab 100644 (file)
@@ -155,7 +155,7 @@ func (check *Checker) infer(pos syntax.Pos, tparams []*TypeParam, targs []Type,
                        // Function parameters are always typed. Arguments may be untyped.
                        // Collect the indices of untyped arguments and handle them later.
                        if isTyped(arg.typ) {
-                               if !u.unify(par.typ, arg.typ, 0) {
+                               if !u.unify(par.typ, arg.typ, assign) {
                                        errorf("type", par.typ, arg.typ, arg)
                                        return nil
                                }
@@ -340,7 +340,7 @@ func (check *Checker) infer(pos syntax.Pos, tparams []*TypeParam, targs []Type,
                        arg := args[i]
                        typ := Default(arg.typ)
                        assert(isTyped(typ))
-                       if !u.unify(tpar, typ, 0) {
+                       if !u.unify(tpar, typ, assign) {
                                errorf("default type", tpar, typ, arg)
                                return nil
                        }
index 1d2b9d14b9dc486f825faf97e179fb4ec7eb91aa..3f54a2c2f2267f4bb723bdeae8d6e11fa9e1c748 100644 (file)
@@ -47,7 +47,7 @@ const (
        // Whether to panic when unificationDepthLimit is reached.
        // If disabled, a recursion depth overflow results in a (quiet)
        // unification failure.
-       panicAtUnificationDepthLimit = false // go.dev/issue/59740
+       panicAtUnificationDepthLimit = true
 
        // If enableCoreTypeUnification is set, unification will consider
        // the core types, if any, of non-local (unbound) type parameters.
@@ -109,8 +109,24 @@ func newUnifier(tparams []*TypeParam, targs []Type) *unifier {
 // unifyMode controls the behavior of the unifier.
 type unifyMode uint
 
+const (
+       // If assign is set, we are unifying types involved in an assignment:
+       // they may match inexactly at the top, but element types must match
+       // exactly.
+       assign unifyMode = 1 << iota
+
+       // If exact is set, types unify if they are identical (or can be
+       // made identical with suitable arguments for type parameters).
+       // Otherwise, a named type and a type literal unify if their
+       // underlying types unify, channel directions are ignored, and
+       // if there is an interface, the other type must implement the
+       // interface.
+       exact
+)
+
 // unify attempts to unify x and y and reports whether it succeeded.
 // As a side-effect, types may be inferred for type parameters.
+// The mode parameter controls how types are compared.
 func (u *unifier) unify(x, y Type, mode unifyMode) bool {
        return u.nify(x, y, mode, nil)
 }
@@ -284,11 +300,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        }
 
        // Unification will fail if we match a defined type against a type literal.
-       // Per the (spec) assignment rules, assignments of values to variables with
+       // If we are matching types in an assignment, at the top-level, types with
        // the same type structure are permitted as long as at least one of them
        // is not a defined type. To accommodate for that possibility, we continue
        // unification with the underlying type of a defined type if the other type
-       // is a type literal.
+       // is a type literal. This is controlled by the exact unification mode.
        // We also continue if the other type is a basic type because basic types
        // are valid underlying types and may appear as core types of type constraints.
        // If we exclude them, inferred defined types for type parameters may not
@@ -300,7 +316,7 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        // we will fail at function instantiation or argument assignment time.
        //
        // If we have at least one defined type, there is one in y.
-       if ny, _ := y.(*Named); ny != nil && isTypeLit(x) && !(enableInterfaceInference && IsInterface(x)) {
+       if ny, _ := y.(*Named); mode&exact == 0 && ny != nil && isTypeLit(x) && !(enableInterfaceInference && IsInterface(x)) {
                if traceInference {
                        u.tracef("%s ≡ under %s", x, ny)
                }
@@ -365,7 +381,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        }
 
        // Type elements (array, slice, etc. elements) use emode for unification.
+       // Element types must match exactly if the types are used in an assignment.
        emode := mode
+       if mode&assign != 0 {
+               emode |= exact
+       }
 
        // If EnableInterfaceInference is set and both types are interfaces, one
        // interface must have a subset of the methods of the other and corresponding
@@ -613,9 +633,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
                }
 
        case *Chan:
-               // Two channel types unify if their value types unify.
+               // Two channel types unify if their value types unify
+               // and if they have the same direction.
+               // The channel direction is ignored for inexact unification.
                if y, ok := y.(*Chan); ok {
-                       return u.nify(x.elem, y.elem, emode, p)
+                       return (mode&exact == 0 || x.dir == y.dir) && u.nify(x.elem, y.elem, emode, p)
                }
 
        case *Named:
@@ -625,7 +647,7 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
                // If one or both named types are interfaces, the types unify if the
                // respective methods unify (per the rules for interface unification).
                if y, ok := y.(*Named); ok {
-                       if enableInterfaceInference {
+                       if enableInterfaceInference && mode&exact == 0 {
                                xi, _ := x.under().(*Interface)
                                yi, _ := y.under().(*Interface)
                                // If one or both of x and y are interfaces, use interface unification.
index 7032aee7a3cbb4018c43a5b2c65c87c1c6629742..015edb5fbec6329d161226eaba8c654bec0f0d95 100644 (file)
@@ -157,7 +157,7 @@ func (check *Checker) infer(posn positioner, tparams []*TypeParam, targs []Type,
                        // Function parameters are always typed. Arguments may be untyped.
                        // Collect the indices of untyped arguments and handle them later.
                        if isTyped(arg.typ) {
-                               if !u.unify(par.typ, arg.typ, 0) {
+                               if !u.unify(par.typ, arg.typ, assign) {
                                        errorf("type", par.typ, arg.typ, arg)
                                        return nil
                                }
@@ -342,7 +342,7 @@ func (check *Checker) infer(posn positioner, tparams []*TypeParam, targs []Type,
                        arg := args[i]
                        typ := Default(arg.typ)
                        assert(isTyped(typ))
-                       if !u.unify(tpar, typ, 0) {
+                       if !u.unify(tpar, typ, assign) {
                                errorf("default type", tpar, typ, arg)
                                return nil
                        }
index 1e9efeee82b7b74bceb2f1f102ba8f9980e7cef7..217356f13ebe6f2daa24a928f5447b085daa51ef 100644 (file)
@@ -49,7 +49,7 @@ const (
        // Whether to panic when unificationDepthLimit is reached.
        // If disabled, a recursion depth overflow results in a (quiet)
        // unification failure.
-       panicAtUnificationDepthLimit = false // go.dev/issue/59740
+       panicAtUnificationDepthLimit = true
 
        // If enableCoreTypeUnification is set, unification will consider
        // the core types, if any, of non-local (unbound) type parameters.
@@ -111,8 +111,24 @@ func newUnifier(tparams []*TypeParam, targs []Type) *unifier {
 // unifyMode controls the behavior of the unifier.
 type unifyMode uint
 
+const (
+       // If assign is set, we are unifying types involved in an assignment:
+       // they may match inexactly at the top, but element types must match
+       // exactly.
+       assign unifyMode = 1 << iota
+
+       // If exact is set, types unify if they are identical (or can be
+       // made identical with suitable arguments for type parameters).
+       // Otherwise, a named type and a type literal unify if their
+       // underlying types unify, channel directions are ignored, and
+       // if there is an interface, the other type must implement the
+       // interface.
+       exact
+)
+
 // unify attempts to unify x and y and reports whether it succeeded.
 // As a side-effect, types may be inferred for type parameters.
+// The mode parameter controls how types are compared.
 func (u *unifier) unify(x, y Type, mode unifyMode) bool {
        return u.nify(x, y, mode, nil)
 }
@@ -286,11 +302,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        }
 
        // Unification will fail if we match a defined type against a type literal.
-       // Per the (spec) assignment rules, assignments of values to variables with
+       // If we are matching types in an assignment, at the top-level, types with
        // the same type structure are permitted as long as at least one of them
        // is not a defined type. To accommodate for that possibility, we continue
        // unification with the underlying type of a defined type if the other type
-       // is a type literal.
+       // is a type literal. This is controlled by the exact unification mode.
        // We also continue if the other type is a basic type because basic types
        // are valid underlying types and may appear as core types of type constraints.
        // If we exclude them, inferred defined types for type parameters may not
@@ -302,7 +318,7 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        // we will fail at function instantiation or argument assignment time.
        //
        // If we have at least one defined type, there is one in y.
-       if ny, _ := y.(*Named); ny != nil && isTypeLit(x) && !(enableInterfaceInference && IsInterface(x)) {
+       if ny, _ := y.(*Named); mode&exact == 0 && ny != nil && isTypeLit(x) && !(enableInterfaceInference && IsInterface(x)) {
                if traceInference {
                        u.tracef("%s ≡ under %s", x, ny)
                }
@@ -367,7 +383,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
        }
 
        // Type elements (array, slice, etc. elements) use emode for unification.
+       // Element types must match exactly if the types are used in an assignment.
        emode := mode
+       if mode&assign != 0 {
+               emode |= exact
+       }
 
        // If EnableInterfaceInference is set and both types are interfaces, one
        // interface must have a subset of the methods of the other and corresponding
@@ -615,9 +635,11 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
                }
 
        case *Chan:
-               // Two channel types unify if their value types unify.
+               // Two channel types unify if their value types unify
+               // and if they have the same direction.
+               // The channel direction is ignored for inexact unification.
                if y, ok := y.(*Chan); ok {
-                       return u.nify(x.elem, y.elem, emode, p)
+                       return (mode&exact == 0 || x.dir == y.dir) && u.nify(x.elem, y.elem, emode, p)
                }
 
        case *Named:
@@ -627,7 +649,7 @@ func (u *unifier) nify(x, y Type, mode unifyMode, p *ifacePair) (result bool) {
                // If one or both named types are interfaces, the types unify if the
                // respective methods unify (per the rules for interface unification).
                if y, ok := y.(*Named); ok {
-                       if enableInterfaceInference {
+                       if enableInterfaceInference && mode&exact == 0 {
                                xi, _ := x.under().(*Interface)
                                yi, _ := y.under().(*Interface)
                                // If one or both of x and y are interfaces, use interface unification.
index c9917ee998fa4b5fdfa253641e99255c73ed3fdd..fdc67e7162af555a82c218360b142d434191b3f5 100644 (file)
@@ -150,15 +150,15 @@ func _() {
        var send func(chan<- int)
 
        ffboth(both)
-       ffboth(recv /* ERROR "cannot use" */ )
-       ffboth(send /* ERROR "cannot use" */ )
+       ffboth(recv /* ERROR "does not match" */ )
+       ffboth(send /* ERROR "does not match" */ )
 
-       ffrecv(both /* ERROR "cannot use" */ )
+       ffrecv(both /* ERROR "does not match" */ )
        ffrecv(recv)
-       ffrecv(send /* ERROR "cannot use" */ )
+       ffrecv(send /* ERROR "does not match" */ )
 
-       ffsend(both /* ERROR "cannot use" */ )
-       ffsend(recv /* ERROR "cannot use" */ )
+       ffsend(both /* ERROR "does not match" */ )
+       ffsend(recv /* ERROR "does not match" */ )
        ffsend(send)
 }
 
index be37c516d32d4d763a1d7072250f8b0632e3c79a..b754f89df7321c8c6329c3a6e7d3d99dcc9ec0f8 100644 (file)
@@ -61,20 +61,14 @@ func _() {
 }
 
 // This is similar to the first example but here T1 is a component
-// of a func type. In this case we should be able to infer a type
-// argument for P because component types must be identical even
-// in the case of interfaces.
-// This is a short-coming of type inference at the moment, but it
-// is better to not be able to infer a type here (we can always
-// supply one), than to infer the wrong type in other cases (see
-// below). Finally, if we decide to accept go.dev/issues/8082,
-// the behavior here is correct.
+// of a func type. In this case types must match exactly: P must
+// match int.
 
 func g5[P any](func(T1[P])) {}
 
 func _() {
        var f func(T1[int])
-       g5 /* ERROR "cannot infer P" */ (f)
+       g5(f)
        g5[int](f)
        g5[string](f /* ERROR "cannot use f (variable of type func(T1[int])) as func(T1[string]) value in argument to g5[string]" */)
 }
diff --git a/src/internal/types/testdata/fixedbugs/issue60460.go b/src/internal/types/testdata/fixedbugs/issue60460.go
new file mode 100644 (file)
index 0000000..a9cb3d9
--- /dev/null
@@ -0,0 +1,88 @@
+// Copyright 2023 The Go Authors. All rights reserved.
+// Use of this source code is governed by a BSD-style
+// license that can be found in the LICENSE file.
+
+package p
+
+// Simplified (representative) test case.
+
+func _() {
+       f(R1{})
+}
+
+func f[T any](R[T]) {}
+
+type R[T any] interface {
+       m(R[T])
+}
+
+type R1 struct{}
+
+func (R1) m(R[int]) {}
+
+// Test case from issue.
+
+func _() {
+       r := newTestRules()
+       NewSet(r)
+       r2 := newTestRules2()
+       NewSet(r2)
+}
+
+type Set[T any] struct {
+       rules Rules[T]
+}
+
+func NewSet[T any](rules Rules[T]) Set[T] {
+       return Set[T]{
+               rules: rules,
+       }
+}
+
+func (s Set[T]) Copy() Set[T] {
+       return NewSet(s.rules)
+}
+
+type Rules[T any] interface {
+       Hash(T) int
+       Equivalent(T, T) bool
+       SameRules(Rules[T]) bool
+}
+
+type testRules struct{}
+
+func newTestRules() Rules[int] {
+       return testRules{}
+}
+
+func (r testRules) Hash(val int) int {
+       return val % 16
+}
+
+func (r testRules) Equivalent(val1 int, val2 int) bool {
+       return val1 == val2
+}
+
+func (r testRules) SameRules(other Rules[int]) bool {
+       _, ok := other.(testRules)
+       return ok
+}
+
+type testRules2 struct{}
+
+func newTestRules2() Rules[string] {
+       return testRules2{}
+}
+
+func (r testRules2) Hash(val string) int {
+       return 16
+}
+
+func (r testRules2) Equivalent(val1 string, val2 string) bool {
+       return val1 == val2
+}
+
+func (r testRules2) SameRules(other Rules[string]) bool {
+       _, ok := other.(testRules2)
+       return ok
+}