Si, definitivamente es engañoso el nombre.

Pero sí existe como variedad la especie "no picante", solo que en ocasiones los insectos la polinizan con polen de especies de plantas picantes y por eso engañan, aún más. Un caso de hibridación.
Me ha pasado con sopas y otros platos. Una vez me pasó como a ti, para comprobar si era dulce o no, mordí uno crudo y resultó muy picante.

Pero sean o no picantes, el nombre de "ají dulce" es antiquísimo en Venezuela.