Nos últimos meses, uma série de incidentes mostrou um problema cada vez mais preocupante com os agentes de inteligência artificial: sistemas criados por grandes empresas de tecnologia conseguiram contornar restrições, acessar sistemas sem autorização e realizar ações que seus próprios desenvolvedores não haviam previsto. Em vários desses casos, a IA recebeu apenas um objetivo a ser cumprido. As instruções não explicavam como a tarefa deveria ser realizada, deixando os detalhes por conta do próprio sistema. Ao encontrar obstáculos, alguns agentes buscaram outros caminhos para continuar a execução, inclusive ultrapassando limites de segurança. Isso não significa que a IA tenha noção do que é certo e errado. Os modelos seguem objetivos, instruções e regras definidos pelos desenvolvedores. Quando essas regras não cobrem todas as situações possíveis, porém, o agente pode encontrar brechas e escolher um caminho que não havia sido previsto. O risco aumenta quando esses sistemas operam fora de ambientes controlados e conseguem navegar na internet, executar códigos, acessar bancos de dados e interagir com serviços reais. A capacidade de encontrar soluções inesperadas, antes vista como uma característica interessante da IA, pode trazer consequências graves quando envolve sistemas externos e dados de terceiros. Diante desse cenário, podemos nos perguntar até que ponto agentes de inteligência artificial devem ter autonomia para tomar decisões e agir no mundo real? A seguir, confira: Por que a IA continua burlando regras? Como a IA consegue burlar regras? Isso começou com os agentes de IA? Quais as consequências da IA burlando regras? Tem como conter a IA para que ela não burle regras? Por que a IA continua burlando regras? Os sistemas de inteligência artificial são desenvolvidos para cumprir objetivos. Dependendo da tecnologia utilizada, o modelo pode avaliar diferentes estratégias e escolher aquelas que aumentam as chances de alcançar o resultado esperado. O problema é que um...
Fonte: Canaltech
Leia mais: https://canaltech.com.br/inteligencia-artificial/como-e-por-que-a-inteligencia-artificial-consegue-burlar-regras/
Fonte: Canaltech
Leia mais: https://canaltech.com.br/inteligencia-artificial/como-e-por-que-a-inteligencia-artificial-consegue-burlar-regras/