Em 2020, a Sony AI decidiu enfrentar algo bastante audacioso: construir uma IA que pudesse realmente vencer os melhores pilotos de Gran Turismo do mundo. Não apenas competir com eles, vencê-los. Em 2021, eles conseguiram. Mas esse avanço foi realmente apenas o movimento de abertura na visão muito maior da Sony para a IA nos jogos.
A Sony se posicionou na vanguarda da revolução da IA nos jogos. Sua abordagem é interessante porque não se trata de substituir a criatividade humana—eles são bastante insistentes nesse ponto. Em vez disso, estão aproveitando o aprendizado de máquina em várias áreas: agentes de corrida que aprendem como os humanos, tecnologia de upscaling alimentada por IA, arquitetura de console de próxima geração e ferramentas inteligentes de desenvolvimento de jogos. Vamos explorar o que é realmente a Sony Gaming AI, como a tecnologia funciona e o que pode significar para desenvolvedores e jogadores.
What is Sony Gaming AI?
Sony Gaming AI is a comprehensive ecosystem of AI technologies meant to enhance every aspect of interactive entertainment. Unlike traditional rule-based game AI that follows predetermined scripts, Sony’s approach uses something called deep reinforcement learning to create adaptive AI agents that actually learn through experience, much like humans do.
At its core, Sony’s AI philosophy is straightforward: AI should augment creativity, not replace it. That principle guides everything from how their 50,000+ employees across 210 teams use the company’s Enterprise LLM platform to how AI gets integrated into PlayStation consoles and games.
A empresa trabalha com equipes focadas em questões legais, de privacidade e ética para estabelecer diretrizes claras para o uso de IA. Eles estão particularmente preocupados em prevenir a reprodução não autorizada de conteúdo. A Sony também usa IA para proteger o trabalho dos criadores, construindo sistemas que podem detectar conteúdo roubado ou usado de forma inadequada.
Abordagem de IA da Sony: Além dos Sistemas Baseados em Regras
Traditional game AI operates on rigid rules: “If player does X, then NPC does Y.” It’s predictable. Sony’s transforming Game-AI by using deep reinforcement learning to train AI agents in gaming ecosystems. This technology enables developers to design and deliver richer experiences that can adapt, learn, and evolve.
How reinforcement learning works in games
Agentes de aprendizado por reforço (RL) aprendem tarefas através de prática repetida em um ambiente. Pense nisso como ensinar alguém a dirigir: eles praticam repetidamente, recebem feedback sobre suas ações e gradualmente melhoram através de tentativa e erro.
A abordagem da Sony AI recompensa comportamentos positivos e pune ações indesejadas, o que permite que a IA melhore continuamente através de treinamento iterativo. Os videogames modernos, com sua necessidade de controle preciso e soluções criativas, fornecem terrenos de treinamento ideais para esses agentes. As inovações desenvolvidas para jogos também podem ser aplicadas a outros domínios do mundo real.
Gran Turismo Sophy: The Breakthrough AI Racing Agent
Racing AI explained
Gran Turismo Sophy (GT Sophy) represents Sony’s most celebrated AI achievement. An autonomous racing agent that doesn’t just compete with the world’s best Gran Turismo drivers but actually beats them while demonstrating remarkably human-like racecraft.
It came out of a unique collaboration between Sony AI, Polyphony Digital, and Sony Interactive Entertainment. GT Sophy achieved what many thought was impossible: superhuman racing performance combined with genuine sportsmanship.
The achievement earned recognition as a cover article in Nature in February 2022. It also won Sony AI the 2022 ACM SIGAI Industry Award for Excellence in Artificial Intelligence.
How GT Sophy learns to race
GT Sophy learns racing the same way professional drivers do: through extensive practice. The AI drives cars thousands of times on each track, racing against other vehicles to master proper on-track behavior and racecraft.
Em vez de seguir linhas de corrida pré-programadas, o GT Sophy usa aprendizado por reforço para desenvolver uma compreensão intuitiva:
- Contemplates overtaking opportunities rather than just executing scripted maneuvers
- Exhibits restraint when aggressive moves might cause accidents
- Adapts racing lines based on opponent positioning and race conditions
- Balances competitive drive with clean racing practices learned through reinforcement
This adaptive strategy produces racing behavior that feels genuinely human rather than mechanical. GT Sophy doesn’t just follow the optimal path—it makes real-time strategic decisions based on how the race is evolving.
Emotional intelligence on the track
Perhaps GT Sophy’s most remarkable feature is its emotional dimension. The AI uses visual “emojis” displayed above its car to communicate emotional state during races:
- Mostra "tristeza" quando colidido ou ultrapassado
- Exibe "felicidade" ao executar ultrapassagens bem-sucedidas
- Audible chimes signal emotion changes
Isso reflete a compreensão sofisticada do GT Sophy sobre a psicologia das corridas e as dinâmicas competitivas. Ajuda os jogadores a se conectarem com a IA como um oponente de corrida, em vez de apenas um algoritmo.
Benefits of GT Sophy for players
Flexible training partner
The March 2025 release of GT Sophy 2.1 transformed the AI from a superhuman opponent into customizable training partner. Players now have unprecedented control over their racing experience:
- Choose from 19 car models and tracks
- Select number of laps and racing conditions
- Personalize os veículos do GT Sophy com atualizações e especificações de ajuste
- Set tire and fuel consumption rates
- Adjust difficulty to match personal skill level
Enhanced racing skills
GT Sophy helps players advance their racing abilities by:
- Fornecendo competição consistente e adaptativa em qualquer nível de habilidade
- Demonstrating proper racing etiquette and sportsmanship
- Creating opportunities to experiment with new strategies
- Offering challenging opponents that respond realistically to player tactics
Richer gaming experiences
GT Sophy demonstra que a IA pode criar uma jogabilidade mais envolvente e dinâmica. Em vez de oponentes previsíveis que os jogadores rapidamente aprendem a explorar, o GT Sophy se adapta continuamente, fazendo com que cada corrida pareça nova e competitiva.
The Technology Behind GT Sophy
Aprendizado multiagente
Almost all video games involve dealing with other agents or humans, and the rules of engagement often aren’t formalized. Without well-specified cost functions or access to all possible behaviors, AI agents in games need to be more robust and tunable than in traditional AI domains.
GT Sophy interage simultaneamente com múltiplos agentes e jogadores humanos, aprendendo a navegar em dinâmicas sociais complexas na pista. Como quase todos os domínios do mundo real envolvem múltiplos agentes—como veículos autônomos e robótica—, as técnicas de aprendizado multiagente desenvolvidas pela Sony para o GT Sophy podem ser amplamente aplicadas além dos jogos.
Scalable training infrastructure
Modern reinforcement learning and AI algorithms require massive compute and data resources. Sony AI developed a sophisticated engineering ecosystem that enables:
- Recursos de computação em larga escala para algoritmos modernos de RL
- Rapid deployment of learning algorithms trained on video games at scale
- Trustworthy and repeatable RL processes for production environments
- Efficient training of AI agents across diverse gaming scenarios
Esta plataforma representa anos de pesquisa na construção de ecossistemas de engenharia especificamente projetados para o treinamento de IA em jogos e continua a evoluir para suportar aplicações de IA cada vez mais sofisticadas.
PlayStation Spectral Super Resolution (PSSR): Upscaling Movido por IA
What is PSSR?
PlayStation Spectral Super Resolution (PSSR) is Sony’s AI rendering technology powered by dedicated machine learning processors on the PS5 Pro. Debuting in November 2024, PSSR represents the first machine learning upscaler implemented on home consoles, bringing technology that was previously exclusive to high-end PC gaming to mainstream audiences.
Similar to NVIDIA’s DLSS (deep learning super sampling) technology, PSSR taps into neural networks trained with high-resolution images. Machine learning teaches the network how to add in and infer details about images, creating sharp visuals from lower-resolution renders.
PSSR explained
O PSSR permite que os jogos sejam renderizados em resoluções mais baixas, como 1080p Full HD ou 1440p Quad HD, e depois usa algoritmos de IA para determinar como essas imagens pareceriam se fossem realmente renderizadas em resoluções mais altas, como 2160p ou 4K.
As imagens são renderizadas em resoluções mais baixas, mas dão a impressão de estarem rodando em resoluções muito mais altas. Isso reduz drasticamente o trabalho que as unidades de processamento gráfico (GPUs) precisam fazer, resultando em um aumento no desempenho gráfico e nas taxas de quadros, enquanto produz imagens nítidas que vão além das capacidades de renderização nativa.
Mike Fitzgerald from Insomniac Games explains: “We can render at a lower resolution, bring it up to a full 4K, and get tons of extra detail out of the picture.”
How PSSR learns and improves
What distinguishes PSSR from traditional upscaling is its learning capability. Travis McIntosh from Naughty Dog highlights this: “[PSSR] produces just a way better result than previous upscalers because it can be trained not only on our game but on plenty of other games, and it learns and it improves at each iteration.”
A rede neural por trás do PSSR treina em vários jogos em vez de ser otimizada para títulos únicos. Esse aprendizado entre jogos permite que o PSSR:
- Fix graphical errors and artifacting automatically
- Improve challenging elements like foliage rendering through specialized training
- Deliver better results over time as more developers implement the technology
- Adapt to various art styles and visual approaches
À medida que a rede neural continua aprendendo, o algoritmo que alimenta a tecnologia melhora, beneficiando tanto os desenvolvedores que integram o PSSR quanto os jogadores que experimentam imagens aprimoradas.
Benefits of PSSR for Gamers and developers
Faster frame rates
Jogos que rodam a taxas de quadros por segundo (fps) mais altas geralmente têm melhor desempenho e são mais rápidos, embora o FPS desejado varie dependendo dos requisitos de jogo. A maioria dos jogos funciona idealmente com pelo menos 30 fps, enquanto títulos cheios de ação geralmente visam 60 fps ou mais.
O PSSR pode acelerar substancialmente as taxas de quadros, permitindo qualidade visual 4K enquanto renderiza em resoluções menos exigentes, liberando recursos da GPU para maior desempenho.
Enhanced images
Rodar jogos em fps mais altos pode afetar os visuais, causando gagueira ou atraso. O PSSR ajuda a combater isso, entregando qualidade de imagem aprimorada e mais nítida comparável ao que você esperaria em resoluções nativas mais altas.
Por exemplo, o PSSR oferece os pixels extras e a saída visual de imagens 2160p (4K) enquanto realmente renderiza quadros em resolução 1080p de menor potência, mantendo a fidelidade visual sem o custo de desempenho.
Improved performance
Jogos rodando em configurações mais altas podem sobrecarregar significativamente as placas gráficas e prejudicar o desempenho. O desempenho varia dependendo se as GPUs estão executando rastreamento de raios, o jogo específico sendo jogado e as configurações de hardware.
PSSR helps improve system performance even when running at higher settings by efficiently using machine learning processors to deliver dramatically better results than previous console upscaling methods.
PSSR vs. competing technologies
Digital Foundry conducted extensive testing comparing PSSR against competing upscaling technologies using Ratchet & Clank: Rift Apart, matching resolutions precisely to ensure accurate comparison between PSSR, AMD FSR 3.1, and NVIDIA DLSS 3.7.
Results:
- PSSR significantly outperforms traditional console upscaling
- Approaches DLSS quality in many scenarios
- Particularly strong with complex visual elements and edge detail
Para os jogadores de console, o PSSR representa um salto geracional na qualidade visual sem exigir aumentos proporcionais no poder da GPU, democratizando a tecnologia que antes estava disponível apenas para jogadores de PC com placas gráficas caras.
Project Amethyst: The Future of PlayStation Gaming
Colaboração de próxima geração entre Sony e AMD
Project Amethyst represents a significant gaming technology partnership between Sony and AMD aimed at defining graphics architecture for PlayStation 6 and beyond. Development began in 2023 when PS5 Pro was largely complete, with the explicit goal of using AI and machine learning to improve game visuals and performance.
The codename Amethyst combines PlayStation blue with AMD red, creating purple—a symbol of their unified vision for gaming’s future.
A visão de Mark Cerny para jogos com aprendizado de máquina
Mark Cerny, lead architect for PS5 and PS5 Pro, states: “Machine learning-based processing is the future.” The goal is “fewer pixels, prettier pixels coupled with machine learning libraries to increase resolution or add frames or assist in various ways with ray tracing.”
Isso representa uma mudança fundamental na filosofia de hardware de jogos, priorizando o processamento inteligente sobre a força computacional bruta.
Three Pillars of Project Amethyst
1. Neural Arrays (Performance)
Neural Arrays represent a collection of compute units connected to function as a single, focused AI engine. They’re designed to be more efficient for large machine learning workloads than traditional GPU designs, enabling next-generation neural rendering with dedicated hardware for AI upscaling, frame generation, and ray tracing enhancement that reduces computational burden on standard GPU cores.
2. Radiance Cores (Immersion)
Dedicated ray traversal hardware designed for high-performance real-time ray tracing and path tracing. Radiance Cores offload intensive ray tracing tasks from shader cores, freeing them to work on other scene elements while delivering higher fps with immersive visuals. This makes photorealistic lighting and reflections computationally feasible for consoles, bringing visual quality previously limited to expensive PC setups to mainstream gaming.
3. Universal Compression (Efficiency)
A compression system that evaluates and compresses all available data within the GPU, not just textures. This dramatically reduces memory bandwidth usage, enabling new performance levels with greater efficiency. It addresses a critical bottleneck in modern GPU design.
Timeline and availability
AMD’s Jack Huynh revealed that the machine learning acceleration hardware they’re co-engineering on RDNA 5 directly results from the Sony collaboration. This technology will appear in:
- Placas gráficas RDNA 5: Primeira confirmação pública da próxima geração de GPUs da AMD
- Janela de lançamento 2026-2027: Prazo esperado para os consoles de próxima geração
- Benefício multiplataforma: Tecnologias presentes tanto no PlayStation 6 quanto nas placas gráficas AMD Radeon
FSR Redstone: Shared AI upscaling innovation
Sony and AMD co-developed a new AI upscaling algorithm that serves as the foundation for AMD’s FSR Redstone, announced at Computex 2025. The algorithm shifts from Convolutional Neural Networks (CNN) to Transformer Model architecture, designed to create sharper upscaled images than current generation technology.
Mark Cerny emphasizes interoperability: “There will be implementations of the algorithm as FSR and implementations of the algorithm as Spectral… But the fact is they will be extraordinarily close because we want the game developers to have interoperability.”
Essa abordagem beneficia desenvolvedores que podem implementar uma escalonamento de IA semelhante em plataformas de PC e console sem trabalho adicional significativo, enquanto os jogadores desfrutam de qualidade consistente, independentemente do hardware.
Frame generation coming to consoles
Project Amethyst’s next phase includes machine learning-based virtual frame generation—technology currently available on PC coming to PS5 Pro and future consoles. AI creates entirely new frames that get inserted between rendered frames, dramatically increasing frame rates without proportional GPU load.
Cerny enfatiza a escolha do jogador nesta implementação: "Podemos suportar uma alta taxa de quadros tendo uma renderização de resolução mais baixa e uma super resolução mais agressiva. Também podemos suportar uma alta taxa de quadros usando geração de quadros. E uma vez que essa escolha está disponível, a Sony pode aprender mais sobre o que os jogadores querem."
IA no Desenvolvimento de Jogos: Ferramentas Internas da Sony
Garantia de qualidade movida por IA
Sony has pioneered machine learning-based game testing that dramatically improves QA efficiency and accuracy, addressing growing concerns about testing costs as games become larger and more complex.
Dual agent QA system
Sony developed two complementary AI agents for automated testing:
Replay Agent excels at replicating exact button combinations. It can navigate in-game UI and PS5 hardware menus, move characters from spawn points to level transitions, and test scenarios requiring perfect consistency.
Imitation Agent introduces variability reflecting real-world gameplay. It reproduces human-like play patterns with natural variance, uses machine learning models trained on human gameplay data, and adapts to dynamic game elements like enemy AI and camera control.
Estudo de caso: Astro’s Playroom
Sony showcased their AI QA system through Astro’s Playroom development. Human testers played each section 10-20 times to create representative samples. Machine learning models learned from this gameplay data, after which AI agents autonomously tested game sections.
Benefits achieved:
- Significantly reduced testing time in many scenarios
- Earlier bug detection throughout the development cycle
- Improved overall game quality at release
Limitations:
- Some games require extensive training data for effective testing
- Changes in game parameters necessitate new ML models
- System still requires human oversight
Automação de jogabilidade equivalente à humana
At CEDEC 2024, Sony presented AI technology enabling autonomous gameplay on PS5 that replicates human-player conditions. The system uses only on-screen information, combining imitation learning, controller operation recording/replay, and image recognition with model switching based on visual cues.
Isso automatiza testes de funções do software do sistema PS5 sob condições de usuário final, reduzindo custos de QA e identificando defeitos mais cedo no desenvolvimento—crítico à medida que as demandas de teste crescem junto com a complexidade dos jogos.
Additional AI Innovations
Predictive AI: Anticipating player actions
Sony filed a patent revealing AI capable of predicting players’ next button press before it happens. The technology uses cameras to monitor player movements during gameplay, with AI learning to recognize patterns and predict upcoming inputs based on physical movements.
Potential benefits:
- Eliminates input lag by anticipating actions before execution
- Oferece vantagens competitivas através de melhorias de tempo em frações de segundo
- Seamlessly handles internet disruptions by automatically completing interrupted commands
The predictive assistance system suggests dedicated AI processors (Neural Processing Units) in future PlayStation consoles, potentially enabling accelerated ray tracing, improved performance modes, and real-time strategic tips offered adaptively during gameplay.
NPCs movidos por IA: Protótipo interativo de Aloy
Sony’s Advanced Technology Group created an AI-powered version of Aloy from Horizon Forbidden West that demonstrates conversational AI in gaming. The prototype combines OpenAI Whisper (speech-to-text), GPT-4 and Llama 3 (dialogue and decisions), Sony’s Voice Synthesis system, and Sony’s Mockingbird technology (audio-to-facial animation).
The demonstration showcased Aloy responding to player voice prompts with AI-generated voice and realistic facial expressions, all tested on PS5 consoles with minimal performance impact. While it remains an internal prototype not confirmed for public release, it demonstrates possibilities for NPCs engaging in natural language conversations, characters adapting dialogue based on player history, and voice interactions replacing traditional dialogue trees.
Content protection and enhancement
A Sony usa IA para proteger a propriedade intelectual através de sistemas que detectam se o conteúdo foi roubado ou usado indevidamente e monitoram a reprodução não autorizada. As aplicações de IA também se estendem ao aprimoramento de mídia, incluindo restauração de conteúdo legado e melhorias na qualidade de imagem do PS5.
Supported Hardware and Future Integration
Consoles compatíveis com PSSR
O PSSR está disponível no PlayStation 5 Pro, lançado em novembro de 2024. A tecnologia aproveita processadores de aprendizado de máquina dedicados integrados à arquitetura personalizada da GPU do console, permitindo upscaling de IA em todos os jogos que implementam o recurso.
Expected features in PlayStation 6
Mark Cerny’s statement that “machine learning-based processing is the future” indicates AI will play a major role in next-generation consoles:
AI-native architecture: RDNA 5 GPU with dedicated neural processing units, Project Amethyst technologies (Neural Arrays, Radiance Cores, Universal Compression), and hardware designed for AI workloads from the ground up.
Upscaling avançado e geração de quadros: Evolução do PSSR com algoritmos aprimorados, quadros gerados por IA aumentando o desempenho e aprimoramento de ray tracing em tempo real através de aprendizado de máquina.
Flexibilidade do desenvolvedor: Suporte para vários modelos de IA, incluindo ChatGPT (se os desenvolvedores escolherem), interoperabilidade entre AMD FSR e upscaling Spectral do PlayStation, e bibliotecas focadas em maximizar as capacidades de hardware.
Escolha do jogador: Opções entre upscaling agressivo ou geração de quadros para altas taxas de quadros, recursos personalizáveis de assistente de IA e dificuldade adaptativa através da análise de IA.
Games and Engines Supporting Sony AI Technologies
GT Sophy availability
Gran Turismo Sophy 2.1 is available in Gran Turismo 7’s Custom Race mode, offering players unprecedented customization and control over their AI racing experiences.
Jogos habilitados para PSSR
Uma biblioteca em expansão de jogos suporta o PSSR no PS5 Pro. Títulos importantes dos estúdios de primeira linha da Sony e desenvolvedores de terceiros estão implementando a tecnologia. À medida que mais desenvolvedores adotam o PSSR, a rede neural continua aprendendo e melhorando, beneficiando todos os jogos que usam o sistema de upscaling.
Sony AI: Mission and Responsible AI Principles
Organizational mission
Sony AI was established in April 2020 to pursue research in AI and robotics within entertainment. Their mission statement captures the philosophy: “Unleash Human Imagination and Creativity with AI.”
Trabalhando com artistas, criadores e desenvolvedores em todo o mundo, a Sony AI foca em seis desafios estratégicos, incluindo o desenvolvimento de plataformas de detecção confiáveis, a transformação das interações em ambientes digitais, a liderança com IA ética e a descoberta de onde a IA inspira criatividade sem precedentes.
Core values
Sony has articulated clear principles governing AI development:
- A IA deve aumentar a criatividade humana, não substituí-la
- Ethical considerations must guide AI implementation
- Privacy and legal compliance are essential
- A propriedade intelectual dos criadores deve ser protegida
- Transparency about AI benefits and limitations is necessary
O Futuro da Visão de Jogos Movidos por IA da Sony
Quando as tecnologias de IA para jogos da Sony foram desenvolvidas pela primeira vez, cada aplicação exigia treinamento e implementação separados. Agora, com projetos como PSSR e a colaboração multiplataforma FSR Redstone, a Sony oferece redes de IA mais generalizadas que funcionam em vários jogos e plataformas.
À medida que as redes neurais por trás das tecnologias de IA da Sony continuam aprendendo, os algoritmos que as alimentam também melhoram. Isso beneficia os desenvolvedores que implementam essas tecnologias em seus jogos e os jogadores que experimentam taxas de quadros mais rápidas, imagens aprimoradas, interações de IA mais ricas e experiências de jogo mais imersivas.
A estratégia abrangente de IA da Sony posiciona a empresa como líder em inovação de jogos em várias dimensões, desde conquistas revolucionárias como Gran Turismo Sophy até aplicações práticas em upscaling e garantia de qualidade. Os investimentos da empresa representam mais do que melhorias incrementais—eles sinalizam uma reimaginação fundamental de como os jogos são criados, jogados e experienciados.
De agentes de corrida de IA que demonstram habilidade sobre-humana enquanto mantêm o espírito esportivo a tecnologias de upscaling que entregam visuais 4K sem os custos de renderização 4K, a Sony está construindo um futuro de jogos movidos por IA que equilibra:
- Excelência tecnológica: Implementações de IA de melhor qualidade ultrapassando limites
- Criatividade humana: IA como ferramenta de aumento, não substituição
- Ethical responsibility: Clear governance protecting creators and users
- Player enjoyment: Technology serving gameplay
A próxima geração de jogos não se trata apenas de hardware mais poderoso—é sobre hardware mais inteligente que aprende, se adapta e melhora todos os aspectos da experiência de jogo. Com tecnologias que se estendem até o final da década de 2020 e parcerias que definem a arquitetura dos consoles futuros, a Sony não está apenas participando do futuro dos jogos movidos por IA; eles estão ativamente moldando-o.
Sobre o AutorEste artigo explora a abordagem abrangente da Sony para inteligência artificial em jogos, examinando tecnologias inovadoras como Gran Turismo Sophy, PlayStation Spectral Super Resolution e Project Amethyst que estão remodelando o entretenimento interativo para a próxima geração.
