Construire vers l'utilisation de l'informatique avec Anthropic

Aperçu

Building Towards Computer Use with Anthropic introduces an innovative capability from Anthropic that enables models to interact with and navigate computer interfaces. Taught by Colt Steele, Anthropic’s Head of Curriculum, this course covers Anthropic’s family of models and the building blocks that lead to the amazing new application – Computer Use.

Computer Use utilizes the capabilities of the latest models including image reasoning and tool use to enable an LLM-based agent to use a computer. Like a human user, the model processes an image of the screen, analyzes it to understand what’s going on, and navigates the computer by issuing mouse clicks and generating keyboard strokes to get things done.

In this course, you’ll learn the features that lead up to computer use from working with the Anthropic’s API, to multimodal prompting, prompt caching, and tool use, ending in a demo that combines these features to build an AI assistant that uses a computer. In detail, you’ll:

1.

Learn Anthropic’s approach to AI research, principles of AI safety, alignment, and interpretability while understanding the key differences between its models. 2. Make API requests to Claude, format messages for better responses, and control API parameters like system prompts, temperature, and max tokens for optimal responses. 3.

Write multi-modal prompts that combine text and image content blocks and build with streaming responses. 4. Learn effective prompting techniques such as using prompt templates, structuring prompts in XML, and providing examples to get consistent high-quality responses. 5.

Learn to implement prompt caching and see how it can reduce costs and latency. 6. Understand tool-use workflows and build a chatbot that can call different tools in response to users’ queries. 7.

See all these concepts come together in a demo that uses Anthropic Computer Use to achieve a task on a computer. Start utilizing Anthropic’s family of models to build towards Computer Use applications.

Programme

• Construction vers l'utilisation de l'ordinateur avec Anthropic
Construction vers l'utilisation de l'ordinateur avec Anthropic présente une capacité innovante d'Anthropic qui permet aux modèles d'interagir avec et de naviguer dans les interfaces informatiques. Enseigné par Colt Steele, chef du programme d'études d'Anthropic, ce cours couvre la famille de modèles d'Anthropic et les éléments constitutifs qui mènent à la nouvelle application impressionnante – l'Utilisation de l'ordinateur. L'Utilisation de l'ordinateur utilise les capacités des derniers modèles, y compris le raisonnement par l'image et l'utilisation d'outils, pour permettre à un agent basé sur un LLM d'utiliser un ordinateur. Comme un utilisateur humain, le modèle traite une image de l'écran, l'analyse pour comprendre ce qui se passe et navigue dans l'ordinateur en émettant des clics de souris et en générant des frappes de clavier pour accomplir des tâches. Dans ce cours, vous apprendrez les fonctionnalités qui mènent à l'utilisation de l'ordinateur, depuis le travail avec l'API d'Anthropic, en passant par le prompt multimodal, la mise en cache des prompts, et l'utilisation d'outils, se terminant par une démonstration qui combine ces fonctionnalités pour construire un assistant IA qui utilise un ordinateur. En détail, vous allez : 1. Apprendre l'approche d'Anthropic en matière de recherche sur l'IA, les principes de sécurité de l'IA, d'alignement et d'interprétabilité tout en comprenant les principales différences entre ses modèles. 2. Effectuer des requêtes API à Claude, formater des messages pour de meilleures réponses et contrôler les paramètres de l'API tels que les prompts système, la température et le nombre maximum de tokens pour des réponses optimales. 3. Écrire des prompts multimodaux qui combinent des blocs de contenu texte et image et construirent avec des réponses en streaming. 4. Apprendre des techniques de prompting efficaces telles que l'utilisation de modèles de prompts, la structuration des prompts en XML, et la fourniture d'exemples pour obtenir des réponses cohérentes de haute qualité. 5. Apprendre à implémenter la mise en cache des prompts et voir comment cela peut réduire les coûts et la latence. 6. Comprendre les flux de travail d'utilisation d'outils et construire un chatbot capable d'appeler différents outils en réponse aux requêtes des utilisateurs. 7. Observer tous ces concepts réunis dans une démonstration utilisant l'Utilisation de l'ordinateur d'Anthropic pour accomplir une tâche sur un ordinateur. Commencez à utiliser la famille de modèles d'Anthropic pour construire des applications d'Utilisation de l'ordinateur.

Enseigné par

Colt Steele

Matières

Computer Science