Integration · Udviklerværktøjer

Forbind Claude og ChatGPT med LangSmith

Spørg din AI, hvordan et tracing-projekt klarer sig, så henter den antal kørsler, svartider, tokens, omkostninger og fejl fra LangSmith, LangChains platform til tracing og evaluering. Den kan tilføje eksempler til datasæt, give feedback på kørsler, læse og gemme promptversioner og finde de annotation queues, du er tildelt.

Forbind LangChain (LangSmith) gratis

Gratis plan uden kreditkort. Det tager cirka et minut.

Prøv at spørge

“Hvor mange kørsler fejlede i support-bot-projektet det seneste døgn, og hvad kostede de?”
AI'en henter statistik for projektet i den periode: antal, fejl, svartider, tokens og omkostning.
“Tilføj det her spørgsmål og det forventede svar til regressionsdatasættet.”
Den finder datasættet og tilføjer et eksempel med input, forventet output og et split, hvis du nævner et.
“Vis mig den nyeste version af vores summarizer-prompt.”
Den læser promptens indhold i den seneste commit. Den kan også vise tidligere versioner, så du kan sammenligne.

Det kan din AI

Tracing-projekter og feedback

Hent kørselsstatistik pr. projekt, se kørslerne i en samtaletråd, og opret, vis og ret feedback.

Datasæt og eksempler

Søg, opret og ret datasæt, tilføj, ret og slet eksempler, og eksportér et datasæt som CSV.

Prompts og annotation queues

Søg i prompt hub, læs og gem promptversioner, opret prompts, og opret eller slå annotation queues op.

“Marker kørsel 4f2a som forkert, og skriv en kommentar om hvorfor.”
Den giver feedback på kørslen med nøglen correctness, en score og din kommentar.
“Eksportér eval-datasættet som CSV.”
Den henter datasættets eksempler som CSV, eller som datasættet så ud på en tidligere dato.
“Hvilke annotation queues er tildelt mig?”
Den søger i de annotation queues, du er tildelt, og kan åbne en af dem med rubrik og indstillinger.

139 værktøjer til LangChain (LangSmith)

Værktøjerne er slået til, når du forbinder. Du kan slå dem fra enkeltvis eller kræve din godkendelse, før de kører.

create_annotation_queueÆndrer dataOpret en annoteringskø med et `name`, valgfrit beskrivelsessætning, rubrikinstruktioner og revisorindstillinger.
create_batchSynligt for andreOpret en ny batch. Har effekter synlige uden for dette system. API oversigt: Indtægter Runs (Batch JSON).
create_bulkSynligt for andreOpret en ny bulk. Krav: items. Har effekter synlige uden for dette system. API oversigt: Opret Eksempler.
create_bulk_validate_examples_api_v1_examples_validate_bulk_postSynligt for andreOpret en ny bulk. Har effekter synlige uden for dette system. API oversigt: Valider Eksempler.
create_comparativeÆndrer dataOpret en ny sammenlignende eksperiment. Krav: eksperiment IDs. API oversigt: Opret Sammenlignende Eksperiment.
create_configÆndrer dataOpret en ny konfiguration. Krav: navn eller konfiguration. API oversigt: [Beta] Opret Insights Job Konfiguration.
create_datasetÆndrer dataOpret et dataset med et `name`, valgfrit `description` og `data_type` (kv, llm eller chat).
create_dataset_generateÆndrer dataOpret en ny generering for et dataset. Krav: antal eksempler.
create_exampleÆndrer dataTilføj et eksempel til et dataset: `dataset_id` plus `inputs`, valgfrit `outputs`, `metadata` og `split`.
create_experiment_evaluateÆndrer dataOpret en ny evaluering for et eksperiment. Krav: regel ID. API oversigt: Evaluér Eksperiment Adhoc.
create_feedbackÆndrer dataOpfør feedback på en køb: en feedback `key` (f.eks. korrekthed) med `score` eller `value`, valgfrit `comment` og `run_id`.
create_feedback_configÆndrer dataOpret en ny feedback konfiguration. Krav: feedback nøgle eller feedback konfiguration. API oversigt: Opret Feedback Konfiguration Endepunkt.
create_generateÆndrer dataOpret en ny generering. Krav: bruger kontekst. API oversigt: [Beta] Auto-Generér Insights Job Konfiguration.
create_generate_queryÆndrer dataOpret en ny genereringsquery. Krav: query. API oversigt: Generér Query For Runs.
create_groupÆndrer dataOpret en ny gruppe. Krav: session ID eller gruppér efter.
create_invoke_promptÆndrer dataOpret en ny udløsningsprompt. Krav: beskeder, skabelonformat eller inputter.
create_logÆndrer dataOpret et nyt projekt for et projekt. Krav: logtype eller besked. API oversigt: Opret Log.
create_message_likeÆndrer dataOpret en ny like til en besked. API oversigt: Like Kommentar.
create_multipartÆndrer dataOpret en ny multipart. API oversigt: Indtægter Runs (Multipart).
create_populateÆndrer dataOpret en ny populate. Krav: kø ID eller session IDs. API oversigt: Populer Annoteringskø.
create_projectÆndrer dataOpret et nyt projekt. Krav: algoritme, konfiguration eller prompt navn. API oversigt: Optimer Prompt Job.
create_promptÆndrer dataOpret en ny prompt ved hjælp af `repo_handle` og `is_public`, med valgfrit beskrivelse, readme og tags.
create_repo_forkÆndrer dataOpret en new fork for et repo. Krav: repo handle. API oversigt: Graft Repo.
create_repo_ownerÆndrer dataOpret en ny ejer for et repo. Krav: email. API oversigt: Tilføj Repo Ejer.
create_repo_projectÆndrer dataOpret et nyt projekt for et repo. Krav: algoritme eller konfiguration. API oversigt: Opret Job.
create_repo_tagÆndrer dataOpret en ny tag for et repo. Krav: tag-navn eller commit-id. Søg først efter tags for at undgå duplikater. API oversigt: Opret Tag.
create_ruleÆndrer dataOpret en ny regel. Krav: display-navn eller samplingssats. API oversigt: Opret Regel.
create_rule_triggerÆndrer dataOpret en ny trigger til en regel. API oversigt: Trigger Regel.
create_runÆndrer dataOpret en ny køb. API oversigt: Opret En Køb.
create_session_dashboardÆndrer dataOpret et nyt dashboard for en session. API oversigt: Hent Tracing Projekt Forudbygget Dashboard.
create_session_insightÆndrer dataOpret en ny indsigt for en session. API oversigt: [Beta] Opret Indsights Job.
create_session_viewÆndrer dataOpret en ny visning for en session. Krav: display-navn. Søg først efter visninger for at undgå duplikater. API oversigt: Opret Filter Visning.
create_stat_stats_group_runs_api_v1_runs_group_stats_postÆndrer dataOpret en ny stat. Krav: session-id eller gruppér efter. API oversigt: Stats Gruppér Køb.
create_studio_experimentÆndrer dataOpret et nyt studio eksperiment. Krav: projekt-navn eller dataset-id.
create_sub_commentÆndrer dataOpdater en eksisterende besked identificeret ved forældre kommentar-id. API oversigt: Opret Underskrevet Kommentar.
create_tokenSletterOpret en ny token. Krav: body. Destructiv handling; kan kræve godkendelse. API oversigt: Opret Feedback Ingest Token.
create_triggerÆndrer dataOpret en ny trigger. API oversigt: Trigger Regler.
delete_annotation_queueSletterSlet permanent en annoteringskø ved kø-id. Destructiv handling; kan kræve godkendelse. API oversigt: Slet Annoteringskø.
delete_annotation_queuesFlytter pengeSlet permanent en annoteringskø. Finansiell eller ireversibel handling; kan kræve godkendelse. API oversigt: Slet Annoteringskøer.
delete_comparativeSletterSlet permanent et sammenligningseksperiment ved eksperiment-id. Destructiv handling; kan kræve godkendelse. API oversigt: Slet Sammenligningseksperiment.
delete_configSletterSlet permanent en konfiguration ved konfigurations-id. Destructiv handling; kan kræve godkendelse. API oversigt: [Beta] Slet Indsights Job Konfiguration.
delete_datasetSletterSlet permanent et dataset ved dataset-id. Destructiv handling; kan kræve godkendelse. API oversigt: Slet Dataset.
delete_dataset_sharesFlytter pengeSlet permanent en deling ved dataset-id. Finansiell eller ireversibel handling; kan kræve godkendelse. API oversigt: Del Ikke Ud Dataset.
delete_datasetsFlytter pengeSlet permanent et dataset. Finansiell eller ireversibel handling; kan kræve godkendelse. API oversigt: Slet Datasets.
delete_deletesSletterSlet permanent en sletning. Destructiv handling; kan kræve godkendelse. API oversigt: Slet Køb.
delete_exampleSletterSlet permanent et eksempel i et dataset ved `example_id`. Kan ikke fortages.
delete_examplesFlytter pengeSlet permanent et eksempel. Finansiell eller ireversibel handling; kan kræve godkendelse. API oversigt: Slet Eksempler.
delete_feedbackSletterSlet feedback permanentt ved hjælp af feedback-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Feedback.
delete_feedback_configsFlytter pengeSlet feedbackkonfiguration permanentt. Finansielt eller ireversibelt handling; kan kræve godkendelse. API oversigt: Slet Feedback Konfiguration Endepunkt.
delete_logSletterSlet projekt permanentt ved hjælp af job-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Log.
delete_message_likesFlytter pengeSlet like permanentt ved hjælp af forældre kommentar-id. Finansielt eller ireversibelt handling; kan kræve godkendelse. API oversigt: Unlike Comment.
delete_projectSletterSlet job permanentt ved hjælp af job-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Job.
delete_repoSletterSlet repo permanentt ved hjælp af repo. Destructive action; kan kræve godkendelse. API oversigt: Slet Repo.
delete_repo_ownersFlytter pengeFjern ejer permanentt ved hjælp af repo. Finansielt eller ireversibelt handling; kan kræve godkendelse. API oversigt: Fjern Repo Ejer.
delete_reposFlytter pengeSlet repos permanentt. Finansielt eller ireversibelt handling; kan kræve godkendelse. API oversigt: Slet Repos.
delete_ruleSletterSlet regel permanentt ved hjælp af regel-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Regel.
delete_sessionSletterSlet session permanentt ved hjælp af session-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Tracer Session.
delete_session_insightSletterSlet insight permanentt ved hjælp af job-id. Destructive action; kan kræve godkendelse. API oversigt: [Beta] Slet Insights Job.
delete_session_viewSletterSlet filter view permanentt ved hjælp af view-id. Destructive action; kan kræve godkendelse. API oversigt: Slet Filter View.
delete_tagSletterSlet tag permanentt ved hjælp af tag-navn. Destructive action; kan kræve godkendelse. API oversigt: Slet Tag.
delete_tracesSletterSlet trace permanentt. Destructive action; kan kræve godkendelse. API oversigt: Slet Runs Abac.
download_dataset_csvDownload datasetens eksempler som CSV ved hjælp af `dataset_id`, evt. fra en tidligere version (`as_of`).
download_jsonlDownload dokumentet for en jsonl. API oversigt: Download Dataset Jsonl.
download_openaiDownload dokumentet for en openai. API oversigt: Download Dataset Openai.
download_openai_ftDownload dokumentet for en openai ft. API oversigt: Download Dataset Openai Ft.
export_annotation_queuesÆndrer dataEksportér annotation køer. API oversigt: Eksportér Annotation Queue Archived Runs.
get_annotation_queueHent én annotation kø ved hjælp af `queue_id`, inklusive dens rubrik og indstillinger.
get_datasetHent én dataset ved hjælp af `dataset_id`, inklusive dens beskrivelse og eksempelantal.
get_exampleHent et eksempel på en datakilde med `example_id`, inklusive indgange og udgange.
get_example_2Hent et eksempel. API oversigt: Tæl Eksempler.
get_feedbackHent en feedback-indgang ved hjælp af `feedback_id`.
get_insight_clusterHent en kluster for en indsigt via kluster-id. API-overblik: [Beta] Hent Run-kluster fra Insights-job.
get_logHent et projekt ved hjælp af projekt-id. API-overblik: Hent Log.
get_messageHent en besked baseret på repo. Resultater er pagineret. API-overblik: Hent Kommentarer.
get_projectHent et projekt baseret på job-id. API-overblik: Hent Job.
get_promptHent detaljer om en prompt ved hjælp af `owner` (tenant-handle, eller '-' for din egen) og `repo` (prompt-handle).
get_prompt_versionHent indholdet (manifest) af én prompt version ved hjælp af `owner`, `repo` og `commit` (hash eller 'latest').
get_run_statsÆndrer dataHent samlet statistik over køb (antal, latens, tokens, omkostninger, fejl) til ét eller flere tracing projekter i `session`, med valgfrit tidsrum og filtre.
get_session_insightHent en indsigt for en session via job-id. API-overblik: [Beta] Hent Insights Job.
get_session_viewHent en visning for en session via view-id. API-overblik: Læs Filter View.
get_sub_commentsHent en besked baseret på forældre kommentar-id. Resultater er pagineret. API-overblik: Hent Underkommentarer.
get_tagHent et tag ved hjælp af tag-navn. API-overblik: Hent Tag.
get_threadVis en samtaletråds løb baseret på `thread_id`.
get_tracing_projectHent et tracing-projekt ved hjælp af `session_id`, eventuelt med run-statistikker (`include_stats`).
list_annotation_queue_queuesListe køer for en annoteringskø. API-overblik: Hent Annoteringskøer for Run.
list_configsListe konfigurationer. Valgfrie filtre: inkludér prebuilts. API-overblik: [Beta] Hent Insights Job Konfigurationer.
list_dataset_sharesListe delelinger for en datakilde. API-overblik: Læs Datakilde Delelings Status.
list_dataset_splitsListe opdelinger for en datakilde. Valgfrie filtre: fra tidspunkt. API-overblik: Hent Datakilde Opdelinger.
list_dataset_versionsListe versioner for en datakilde. Valgfrie filtre: fra tidspunkt eller tag. API-overblik: Hent Datakilde Version.
list_diffsListe forskelle. Valgfrie filtre: fra version til version. API-overblik: Forskel Datakilde Versioner.
list_feedbackListe feedback, filtreret ved hjælp af `run`, `source`, score eller kommentarfærdighed, dato-område og paginering.
list_feedback_configsListe feedback-konfigurationer. Valgfrie filtre: navn indeholder, sortér efter nedad eller læs efter skriv. Resultater er pagineret. API-overblik: List Feedback Konfigurationer Endpoint.
list_insight_runsListe løb for en indsigt. Valgfrie filtre: kluster-id, attribut-sortnøgle eller attribut-sorteringsorden. Resultater er pagineret. API-overblik: [Beta] Hent Løb fra Insights Job.
list_projectsListe projekter for et projekt. API-overblik: List Job Logs.
list_prompt_commitsListe gemte versioner (commits) af en prompt ved hjælp af `owner` og `repo`.
list_repo_ownersListe ejere for en repo. API-overblik: List Repo Ejere.
list_repo_projectsListe projekter for en repo. API-overblik: List Jobs.
list_repo_tagsListe tags for en repo. API-overblik: Hent Tags.
list_rule_last_appliedsListe sidste anvendelser for en regel. Valgfrie filtre: backfill. API-overblik: Hent Sidste Anvendt Regel.
list_rule_logsListe logs for en regel. Valgfrie filtre: starttidspunkt eller sluttidspunkt. Resultater er pagineret. API-overblik: List Regel Logs.
list_rulesListe regler. Valgfrie filtre: datakilde-id, type, navn indeholder, id, evaluator-id eller tag-værdi-id.
list_session_insightsVis list for en session. Valgfrie filtre: config id eller legacy. Resultater er pagineret. API oversigt: [Beta] Få Insights Jobs.
list_session_metadataVis metadata for en session. Valgfrie filtre: metadata nøgler, starttidspunkt, kun k- eller root-kørsler. API oversigt: Læs Tracer Sessions Runs Metadata.
list_tokensVis tokens. Valgfrie filtre: kørsels-id. API oversigt: Vis Feedback Ingest Tokens.
list_v2sVis v2s. Valgfrie filtre: backfill, starttidspunkt eller sluttidspunkt. Resultater er pagineret. API oversigt: Vis Rule Logs V2.
save_prompt_versionÆndrer dataGem en ny version af en prompt: `owner`, `repo` og promten `manifest`, valgfrit `parent_commit`.
search_annotation_queuesSøg annotation køer efter navn, sæt eller tildeling (`assigned_to_me`).
search_dataset_versionsSøg versioner for et sæt efter søgning eller eksempel. Brug dette til at finde eksisterende versioner før du opretter en ny version. Resultater er pagineret. API oversigt: Få Sæt Versioner.
search_datasetsSøg LangSmith sæt efter `name_contains`, `name`, `id`, `data_type` eller metadata, med limit/offset-pagining.
search_examplesVis eksempler i et sæt (overfør `dataset`), med valgfrie `splits`, `metadata`, `full_text_contains` og pagining.
search_promptsSøg prompts i LangSmith prompt-hub efter `query`, tags, ejer eller synlighed.
search_session_viewsVis udsigt for en session efter type. Brug dette til at finde eksisterende udsigter før du opretter en ny udsigt. API oversigt: Læs Filter Udsigter.
search_streamsSøg strømer efter id, datatyp, navn, navn indeholder, metadata eller sortering. Brug dette til at finde eksisterende strømme før du opretter en ny strøm. Resultater er pagineret. API oversigt: Læs Sæt Stream.
search_tagsSøg tags efter tenant-håndtering, tenant-id, søgning, har commits, tags eller er arkiveret. Brug dette til at finde eksisterende tags før du opretter en ny tag. Resultater er pagineret. API oversigt: Vis Repo Tags.
submit_datasetSynligt for andreKlon et sæt. Har effekter synlige uden for dette system. API oversigt: Klon Sæt.
submit_exampleSynligt for andreValider et eksempel. Har effekter synlige uden for dette system. API oversigt: Valider Eksempel.
submit_querySynligt for andreValider en kørsel. Har effekter synlige uden for dette system. API oversigt: Valider Kørsler Query.
submit_ruleSynligt for andreValider en regel. Har effekter synlige uden for dette system. API oversigt: Valider Regel.
update_annotation_queueÆndrer dataOpdater en eksisterende annotation kø identificeret ved kø-id. Kun feltene du overfører ændres. API oversigt: Opdater Annotation Kø.
update_bulksSynligt for andreOpdater en eksisterende bulk. Kun feltene du overfører ændres. Har effekter synlige uden for dette system. API oversigt: Legacy Update Examples.
update_configÆndrer dataOpdater en eksisterende konfiguration identificeret ved config id. Kun de felt, du sender, ændres. API oversigt: [Beta] Opdater Insights Job Konfiguration.
update_datasetÆndrer dataOpdater et datasets `name`, `description` eller metadata ved hjælp af `dataset_id`.
update_dataset_sharesSynligt for andreOpdater en eksisterende deling identificeret ved dataset id. Har effekter synlige uden for dette system. API oversigt: Del Dataset.
update_dataset_splitsSynligt for andreOpdater en eksisterende split identificeret ved dataset id. Har effekter synlige uden for dette system. API oversigt: Opdater Dataset Splits.
update_dataset_tagsSynligt for andreOpdater en eksisterende tag identificeret ved dataset id. Har effekter synlige uden for dette system. API oversigt: Opdater Dataset Version.
update_exampleÆndrer dataOpdater et eksemplars `inputs`, `outputs`, `metadata` eller `split` ved hjælp af `example_id`.
update_feedbackÆndrer dataOpdater en feedback indgangs `score`, `value`, `comment` eller `correction` ved hjælp af `feedback_id`.
update_feedback_configsSynligt for andreOpdater en eksisterende feedback konfiguration. Kun de felt, du sender, ændres. Har effekter synlige uden for dette system. API oversigt: Opdater Feedback Konfiguration Endepunkt.
update_messageÆndrer dataOpdater en eksisterende besked identificeret ved repo. API oversigt: Opret Kommentar.
update_projectÆndrer dataOpdater en eksisterende projekt identificeret ved job id. Kun de felt, du sender, ændres. API oversigt: Opdater Job.
update_repoÆndrer dataOpdater en eksisterende repo identificeret ved repo. Kun de felt, du sender, ændres. API oversigt: Opdater Repo.
update_ruleÆndrer dataOpdater en eksisterende regel identificeret ved regel id. Kun de felt, du sender, ændres. API oversigt: Opdater Regel.
update_runÆndrer dataOpdater en eksisterende køb identificeret ved køb id. Kun de felt, du sender, ændres. API oversigt: Opdater et Køb.
update_sessionÆndrer dataOpdater en eksisterende session identificeret ved session id. Kun de felt, du sender, ændres. API oversigt: Opdater Tracer Session.
update_session_insightÆndrer dataOpdater en eksisterende indsigt identificeret ved job id. Kun de felt, du sender, ændres. API oversigt: [Beta] Opdater Insights Job.
update_session_viewÆndrer dataOpdater en eksisterende visning identificeret ved visning id. Kun de felt, du sender, ændres. API oversigt: Opdater Filter Visning.
update_tagÆndrer dataOpdater en eksisterende tag identificeret ved tag navn. Kun de felt, du sender, ændres. API oversigt: Opdater Tag.
update_view_renamesSynligt for andreOpdater en eksisterende omdøbning identificeret ved visning id. Kun de felt, du sender, ændres. Har effekter synlige uden for dette system. API oversigt: Omdøb Filter Visning.
upload_dataset_experimentÆndrer dataUpload et dataset. API oversigt: Upload Eksperiment.

Klar i tre trin

1
Vælg systemet
Opret en gratis HeyMyApps-konto, og vælg LangChain (LangSmith) på listen.
2
Indsæt din nøgle
Indsæt en LangSmith API-nøgle. Åbn Settings > API Keys i LangSmith og klik på Create API Key. Du kan bruge et Personal Access Token eller en Service Key, der er afgrænset til et workspace. Kopiér nøglen med det samme, den vises kun én gang.
3
Tilføj linket i din AI
Du får et personligt MCP-link. Tilføj det i Claude, ChatGPT eller Cursor:
1. Klik på dit navn, og vælg Settings › Connectors › Add custom connector.
2. Indsæt dit link som Remote MCP server URL.
3. Slå det til fra +-menuen i en chat.

Spørgsmål

Hvad kan AI'en gøre i LangSmith?

Den kan læse kørselsstatistik for tracing-projekter, se samtaletråde og læse datasæt, eksempler, feedback, prompts og annotation queues. Den kan oprette datasæt, eksempler, feedback, prompts, promptversioner og annotation queues, rette datasæt, eksempler og feedback og slette eksempler, hvis du slår det værktøj til.

Kan AI'en se min LangSmith-API-nøgle?

Nej. Din LangSmith-API-nøgle gemmes krypteret og vises aldrig for AI'en. Når du har gemt den, bliver den ikke vist igen, heller ikke for dig. AI'en ser kun resultaterne af de værktøjer, den bruger.

Kan jeg styre, hvad AI'en må?

Ja. Du vælger, hvilke værktøjer der er slået til, så du kan starte med kun at læse. Sletning af et eksempel i et datasæt er permanent og kan kræve din godkendelse, før det udføres. Alle kald bliver logget.

Virker det med ChatGPT?

Ja. I ChatGPT går du til Settings › Apps & Connectors › Advanced og slår Developer mode til. Derefter tilføjer du dit HeyMyApps-link. Developer mode kræver et betalt ChatGPT-abonnement: Plus, Pro, Business eller Enterprise. Samme link virker også i Claude (Settings › Connectors › Add custom connector), Cursor og andre MCP-klienter.

Hvad koster det?

HeyMyApps har en gratis plan, og du skal ikke bruge betalingskort. Betalte planer afregnes pr. gennemført opgave. Du skal også selv have en LangSmith-konto.

Skal jeg bruge et Personal Access Token eller en Service Key?

Begge dele virker. Et Personal Access Token handler som dig. En Service Key er afgrænset til et workspace og passer til en fælles opsætning, hvor adgangen ikke skal hænge på én person. Du opretter begge under Settings > API Keys i LangSmith.