API 概要
クラス Agent
Pydantic のフィールド:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonemodel_name:<class 'str'>temperature:<class 'float'>system_message:<class 'str'>tools:list[typing.Any]
method step
state: 環境の現在の状態。action: 実行するアクション。 戻り値: 環境の新しい状態。
クラス AgentState
Pydantic のフィールド:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonehistory:list[typing.Any]
クラス AnnotationSpec
Pydantic のフィールド:
name:str | Nonedescription:str | Nonefield_schema:dict[str, typing.Any]unique_among_creators:<class 'bool'>op_scope:list[str] | None
classmethod preprocess_field_schema
classmethod validate_field_schema
method value_is_valid
-
payload: スキーマに対して検証するデータ 戻り値: -
bool: 検証に成功した場合は True、それ以外の場合は False
クラス Audio
サポート対象の形式 (wav または mp3) のオーディオデータを表すクラスです。
このクラスはオーディオデータを保持し、さまざまなソースからの読み込みやファイルへの書き出しを行うためのメソッドを提供します。
Attributes:
format: オーディオ形式 (現在サポートされているのは ‘wav’ または ‘mp3’)data: bytes としての生のオーディオデータ
-
data: オーディオデータ (bytes または base64 エンコードされた文字列) -
format: オーディオ形式 (‘wav’ または ‘mp3’) -
validate_base64: 入力データの base64 デコードを試行するかどうか Raises: -
ValueError: オーディオデータが空の場合、または形式がサポートされていない場合
method __init__
method export
classmethod from_data
-
path: オーディオファイルの書き込み先パス 引数: -
data: bytes または base64 エンコードされた文字列形式のオーディオデータ -
format: オーディオ形式 ('wav'または'mp3') 戻り値: -
Audio: 新しい Audio インスタンス
ValueError:formatで指定した形式がサポートされていない場合
classmethod from_path
-
path: オーディオファイルへのパス (拡張子は.wavまたは.mp3である必要があります) 戻り値: -
Audio: ファイルから読み込まれた新しい Audio インスタンス
ValueError: ファイルが存在しない場合、またはサポートされていない拡張子の場合
クラス Content
さまざまなソースのコンテンツを表すクラスです。関連するメタデータとともに、バイト列ベースの統一表現に変換します。
このクラスは、以下のいずれかの classmethod を使用してインスタンス化する必要があります。
- from_path()
- from_bytes()
- from_text()
- from_url()
- from_base64()
- from_data_url()
method __init__
Content.from_path() のようなクラスメソッドを使用してください。
Pydantic のフィールド:
data:<class 'bytes'>size:<class 'int'>mimetype:<class 'str'>digest:<class 'str'>filename:<class 'str'>content_type:typing.Literal['bytes', 'text', 'base64', 'file', 'url', 'data_url', 'data_url:base64', 'data_url:encoding', 'data_url:encoding:base64']input_type:<class 'str'>encoding:<class 'str'>metadata:dict[str, typing.Any] | Noneextension:str | None
プロパティ art
プロパティ ref
method as_string
encoding 属性を使用してデコードされます。base64 の場合、データはいったん base64 のバイト列として再エンコードされ、その後 ASCII 文字列にデコードされます。
戻り値:
str.
classmethod from_base64
classmethod from_bytes
classmethod from_data_url
classmethod from_path
classmethod from_text
classmethod from_url
classmethod model_validate
classmethod model_validate_json
method open
bool: ファイルを正常に開けた場合は True、それ以外の場合は False。
method save
method serialize_data
method to_data_url
-
dest: ファイルのコピー先となるパス (string または pathlib.Path) 。コピー先のパスには、ファイルまたはディレクトリを指定できます。destにファイル拡張子 (例:.txt) がない場合、コピー先はディレクトリとして扱われます。 引数: -
use_base64: True の場合、データは base64 エンコードされます。それ以外の場合はパーセントエンコードされます。デフォルトは True です。 戻り値: データ URL 文字列。
クラス Dataset
簡単に保存でき、自動的にバージョン管理されるDatasetオブジェクトです。
例:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonerows:trace.table.Table | trace.vals.WeaveTable
method add_rows
rows: データセットに追加する行。 戻り値: 更新後のデータセット。
classmethod convert_to_table
classmethod from_calls
classmethod from_hf
classmethod from_obj
classmethod from_pandas
method select
indices: 選択する行を指定する整数インデックスのイテラブル。 戻り値: 選択した行のみを含む新しい Dataset オブジェクト。
method to_hf
method to_pandas
クラス EasyPrompt
method __init__
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonedata:<class 'list'>config:<class 'dict'>requirements:<class 'dict'>
プロパティ as_str
すべてのメッセージを結合して1つの文字列にします。プロパティ is_bound
プロパティ messages
プロパティ プレースホルダー
プロパティ system_message
すべてのメッセージを結合して、1つのsystem promptメッセージにします。プロパティ system_prompt
すべてのメッセージを結合して、system prompt オブジェクトにします。プロパティ unbound_placeholders
method append
method as_dict
method as_pydantic_dict
method bind
method bind_rows
method config_table
method configure
method dump
method dump_file
method format
classmethod from_obj
classmethod load
classmethod load_file
method messages_table
method print
method publish
method require
method run
method validate_requirement
method validate_requirements
method values_table
class Evaluation
scorer のセットとデータセットを含む評価を設定します。
evaluation.evaluate(model) を呼び出すと、データセットの各行がモデルに渡されます。このとき、データセットの列名は model.predict の引数名に対応付けられます。
その後、すべての scorer が呼び出され、結果は Weave に保存されます。
データセットの行を前処理したい場合は、preprocess_model_input に関数を渡せます。
例:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonedataset:<class 'dataset.dataset.Dataset'>scorers:list[typing.Annotated[trace.op_protocol.Op | flow.scorer.Scorer, BeforeValidator(func=<function cast_to_scorer at 0x7f97165532e0>, json_schema_input_type=PydanticUndefined)]] | Nonepreprocess_model_input:collections.abc.Callable[[dict], dict] | Nonetrials:<class 'int'>metadata:dict[str, typing.Any] | Noneevaluation_name:str | collections.abc.Callable[trace.call.Call, str] | None
method evaluate
classmethod from_obj
method get_eval_results
method get_evaluate_calls
Evaluation オブジェクトを使用したすべての評価 call を取得します。
これは単一の call ではなく CallsIter を返すことに注意してください。1 つの評価に対して複数の評価 call が存在する可能性があるためです (たとえば、同じ評価を複数回実行した場合) 。
戻り値:
CallsIter: 評価 run を表すCallオブジェクトのイテレータ。
ValueError: 評価に ref がない場合 (まだ保存または実行されていない場合) 。
method get_score_calls
dict[str, list[Call]]: trace ID から Scorer の Call オブジェクトのリストへのマッピングを格納した辞書。各 trace ID は 1 つの評価 run を表し、リストにはその run 中に実行されたすべての Scorer call が含まれます。
method get_scores
dict[str, dict[str, list[Any]]]: 次のようなネストされた辞書構造です。- 第1レベルのキーは trace ID (評価 run)
- 第2レベルのキーは Scorer 名
- 値は、その run と Scorer に対応する Scorer 出力のリスト
method model_post_init
method predict_and_score
method summarize
class EvaluationLogger
このクラスは、評価をログするための命令型インターフェースを提供します。
最初の予測を log_prediction method でログすると、自動的に評価が開始され、log_summary method が呼び出されると終了します。
予測をログするたびに、ScoreLogger オブジェクトが返されます。このオブジェクトを使用して、その予測に対応するスコアとメタデータをログできます。詳細は、ScoreLogger クラスを参照してください。
基本的な使用方法 - 入力と出力を直接指定して予測をログします:
method __init__
プロパティ 属性
プロパティ ui_url
method fail
method finish
method log_example
inputs: 予測の入力データoutput: 出力値scores: Scorer 名を score 値に対応付ける辞書 例:
method log_prediction
inputs: 予測の入力データoutput: 出力値。デフォルトは None です。後でpred.outputを使用して設定できます。 戻り値: スコアのログ記録や、必要に応じて予測の終了に使用できる ScoreLogger。
pred = ev.log_prediction({'q': ’…’}, output=“answer”) pred.log_score(“correctness”, 0.9) pred.finish()
with ev.log_prediction({'q': ’…’}) as pred: response = model(…) pred.output = response pred.log_score(“correctness”, 0.9) # 終了時に自動的に finish() が呼び出されます
method log_summary
method set_view
weave.views の下で、評価のメイン call の summary に view を追加します。
指定されたコンテンツをプロジェクト内のオブジェクトとして保存し、その参照 URI を、評価の evaluate call の summary.weave.views.<name> に書き込みます。文字列入力は、指定された拡張子または MIME タイプを使って、Content.from_text によりテキストコンテンツとしてラップされます。
引数:
name: 表示する view の名前。summary.weave.views配下のキーとして使用されます。content: シリアライズするweave.Contentインスタンス、または文字列。extension: 文字列コンテンツ入力に使用する省略可能なファイル拡張子。mimetype: 文字列コンテンツ入力に使用する省略可能な MIME タイプ。metadata: 新しく作成されるContentに付加する省略可能なメタデータ。encoding: 文字列コンテンツ入力のテキストエンコーディング。 戻り値: None
import weave
ev = weave.EvaluationLogger() ev.set_view(“report”, ”# Report”, extension=“md”)
class File
パス、MIMEタイプ、サイズ情報を持つファイルを表すクラス。
method __init__
プロパティ filename
ファイル名を取得します。-
path: ファイルのパス (string または pathlib.Path) -
mimetype: 省略可能なファイルの MIME タイプ。指定しない場合は拡張子から推定されます 戻り値: -
str: ディレクトリパスを含まないファイル名。
method open
bool: ファイルを正常に開けた場合は True、それ以外の場合は False。
method save
class Markdown
Markdown を表示可能なオブジェクト。
-
dest: ファイルのコピー先パス (string または pathlib.Path) 。コピー先パスにはファイルまたはディレクトリを指定できます。 引数: -
markup(str): Markdown を含む文字列。 -
code_theme(str, optional): コードブロック用の Pygments テーマ。デフォルトは “monokai” です。コードテーマについては https://pygments.org/styles/ を参照してください。 -
justify(JustifyMethod, optional): 段落の justify 値。デフォルトは None です。 -
style(Union[str, Style], optional): Markdown に適用する任意のスタイル。 -
hyperlinks(bool, optional): ハイパーリンクを有効にします。デフォルトはTrueです。
method __init__
class MessagesPrompt
method __init__
-
inline_code_lexer: (str, optional): インラインコードのハイライトが有効な場合に使用するレキサー。デフォルトは None です。 -
inline_code_theme: (Optional[str], optional): インラインコードのハイライトに使用する Pygments テーマ。ハイライトを無効にする場合は None。デフォルトは None です。 Pydantic のフィールド: -
name:str | None -
description:str | None -
ref:trace.refs.ObjectRef | None -
messages:list[dict]
method format
method format_message
classmethod from_obj
class Model
入力に対して処理を行うコードとデータの組み合わせを表すことを目的としています。たとえば、プロンプトを使って LLM を呼び出し、予測を行ったりテキストを生成したりできます。
モデルを定義する属性やコードを変更すると、その変更はログされ、バージョンが更新されます。これにより、モデルの異なるバージョン間で予測を比較できます。これを使用して、プロンプトを改善したり、最新の LLM を試したり、異なる設定間で予測を比較したりできます。
例:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | None
method get_infer_method
class Monitor
受信したcallを自動的にスコアリングするモニターを設定します。
例:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonesampling_rate:<class 'float'>scorers:list[flow.scorer.Scorer]op_names:list[str]query:trace_server.interface.query.Query | Noneis_traced:<class 'bool'>active:<class 'bool'>scorer_debounce_config:flow.monitor.ScorerDebounceConfig | None
method activate
method deactivate
classmethod from_obj
class Object
トラッキングとバージョン管理が可能な Weave オブジェクトの基底クラスです。
このクラスは Pydantic の BaseModel を拡張し、オブジェクトのトラッキング、参照、シリアライズのための Weave 固有の機能を提供します。オブジェクトには名、説明、参照を設定でき、Weave システムで保存および取得できます。
属性:
name(Optional[str]): オブジェクトの人間が読み取れる名前。description(Optional[str]): オブジェクトが表す内容の説明。ref(Optional[ObjectRef]): Weave システム内のオブジェクトへの参照。
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | None
classmethod from_uri
uri(str): オブジェクトを指す Weave URI。objectify(bool): 結果をオブジェクト化するかどうか。デフォルトは True です。
Self: URI から生成されたこのクラスのインスタンス。
NotImplementedError: クラスがデシリアライズに必要なメソッドを実装していない場合。
classmethod handle_relocatable_object
v(Any): 検証する値。handler(ValidatorFunctionWrapHandler): 標準の pydantic 検証ハンドラー。info(ValidationInfo): 検証コンテキスト情報。
Any: 検証済みのオブジェクトインスタンス。
ObjectRef を渡した場合
WeaveObject を渡した場合
プロパティ ダイジェスト
プロパティ extra
method as_param_dict
method delete
method get
method is_descended_from
method maybe_parse_uri
method parse_uri
method with_attr
method with_extra
method with_index
method with_item
method with_key
class Prompt
Pydantic のフィールド:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | None
method format
class SavedView
SavedView オブジェクトを扱うための、fluent スタイルのクラスです。
method __init__
プロパティ entity
プロパティ label
プロパティ project
プロパティ view_type
method add_column
method add_columns
method add_filter
method add_sort
method column_index
method filter_op
method get_calls
method get_known_columns
method get_table_columns
method hide_column
method insert_column
classmethod load
method page_size
method pin_column_left
method pin_column_right
method remove_column
method remove_columns
method remove_filter
method remove_filters
method rename
method rename_column
method save
method set_columns
method show_column
method sort_by
method to_grid
method to_rich_table_str
method ui_url
method unpin_column
class Scorer
Pydantic のフィールド:
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonecolumn_map:dict[str, str] | None
プロパティ display_name
classmethod from_obj
method model_post_init
method score
method summarize
class StringPrompt
method __init__
name:str | Nonedescription:str | Noneref:trace.refs.ObjectRef | Nonecontent:<class 'str'>
method format
classmethod from_obj
class Table
method __init__
プロパティ rows
method append
method pop
class ContextAwareThread
呼び出し元のコンテキストで関数を実行する Thread。
これは、スレッド内で call が期待どおりに動作するようにする threading.Thread の差し替え実装です。Weave では特定の contextvars が設定されている必要があります (call_context.py を参照) が、新しいスレッドは親からコンテキストを自動ではコピーしないため、call コンテキストが失われることがあります。これは好ましくありません。このクラスは contextvar のコピーを自動化するので、このスレッドを使うだけで、ユーザーの期待どおりに動作します。
このクラスを使わなくても、代わりに次のように書けば同じ効果を得られます。
method __init__
プロパティ daemon
このスレッドがデーモンスレッドであるかどうかを示す真偽値です。 これはstart() が呼び出される前に設定する必要があります。そうしないと RuntimeError が発生します。初期値はこのスレッドを生成したスレッドから継承されます。メインスレッドはデーモンスレッドではないため、メインスレッドで作成されたすべてのスレッドはデフォルトで daemon = False になります。
デーモンスレッドだけが残ると、Python プログラム全体は終了します。
プロパティ ident
このスレッドの識別子です。まだ開始されていない場合は None になります。 これは 0 以外の整数です。get_ident() 関数を参照してください。スレッドが終了して別のスレッドが作成されると、スレッド識別子が再利用されることがあります。この識別子は、スレッドの終了後も利用できます。
プロパティ 名
識別のためにのみ使用される文字列です。 特別な意味はありません。複数のスレッドに同じ名を付けることができます。初期名はコンストラクタで設定されます。プロパティ native_id
このスレッドのネイティブな整数のスレッド ID です。まだ開始されていない場合は None です。 これは 0 以上の整数です。get_native_id() 関数を参照してください。これは、カーネルによって報告されるスレッド ID を表します。
method run
class ThreadContext
現在のスレッドとターンの情報にアクセスするためのコンテキストオブジェクト。
method __init__
プロパティ thread_id
このコンテキストのthread_id を取得します。
thread_id: このコンテキストのスレッド識別子。無効な場合は None。 戻り値: スレッド識別子。スレッドのトラッキングが無効な場合は None。
プロパティ turn_id
アクティブなコンテキスト内の現在の turn_id を取得します。 戻り値: 設定されていれば現在の turn_id、設定されていなければ None。class ContextAwareThreadPoolExecutor
呼び出し元のコンテキストで関数を実行する ThreadPoolExecutor。
これは concurrent.futures.ThreadPoolExecutor のドロップイン置換で、executor 内でも Weave の Call が想定どおりに動作するようにします。Weave では特定の contextvars を設定しておく必要があります (call_context.py を参照) 。しかし、新しいスレッドは親のコンテキストを自動的には引き継がないため、call コンテキストが失われることがあります。これは望ましくありません。このクラスは contextvar のコピーを自動化するので、この executor を使用すれば、ユーザーの期待どおりに「そのまま動作」します。
このクラスを使わなくても、代わりに次のように書けば同じ効果を得られます。
method __init__
method map
method submit
function add_tags
関数 as_op
-
obj_ref: オブジェクトのバージョンへの参照。ObjectRef (weave.publish() によって返される) または weave /// URI 文字列のいずれかです。 -
tags: 追加するタグ文字列のリスト。 引数: -
fn: @weave.op でデコレートされた関数。 戻り値: 関数の Op。
関数 attributes
関数 finish
関数 get
uri: 完全修飾された Weave ref URI。 戻り値: オブジェクト。
関数 get_aliases
obj_ref: オブジェクトバージョンへの参照。ObjectRefまたはweave:///URI 文字列を指定します。 戻り値: エイリアス文字列のリストです。
関数 get_client
関数 get_current_call
返された Call のattributesdict は、call が開始されると不変になります。Op を呼び出す前に call のメタデータを設定するには、:func:weave.attributesを使用してください。summaryフィールドは Op の実行中に更新でき、call の終了時に計算された summary 情報とマージされます。
関数 get_tags
obj_ref: オブジェクトのバージョンへの参照。ObjectRef または weave /// URI 文字列を指定します。 戻り値: タグ文字列のリストです。
関数 get_tags_and_aliases
obj_ref: オブジェクトのバージョンへの参照です。ObjectRef または weave /// URI 文字列を指定します。 戻り値:(タグ, エイリアス)のタプルです。どちらも文字列のリストです。
関数 init
init の戻り値への参照を保持しておく必要はありません。
init の実行後、weave.op でデコレートされた関数の Call は、指定したプロジェクトにログされます。
引数:
注: グローバルな後処理設定は、各 op 独自の後処理の後に、すべての op に適用されます。順序は常に次のとおりです: 1. op 固有の後処理 2. グローバルな後処理
project_name: ログ先の Weights & Biases のチームおよびプロジェクトの名。チームを指定しない場合は、デフォルトの entity が使用されます。デフォルトの entity を確認または更新するには、W&B Models ドキュメントの User Settings を参照してください。settings: Weave クライアント全般の設定。autopatch_settings: (非推奨) autopatch インテグレーションの設定。代わりに明示的なパッチ適用を使用してください。global_postprocess_inputs: すべての op のすべての入力に適用される関数。global_postprocess_output: すべての op のすべての出力に適用される関数。global_attributes: すべてのトレースに適用される属性の辞書。 戻り値: Weave クライアント。
関数 list_aliases
関数 list_tags
関数 log_call
op(str): ログするオペレーション名です。これは、その call のop_nameとして使用されます。匿名オペレーション (公開済みの ops を参照しない文字列) もサポートされます。inputs(dict[str, Any]): オペレーションの入力パラメーターを格納した辞書です。output(Any): オペレーションの出力 / 結果です。parent(Call | None): この call をネストするための省略可能な親 call です。指定しない場合、この call はルートレベルの call になります (現在の call コンテキストが存在する場合は、その下にネストされます) 。デフォルトは None です。attributes(dict[str, Any] | None): call に付加する省略可能なメタデータです。これらは call の作成後に固定されます。デフォルトは None です。display_name(str | Callable[[Call], str] | None): UI で call に表示する省略可能な表示名です。文字列、または call を受け取って文字列を返す callable を指定できます。デフォルトは None です。use_stack(bool): call をランタイムスタックに積むかどうかです。True の場合、call は call コンテキスト内で利用可能になり、weave.require_current_call()でアクセスできます。False の場合、call はログされますが、call スタックには追加されません。デフォルトは True です。exception(BaseException | None): オペレーションが失敗した場合にログする省略可能な例外です。デフォルトは None です。
Call: 完全な trace 情報を含む、作成および完了済みの Call オブジェクトです。
関数 publish
-
func: デコレートする関数。 -
name: op のカスタム名。デフォルトは関数名です。 -
call_display_name: Call の表示名。文字列または callable を指定できます。 -
postprocess_inputs: ログする前に入力を変換する関数。 -
postprocess_output: ログする前に出力を変換する関数。 -
tracing_sample_rate: トレースする Call の割合 (0.0~1.0) 。 -
enable_code_capture: この op のソースコードを取得するかどうか。 -
accumulator: ストリーミング op の結果を蓄積する関数。 -
eager_call_start: True の場合、Call の開始はバッチ処理されず、すぐに送信されます。評価のように実行時間の長い operation を UI にすぐ表示する必要がある場合に便利です。 引数: -
obj: 保存してバージョン管理するオブジェクト。 -
name: オブジェクトの保存時に使用する名。 -
tags: 公開されたオブジェクトバージョンに追加する任意の タグ のリスト。 -
aliases: 公開されたオブジェクトバージョンに設定する任意の エイリアス のリスト。 戻り値: 保存されたオブジェクトへの Weave Ref。
関数 ref
location: Weave Ref URI、またはweave.init()が呼び出されている場合はname:versionもしくはname。バージョンが指定されていない場合はlatestが使用されます。 戻り値: オブジェクトを指す Weave Ref。
関数 remove_aliases
関数 remove_tags
obj_ref: オブジェクトへの参照です。ObjectRef または weave /// URI 文字列を指定します。alias: 削除するエイリアス名、またはエイリアス名のリストです。 引数:
関数 require_current_call
weave.init が返す WeaveClient の get_call method を使用して、Call オブジェクトを取得できます。
call method を使用することもできます。例:
obj_ref: オブジェクトのバージョンへの参照。ObjectRef または weave /// URI 文字列のいずれかです。tags: 削除するタグ文字列のリスト。 戻り値: 現在実行中の Op の Call オブジェクト
NoCurrentCallError: tracking が初期化されていない場合、またはこの method が Op の外で呼び出された場合。
関数 set_aliases
関数 set_view
_weave.views.<name>にカスタムviewを追加します。
-
obj_ref: オブジェクトのバージョンへの参照。ObjectRef または weave /// URI 文字列のいずれかです。 -
alias: 設定するエイリアス名、またはエイリアス名のリスト (例: “production”) 。 引数: -
name: viewの名前 (summary._weave.views配下のキー) 。 -
content:weave.Contentインスタンス、または生の文字列。文字列は、指定された拡張子またはMIMEタイプを使用してContent.from_textでラップされます。 -
extension:contentが文字列の場合に使用するオプションのファイル拡張子。 -
mimetype:contentが文字列の場合に使用するオプションのMIMEタイプ。 -
metadata: テキストからContentを作成する際に付加するオプションのメタデータ。 -
encoding: テキストからContentを作成する際に適用するテキストエンコーディング。 戻り値: なし
import weave
weave.init(“proj”) @weave.op … def foo(): … weave.set_view(“readme”, ”# Hello”, extension=“md”) … return 1 foo()
関数 thread
-
thread_id: このコンテキストで Call に関連付けるスレッド識別子。指定しない場合は、UUID v7 が自動生成されます。Noneの場合は、スレッドのトラッキングが無効化されます。 返される値: -
ThreadContext:thread_idと現在のturn_idにアクセスできるオブジェクト。