Skip to content

@codesoul-co/hypha-inference / pipeline

模块用法

用于使用该功能边界的公共契约与操作。Pipeline 模块公开 1 类、1 接口。

从包入口导入

ts
import {
  HyphaInferencePipeline,
} from '@codesoul-co/hypha-inference';

import type {
  HyphaInferencePipelineOptions,
} from '@codesoul-co/hypha-inference';

使用要点

  • 1 个类型/接口用于应用代码、Adapter 或测试中的静态契约;请使用 import type,运行时不应依赖它们。
  • 1 个类提供可实例化的运行时实现;构造参数与公开方法在各自条目中完整列出。

公共导出

Symbol种类签名说明
HyphaInferencePipelinenew HyphaInferencePipeline(options?: HyphaInferencePipelineOptions): HyphaInferencePipelineHypha Inference Pipeline 类,共公开 4 个构造函数或成员;精确签名见本条目的声明与成员表。
HyphaInferencePipelineOptions接口interface HyphaInferencePipelineOptionsHypha Inference Pipeline Options 接口,共包含 7 个公开字段或方法。

HyphaInferencePipeline

Hypha Inference Pipeline 类,共公开 4 个构造函数或成员;精确签名见本条目的声明与成员表。

  • 种类: 类
  • 导入: import { HyphaInferencePipeline } from '@codesoul-co/hypha-inference';
  • 源码模块: pipeline

声明

text
export declare class HyphaInferencePipeline implements InferenceProvider {
    readonly id: string;
    constructor(options?: HyphaInferencePipelineOptions);
    infer(request: InferenceRequest): Promise<InferenceResponse>;
    stream(request: InferenceRequest): AsyncIterable<InferenceResponse>;
}

公开成员

成员种类签名说明
constructor构造函数(options?: HyphaInferencePipelineOptions): HyphaInferencePipeline创建该类的实例。
id属性readonly id: string公开属性;类型、只读和可选状态以签名列为准。
infer方法infer(request: InferenceRequest): Promise<InferenceResponse>公开方法;参数与返回类型以签名列为准。
stream方法stream(request: InferenceRequest): AsyncIterable<InferenceResponse>公开方法;参数与返回类型以签名列为准。

HyphaInferencePipelineOptions

Hypha Inference Pipeline Options 接口,共包含 7 个公开字段或方法。

  • 种类: 接口
  • 导入: import type { HyphaInferencePipelineOptions } from '@codesoul-co/hypha-inference';
  • 源码模块: pipeline

声明

text
export interface HyphaInferencePipelineOptions {
    id?: string;
    defaultBackendId?: string;
    compiler?: PromptCompiler;
    segmenter?: PrefixSegmenter;
    hotLayer?: PlasmodHotLayer;
    backends?: InferenceBackendRegistry;
    reusePolicy?: PlasmodReusePolicy;
}

契约成员

成员种类签名说明
backends属性backends?: InferenceBackendRegistry公开属性;类型、只读和可选状态以签名列为准。
compiler属性compiler?: PromptCompiler公开属性;类型、只读和可选状态以签名列为准。
defaultBackendId属性defaultBackendId?: string公开属性;类型、只读和可选状态以签名列为准。
hotLayer属性hotLayer?: PlasmodHotLayer公开属性;类型、只读和可选状态以签名列为准。
id属性id?: string公开属性;类型、只读和可选状态以签名列为准。
reusePolicy属性reusePolicy?: PlasmodReusePolicy公开属性;类型、只读和可选状态以签名列为准。
segmenter属性segmenter?: PrefixSegmenter公开属性;类型、只读和可选状态以签名列为准。