Skip to content

predict.py压测GPU使用率低 #9

@zhongjy2020

Description

@zhongjy2020

infer.py测试阶段GPU使用率可以达到90%以上;但是,使用predict.py进行线上压测时,并发量很小,GPU使用率只有20~30%。请问,这是什么原因导致的呢?

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions