需求人群
该模型面向广泛的商业和研究用途,特别是在需要视觉和文本输入能力的通用AI系统和应用程序中,适用于内存/计算受限环境、延迟受限场景、通用图像理解、OCR、图表和表格理解等。
使用场景
用于教育领域,帮助学生理解复杂概念。在商业环境中,用于图像和文本数据的分析和处理。在研究中,作为生成AI功能的强大基础模型。
产品特色
4.2B参数,包含图像编码器、连接器、投影器和Phi-3 Mini语言模型。支持文本和图像输入,最适合使用聊天格式的提示。上下文长度为128K tokens。使用512 H100-80G GPU进行训练,训练时间为1.5天。训练数据包含5000亿视觉和文本token。输出为针对输入生成的文本。模型训练日期为2024年2月至4月。模型为静态模型,训练截止日期为2024年3月15日。
使用教程
11. 访问Azure AI模型库并选择Phi-3-vision-128k-instruct模型。22. 根据需要进行模型的下载或部署。33. 准备输入数据,包括文本和图像。44. 设置模型参数,例如温度和最大新token数。55. 将输入数据传递给模型并接收输出。66. 分析模型输出,根据应用场景进行进一步处理。