展开

作用

Untwist 利用强大的 Google Gemini API，可将静态学习内容（例如视频和 PDF 文件）转变为动态互动体验。Untwist 首次让用户能够与视频等 2D 内容进行深入互动。用户可以围绕正在观看的内容的任何部分画一个框，并专门针对所选区域提出问题。然后，Untwist 会根据突出显示的内容的确切部分提供完全量身定制的答案，让学习体验更加精准和个性化。
当用户上传内容时，Untwist 会借助 Gemini 生成详细摘要、选择关键视频帧和转写音频，从而对内容进行处理。该 API 会从内容中提取重要信息，为日后进行互动做好准备。然后，用户可以在高度互动的环境中探索这些内容，只需在视频或 PDF 中的特定区域周围画框即可提出问题。Untwist 利用 Gemini API 根据处理的内容、问题性质和用户偏好设置做出回答。
此外，对于每次用户互动，Untwist 都会指示 Gemini 根据科学研究估算学习因素。这些估算值用于制定个性化学习个人资料，以便应用提供量身定制的回答，满足用户的学习需求。这种个性化方法会随着每次互动而不断发展，使 Untwist 成为动态个性化学习的强大工具