Java-远程-1个月

项目编号：【144850】
基于这篇论文进行二次开发，这篇论文是一个agent在一个环境中 进行导航。我们希望在环境中增加人的行为，然后agent不仅能够导航而且还能识别人的行为。
https://arxiv.org/pdf/2110.13309.pdf
1. 这篇论文里面有个HAMT的结构，然后是基于ViT backbone的，然后我们希望基于这个ViT backbone，能够写一个识别动作行为的模块；
2. 然后这篇论文里面有个simulator，我们希望能在simulator里面增加人的行为；
3. 1和2结合在一起进行强化训练，达到效果就是我们改进后的HAMT（也就是agent）能够在simulator中导航（原来的功能）以及识别simulator中的行为。
https://github.com/cshizhe/VLN-HAMT 这是原论文的代码
交付代码 以及 在我们服务器上确保能运行 一些细节需求（比如用哪些评价指标，最后做哪些图，表啊） 我们之后详细沟通