排序方式： 共有6条查询结果，搜索用时 183 毫秒
1
1.
针对传统HDFS在存取海量小文件时出现的I/O性能瓶颈问题,本文提出了一种优化的HDFS存取策略.通过文件预处理、增加元数据信息和元数据批处理操作等优化策略,比较好地解决了传统HDFS处理海量小文件的性能问题.并通过试验证明了该方法的有效性. 相似文献
2.
针对安防领域中的信息孤岛问题,本文提出一种基于大数据的分布式云计算模型,该模型由域结点、子域结点和终端结点组成,终端结点负责数据的采集,域结点和子域结点负责数据的计算和存储,并给出一种基于云计算的大数据安防监控系统架构．该模型集成了大数据和云计算的各自优势,解决了安防领域中的信息孤岛问题,具有通信带宽低、扩展弹性高和易于实施的特点． 相似文献
3.
部分可观察马尔可夫决策过程（ Partially Observable Markov Decision Processes, POMDPs ）是动态不确定环境下序贯决策的理想模型,但是现有算法都陷入“维数灾”和“历史灾”问题,造成理想的POMDPs模型无法在实际工程中得到应用．本文首先详细分析了POMDPs精确算法的复杂度,阐述问题求解的难点;然后比较分析现有基于点的离线算法和在线算法两类算法的算法思想和时间复杂度,指出两类算法的优缺点;最后简介POMDPs实际应用情况和未来的研究方向． 相似文献
4.
在大数据应用领域,如何快速地对海量数据进行挖掘是当前大数据应用基础研究的热点和难点,也是制约大数据真正应用的关键.而机器学习是解决该问题的有效途径,本文综述抽象增强学习、可分解增强学习、分层增强学习、关系增强学习和贝叶斯增强学习等五类增强学习方法的研究进展,分析了它们的优势和缺点,指出将监督学习或半监督学习与增强学习相结合是大数据机器学习的有效方法. 相似文献
5.
针对大数据处理框架MapReduce中的任务调度问题,提出一种基于Markov决策过程（Markov Decision Process,MDP）的任务调度算法,通过状态集来描述集群中节点的负载和作业的数据本地性需求,使用状态转移函数表示调度策略对状态的影响,采用值迭代求解算法求取最优策略,实现集群中节点的最优调度．实验结果表明,该算法能够保证数据本地性的同时,减少作业响应时间,提高系统综合性能． 相似文献
6.
为了解决动态不确定环境下多智能体系统中的规划问题,通过对现有规划系统的分析,提出一种新的分布式规划系统MPOMDPRS,通过保持PRS系统的持续规划机制来适应环境的动态性;通过保持POMDP的概率分布模型来适应环境的不确定性;通过通讯集的添加来满足多智能体系统的需要,仿真实验证明了系统的有效性和实时性,可以满足环境的动态不确定性要求。 相似文献
1