首页 | 本学科首页   官方微博 | 高级检索  
     检索      

基于以太网机群的海量高光谱数据处理系统平台设计
引用本文:王彩玲,胡柄樑,王洪伟,刘学斌,陈小来,李普.基于以太网机群的海量高光谱数据处理系统平台设计[J].应用光学,2013,34(4):604-608.
作者姓名:王彩玲  胡柄樑  王洪伟  刘学斌  陈小来  李普
作者单位:1.西安石油大学 计算机学院,陕西 西安 710065; 2.中国科学院 西安光学精密机械研究所,陕西 西安 710119;3. 武警工程大学,陕西 西安 710086
摘    要: 在一些大型图像处理系统中,通过构建服务器机群网络,可实现多台服务器并行处理图像数据流。针对高光谱遥感数据及处理算法特点,设计了基于以太网的服务器机群海量高光谱数据处理系统平台,平台由7台服务器和1台千兆网交换机构组成,其中选择CPU核数不低于8核的4台HP刀片服务器作为并行处理服务器,在服务器机群软件设计中,通过任务分解、算法流水化处理及网络负载均衡等方法来实现并行处理。该系统已应用在某遥感数据处理系统中,多台服务器同时写入SAN盘阵,可实现6 000 Mbps的写入能力。

关 键 词:以太网机群  并行计算  任务分解  高光谱数据处理

Platform design for massive hyperspectral data processing based on internet cluster
WANG Cai-ling , HU Bing-liang , WANG Hong-wei , LIU Xue-bin , CHEN Xiao-lai , LI Pu.Platform design for massive hyperspectral data processing based on internet cluster[J].Journal of Applied Optics,2013,34(4):604-608.
Authors:WANG Cai-ling  HU Bing-liang  WANG Hong-wei  LIU Xue-bin  CHEN Xiao-lai  LI Pu
Institution:1. School of Computer Science, Xi''an Shiyou University, Xi-an 710065, China; 2. Xi-an Institute of Optics and Precision Mechanics of CAS, Xi-an 710119, China; 3. The Engineering University of the Chinese People-s Armed Police Force, Xi-an 710086, China
Abstract:In some large-scale image processing systems, multiple servers can achieve parallel processing image data stream to complete the complex data operations by building server cluster network. An Ethernet-based server cluster for huge hyperspectral image processing system was designed based on image characteristics. In order to achieve parallel processing, the task decomposition, algorithm pipelined processing and network load balancing were used in software design. The system is used in a hyperspectral image data processing system and the date rate can achieve 6 000 Mbps.
Keywords:internet cluster  parallel processing  task decomposition  hyperspectral image data processing
本文献已被 CNKI 万方数据 等数据库收录!
点击此处可从《应用光学》浏览原始摘要信息
点击此处可从《应用光学》下载免费的PDF全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号