基于Hive的性能优化研究

主要从Map Reduce作业调度和Hive性能调优两个方面对Hive的性能优化进行研究.对于Map Reduce主要从编程模型切入,分析其执行过程,并从map端、reduce端进行参数调优.接着从Hive框架角度入手,分别从分区表和外部表以及常用数据文件的压缩、行式存储与列式存储等方面进行深入研究.实验结果表明,snappy压缩、orcfile/parquet存储格式对于列式查询,提高查询效率,对于大数据分析平台有较好的兼容性.     

RAFT聚合合成一种即含甲酰基又含手性β-蒎烯单元聚合物

设计并合成了一种新型含甲酰基同时又含β-蒎烯单元的新单体2-β-蒎氧基-5-乙烯基苯甲醛(POVB),选择苯基双硫代乙酸1-苯基乙酯(PEPDA)为RAFT试剂、以AIBN为引发剂、在60℃下THF中实现了POVB的"活性"/可控RAFT自由基聚合.单体浓度半对数ln([M]0/[M])与聚合时间符合线性关系,聚合过程呈现一级动力学特征;聚合物分子量(Mn)随单体转化率几乎线性增加,而且整个反应过程中分子量分布(Mw/Mn1.2)保持在较窄的范围.1H-NMR的分析进一步证实了聚合物链的末端精细结构.此外,CD谱结果表明手性单元β-蒎烯基能赋予聚合物以光学活性.     

基于DTMF和Internet的双向控制系统的设计与实现

为了提供舒适、便捷、安全的生活环境 ,并且有效利用目前的网络系统对远程家电进行控制以及了解家电的工作状态 ,为人类提供更好的服务 ,提出了一个具体的解决方案     

聚多巴胺修饰电极对痕量铅的测定研究

通过多巴胺(DA)的自聚反应在玻碳电极(GCE)表面修饰一层聚多巴胺(PDA)膜,对DA的自聚条件和方波溶出伏安法测试条件进行优化。优化的实验条件为:以2 mg/m L DA的Tris-HCl(0.01 mol/L,p H8.5)溶液为自聚溶液,自聚反应时间为2.5 h,铅的测试底液为0.1 mol/L HCl溶液,修饰电极在铅测试溶液中于-1.0 V富集300 s时,溶出峰的峰形好,且峰电流大。峰电流与铅浓度分别在0.1~1.0μg/L和1.0~10.0μg/L范围内呈良好的线性关系,检出限为0.016 5μg/L。实验结果表明,该聚多巴胺修饰电极制备简单、灵敏度高、成本低,可用于加碘盐、纯净水和自来水中痕量铅的测定。     

基于贝叶斯分类的主题爬虫

随着网络的高速发展,其信息资源越来越庞大,面对巨量的信息库,搜索引擎起着重要的作用．主题爬虫技术作为搜索引擎的主要核心部分,计算搜索结果与搜索主题的关系,该关系被称为相关性．一般主题爬虫方法只计算网页内容与搜索主题的相关性,作者所提主题爬虫,通过链接内容和锚文本内容计算链接的重要性,然后利用贝叶斯分类器对链接进行分类,最后利用余弦相似函数计算网页的相关性,如果相关值大于阀值,则认为该网页与预定主题相关,否则不相关．实验结果证明：所提出主题爬虫方法可以获得很高的精确度．     

基于信息增益的中文网页SVM分类研究

针对中文网页文本分类中特征降维方法和传统信息增益方法的缺陷和不足做出优化改进,旨在有效提高文本分类效率和精度.首先,采取词性过滤和同义词归并处理对特征项进行初次特征降维,然后提出改进的信息增益方法对特征项进行特征加权运算,最后采用支持向量机(SVM)分类算法对中文网页进行文本分类.理论分析和实验结果都表明本方法比传统方法具有更好的性能和分类效果.     

氯霉素在过氧化聚多巴胺修饰电极上的电化学行为及测定

利用多巴胺(DA)的自聚反应在玻碳电极(GCE)表面形成聚多巴胺(PDA)膜,将聚多巴胺修饰电极浸入碱溶液中进行电化学处理,制得过氧化聚多巴胺修饰电极(OPDA/GCE)。通过方波伏安法直接测定氯霉素在OPDA/GCE上的电化学响应信号,得到待测溶液中氯霉素的浓度。对多巴胺的自聚时间、氯霉素在修饰电极上的电化学性质、测试条件、溶解氧的影响及去除方法等进行考察。结果表明,氯霉素在OPDA/GCE上的还原峰电流与其浓度在3.0×10-6~1.1×10-3mol/L范围内呈良好的线性关系,检出限(S/N=3)为7.8×10-7mol/L,牛奶和蜂蜜样品的加标回收率分别为83.4%~94.1%和91.5%~108.6%。该修饰电极制备方法简便易行、成本低、便于批量制备,用其检测氯霉素操作简单、选择性好。     

web日志挖掘中会话识别方法

通过对传统web会话识别方法分析和比较,改进了目前最常用的基于时间阈值会话识别方法,提出了一种基于动态阈值会话识别方法,该算法采用动态计算会话中请求记录间的平均时间间隔和动态计算会话中页面的平均大小相结合的方法,根据用户和网页的特点动态调整阈值,相对于传统单一的先验阈值,该方法可以根据不同的用户访问不同的页面生成动态的阈值,充分运用用户和网页信息.经过实验验证,该方法可以识别出更多的用户会话,且识别会话的准确率和查全率也比传统算法更高.     

关于色散方程的一类二阶恒稳显格式

1　引　　言对于具有高阶空间导数的发展方程 ,其显格式因结构简单 ,易于计算 ,具有明显的计算优越性 ,但已有的绝大多数显格式的稳定性条件都十分苛刻 (见 [6 ] -[1 5] ) ,远不如一般隐格式 ,使其应用受到限制 .1 994年《计算物理》中关于“色散方程的一类具任意稳定性的显格式”一文 (见 [1 4 ] ) ,把色散方程显格式的稳定性条件提高到了可以任意选择的程度 ,但截断误差仅为 O(τ+h) .本文构造了新一类双参数显式差分格式 ,它是绝对稳定的 ,且其截断误差是 O(τ+h2 ) ,它结构简单 ,易于实现计算 ,利于实际应用 .我们用数值例子验证了理论…     

浅析小接地电流系统单相断线故障

在电网系统中,中低压的配电网络的线路铺设范围较广,并且其线路分支较多,在电能传输的过程中,通常需要通过环境较恶劣的区域,这使得线路在运行的过程中,出现单相断线故障的概率比较大,在实际的配电网络运行过程中,一旦出现单相断线故障,将会对整个配电网络的正常运行产生严重的影响,导致巨大的经济损失,并对用户的正常供电产生影响,因此,对小接地电流系统的单相断线故障进行有效的分析是非常必要的,这对于系统中单相断线故障发生率的降低具有积极的作用.