基于大数据的农产品产销分析与推荐系统研究1.docx

??

?

??

基于大数据的农产品产销分析与推荐系统研究1

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

摘要：以Nutch开源搜索引擎、Hadoop分布式集群等关键技术为核心，构建研究分析现有农业产销信息聚合及推荐系统，利用主题搜索引擎从互联网上采集信息构建农产品生产与市场空间数据仓库和数据集市，研究并提出更加适合农业领域的用户兴趣模型和组合推送算法，在云计算环境下，对现有的农业信息推荐系统进行改进，使其更加适合我国农业产销信息体系，为农业生产流通消费匹配管理决策提供支持。为从事农业的用户在互联网中匹配所需的产销信息提供了有效的解决方案，降低农产品营销成本，为解决农产品的买难卖难问题提供技术支撑。

关键字：大数据；云计算；农产品

1、结论

农业生产既是自然再生产也是经济再生产的特性，使得农业生产与市场流通匹配任务艰巨环节复杂。综合分析人口、资源、环境等各种制约因素，充分运用现代信息技术进行农业生产、流通、消费的信息采集和信息处理，使实现农业生产与市场流通时空匹配成为可能。

但农产品市场流通具有环节多、信息海量且凌乱分散等特点，使得快捷、及时、精准地捕捉到决策支持需求信息的难度加大，农业生产与市场流通不匹配的矛盾日益突出，农业生产与市场的非寻常波动呈突发、多发、并发趋势。特别是随着农业市场化步入快车道，使得提供农产品市场准确快捷信息服务越发显得重要。随着信息技术和互联网技术的日新月异，我国农业信息化获得的长足的发展同时也迎来大数据时代的挑战。互联网的发展使得农民可以通过web检索自己感兴趣的市场信息，但是目前的情况是web上的农业产销信息海量而且繁冗。所以在海量数据信息时代，农民很难获取自己真正所需的信息，这也引发了信息过载和信息爆炸问题。农业工作者获取其所需信息的方式通常是使用通用搜索引擎，但通用搜索引擎缺乏对用户个体的差异性的处理，针对同一查询信息对不同用户返回的结果通常都是相同的海量信息，用户不能逐页查看，一般只会查看前几页信息，这样很难得到自己真止所需信息，严重挫伤农民主动查询信息的积极性。当前面临的另一个问题是网上的信息浩如烟海，据估计，因特网上目前有数千万URL和上百亿页网页文件，而且网页文件数量每年增加一倍，因此大规模数据的存储和运算成为瓶颈问题。

云计算的出现作为崭新的商业计算模型吸引了大众的眼球。Hadoop便是便于开发和并行处理海量数据的云计算平台，其特征为扩展能力强，运行成本不高，处理和计算效率很高同时具有很好的可靠性。依托Hadoop高效的处理能力，可以真正做到实时准确地依照用户实际兴趣从大量的web信息中为其推荐所需信息，解决当前农业信息服务急需解决的问题。

本课题就是主要研究分析现有农业产销信息聚合及推荐系统，利用主题搜索引擎从互联网上采集信息构建农产品生产与市场空间数据仓库和数据集市，研究并提出更加适合农业领域的用户兴趣模型和组合推送算法，在云计算环境下，对现有的农业信息推荐系统进行改进，使其更加适合我国农业产销信息体系，为农业生产流通消费匹配管理决策提供支持。

2、农产品产销分析与研究

2.1我国农产品产销对接模式

传统“一站式”模式

我国农产品流通起步晚，流通模式相较发达国家也比较落后，在我国呈现为多样化的特点。就我过农产品市场现状，可将产销对接模式细分为一站式”、“二站式”及“多站式”模式。

“一站式”指的是生产者和消费者不通过中间环节直接进行交易，即生通常所说的农产品供应方借助农产品市场或者通过直销的方式和消费者进行交易的方式。“一站式”模式在于农村的小城镇及大城市的郊区地带常见，其特点是流通环节较少，流通损耗不大，而交易成本和物流成本很大，形不成大规模效应，产品附加值太少。模式结构如图1所示。

图1“一站式”产销对接模式

“二站式”产销对接模式

这是一种伴随着农产品批发市场、大型超市、龙头企业的出现而衍生的模式，具体是生产者通过中间商或企业与消费者见面，将其所生产的农产品卖给消费者，这种模式一般得通过龙头企业或合作组织引导。其具体环节包括农民到零售商到消费者，农民，批发市场，消费者，农民，农产品加工企业和消费者。“农-超（超市）对接”、“农-批（批发市场）对接”模式是二站式流通模式的典型，其优点是由于流通环节不多因此损耗较少，易于大规模应用，效率较高。但不利于保障农民的切身利益，对农民的收入提高益处相对不大。模式结构如图2所示。

图2“二站式”产销对接模式

“多站式”产销对接模式及其弊端

“多站式”主要是在“二站式”基础上加入了批发和零售市场等多个流通环节。如图3中所示的模式最为常见。

图3“多站式”产销对接模式

这种模式通常的流程是农户的农产品卖给批发商，通过批发市场卖到零售市场再卖给消费者，在这个环节中批发市场起到了重要作用，该模式在我国大中城市