农产品市场信息的采集程序

一、提高认识，加强领导

做好农产品市场价格信息服务工作是政府公益性信息服务的重

要内容。各级农业主管部门要提高认识，加强领导，明确责任，落

实专人，真正把农产品市场价格信息工作纳入重要工作议程，切实

做好本地农产品市场价格信息采集发布工作，确保为农民提供及

时、准确的信息服务。

二、建立信息采集补贴制度

按照《黑龙江省农业信息采集管理办法》精神，省里将根据各

地农产品市场价格信息工作完成情况，给予适当信息采集费用补

贴。同时，对工作完成情况在“黑龙江农业信息网”上公布。

三、具体要求

（一）信息采集及发布。根据信息采集指标的要求，采集指标

为市场行情类信息，采集品种共分7类（见附件1）。采集地点为本

地大中型农产品市场。每一指标的市场价格指在同一信息采集点以

同品种3个样本的平均价格，同时对当地农产品价格走向进行分析

预测。采集时间为每周一、三、五，并于采集日14：00前，通过

“黑龙江农业信息网”后台发布价格及分析预测信息。

（二）信息员要熟悉农产品市场价格信息采集工作业务，具有

一定的互联网知识和计算机 *** 作技能,有较强的分析能力，工作认

真负责，爱岗敬业。信息员应保持相对稳定，如人员发生工作变动

应及时告知省农业信息中心。

作为同时使用八爪鱼采集器和写爬虫的非技术的莫名其妙喜欢自己琢磨技术的互联网运营喵。。。我来谈谈心得感想。

八爪鱼有一些优势，比如学习成本低，可视化流程，快速搭建采集系统。能直接导出excel文件和导出到数据库中。降低采集成本，云采集提供10个节点，也能省事不少。

不好的地方就是，即使看似很简单了，而且还有更傻瓜化的smart模式，但是里面的坑只有用的多的人才清楚。关于这个我在我的博客里简单写了写，不过说实话心得太多，还没仔细整理。

首先里面的循环都是xpath元素定位，如果用单纯的傻瓜化点击定位的话，很死板，大批量采集页面的时候很容易出错。另外用这个工具的，因为方便，小白太多，成天有人问普通问题，他们都不会看页面结构，也不懂xpath，很容易出现采集不全，无限翻页等问题。

但是八爪鱼采集器的ajax加载，模拟手机页面，过滤广告，滚动至页面底端等功能堪称神器，一个勾选就能搞定。写代码很麻烦的，实现这些功能费劲。

八爪鱼毕竟只是工具，自由度肯定完败编程。胜在方便，快速，低成本。

八爪鱼判断语录较弱，无法进行复杂判断，也无法执行复杂逻辑。还有就是八爪鱼只有企业版才能解决验证码问题，一般版本无法接入打码平台。

还有一点就是没有ocr功能，58同城和赶集网采集的电话号码都是图片格式，python可以用开源图像识别库解决，对接进去识别便可。

除非对技术有很高要求，否则我觉得八爪鱼采集器很好用，比火车采集器好用，虽然效率没那么高，但是比起费劲学习和研究数据包，还是用这个省事。我没事也会在八爪鱼群里解答一些规则编制的问题。

作者：极客兔子

来源：知乎

组织信息采集的程序：

一、确立主题。

二、选择采集范围、时间、渠道。

三、精选富有采集能力的人员。

四、配置相应的采集设备和工具。

五、实施采集。

六、信息处理。1、筛选（依据信息的真实性、及时性、准确性进行评审）。2、整理、分类、编号。3、填写《采集信息目录清单》，连同信息一并归档。4、妥善保管。

简而答之，仅供参考。

---