- 标题：杰灵采集器 更新历史_杰灵网站
- 内容：<p><strong>更新日志</strong></p> <p>20180502</p> <p>1、新增：从EXCEL批量导入数据到软件</p> <p>2、新增：内容页可重复采集（配合计划任务可重复采集同一批内容页）</p> <p>3、新增：模拟浏览器登陆获取COOKIE的时候可伪造UserAgent，防止低版本IE无法打开网页</p> <p>4、修复：部份WIN7系统采集内容页的时候卡死BUG</p> <p>20180411</p> <p>1、修正：远程唤醒等状态切换引起的BUG</p> <p>2、修正：列表采集内容正则替换的BUG</p> <p>3、优化：对部份HTTPS站点的采集</p> <p>20171010</p> <p>1、新增：(单篇发布)支持Web先批量上传附件;可自定义附件上传接口，发布到远程服务器;（当1篇文章，图片上百张要发布，因网络带宽问题或服务端上传数量限制等等，可使用此功能，先批量 单附件上传）</p> <p>2、新增：(单篇发布)支持大附件分片上传，可自定义分片大小，最小单位暂定1K</p> <p>3、新增：(单篇发布)支持FTP上传</p> <p>（以上三项点击【高级设置】-【发布内容自动上传附件】右侧【高级】按扭进入设置）</p> <p>4、新增：可设置每次执行任务的发布数量</p> <p>5、新增：可设置发布内容id起始值。仅发布内容ID大于起始值的内容</p> <p>6、新增：单独采集字段可复制粘贴（新增/覆盖）</p> <p>7、新增：每一个任务可手动新增/删除/清空栏目节点，详见【任务】-【发布内容】（适合 没有发布接口纯模拟登陆网站后台 使用）</p> <p>8、新增：(内容处理)增加UNIX时间戳转北京时间，可自定义时间显示格式</p> <p>9、新增：(内容处理)增加【内容非空结束处理】（比如内容页模板不一样，已提取到内容，使用【内容非空结束处理】即可，如果没提取到内容，可使用0909版本增加的【内容为空再次提取】功能，继续提取内容）</p> <p>10、新增：发布接规则 可自定义返回成功标志（新增发布字段 “jsuccess”，内容填写 “发布成功标志” ，当网站返回内容包括“发布成功标志” ，即判定为发布成功。适合 没有发布接口纯模拟登陆网站后台 使用；）</p> <p>11、新增：发布自定义UserAgent（新增发布字段 “juseragent”，内容填写您的 User-Agent）</p> <p>12、新增：图片水印模式，可自定义水印位置。</p> <p>13、修复：多页采集的时候内存未释放。</p> <p>20170909</p> <p>1、新增：单篇采集可 勾选 “关闭可视编辑窗口”，选择后，不会跳出可视编辑界面。</p> <p>2、新增：内容处理 直接访问网页获取源代码（内容处理结果为网址url的时候，可直接获取源代码）</p> <p>3、新增：内容为空再次提取（当目标网站 同一列表页，内容模板不一样，默认前后提取结果为空，可再次提取）</p> <p>4、新增：快速帮助系统。</p> <p>5、优化采集性能，修复多处BUG。（其中1处导致批量采集速度后期越来越慢，建议升级）</p> <p>20170730</p> <p>1、新增：批量采集内容 人工审核。（采集内容，人工修改审核后的数据才能发布到网站）</p> <p>2、新增：采集数据 可导出到EXCEL文件。</p> <p>3、新增：随机插入文本（随机从文本文件中 提取N行数据，随机插入到内容里，可设置跳过html标签）</p> <p>4、新增：附件下载地址 自定义，可支持多级目录（如斜杆/）;支持引用采集字段（如采集标题@nbsp; {DD:字段=标题} ）;可使用软件自带标签{dd:日期yyyymmdd}、{dd:随机字母12} 等。</p> <p>5、新增：图片文件名 支持使用{dd:自增id}@nbsp; (参考dedecms，同一篇文章图片格式 xxx_1.gif,xxx_2.gif,xxx_3.gif);支持引用任意采集字段（如采集标题 {DD:字段=标题}）.</p> <p>6、新增：发布到自已的网站 支持https协议。 (使用https必看<strong>http://www.lj55.net/question/882/answer/1503</strong>)</p> <p>7、优化：软件内部局部性能优化，采集处理速度更快。</p> <p>20170706</p> <p>1、新增：任务数据库查看器，实时修改并保存。 使用教程：http://www.lj55.net/docs/33.html</p> <p>2、修改：单篇采集后 可视编辑界面排版</p> <p>3、修复：字段内容@quot;前后提取@quot;并且勾选重复提取 的BUG（该BUG仅存在于20170703 00:00至20170705 21:00之间下载的软件 ）</p> <p>20170703</p> <p>1、性能提升，批量采集快2倍以上，单篇采集快3~5倍</p> <p>2、新增：列表页 可选择直接跳过重复标题的url提取@nbsp; （如某些网站（URL会变，但标题不变）或者(自媒体，不同发布人文章标题重复)，直接跳过）</p> <p>3、新增：数据库查看器可执行SQL语句（如批量替换已采集数据任意字段中的“A”为“B”）</p> <p>4、新增：发布规则 可自定义COOKIE。（如发布到phpcms，需指定cookie才能使用站群功能）</p> <p>5、新增：强制使用网页GZIP检测</p> <p>6、新增：正则截取功能，可强制最大提取次数（如有图片有100张，只提取前5张）</p> <p>20170520</p> <p>1、新增Unicode字符转化（json字符转中文）</p> <p>2、每个字段新增【筛选过滤】功能，可选择<strong> </strong>【下次不再采集】：</p> <p>@nbsp; ①、不能为空（默认第1个字段不能为空）</p> <p>@nbsp; ②、文字长度限制（如正文就一句话，就过滤）</p> <p>@nbsp;③、内容必须包含或不得包含某些关键词（如包含敏感词，就过滤）</p> <p>@nbsp;④、图片最大数量 （如微信文章，图片比文字 还多，限定图片大于10张，就过滤）</p> <p>3、内容页分页，支持获取最大页数，并支持访问每个分页的延时时间。</p> <p>4、列表内容分页 提取前替换</p> <p>5、 优化网址快速去重性能</p> <p>6、修正数据库查看翻页</p> <p>20170405</p> <p>1:细节优化</p> <p>20170226</p> <p>1:修复少量bug</p> <p>20170105</p> <p>1:内容提取支持最多10级【参数】循环提取，适合（论坛问答回复采集头像，用户名，发布时间，及内容）</p> <p>2:增加关键词自动分词</p> <p>3:增加同义词替换,可自定义同义词词库</p> <p>4:增加关键词内链功能，可自定义关键词词库，可限定替换频率。 （并可解决帝国IMG，A元素嵌套替换的BUG）</p> <p>5:增加计划任务功能</p> <p>6:下载附件支持带COOKIE登陆下载</p> <p>7:发布规则 支持使用 全局标签函数 如帝国目录newspath 可使用{dd:日期yyyymmdd}</p> <p>8:增强规则导入导出功能。</p> <p>9:增加PHP脚本扩展(测试中)</p> <p>10:可指定单次采集内容网址最大数</p> <p>@nbsp;</p> <p>@nbsp;</p> <p>20161116</p> <p>1:增加多页采集正则合成多级页</p> <p>2:加强正则提取内容功能</p> <p>3:可强制指定采集网页编码</p> <p>4:预留dll,javasctipt接口(测试中)</p> <p>5:除去自动更新功能 版本号见主页最后更新日期</p> <p>6:简化界面操作</p> <p>==================================</p> <p>20160917</p> <p>1：增加数据库查看管理工具 （点击查看相关http://www.lj55.net/a/20160917/72.html）</p> <p>V2.2版 20160908</p> <p>1：新增本地任务系统，可以选择不用注册用户。注册用户比本地用户多一个云端任务保存功能。实际采集功能全部一样</p> <p>2：一页采集(采集预览)后 可使用自带KindEditor，动态生成Html表单，快速预览并修改后，发布内容</p> <p>@nbsp;@nbsp; （如果不喜欢KE编辑器 ，可自已选择UE,CK等编辑器，但对低版本IE，许多功能并不友好）</p> <p>3：增加https</p> <p>4：增加“字符前后截取”，“内容前后追加”，“空内容替换功能”</p> <p>20160824</p> <p>1：附件下载增加refer信息，突破防盗链限制</p> <p>2：完善直接附件下载功能</p> <p>20160822</p> <p>1：完善【更多页】采集功能</p> <p>2：采集内容增加【正则提取】内容功能</p> <p>3：修复组合字段 附件BUG等</p> <p>20160727</p> <p>1：增加采集字段 【自由组合】功能（ 组合后的内容依旧支持字符串替换 html标签删除@nbsp; 图片附件下载 水印等功能）</p> <p>@nbsp;@nbsp; 组合字段使用方法：【固定字符串】--@nbsp; 填写 {dd:字段=标题} {dd:字段=内容} 即表示 引用 标题字段和内容字段</p> <p>20160710</p> <p>1：修改主界面布局，任务栏支持无限级子任务添加。</p> <p>2：单页采集支持图片预览</p> <p>3：修复少量BUG</p> <p>20160629</p> <p>1：采集字段 新增自定义格式，如随机数 随机文本</p> <p>2：自定义格式新增7种杰灵系统标签 如时间戳 日期时间格式 随机字母 等</p> <p>标签分别是：（标签前缀暂定dd）</p> <p>{dd:日期yyyymmdd hhmmss}@nbsp;@nbsp; ,@nbsp; {dd:MD5},</p> <p>{dd:随机数[1,50]},@nbsp; {dd:时间戳}@nbsp; ,@nbsp; {dd:时间戳2}@nbsp;@nbsp; ,@nbsp;@nbsp; {dd:随机字母12}</p> <p>20160610</p> <p>1：采集图片自动增加水印，自定义图片或文字水印设置<br />2：可以提取首张图片为缩略图<br />3：发布文章 自动上传图片附件到网站，使用HTTP批量上传，不用安装FTP照样使用！<br />4：图片附件同步帝国附件表， 支持删除文章同步删除相应附件。</p> <p>20160603</p> <p>1：修复数据库特殊字符BUG</p> <p>2： 修复单页发布BUG</p> <p>3：补充发布任务进度条实时显示</p> <p>20160523</p> <p>1：增加自动升级功能</p> <p>20160518</p> <p>1：单页采集模式，增加dedecms,discuz,wordpress同步栏目功能。</p> <p>20160517</p> <p>1：增加discuz论坛主题和WordPress文章接口</p> <p>20160515@nbsp;</p> <p>1：新增多任务 多线程 云端同步任务功能</p> <p>2：减化程序UI界面 更实用</p> <p>20160509</p> <p>1:采集器重新上路</p> <p><strong>===============================</strong></p> <p>20160123</p> <p>1：修复BUG,任务规则如果空置采集列表 导致启动栏开始任务假死。</p> <p>2：获取“栏目列表”添加异常处理判断，提示错误原因。</p> <p>原版本V1.0,现版本V1.01</p> <p>升级办法：下载本压缩包中的文件，解压EXE文件 覆盖原文件既可。</p>