1. 新视野英语教程（第二版）读写教程3课后答案
历史老照片不能说的秘密慈禧军阀明末清初文革晚清
14 页/ 18页
3.Learn to accept the fact that some people you thought were friends turn out to be enemies. 4.As you would expect from the book’s title, there are many references to what kind of man Gates is. 5.The prosperity of the company stems from hardworking and thrifty of the entire staff.
6.He said nothing at all on the subject of the play which was put on fro the first time Saturday night. XII.
1.至于那天晚上他是怎么死的，事实上我无法解释，而且也许不会有任何可能的解释了。 2.做了一件事然后说自己本来不想那样做是没有用的；如果你不想做，你就不会做了。 3.微软公司正在研究降低其产品成本的方法，以便发展中国家的人也能买得起。 4.苹果公司也愿意将其部分软件与微软公司的产品捆绑在一起，以促进其销售。
5.与评价父亲不同，人们评价母亲依据的是其为母之道的成功或失败。对于母亲来说，一切都取决于孩子最终成为什么样的人。
6.人们会发现这个网站很有价值，因为我们投入了大量时间准备网站的信息。 Cloze XIII.
1.A 2.B 3.C 4.B 5.A 6.D 7.B 8.D 9.C 10.A 11.D 12.B 13.D 14.C 15.A 16.C 17.D 18.C 19.A 20.D
Section B
Comprehension of the Text II.
1.B 2.D 3.A 4.C 5.D 6.A 7.D 8.C Vocabulary III.
1.abolished 2.bribing 3.arrested 4.propose 5.vote 6.amend 7.regulating 8.discriminate 9.reverse 10.witness
IV.
1.with 2.to 3.at 4.for 5.in 6.in 7.aside 8.as 9.on 10.of Unit 8 Section A Vocabulary
III.
1. mount 2. resembles 3. implication 4. prohibits 5. deliberate 6. debate 7. classified 8. guidelines 9. split 10. generated Exercises on Web course only:
11. categories 12. breed 13. commission 14. draft 15. confusion IV.
1. within reach 2. fall into 3. in terms of 4. get around 5. regardless of 6. referred to 7. What if 8. in the first place 9. concerned about 10. identical to Exercises on Web course only:
11. in the wake of 12. comparable to 13. puzzling over V.
1. K 2. E 3. M 4. O 5. F 6. H 7. N 8. A 9. I 10. B Collocation
VI.
1. ties 2. emotions 3. interests 4. experience 5. responsibility 6. love 7. characteristics 8. memories 9. information 10. belief
15 页/ 18页
Word Building
VII.
1. transposition 2. transatlantic 3. transmigrants 4. transformed 5. transnational 6. transoceanic 7. transshipped 8. transported VIII.
1. nonexistent 2. non-stop 3. non-art 4. non-college
5. non-proctive 6. non-profit 7. non-fiction 8. non-violent Sentence Structure IX.
1.What if I say no
2.What if they don’t know
3.What if we can’t finish it on time 4.What if this happens to us someday 5.What if he has lied to us
X.
1. The Bosnian peace talks are continuing in Geneva today with the new proposals at the top of the agenda. 2. All of Southern Africa is suffering from a severe drought with Mozambique and Zimbabwe among the worse-hit countries.
3. The Europe Summit in Paris is drawing to an end with the US in danger of being completely isolated. 4. With the King in prison, the chief commander came to power and ruled the country. 5. With stability itself under threat, the reforms deserve all the support they can get.
Translation XI.
It sounds like a good idea, but what if it’s a trick?
Cities and towns in this area suffered a lot from the earthquake with Jiujiang and Ruichang among the worst-hit. He complained that they should not have got involved in it in the first place. For Mary’s sake, I can lend you my car to get around your transport problem.
In theory it’s feasible to clone a child to harvest organs, but in practice it would be psychologically harmful to the child. He published an article under the name of Braver which stresses the idea that the process of cloning animals would work for humans as well.
XII.
你说你不会把时间浪费在约会上，但如果遇到吸引你的男子，你会怎么办呢？
为了帮助艾滋病患者，需要有新的措施，地方社团、非政府机构、政府和国际组织之间要建立密切的合作关系。 上周，该国际传出消息说，他们正密切关注该地区的情况。
在导致数百人死亡的污染事件发生之后，政府开始起草环境保护指导方针。
正如这篇文章的作者所警告的，克隆人类可能是一件使人更加悲伤而非更加高兴的事。 在一些西方国家，有些父母准备克隆孩子，目的是进行非致使非致命器官的移植。 Cloze XIII.
1. A 2. B 3. D 4. B 5. C 6. A 7. C 8. C 9. A 10. C 11. C 12. B 13. B 14. C 15. A 15. B 17. D 18. A 19. D 20. B
Section B
Reading Skills I.
2. web scraper怎么抓取网页里其他链接里的数据
先设定一个类型为此岩link的selector，选择链接，森芦御勾选multiple；然后打开链接，在新页面哗启设置需要抓取的元素就好了。Webscraper的详细操作教程，可以到网易云课堂搜“Webscraper实战教学”，有详细的二级页面跳转与页面点击的操作教程。
3. 如何使用 web-harvest
web-harvest的应用
一、背景
在当前信息空前爆炸的时代，人们不再担心信息的匮乏，而是为筛选有用的信息付出大量的代价。那么如何采集有用的 信息呢？现在有RSS、博客等服务，但是并不能完全满足我们的需求，因为很多信息并不是以格式化的数据形式提供出来，于是聪明的工或锋程师想出了精确搜索的方 法，从而出现大量的垂直搜索网站（比如酷讯），确实火了一把。当然我们无法得知他们是怎么实现的，但是我们也可以实现这种精确采集，开源的Web- Harvest就是类似的技术，之前曾经接触过，故写出来分享给大家。
二、WebHarvest简介
Web-Harvest 是一个用java 写的开源的Web 数据提取工具。它提供了一种从所需的页面上提取有用数据的方法。为了达到这个目的，你可能需要用到如XSLT,XQuery,和正则表达式等操作 text/xml 的相关技术。Web-Harvest 主要着眼于目前仍占大多数的基于HMLT/XML 的页面内容。另一方面，它也能通过写自己的吵备Java 方法来轻易扩展其提取能力。
Web-Harvest 的主要目的是加强现有数据提取技术的应用。它的目标不是创造一种新方法，而是提供一种更好地使用和组合现有方法的方式。它提供了一个处理器集用于处理数据 和控制流程，每一个处理器被看作是一个函数，它拥有参数和执行后同样有结果返回。而且处理是被组合成一个管道的形式，这样使得它们可以以链式的形式来执 行，此外为了更易于数据操作和重用，Web-Harvest 还提供了变量上下方用于存储已经声明的变量。
上述流程的执行结果可以存储在执行中创建的文件中或者是编程时的上下文环境中使用。
一、配置语言
每个提取过程都被定义在了一个或多个基于XML 的配置文件中，而且被描述为特定的或是结构化的XML 元素中。为了更好地说明，下面列举了一个配置文件来进行说明：
<config charset=”gbk”>
<!– 页面爬取开始,按照关键词：“玩具”来搜索 –>
<var-def name=”start” >
<html-to-xml>
<http url=”玩具“/>
</html-to-xml>
</var-def>
<!– 获取竞价排名的企业网站列表 –>
<var-def name=”urlList” >
<xpath expression=”//div[@class='r']“>
<var name=”start”/>
</xpath>
</var-def>
<!– 循环 urlList ，并把结果写入到XML文件中 –>
<file action=”write” path=”/catalog.xml” charset=”utf-8″>
<![CDATA[ <catalog> ]]>
<loop item=”item” index=”i”>
<list$amp;>amp;$lt;var name=”urlList”/$amp;>amp;$lt;/list>
<body>
<xquery>
<xq-param name=”item” type=”node()”$amp;>升团毁amp;$lt;var name=”item”/$amp;>amp;$lt;/xq-param>
<xq-expression$amp;>amp;$lt;![CDATA[
declare variable $item as node() external;
let $name := data($item//span/font[1]/text()[1])
let $url := data($item//span/font[2]/text())
return
<website>
<name>{normalize-space($name)}</name>
<url>{normalize-space($url)}</url>
</website>
]]$amp;>amp;$lt;/xq-expression>
</xquery>
</body>
</loop>
<![CDATA[ </catalog> ]]>
</file>
</config>
上述的配置文件包含了三段。
第一段的执行步骤：
1. 下载清除下载内容里面的HTML 以产生XHTML;
3.
第二段的执行步骤：
1. 用XPath 表达式从所给的URL 里面提取搜索结果；
2. 用一个新的变量“urlList”来保存上面的搜索结果；
第三段是利用上一段的搜索结果来提取相应的信息：
1. 循环里面迭代每一个item；
2. 获取每个item的name和url；
3. 将其保存在文件系统里；
有了配置文件（把该配置文件保存为:.xml），我们再往前一步，写几行代码：
import java.io.IOException;
import org.webharvest.definition.ScraperConfiguration;
import org.webharvest.runtime.Scraper;
public class Test {
public static void main(String[] args) throws IOException {
ScraperConfiguration config = new ScraperConfiguration(”c:/.xml”);
Scraper scraper = new Scraper(config, “c:/tmp/”);
scraper.setDebug(true);
long startTime = System.currentTimeMillis();
scraper.execute();
System.out.println(”time elapsed: ” + (System.currentTimeMillis() - startTime));
}
}
让我们执行一下，看看结果：
<catalog>
<website>
<name>上海丽强 专业大型</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>多样型大型</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>童博士卡通</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>芝麻街</name>
<url>c4</url>
</website>
<website>
<name>童博士, 中国平价学生用品..</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>充气</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>找木制</name>
<url$amp;>amp;$lt;/url>
</website>
<website>
<name>米多迪</name>
<url>b14</url>
</website>
</catalog>
是不是很酷。爬虫就这么简单。
二、深入考虑
不知道大家看到上面的配置、代码和结果是否感觉很熟悉。是否和Java通过Ibatis读取数据库数据的方式类似。
那我们是否可以实现这样的机制呢，把整个互联网作为我们的庞大的数据库，我们随意的读取。
Web-Harvest提供了一个 ScraperContext , 可以在该上下文中设置Java对象，可以通过Java对象收集相应的结果数据，（比如：设置Map,可以通过Map收集数据）
Scraper 提供了这样的方法：
scraper.getContext().put(“resDataSet”, new ResultDataSet());
ResultDataSet是收集数据的Java对象。
那么我们就可以这么做：
a) 首先设置要访问的网页的路径
scraper.getContext().put(“startPageHref”, “;wd=儿童玩具“);
b) 第二步，设置要收集返回数据的容器
scraper.getContext().put(“resDataSet”, new ResultDataSet());
c) 在配置文件中就可以这样设置数据
${resDataSet.addRecord(“searchResult”,“totalSearchResult”,totalSearchResult)};
d) 爬取操作执行完毕后，即可返回数据：
ResultDataSet resultDataSet = (ResultDataSet)scraper.getContext().get(“resDataSet”);
Ok，我们就可以随心所欲的使用这些数据，详细请看附件。
三、分页机制处理
a) 来由介绍
现在的信息量很大，在展示的时候都是通过分页处理的。
a) 实现机制
那我们怎么处理呢？分页提取数据我们得明确几件事情
1. 分页器的处理，比如：页码、页大小、记录数或页数。
2. “下一页”的地址的构造
3. 每页数据的爬取
不同的网站的分页机制都不一样，我们如何处理呢？当然我们不能通过硬编码的方式来处理，我们就通过Web-Harvest的配置文件来实现。
Web-Harvest 本身的配置文件结构为：
<config charset=”gbk”>
配置信息
</config>
对这个结构进行扩展：
<web-harvest-config>
<!– 生成分页器配置 –>
<config charset=”gbk” id=”pagination”>
配置信息
</config>
<!– 组装下一页地址 –>
<config charset=”gbk” id=”urlnav”>
配置信息
</config>
<!– 抓取列表数据 –>
<config charset=”gbk” id=”listData”>
配置信息
</config>
</web-harvest-config>
我们就可以通过三个config项来处理
l 第一步，通过 id=”pagination” 的配置生成分页器
l 第二步，通过已经生成的分页器加上 id=”urlnav” 的配置构造下一页的URL
l 第三步，通过 id=”listData” 的配置提取需要的数据
一、Web-Harvest的优缺点
优点：
l Web-Harvest是一个使用比较方便的抓取信息的API库，目前是1.0版本
l 扩展性好，只要修改配置文件即可
l 上手较快，使用方便。
l
缺点：
l 处理过程比较多，对应的速度较慢
二、其他使用过或者正在尝试的精确抓取数据的方式
a) 使用HTMLParser
HTMLParser 可以分析HTML 源码中的TAG（比如Table，DIV等），还可以自己定义TAG（比如：ENET），通过查找特定的Tag，提取相应的数据。由于没有很多的中间处理 过程，速度较快，缺点是有很多的硬编码，难以扩展。或许能找出一个特定的表达式可以快速的提取数据。
b) 使用HTMLClean
该方式还是走HTML->XML的路线，首先通过HtmlClean把抓取的网页内容转化为XML格式数据，然后通过XPATH、XSL等方式对XML数据进行转化，达到收集数据的目的。Web-Harvest是类似的方式，但是我们可以精简化，提高抓取的效率。
三、使用爬虫碰到的问题
a) 网站对频繁抓取数据的爬虫进行IP限制问题
4. java中有没有第三方包有HttpWebRequest类的
这个是来dot net里的吧。自
JDK有个功能有限的HttpURLConnection
Apache HttpComponents 提供了相近的功能。(HttpClient, HttpAsyncClient)
https://hc.apache.org/index.html
还有个异步的 AsyncHttpClient https://github.com/AsyncHttpClient/async-http-client