超预测

出版日期:2016-3
ISBN:9787508657268
作者:[美]菲利普 E.泰洛克,[美]丹 加德纳
页数:349页

书籍目录

第一章 乐观的怀疑论者:为什么我们的世界需要预测 / 001
关于黑猩猩的笑话 / 006
怀疑论者 / 009
乐观主义者 / 014
关于预测的预测 / 025

第二章 知识的错觉:糟糕的预测与糟糕的决定 / 029
盲人辨色 / 033
让医学接受试验 / 038
思考之思考 / 041
诱惑与转换 / 048
眨眨眼,想一想 / 050
第三章 一种评分系统:超预测是可以衡量的 / 055
“大毁灭......将会到来”/ 060
判断之判断 / 063
数学的含义 / 078
专家的政治预测 / 080
关于研究结果 / 081
蜻蜓的复眼 / 087
第四章 超级预测家:准确预测靠的更多是能力而不是运气 / 097
抗拒万有引力,但是能坚持多久? / 116
第五章 超级聪慧?内部视角、外部视角与其他视角 / 127
费米方式 / 135
谋杀谜案 / 139
从外部视角开始 / 142
内部视角 / 146
假设与反面假设相结合 / 147
蜻蜓式预测 / 150
第六章 超级宽客?像华尔街的数字巫师一样 / 153
本·拉登在哪里? / 157
第三种设定 / 162
石器时代的概率 / 165
信息时代的概率 / 168
超级不确定性 / 172
但是这到底意味着什么? / 176
第七章 超级新闻迷?如何像蜻蜓的复眼一样敏锐 / 183
过犹不及 / 188
反应不足 / 191
反应过度 / 196
明托队长 / 200
第八章 永远的贝塔:超级预测家是如何炼成的 / 209
总是在颠覆 / 213
尝试 / 216
失败 / 218
分析和调整 / 224
韧劲 / 226
总结 / 230
第九章 超级团队:从愚蠢团队到智慧团队 / 233
组团还是不组团? / 240
超级团队 / 244
第十章 领导者的两难抉择:如何成为超级领导者 / 257
毛奇的遗产 / 261
我喜欢艾森豪威尔 / 268
企业的任务导向指挥系统 / 273
特殊的谦卑之心 / 275
补充 / 277
第十一章 真的如此出类拔萃?黑天鹅事件也可以预测 / 281
黑天鹅出现 / 290
求同存异 / 295
第十二章 接下来做什么?我们可以做得更好 / 305
“谁—谁”现状 / 311
变革 / 313
人文主义者的反对 / 318
重要的问题 / 320
最后一个点子 / 325
后 记 / 331
附 录 给志向远大的超级预测家的“十诫” / 335
致 谢 / 345
注 释 / 349


 超预测下载 更多精彩书评



发布书评

 
 


精彩书评 (总计13条)

  •     这本书很新。英文版2015年9月才刚刚出版。这本书很热。短短三四个月,它就登上到了2015年的亚马逊年度非虚构十大好书榜、《经济学人》和《金融时报》年度好书榜。这本书很红。对这本书竖起大拇指的财经领袖,从德意志银行的首席经济学家,到花旗集团的副董事长,连诺贝尔经济学奖得主丹尼尔·卡尼曼也被说服了。但这都不是我大力推荐这本书的原因。我喜欢它的原因——这是一本转变思维习惯的书。在充满了不确定的世界中,接受那些不可预测的无常,同时通过清晰冷静的思考过程,对可预测的事情做出最优决策,大到企业,小到个人,是至关重要的人生智慧。<1> 预测无处不在我们每个人无往不在预测之中,每天都在干着预测的事——过马路、搭公交、换工作、结婚、买房子、创业、投资、推新品——所有决定的依据,都是对或长或短的未来的预测。但我们生活的世界,像钟,又像云,可预测性和不可预测性看似无序地共存于人体、社会和宇宙的复杂关系中。在人类历史当中,龟甲裂纹,蓍草长短,八卦排盘,生辰八字、星座塔罗都曾经做为判断的依据,用来预测吉凶福祸,甚至这样的预测占据了人类历史的绝大部分时间。作为一个理性主义者,当然知道这样的预测方式不靠谱。但所谓的专业预测又好多少呢?多少人被股票市场的K线图和专家分析带到了沟里?有个著名的笑话:专家预测的平均准确度大致跟掷飞镖的黑猩猩差不多。不确定性的深渊,让我们进退维谷。<2> 比专家更牛的超级预测2011 年夏天,《超预测》这本书的作者泰洛克发起了一个叫“精准预测”的项目,邀请志愿者报名参加,对未来进行预测。在随后的4年里,累计超过两万名普通人,他们智商过得去,但并不超群,教育背景高下不齐,由他们来对许多复杂的全球性问题进行了为期半年到一年期的预测,比如——俄罗斯发生的抗议会不会扩散?金价会不会暴跌?2016年9月30日之前人民币对美元的收盘价是多少?朝鲜半岛会不会爆发战争?日本首相会不会参拜靖国神社?第一年,“精准预测”项目团队在 60% 的问题上所做的预测准确性高于官方的对照组。第二年比例提高到了78%。这个成绩简直是好得惊人,他们甚至跑赢了真金白银下注的预测市场,也战胜了可以接触到机密数据的专业情报分析师和学术界的竞争对手。这个项目里表现突出的超级预测家,在2012年美国总统大选中不仅预测对了奥巴马战胜罗姆尼,还预测对了所有50个州两人的胜负结果。一个都不错。这个研究项目产生了两个关键结论:1.准确的预测是可以做到的。甚至通过训练,准确率还可以提高。2.超级预测家洞察未来的能力,跟他们的身份职业无关,而是与他们思考问题的方法有关。<3> 超级预测家怎么想问题?超级预测家有什么特质,也许不那么好概括,但有一点可以肯定:超级预测家都是慢思考,不鲁莽下结论的人。要知道,人类在长期丛林生存和繁衍的演化当中,刻进DNA的惯性思维是快速做判断。遇到事物,快速归类才能快速反应。相比获得收益,人更看重规避风险。所以人的天性,是跟超预测这种深入思考的方式相违背的。理性是人类近现代才发明的新武器,而且这个新武器并不是人人都能掌握的。怎么成为一名超级预测家?这本书没有给出明确的答案,但它告诉你超级预测家怎么思考,分析,决策——1. 对预测的问题进行鉴别分类,不要在不可预测的事物——“比如12年后的美国总统是谁”这样的问题上浪费时间。2. 把困难的大问题分解为容易处理的子问题,你所面临的人生抉择都能做这样的拆分。3. 正确平衡从事物内部还是外部看问题。4. 正确平衡对证据信息的反应不足和过度反应。5. 寻找每个问题中相互冲突的作用力。6. 给不确定性划分等级能够带来预测能力的提高。7. 信心不足与过分自信果断都会干扰预测结果。8.勇于承认错误,坚持事后剖析,但要谨防结果决定论。9.预测也像骑自行车一样,单从课本上是学不会的,必须不断深度实践。10. 行动指南比强制规定更有用。这10条原则看起来很简单,仅仅满足清单体蜻蜓点水的人,到这儿就可以了。但要想把这套思维方法运用到具体的人生决策,需要一整套完整的方法论。
  •     为什么预测?做乐观的怀疑论者:怀疑论:完全预知未来是不可能的(怀疑论:混沌系统-非线性)预测年限为10年很多是瞎扯。乐观:预言一定具有局限性,但一定程度上看清未来是有可能的。预测为什么糟糕?双系统模型(参考《思考,快与慢》)第一系统的功能是从不明显的证据直接得出结论。(对用以作为判断依据的证据质量不敏感)鼻尖视角直觉产生的是谬论还是真知灼见,取决于你是否生活在一个充满合理提示的世界,这些线索是你无意之中记录下来的,以备未来之需.确认偏见 -关键在于怀疑 (不能证伪则很可能正确)诱惑与转换(可得性启发):将判断是否是好的,偷换为结论是否正确如何改进预测?引入评分机制:预测定义模糊不清,所以判断预测正确与否比通常人们所想象的要困难。当你确实一筹莫展时,你要做的就是评估。吻合度分析 & 意志(谨慎度)布莱尔得分标准与过去的自己与其他预测者可比性预测准确更多靠的是能力,而不是运气均值回归理论是检验运气对成绩的影响的必要工具。“缓慢回归的现象说明该活动的结果主要是能力导致的,而快速回归则是因为运气占据主导地位。内部视角、外部视角与其他视角真正重要的不是思考能力本身,而是使用它的方式。费米方式(分解问题)更好地区分已知和未知信息。学习费米的做事方式,要敢于犯错。从外部视角开始(锚定效应)内部视角要做到对内部视角进行合理分析,不能四面出击,吸收任何信息,然后期待灵感突现。应该有针对性、有目标寻找正反两方面的证据写下自己的判断,能够退后一步,仔细审视自身。假设自己的初始判断是错误的微调措辞也能获得其他视角,防止确认偏见。(如他会拿到签证吗?-〉他不会拿到签证吗?)主动开放思维观念是要接受检验的假设,而不是要护卫的珍宝。用概率说话概率应该在预测者掌控能力范围内进行合理的细分。细分程度越高越好,但是颗粒度必须体现实际的差别。对不可简化的不确定性的认知是概率思维的核心。概率具有根深蒂固的反直觉天性预测者越倾向于命中注定思想,预测的准确率越低?(准确性,就要承受不幸?)多视角持续收集信息完成初始预测后,面临新信息两种危险反应不足:没有给予新信息足够的重视反应过度:过度解读它的意义,调整预测的幅度过大稀释效应:提供给人们最少的事实再加上无关事实,获得无关信息的人失去了信心。反应过度的关键原因:缺少执着探究精神根据证据的重要性持续更新预测,以此逐渐接近真相。(贝叶斯定理核心见解)超级预测家如何炼成?成长型思维模式尝试、失败、分析、调整、再次尝试有效的实践还需要明确的、及时的反馈超级预测家哲学思想谨慎:没有事情是一定的,超级预测家总是持有怀疑心谦虚:现实是无限复杂的。超级预测家谦虚但不自卑。不确定性:没有什么事是注定的,也没有什么事是必须发生的。超级预测家能力和思维方式主动开放的思维:任何信仰都可以是一种假设,可以被测试。知识渊博、有“认知需求”:理智的好奇心,享受对智力和精神挑战的快乐。吾日三省吾身:善于自我反省和批评,吸收各种反馈意见。有数字逻辑:善于运用数学工具分析问题,对数字敏感。超级预测家的预测方法实事求是:不咬定一种分析方法不变。善于分析:有能力退一步看到更多种可能性。海乃百川:接受价值观不同的观点,并将它们为自己所用。善于学习:当事情变化时,能够适时改变自己的想法。思辨直觉:超级预测家善于意识到人情绪和认知上的偏见或倾向。超级预测家的职业道德成长心态:相信没有最好只有更好。持之以恒:不管要花费多长时间都能坚持做下去。超级预测团队要练习“建设性地对质”,质疑明确性。团队如何做到出色?一是避开极端的团体思维和互联网论战二是培育这样的微型文化:鼓励队友怀着尊重对方的心态相互质疑,敢于承认无知,大胆请求帮助如何成为超级领导者领导者:自信、决断力、描绘蓝图;但是这三个品质可能与超级预测者的品质有所偏差。从“一切都不确定”到“不可动摇的决心”将所有这些观念联系起来的是“任务导向指挥系统”的指挥原则。(决策权必须摆脱等级体系的束缚)指挥官要将自己的目标告知下属,但不要规定如何实现这个目标。使战略连贯性和分散决策结合起来明确思考和执行的界限:一旦决策确定,思维模式就要随之变换,忘记不确定性和复杂性,全力投入行动。预测黑天鹅事件视野迟钝:时间框架就是预测的“视野”。人们会在无意识的情况下陷入诱惑与转换的陷阱中,回避需要根据时间框架来调整概率的难题,转而处理关于正反两方论据的相对权重的简单问题。塔勒布坚持认为黑天鹅事件决定了历史进程,并且只有它做到了。历史和人类社会不是匍匐向前的,而是跳跃式发展。(作者并不这么认为)塔勒布的世界观认为历史可能性——未来所有可能展现方式——的分布方式也是呈肥尾状。这意味着我们的世界非常易变。历史有时是跳跃式发展的,但也有匍匐前进的时候,缓慢的、渐进的变化可能产生极其重要的影响。9.11事件可能无法预测,但是能预测出9.11事件发生后的一系列进展,而这些进展正是构成黑天鹅事件的要素。对于长期计划,概率预估是一切长期计划的核心。阻止预测进步的最大力量列宁认为广义的政治就是权力斗争。这种观念认为,预测的目标不是看清未来,而是增加预测者本人及其所在集体的利益。人文主义者的反对给志向远大的超级预测家的“十诫”1.鉴别分类关注那些辛勤付出可能得到回报的问题。不要在两类问题上浪费时间,一是“如时钟般有规律”的容易的问题;二是“像云一般”难以捉摸的问题。某些类别的结果出了名的根本无法预测(如油价,货币市场)2.将看似棘手的问题分解为容易的问题学习费米的工作方式3.正确平衡内部视角和外部视角萨默斯将雇员的计划估计时间乘以2,然后用更高一级的时间单位来表示。4.正确平衡对证据的反应不足和过度反应5.寻找每个问题中发生作用的相互冲突的因果之力每一个出色的政策论证通常都伴随着一个至少应该承认其存在的反面论证。在古典的辩证法中,命题与对立命题相遇,产生的是综合性命题。6.按照问题自身特性划分尽可能多的不确定性等级,但要适可而止刚开始将表达不明确的直觉转化为用数字表示的概率时,你会感觉不自然,但你可以完成这个过程,它所需要的仅仅是耐心和练习。7.正确平衡信心不足与过分自信把握果断决策的必要性和证明决定合理性的必要性之间的平衡8.探寻错误背后的问题,但要谨防后视偏差。9.激发他人的最大潜能,同时也让他人激发你的最大潜能。掌握团队管理艺术,特别要掌握换位思考(深刻理解对方的观点,达到可以重复的程度,让对方感到满意)、准确提问(帮助他人阐明他们的观点,这样他们就不会被误解)和建设性对抗(学会发表不同意见,同时不要让人反感)。10.学习需要多实践11.活学活用
  •     完全是被书评中的一句话:“告诉你超级预测家是如何思考”而在老罗那里买下的此书。抛开内容不谈,很厚的一本书,读到最后发现,其实有十分之一是附录。。不知道是否西方作家文笔如此,但凡经济学著作或者是人文读本,生怕读者都不懂,都会一一给你道来,前面1/2读起来真的相当吃力,以为是在读一本历史著作,内容涉及经济、政治、文化方方面面,能体会作者是想告诉我们预测应用到生活的各个渠道,但是没必要全部展开来说,看得有点乏味,坚持看完,告诉自己,书中既然告诉你思维方法,那么即便有一句话对你有启发,也是有价值的,的确,十句话,足够了。。。作家的逻辑其实很缜密,典型的说明文,中间或者case叙述完均有总结,结合每一章的副标题,都可以很快抓住作者想要阐述的要点。还是那个问题,大段段的历史教科书,如果你对每个题材很感兴趣,还是可以读一读,比如书中提到911,FBI调差的前前后后读的还是兴致盎然。谈到一些历史事件上,感觉灵魂真的不在自己的脑中,好似要挣脱,可能这也和翻译有关,你能想象原文中的一句句复杂的长句、从句,硬生生地给你用母语翻译出来是多么辛苦和费力的事儿,读起来真的很磕磕碰碰,有的时候完全不知道到底想表达什么意思,只能结合上下文再读一遍,生怕错过某一个环节,无法明白作者在某一个章节连贯的思想。总得来说,可读性还是有的,但是读起来不畅快,如果把注意力放在想弄明白作者说了什么,比如超级预测家是如何思考的,完全可以先把书评中的10句话印在心中,然后带着你的理解去看,就你感兴趣的case深入了解,没必要各个方面的case通读,因为原理都是一样,只不过应用场景不一。抛开case不谈,书中确实有很多话值得思考,比如说“多样性胜过能力”“冷静自信的表情比宣扬不确定性更有利于传递信心”等等。也许你会说,这些话也很普通,并没有惊世骇俗或者感觉特别不一样?是啊,所以书中提到,一个好的预测离不开你的思考,它和你的背景其实并无太多关系,一千个人眼里有一千个汉姆雷特,各位读者,只能各取所需,带着你的好奇心,某一个问题来尝试从这本书里得到解答,我想这就足够了,当然,如果你真的有这个耐心,祝你好运!PS:引用应该不算剧透吧??

精彩短评 (总计50条)

  •     讲了一些让预测更准确的思维和注意要点
  •     附录 给志向远大的超级预测家的“十诫”,全书的精华。
  •     精确到1%的预测,等我练成,写邮件再不用写“很可能”,而是“97%的可能性”,那多威风
  •     囫囵吞枣般在假期中插空阅读了解读版不推荐过于提炼概念,反而在看书评时有了感觉,摘录其中赞同的一段话“追求确定性”恰恰是我们思维与生俱来的一种惰性,不喜欢深入思考、不喜欢费力,如果你不喜欢,那么你就只能成为待宰的羔羊,因为有人喜欢所以他们能获取你“懒惰”带来的红利。细思恐极
  •     一般般不怎么样
  •     还行
  •     缘起流转又有几个凡人能看破呢,就算将来利用人工智能仿真进步和预测学家合作,我还是不看好这样可以解决世界中万事万物复杂的因果流转的纠缠,可能一些大的世界变化可以给出几套可能结局出来。
  •     我认为是管理学的亚学科,有评估分析预测兴趣的可以看看,想通过这本书长姿势的不太合适。锻炼的是思维方式,不过内容有点不够宠幸,方法可操作性不足,属于开脑洞的启发
  •     费米方式是非常有用的方法
  •     十诫
  •     没有解答我的问题,如何精准做预测,这些超级预测家的预测精度都无法解决我工作中的难题。本书可以说是讲述一个项目的故事,预测的方法比较空泛,完全可以说只是逻辑思维,放之四海也皆准。精华就是最后的方法总结,了了几页。
  •     必然
  •     10,Apr,表达的内容很简单,但是不知道是翻译的问题还是作者本身问题,很难读,读完觉得说了太多废话,本书是告诉你一切不可预测,一切具有不确定性,需要分析,重视数据,反复思量
  •     被推荐给骗了…
  •     书到手4个多月,看的断断续续,说实话这本书的可读性非常差,翻译更是仓促,作者的表达能力值得商榷,废话连篇,那么厚一本大多是堆砌之言,不建议购买,其中内容看几篇书评就够了。罗胖广告做的比较好,读过有被忽悠的感觉。
  •     这本书的详细书评至少读过两篇,但全书还是值得一读。一方面,每一个观点的论证质量决定了你在实际生活中采纳它的可能,而书评无法覆盖论证的部分。另一方面,一本书的篇幅能更好地突出作者的重心。
  •     读完后没有获得新的体会
  •     如何能让预测更加准确?实践并且评估,别无良策。当然需要注意的是我们必须有宽框架的思维模式。书中末尾部分对于塔勒布的几个反驳我不能同意。我更倾向于塔勒布说的提高反脆弱性而不是预测。
  •     预测的方法:先把问题分解,各个解答,持续关注,小幅度调整,得出结论。强烈的认知需求,对知识的焦虑和渴望,喜欢思考,喜欢挑战。谦虚的心态,对不同观点没有偏见,保持开放的心态。练习,比如打牌。概括思维,快慢思维,成长性思维。启示:对于一个连续创业者,根据概率论,是一定能成功的。
  •     罗胖推荐的 实际感觉内容很虚 高不成低不就
  •     没能力负责任的说,但可以认真的说,这本书绝对可以给五分,不是因为写的文笔好,而是传递了一个目前最正确的预测方法。那些说不好一般的人,肯定是很少做预测的人,只是偶尔看看电视听听专家的人。如果你做股票,知道交易员技术分析,那么你会发现完全是一个交易员成熟方法,只是这里的发生概率变成了仓位,发不发生变成了涨跌,超预测者变成了股票大神。以为你没炒股股票也很少做预测就会觉得这破书咋总是在说实验啊?没怎么好好教我预测啊,其实股票就是,都是靠自己实践中得来的。而很多人炒了很长时间股票还是不行就是没有这书上这种科学的进步方法,预测概率准确度从来没提高过,一直被称为散户
  •     构建概率化思维,很有用的一本书。其中的思维技巧,来自于真正的实践者。
  •     完全没看明白
  •     没有达到期望诶,但有所启发
  •     超級預測專家是長著眼睛的狐狸,邁小步,勤更新
  •     书很不错,读起来很舒服。
  •     通过情报研究所的比赛出现了一批超级预测家,分析他们的预测方法,得出思维的方式会让你预测的概率提升!
  •     翻译的不太好,来来回回翻了几遍才明白作者要说什么;很好的书 开阔视野,预测是一种可培养的技能,预测短期内未来趋势是可能的
  •     不可多得的好书,罗辑思维书店里的爆款榜上的好书籍,很值得一读,这里有免费分享,你可以免费学习:https://www.douban.com/note/604349981/
  •     明明几句话可以说清楚的概念,硬是罗里吧嗦的叨逼叨的没完没了,逐渐不想在罗辑思维上面买书,那些言过其实的介绍令人对书本充满期待,换来的结果是失望。
  •     怎么说呢?读一本书,并不在于这本书的内容到底有多好,而在于其对你的启发度有多高。这本书还是或多或少的点亮了我的
  •     之前看到的是英文版的推介,没想到中文版已经出了。开始阅读时适逢2016美国总统大选的最终投票阶段,理论、实例和社会现实相印证,颇为有趣。
  •     王烁 2015 年最推崇的一本书。美国政治学家菲利普 · 泰洛克(Philip Tetlock)领导下的大型预测研究项目:善断计划(Good Judgement Project)总结的一些预判规则与预判步骤,颇有启发。
  •     我觉得还不错
  •     可以试着做一道类似的题目,中国有多少流动表演的小马戏团?应该还是比较有趣的。预测不能有模糊性正是科学预测和猜测的区别,预测需要尝试,失败,分析,调整,再次尝试的过程才能不断进步。感觉谈到人类的决策就离不开丹尼尔卡尼曼的两个系统,不过也可能是鼻尖视角,我只知道这个,所以看到就放大
  •     垃圾 没有干货
  •     打开你的系统二去预测,并记录自己的预测结果。你会变得更善于预测的。
  •     只要你掌握足够的信息,具备一定的技巧,你也可以预测未来!
  •     对预测结果进行评分,量化预测结果,描述了好的预测者所具备的特质,但是意料之中的没写如何能获得这些良好素质,比如谦虚谨慎戒骄戒躁等。
  •     期望太高了,结果比较失望,主要是作者的车轱辘话太多。其中有用的内容,基本上看附录就好了,连读书笔记都不用做。。。
  •     思路很好啊,将我知道的但是无法表述的成文了,但是总体上,并没什么升华啊,略失望
  •     只是觉得排版很烂
  •     本来是打两星的,因为配合快思慢想看作为补充看,多一颗星吧
  •     教你如何更好的预测未来:从未知信息中提取已知的信息,逐层拆分问题后逐个分析,预测结果要表述清晰准确,可以量化,先找出外部大轮廓,再调整细节,根据最新的消息,适时调整预测结果(三思后行),团队合作更有效,团队成员互相‘细节提问’,针对某论点细节发问,促使更深的讨论和思考。 布莱尔评分:分数越低,预测结果越准确。完美预测0分,随机猜测0.5分,完全错误2分。
  •     给聪明的,自认为自己数学水平不错的能理性思考的人看的书,虽然书中没有数学公式,只是提供了一种思考世界的方式。缺点:举例杂乱,建议速读!
  •     书确实有点啰嗦,但还是可以找到明确的亮点,就提高分析的种种方法。
  •     罗胖推荐的最差的一本……
  •     典型的盛名之下 其实难副,一多半都是废话,剩下的是正确的废话。
  •     是的,本来我想用,一些书摘名句来帮你汇总这一本超预测。 但,我决定还是放弃了。 这是一本能够真正启发你关于,如何超预测一本书籍。 高于常人水平的预测是可以,实现的,并且需要通过周密计算。概率统计,以及贝叶斯定律,高频率小幅的更改你的预测成功率,细微的替换,最终在一个不长的周期内,你是可以提高你的预测成功率的。 其中,你想提高成功的预测概率,所有付出的努力,不亚于你成为一名医生,或者驾驶飞机的飞行员,等等。 你需要有有开放性,成长性思维,广纳其他人,意见,的特性。 你的预测能力,就可以很大程度上,超脱,平均水平。 最后。 我想用一句书中我看到的名言,很有启发性,并且,我决定用它作为我十年的,QQ签名的一句话,作为结尾送给大家,那就是。 运气青睐有准备的头脑。
  •     翻译负分
 

农业基础科学,时尚,美术/书法,绘画,软件工程/开发项目管理,研究生/本专科,爱情/情感,动漫学堂PDF下载,。 PDF下载网 

PDF下载网 @ 2024