1984年最后一个季度，苹果公司的销售额虽然没有达到预期的10亿美元，但6.983亿美元的数字也非常可观。只不过，在所有销售收入中，70%来自Apple II，这对于乔布斯和他的Macintosh而言，并不是一个好消息。
看到6.983亿的数字，大多数人都相信，1985年的苹果会更成功，苹果上下一派盲目乐观的氛围，只有斯卡利和乔布斯明白问题的严重性。两人此前关于10亿美元和每月销售8万台的估计远远超出了实际销量，Macintosh即便在圣诞季，每月也只能卖出2万台。当初急匆匆扩大投入增加的产能现在成了累赘，库房里到处堆积着没有卖出去的Macintosh电脑。
Macintosh配套软硬件的研发也不顺利。原本乔布斯寄予厚望的Macintosh Office套件（包括一台网络文件服务器，一套局域网设备，一台网络激光打印机及相关软件）在开发上遇到了重重困难，过于超前的设计让进度一再拖延。斯卡利对乔布斯无法掌控Macintosh Office的研发进度非常苦恼，几次和乔布斯为产品的发布时间争吵。乔布斯在Macintosh团队的管理上也越来越简单和急躁，团队员工的不满越来越多。外部环境同样不容乐观，因为IBM PC在市场份额上的优势，软件厂商更愿意为IBM PC开发办公软件，而不是为不兼容的Macintosh写程序。
公司内部的部门纷争愈演愈烈。Apple II团队的员工几乎成了公司里最委屈的人。他们弄不明白，为什么自己开发的产品为公司贡献了大部分销售额和利润，却无法得到哪怕只及Macintosh团队一半的资源配置。很多人觉得，乔布斯是在滥用自己的权威，把好的资源都拿到了自己的Macintosh团队。Macintosh工程师的平均收入也比Apple II工程师高不少。对Apple II有深厚感情的沃兹对此非常生气，他认为，苹果已经失去了正确的方向，正在放弃Apple II这样伟大的产品。
1985年年初，沃兹离开了公司。一些中、高层经理也相继离职。Apple II团队和Macintosh团队总共有几十位工程师辞职。每个部门都缺少人手，斯卡利办公室墙上贴的组织结构图上，有好多地方标记着“待招聘”（TBH）的字样。
因为库存积压，到1985年1月时，分销商为了消化已有的库存，不再从苹果公司进货。Macintosh销量开始直线下跌。
乔布斯急匆匆地敲开斯卡利办公室的门，大声说：“我不懂，我真的搞不懂，为什么Macintosh卖不动？所有事情都无比顺利。可我就是弄不明白，为什么销量上不去。”
这时的斯卡利已经逐渐清醒了过来。他意识到，当初忽视阿兰·凯的建议，是一个多么大的错误。尽管乔布斯拒绝承认，但Macintosh产品本身的确存在很多硬伤。最糟糕的是，自己和乔布斯对销售趋势的预测又与事实有很大出入。
斯卡利没有回答乔布斯的问题。他一直在思考。苹果正处于最关键的时刻，如果不采取有力措施，整个公司可能会毁于一旦。
销售下滑，业绩不佳，让苹果内部积压的矛盾接二连三地暴露出来。乔布斯的草率粗暴和越权管理也成为许多中、高层经理发泄不满的对象。
在一次经理会上，许多中层经理对公司的现状表达了不满。有一个经理威胁要辞职，他当着大家的面说：“到底是谁在管理这家公司？如果是斯卡利，那为什么乔布斯总是跑过来，对我们指手画脚？”
斯卡利给每个经理一张纸和一支笔，让他们画出他们心中公司的样子。测试的结果让人伤心。有人画了斯卡利和乔布斯在抢着驾驶同一条船。另一个人画的是乔布斯面前摆着两顶帽子——董事会主席和Macintosh团队总经理，乔布斯必须从两顶帽子中选一顶。
斯卡利不得不几次三番地对乔布斯说：“如果你继续什么人都管，什么事都过问，我们就没法共事了。你应该集中精力在Macintosh的事务上。”
与此同时，Macintosh部门的几个人也跑来抱怨，乔布斯在部门内乱指挥。乔布斯最早希望Macintosh部门不超过100人。但现在Macintosh团队已经成了几百人的臃肿机构，再也没有了当初的高效率。乔布斯朝令夕改的老毛病在臃肿的团队中显得尤为突出，让许多人无所适从。
每次斯卡利把这些抱怨反映给乔布斯时，乔布斯总是说：“别担心，镇静。我知道我们在做什么。相信我，这是正确的道路。”
“可员工并不认同这是正确的道路呀。”斯卡利说。
乔布斯轻蔑地说：“他们不懂。”
公司的形势越糟糕，乔布斯就越活跃。乔布斯甚至跟别人说，目前只有他才是拯救公司的惟一人选。斯卡利觉得，自己和乔布斯之间意见一致的地方越来越少，乔布斯已经不再适合管理Macintosh团队了。
斯卡利找到乔布斯，对他说：“没有人像我这样崇拜你的才华和远见。我不惜改变了我的职业生涯来和你一起工作，史蒂夫。但现在这种境况的确不行。如果你不想办法改进，管理层就必须去作出改变。在过去两年里，我们相互间成了最好的朋友。但我对你目前管理Macintosh部门的方式彻底失去了信心。
乔布斯露出惊愕的表情：“是吗？好吧。那你能多花一点时间，配合我一起工作吗？”
的确，斯卡利最近几个月，跟乔布斯一起工作的时间没有那么多，也没有太多时间指导和培养乔布斯的管理能力。但这与目前的现状无关。斯卡利现在最头疼的是，如何尽快消除乔布斯对公司内部管理秩序的干扰。
斯卡利说：“我想让你知道的是，我打算把这件事告诉董事会。我打算建议董事会，让你从管理Macintosh部门的位置上退下来。在通知董事会之前，我想让你提前知道这件事。”
乔布斯惊呆了，他看着斯卡利说：“我真的不敢相信，你竟然想这么做。”
斯卡利说：“是的，我想这么做。我觉得你应该集中精力在董事会主席的职务上，同时关注未来的新技术、新产品。我们必须解决Macintosh部门存在的问题。”
乔布斯被激怒了。他从座位上跳起来，踱着步子。他的眼睛里充满了挑衅。
他怒气冲冲地说：“如果你这么做了，你会毁掉整个公司。我是惟一充分理解这家公司的制造和运营的人，我不认为，你已经懂得了所有的一切。”
斯卡利说：“你走得太远了，偏离了一个日常管理者应该做的。如果我继续纵容你，我们将不会有任何新产品发布，我们也不会再取得任何成功。”
曾经的“活力二人组”之间，再也找不到共同语言了。乔布斯不敢相信，为什么几个月前还是配合得天衣无缝的好搭档，几个月后，就成了无法共存的对立者。
1985年4月10日，斯卡利在预先得到马库拉支持的情况下，把乔布斯的问题提给了董事会。斯卡利对董事们说：“我正在劝说乔布斯放弃Macintosh部门总经理的职务。如果你们支持我，我会对今后公司的运营负一切责任。如果不支持我，我们将很难扭转困局，也许，不久你们就要去找一个新CEO来接替我了。”
斯卡利已经做好了被董事会解雇的准备。他进一步向董事会解释说：“在现在这个二人同时执掌权力，乔布斯兼有董事会主席和Macintosh部门总经理双重身份的时候，做事情真的很难。乔布斯必须接受，斯卡利才是CEO，才是公司的管理者。”
斯卡利建议由法国人让-路易·卡西（Jean-Louis Gassée）来接替乔布斯管理Macintosh部门。
董事会会议从下午6点开到晚上9点半，又在第二天晚上9点继续，一直到第三天凌晨3点半为止。董事们分别和斯卡利及乔布斯谈话，试图找到更好的解决方案。
最终，尝试调解失败的董事会集体站在了斯卡利一边，决定免去乔布斯Macintosh部门总经理的职位，由卡西接任，但保留乔布斯董事会主席的头衔。董事会同时授权斯卡利去执行这一任免计划。
会后，马库拉给斯卡利打电话，提醒他说：“你知道，乔布斯绝不会服气。他不会接受这个改变的。应该有人找乔布斯聊一聊。我担心，乔布斯真的不会接受这个事实。”
和马库拉的预测一致，乔布斯在接下来的几天里，一直处于暴怒和狂躁的状态。他非常激动地跟同事说：“我不相信发生的一切。我不相信。为什么？为什么斯卡利这么对我？我不相信他竟然这么对我。他背叛了我。我不会原谅他。”
几天后，冷静了一些的乔布斯找到斯卡利，提出了一项和解计划：“为什么不能让我保留现在的职位？如果保留我Macintosh总经理的职位，那么，我会承诺不再插手公司事务，给你管理公司留出足够的空间。其实，我只是想要一个证明自己的机会。”
斯卡利拒绝了乔布斯。他觉得，事已至此，没有回头路了。
5月初，乔布斯再次找到斯卡利说：“我想你真的乱了阵脚。你在第一年真的很棒，所有事情都非常完美。但发生了一些事。我没法说清楚发生了什么，但肯定是发生在1984年年底。我想我知道苹果必须做什么，可我们没有按我的想法去做，我对此非常失望。”
斯卡利仍然保持了足够的耐心，他对乔布斯说：“史蒂夫，让我们坐下来好好想想。我想，我没有花时间好好指导和约束你，这是我的失误。你没有按时推出Macintosh Office，也没有真正听取市场的反馈，看看用户真想要的是什么。你不接受别人关于兼容IBM PC的建议。也许，你根本不相信这些，但目前市场上，IBM PC的份额的确比苹果多很多。”
“嗯，你的分析听上去很精辟。”乔布斯揶揄道，“请你来当CEO的时候，我让你看了公司的情况。如果我不是一个好的管理者，那么棒的Macintosh电脑又是怎么设计出来的？如果你是一个好的管理者，那么，目前的库存积压情况又是怎么造成的？”
斯卡利一时语塞，不知道该说什么好。