Sachverhalt: A. Rechtsanwalt A._ (Beschwerdeführer) war von dem 1989 verstorbenen F._ als Willensvollstrecker eingesetzt worden. F._ hinterliess als gesetzliche Erben den Sohn G._ aus erster Ehe, die (zweite) Ehefrau B._ und die Kinder aus zweiter Ehe C._, D._ und E._, welche er alle auf den Pflichtteil setzte. Im Juli 1993 klagten B._, D._ (Beschwerdegegnerin 2) und E._ (Beschwerdegegner 3) gegen den Beschwerdeführer als Willensvollstrecker. Sie verlangten dessen Verpflichtung zur Erstellung einer vollständigen Buchhaltung mit Jahresabschlüssen über den Nachlass von F._ sowie die Auszahlung verschiedener Beträge aus Erbteilung. Mit Teilurteil vom 21. Juli 1995 verpflichtete das Bezirksgericht Winterthur den Beschwerdeführer zur Vorlage einer geordneten, nachvollziehbaren Buchhaltung über den Nachlass des verstorbenen F._. Gleich entschied das Obergericht des Kantons Zürich am 16. März 1998 auf Berufung des Beschwerdeführers. Die gegen dieses Urteil geführte Nichtigkeitsbeschwerde wies das Kassationsgericht des Kantons Zürich am 18. November 1999 ab, soweit es darauf eintrat. Es führte im Rubrum seines Beschlusses anstelle der im März 1997 verstorbenen B._ deren Kinder auf, nämlich C._ (Beschwerdegegner 1a) sowie die Beschwerdegegner 2 und 3. Letztere sind somit sowohl infolge ihrer eigenen Klage als auch in ihrer Stellung als Erben ihrer Mutter (als Beschwerdegegner 1b und 1c) am Verfahren beteiligt. B. In einem weiteren Urteil verpflichtete das Bezirksgericht Winterthur den Beschwerdeführer am 24. Juli 2001 zur Zahlung verschiedener Beträge an die Beschwerdegegner in der Annahme, dieser habe keine nachvollziehbare Buchhaltung entsprechend der Verpflichtung im ersten Urteil eingereicht. Das diesen Entscheid bestätigende Urteil des Obergerichts des Kantons Zürich vom 20. November 2003 wurde jedoch vom Kassationsgericht des Kantons Zürich am 21. Juli 2004 aufgehoben und das Obergericht angewiesen, die Sache an das Bezirksgericht zur Weiterführung des erstinstanzlichen Verfahrens, insbesondere zur Gewährung des rechtlichen Gehörs zurückzuweisen. In seinem hierauf ergangen dritten Urteil verpflichtete das Bezirksgericht Winterthur den Beschwerdeführer erneut zur Zahlung der Beträge gemäss dem früheren Urteil vom 24. Juli 2001 an die Beschwerdegegner, weil auch die neue Teilungsrechnung nicht nachvollziehbar und die Honorarrechnung des Willensvollstreckers zu pauschal sei. Das Obergericht des Kantons Zürich entschied auf Berufung des Beschwerdeführers gleich wie das Bezirksgericht und verpflichtete diesen mit Urteil vom 19. August 2008, den Beschwerdegegnern 1a, 1b und 1c als Erben der B._ insgesamt Fr. 54'190.80 zu bezahlen sowie den Beschwerdegegnern 2 und 3 als Erben von F._ Fr. 4'237.50, jeweils nebst Zins. Die vom Beschwerdeführer gegen dieses Urteil eingereichte kantonale Nichtigkeitsbeschwerde wies das Kassationsgericht des Kantons Zürich mit Zirkulationsbeschluss vom 24. September 2009 ab, soweit es darauf eintrat. C. Der Beschwerdeführer beantragt dem Bundesgericht mit Beschwerde in Zivilsachen, es sei das Urteil des Obergerichts vom 19. August 2008 aufzuheben und die Klage abzuweisen, eventuell sei der Prozess an das Bezirksgericht Winterthur zurückzuweisen. Die Beschwerdegegner schliessen auf kostenfällige Abweisung der Beschwerde. Das Kassationsgericht wie auch das Obergericht haben auf Stellungnahme verzichtet. 