Les sœurs Williams étaient destinées à être de grandes championnes, leur père en avait décidé ainsi. La révélation s’est produite en 1978, lorsque Richard a découvert que le tennis payait très bien : 40 000 dollars pour le vainqueur d'un tournoi fémnini. Dès l’âge de 4 ans, Venus et Serena sont donc conditionnées pour devenir les futures reines du tennis. Et dès lors, Richard Williams va tout contrôler, de l’entraînement de ses filles, à leurs réponses en interview.
Lors des matches entre les deux sœurs, on accuse même Richard de désigner la gagnante. Cette situation aurait pu passer, vu le palmarès impressionnant de Venus et Serena, si Richard ne s’était montré aussi provocateur. Celui que l’on qualifie de "coach calculateur" et "d’éleveur de championnes" est devenu un maître en déclarations polémiques. "Je suis noir et je suis discriminé, très discriminé. Je ne pense pas que Venus ou Serena aient été acceptées par le tennis. Elles ne le seront jamais. Mais si vous êtes une petite blanche aux États-Unis comme Tracy Austin ou Chris Evert, qui ne savent pas frapper une balle, les médias vont dire que c'est génial." En 2003, Richard avait ensuite déclaré à L’Équipe : "j'incarne la tragédie des Noirs en même temps que leur revanche. Et c'est ça qui dérange. Si quelqu'un d'autres est n°1 c'est bien pour le tennis. Si elle est noire ça ne l'est pas." Richard Williams, qui s’estime donc victime de racisme, a pourtant lui-même succombé à la tentation. En 1997, il avait traité Irina Spirlea de "dinde grasse, grosse, horrible, et blanche" après une bousculade avec Venus Williams lors de l'US Open.