Hermann fonde en 1950 sa propre entreprise sous la raison sociale Hermann Milette. Il s’installe dans le sous-sol de la maison qu’il achètera quelques années plus tard. Il débute avec quelques outils de base comme une perceuse, une scie, une toupie, un tour, etc. Deux de ses fils, Fernand et André, y travaillent. Le travail principal de l’entreprise est la fabrication de manches de brosses pour fournir les distributeurs installés à Montréal. Une spécialité qui prend de plus en plus d’ampleur, le tournage du bois qui est en soi une œuvre d’art.
Hermann se rend chaque jour à Montréal en autobus pour gagner le pain de la famille dans une entreprise ou il est associé à un autre entrepreneur, pendant que la mère œuvre à faire les repas et les vêtements des enfants car elle est une couturière chevronnée. Il achète peu après un camion et, en 1955, il arrête de travailler à Montréal et consacre tout son temps à sa propre entreprise. Il arrive souvent que toute la maisonnée soit réveillée à 6 h le matin car le père commence à travailler tôt; la scie ronde sert souvent de réveil. À sa retraite, le grand-père maternel Ernest Yergeau se joint à eux.
En 1955, Fernand décède. C’est un mauvais coup du destin, mais courageusement la vie continue et on voit souvent la mère de famille travailler dans l’entreprise.
En 1957, deux autres fils, Maurice et Henri, commencent à travailler avec leur père et leur frère André.
En 1958, l’espace vient à manquer et Hermann entreprend la construction d’un atelier à l’arrière de la maison, atelier qui est l’immeuble qui existe toujours aujourd’hui. Il faut bientôt embaucher des employés qui sont souvent des voisins. La fabrication de meubles sur mesure prend de plus en plus de place.
En 1963, Le grand-père Yergeau décède à l’âge de 83 ans. La production augmente et la fabrication d’accessoires de magasins en bois verni est maintenant une part importante du travail. Le samedi est la journée de visite des clients pour les réparations et Hermann, avec sa patience, enseigne à ses fils qu’il faut donner un service personnel à chaque client, « même pour un barreau de chaise » comme il disait.
En 1981, il faut se rendre à l’évidence, Hermann a beaucoup travaillé et doit prendre sa retraite car les nombreuses années de labeur l’ont usé. Il décède en 1993 à l’age de 88 ans. Il laisse le souvenir d’un homme courageux, travailleur et qui s’impliquait dans sa communauté avec son épouse, les deux toujours prêts à aider les autres. André et Henri prennent la relève et l’entreprise est constituée en société sous l’appellation H. Milette Ébéniste Inc. La production des blocs de brosse n’est plus très rentable et les deux frères l’abandonnent rapidement. Maurice, le spécialiste du tournage et qui s’occupe de la comptabilité de l’entreprise quitte en 1982. Le travail est maintenant orienté vers la fabrication de meubles sur mesure et de spécialités comme les escaliers intérieurs, les rampes et les balustrades. Vient l’année 1995, Henri, l’artiste de la famille, doit partir car la maladie le force à s’arrêter. Il décède en 2001. André, le fonceur, continue à mener l’entreprise jusqu’en février 2006, date à laquelle il passe le flambeau à son fils Sylvain.
Du père, aux fils, au petit-fils, la tradition du service à la clientèle se perpétue depuis plus de 50 ans.