Tout d'abord, il y a 2 techniques possibles: avec ou sans-fil.

La méthode la plus utilisée pour un réseau avec fil le protocole le plus souvent utilisé est Ethernet.
Pour un réseau sans fil, c'est le Wi-fi (aussi appelé 802.11).
Tu peux choisir ce que tu veux, Ethernet revient moins cher et les débits sont meilleurs (en géneral 100Mbps contre 54Mbps pour le wi-fi) mais est moins pratique puisque tes PCs sont dans des pièces séparées.

Ensuite les hub, switch et routeur sont des outils de réseau.

Un hub et un switch remplissent la même fonction, connecter plusieurs ordinateurs sur une même prise réseau.
Ces 2 équipements se présentent sous la forme d'une boîte qui contient plusieurs prises RJ45 (utilisés par les câbles type Ethernet). Une de ces prises est la prise principale que l'on raccorde au réseau. Les autres prises vont servir à connecter les machines.

Simplement, à la différence du switch, le hub n'est pas un équipement "intelligent". Ce qu'il recoit sur une prise, il le répète à toutes les prises et le destinataire des données se reconnait. Ce qui pose un problème de sécurité et de bande passante.
Le switch, lui, ne retransmet les données qu'il reçoit qu'au destinataire. Ceci améliore donc les performances du réseau, mais coûte plus cher.

Un routeur est un outil d'interconnexion de réseaux (qui utilisent des protocoles différents et/ou des plages d'adresses IP diférentes). Son but principal est le routage, c'est à dire definir le meilleur chemin que doivent prendre les données pour arriver de la source au destinataire.

D'autre part, il ne faut pas oublier les Cartes réseaux (NIC) qui permettent à ton ordinateur de se connecter au réseau. Leur type depend du type de réseau (il existe des cartes réseaux ethernet et des cartes Wi-fi)

Pour ton réseau local, tu n'as pas forcément besoin d'un de ces équipement (à part une carte réseau dans chaque PC), mais tout dépend de ce que tu souhaites.
Wi-fi ou ethernet? Veux-tu pouvoir acceder à internet depuis l'un des pc sans que l'autre ne soit connecté?