Ja das kann die Fritzbox und jeder Router mit WDS.
Es funktioniert auch so wie Du gerade geschrieben hast, nur dass das Signal nicht verstärkt wird, sondern weitergeleitet wird um es kleinlich auszudrücken. Die Fritzbox fungiert also mehr oder weniger als Bridge.
Aber es funktioniert so wie Du es dir vorstellst.