Sachverhalt: A. Gemäss dem 1995 erlassenen und 1998 teilweise revidierten Zonen- und Generellen Gestaltungsplan der Gemeinde Lü liegt das Gebiet "Pra dals Fops" in der Wohnzone. Im Jahr 2001 erliess der Gemeindevorstand Lü den Quartierplan "Pra dals Fops". Dieser legt die Standorte der einzelnen Gebäude mittels Baulinien (Baufenstern) fest. Per 1. Januar 2009 schlossen sich sämtliche Gemeinden im Münstertal, einschliesslich der Gemeinde Lü, zur neuen Gemeinde Val Müstair zusammen, für welche eine neue Grundordnung zu erarbeiten war. Am 25. Mai 2009 wurde zu diesem Zweck eine Planungszone über das gesamte Gebiet der neuen Gemeinde erlassen. Im Juni 2010 wurde der neue Zonen- und Generelle Gestaltungsplan "Fuldera/Lü/Lüsai" dem kantonalen Amt für Raumentwicklung zur Vorprüfung eingereicht. Daraus ergibt sich, dass das Gebiet "Pra dals Fops" in der Wohnzone verbleiben soll und auch ausserhalb der überarbeiteten Gefahrenzone liegt. Im neuen Baugesetz von Val Müstair sind bezüglich Dachgestaltung keine verschärften Vorschriften vorgesehen; hingegen soll die Ausnützungsziffer (AZ) in der Wohnzone auf 0.5 und die Gebäudehöhe auf höchstens 8.5 m gesenkt werden (Art. 10 E-BauG Val Müstair). B. Am 25. März 2010 reichten AY._ und BY._ bei der Gemeinde Val Müstair ein Baugesuch für die Erstellung eines Einfamilienhauses im Quartierplangebiet "Pra dals Fops" ein (Parzelle 32.8 alt bzw. Nr. 2667 neu). Gegen das Bauvorhaben erhob X._ Einsprache. Er rügte u.a. die Verletzung von Grenzabstandsvorschriften und die mangelhafte Gestaltung des Gebäudes. Mit einer ersten Projektänderung wurde das geplante Gebäude um 2 m nach Süden verschoben. X._ hielt in Kenntnis der Änderung an seiner Einsprache fest. Gestützt auf die Empfehlungen der von der Gemeinde zugezogenen Bauberatung wurde das Projekt noch ein weiteres Mal überarbeitet. Dabei wurde insbesondere die Dachform abgeändert, indem neu ein Giebeldach vorgesehen wurde. C. Am 11./13. August 2010 bewilligte der Gemeindevorstand Val Müstair das Bauvorhaben unter verschiedenen Auflagen und Bedingungen und wies die Einsprache von X._ ab. Dagegen erhob X._ am 14. September 2010 Beschwerde an das Verwaltungsgericht des Kantons Graubünden. Dieses wies die Beschwerde am 30. November 2010 ab. D. Gegen diesen Entscheid hat X._ Beschwerde in öffentlich-rechtlichen Angelegenheiten ans Bundesgericht erhoben. Er beantragt, der angefochtene Entscheid und die Baubewilligung der Gemeinde Val Müstair vom 11./13. August 2010 seien aufzuheben und die Baubewilligung zu verweigern. Eventualiter sei die Sache an die Gemeinde Val Müstair zu neuem Entscheid zurückzuweisen. In verfahrensrechtlicher Hinsicht beantragt der Beschwerdeführer, der Beschwerde sei die aufschiebende Wirkung zu gewähren und es sei ein Augenschein durchzuführen. E. Das Verwaltungsgericht beantragt Abweisung der Beschwerde, soweit darauf einzutreten sei. AY._ und BY._ sowie die Gemeinde Val Müstair schliessen auf Beschwerdeabweisung. In seiner Replik vom 10. Mai 2011 weist der Beschwerdeführer darauf hin, dass der architektonische Stil des Münstertals vom Tiroler Bauernhausstil geprägt sei und sich daher von demjenigen des Engadins unterscheide. F. Mit Verfügung vom 12. April 2011 wurde das Gesuch um aufschiebende Wirkung abgewiesen. 