Josefa mezitím Izmaelité odvedli dolů do Egypta. Tam ho od nich koupil jeden Egypťan, faraonův dvořan Putifar, velitel stráže. Hospodin však byl s Josefem, a tak se mu všechno dařilo a zůstal v domě svého egyptského pána. Když jeho pán viděl, že Hospodin je s ním a že Hospodin působí, aby se vše, k čemu přiloží ruku, dařilo, oblíbil si Josefa a ten se stal jeho pomocníkem. Nakonec ho Putifar ustanovil správcem svého domu a svěřil mu do rukou všechno, co měl. Od té chvíle Hospodin domu toho Egypťana požehnal. Díky Josefovi bylo Hospodinovo požehnání na všem, co měl v domě i na poli, a tak nechal všechen svůj majetek v Josefově správě. Když měl doma jeho, nestaral se o nic než o své jídlo.
Josef byl nápadně krásný, překrásný muž. Po nějaké době mohla manželka jeho pána na Josefovi oči nechat. Nakonec řekla: „Spi se mnou!“
On však odmítl. Řekl manželce svého pána: „Když mě můj pán má doma, o nic se nestará. Vše, co mu patří, mi svěřil do rukou. Nikdo nemá v domě větší pravomoc než já; neodepřel mi nic kromě tebe, poněvadž jsi jeho žena! Jak bych mohl spáchat takovou hanebnost a zhřešit proti Bohu?“ A i když Josefa přemlouvala den za dnem, aby si k ní lehl a pobyl s ní, neposlechl ji.
Jednoho dne, když přišel dělat svou práci v domě, nebyl nikdo ze služebnictva doma. Tehdy ho chytila za šaty a řekla: „Spi se mnou!“ On však nechal šaty v její ruce, utekl a běžel ven.
Když uviděla, že jí nechal své šaty v ruce a utekl ven, svolala služebnictvo a řekla jim: „Podívejte se! Přivedl k nám můj muž toho Hebreje, aby si s námi zahrával?! Přišel a chtěl se se mnou vyspat, ale já jsem začala hlasitě křičet. Když uslyšel, jak křičím, nechal své šaty u mě, utekl a běžel ven.“
Ty jeho šaty nechala ležet vedle sebe, dokud nepřišel domů jeho pán. Tehdy mu vyprávěla: „Ten hebrejský otrok, jehož jsi k nám přivedl, ke mně přišel a chtěl si se mnou zahrávat! Když jsem se ale dala do křiku, nechal své šaty u mě a utekl ven.“
Josefův pán naslouchal slovům své ženy, a když řekla: „Takto se ke mně zachoval tvůj otrok,“ vzplanul hněvem. A tak ho jeho pán vzal a vsadil do žaláře, na místo, kde bývají drženi královští vězni.
Tak se Josef ocitl v žaláři.