www.entityframeworktutorial.net/what-is-entityfram...
там есть такая фраза
Entity framework is an Object/Relational Mapping (O/RM) framework. It is an enhancement to ADO.NET that gives developers an automated mechanism for accessing & storing the data in the database.
В общем смысл всего этого, EF это расширение ADO.Net для доступа к БД.
А если совсем конкретно, то быстрее всего непосредственные SQL запросы к БД. Новый EF7 фактически переписан с нуля, и очень оптимизирован, в скорости, составлении запросов к БД. Только за вами выбор, сделать кол проще, безопаснее (использование EF исключает такую вещь как SQL Injection) или чуть чуть быстрее(а может и поболее, у EF6 бывали проблемы с составлением сложных выборок и запросы выполнялись долго).