基于C++ Coroutines提案 ‘Stackless Resumable Functions’编写的协程库
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

test_async_modern_cb.cpp 15KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427
  1. #include "librf.h"
  2. #include <chrono>
  3. #include <iostream>
  4. #include <string>
  5. #include <thread>
  6. #include <future>
  7. //原旨主义的异步函数,其回调写法大致如下
  8. template<typename _Input_t, typename _Callable_t>
  9. __declspec(noinline)
  10. void tostring_async_originalism(_Input_t&& value, _Callable_t&& token)
  11. {
  12. std::thread([callback = std::move(token), value = std::forward<_Input_t>(value)]
  13. {
  14. callback(std::to_string(value));
  15. }).detach();
  16. }
  17. //使用原旨主义的方式扩展异步方法来支持future
  18. template<typename _Input_t>
  19. auto tostring_async_originalism_future(_Input_t&& value)
  20. {
  21. std::promise<std::string> _promise;
  22. std::future<std::string> _future = _promise.get_future();
  23. std::thread([_promise = std::move(_promise), value = std::forward<_Input_t>(value)]() mutable
  24. {
  25. _promise.set_value(std::to_string(value));
  26. }).detach();
  27. return std::move(_future);
  28. }
  29. //----------------------------------------------------------------------------------------------------------------------
  30. //以下演示如何通过现代回调(Modern Callback), 使用回调适配器模型,
  31. //将异步回调函数扩展到支持future模式,调用链模式,以及协程。
  32. //首先,准备modern_call_return_void_t和modern_callback_adapter_t给异步函数使用
  33. //通过一个间接的类来解决返回void的语法问题,以便于优化返回值
  34. struct modern_call_return_void_t
  35. {
  36. void get(){}
  37. };
  38. //回调适配器的模板类
  39. //_Callable_t 要符合 _Signature_t 签名
  40. //这个类除了转移token外,不做任何有效的工作
  41. //有效工作等待特列化的类去做
  42. template<typename _Callable_t, typename _Signature_t>
  43. struct modern_callback_adapter_t
  44. {
  45. using callback_type = _Callable_t;
  46. using return_type = modern_call_return_void_t;
  47. static std::tuple<callback_type, return_type> traits(_Callable_t&& token)
  48. {
  49. return { std::forward<_Callable_t>(token), {} };
  50. }
  51. };
  52. //一个使用回调处理结果的异步函数,会涉及以下概念:
  53. //_Input_t:异步函数的输入参数;
  54. //_Signature_t: 此异步回调的函数签名;应当满足‘void(_Exception_t, _Result_t...)’或者‘void(_Result_t...)’类型;
  55. //_Callable_t:回调函数或标记,如果是回调函数,则需要符合_Signature_t的签名类型。这个回调,必须调用一次,且只能调用一次;
  56. //_Return_t:异步函数的返回值;
  57. //_Result_t...:异步函数完成后的结果值,作为回调函数的入参部分;这个参数可以有零至多个;
  58. //_Exception_t:回调函数的异常, 如果不喜欢异常的则忽略这个部分,但就得异步代码将异常处置妥当;
  59. //
  60. //在回调适配器模型里,_Input_t/_Result_t/_Exception_t(可选)是异步函数提供的功能所固有的部分;_Callable_t/_Return_t
  61. //部分并不直接使用,而是通过适配器去另外处理。这样给予适配器一次扩展到future模式,调用链模式的机会,以及支持协程的机会。
  62. //
  63. //tostring_async 演示了在其他线程里,将_Input_t的输入值,转化为std::string类型的_Result_t。
  64. //然后调用_Signature_t为 ‘void(std::string &&)’ 类型的 _Callable_t。
  65. //忽视异常处理,故没有_Exception_t。
  66. //
  67. template<typename _Input_t, typename _Callable_t>
  68. __declspec(noinline)
  69. auto tostring_async(_Input_t&& value, _Callable_t&& token)
  70. {
  71. //适配器类型
  72. using _Adapter_t = modern_callback_adapter_t<typename resumef::remove_cvref_t<_Callable_t>, void(std::string)>;
  73. //通过适配器获得兼容_Signature_t类型的真正的回调,以及返回值_Return_t
  74. auto adapter = _Adapter_t::traits(std::forward<_Callable_t>(token));
  75. //callback与token未必是同一个变量,甚至未必是同一个类型
  76. std::thread([callback = std::move(std::get<0>(adapter)), value = std::forward<_Input_t>(value)]
  77. {
  78. using namespace std::literals;
  79. std::this_thread::sleep_for(0.1s);
  80. callback(std::to_string(value));
  81. }).detach();
  82. //返回适配器的_Return_t变量
  83. return std::move(std::get<1>(adapter)).get();
  84. }
  85. //或者宏版本写法
  86. #define MODERN_CALLBACK_TRAITS(_Token_value, _Signature_t) \
  87. using _Adapter_t = modern_callback_adapter_t<typename resumef::remove_cvref_t<_Callable_t>, _Signature_t>; \
  88. auto _Adapter_value = _Adapter_t::traits(std::forward<_Callable_t>(_Token_value))
  89. #define MODERN_CALLBACK_CALL() std::move(std::get<0>(_Adapter_value))
  90. #define MODERN_CALLBACK_RETURN() return std::move(std::get<1>(_Adapter_value)).get()
  91. template<typename _Input_t, typename _Callable_t>
  92. auto tostring_async_macro(_Input_t&& value, _Callable_t&& token)
  93. {
  94. MODERN_CALLBACK_TRAITS(token, void(std::string));
  95. std::thread([callback = MODERN_CALLBACK_CALL(), value = std::forward<_Input_t>(value)]
  96. {
  97. callback(std::to_string(value));
  98. }).detach();
  99. MODERN_CALLBACK_RETURN();
  100. }
  101. //----------------------------------------------------------------------------------------------------------------------
  102. //下面演示如何扩展tostring_async函数,以支持future模式
  103. //future库有多种,但应当都提供遵循promise/future对,兼容std::promise/std::future用法
  104. //这样的话,可以做一个更加通用的支持future的callback类
  105. //实现use_future_callback_t的基类,避免写一些重复代码
  106. template<typename _Promise_traits, typename _Result_t>
  107. struct use_future_callback_base_t
  108. {
  109. //回调函数的结果类型,已经排除掉了异常参数
  110. using result_type = _Result_t;
  111. //通过_Promise_traits获取真正的promise类型
  112. using promise_type = typename _Promise_traits::template promise_type<result_type>;
  113. //此类持有一个std::promise<_Result_t>,便于设置值和异常
  114. //而将与promise关联的future作为返回值_Return_t,让tostring_async返回。
  115. mutable promise_type _promise;
  116. auto get_future() const
  117. {
  118. return this->_promise.get_future();
  119. }
  120. };
  121. //此类的实例作为真正的callback,交给异步回调函数,替换token。
  122. //在实际应用中,需要针对是否有异常参数,结果值为0,1,多个等情况做特殊处理,故还需要通过更多的偏特化版本来支持。
  123. //具体的异常参数,需要根据实际应用去特里化。这里仅演示通过std::exception_ptr作为异常传递的情况。
  124. template<typename...>
  125. struct use_future_callback_t;
  126. //无异常,无结果的callback类型:void()
  127. template<typename _Promise_traits>
  128. struct use_future_callback_t<_Promise_traits> : public use_future_callback_base_t<_Promise_traits, void>
  129. {
  130. using use_future_callback_base_t<_Promise_traits, void>::use_future_callback_base_t;
  131. void operator()() const
  132. {
  133. this->_promise.set_value();
  134. }
  135. };
  136. //有异常,无结果的callback类型:void(exception_ptr)
  137. template<typename _Promise_traits>
  138. struct use_future_callback_t<_Promise_traits, std::exception_ptr> : public use_future_callback_base_t<_Promise_traits, void>
  139. {
  140. using use_future_callback_base_t<_Promise_traits, void>::use_future_callback_base_t;
  141. void operator()(std::exception_ptr eptr) const
  142. {
  143. if (!eptr)
  144. this->_promise.set_value();
  145. else
  146. this->_promise.set_exception(std::move(eptr));
  147. }
  148. };
  149. //无异常,单结果的callback类型:void(_Result_t)
  150. template<typename _Promise_traits, typename _Result_t>
  151. struct use_future_callback_t<_Promise_traits, _Result_t> : public use_future_callback_base_t<_Promise_traits, _Result_t>
  152. {
  153. using use_future_callback_base_t<_Promise_traits, _Result_t>::use_future_callback_base_t;
  154. template<typename Arg>
  155. void operator()(Arg && arg) const
  156. {
  157. this->_promise.set_value(std::forward<Arg>(arg));
  158. }
  159. };
  160. //有异常,单结果的callback类型:void(std::exception_ptr, _Result_t)
  161. template<typename _Promise_traits, typename _Result_t>
  162. struct use_future_callback_t<_Promise_traits, std::exception_ptr, _Result_t> : public use_future_callback_base_t<_Promise_traits, _Result_t>
  163. {
  164. using use_future_callback_base_t<_Promise_traits, _Result_t>::use_future_callback_base_t;
  165. template<typename Arg>
  166. void operator()(std::exception_ptr eptr, Arg && arg) const
  167. {
  168. if (!eptr)
  169. this->_promise.set_value(std::forward<Arg>(arg));
  170. else
  171. this->_promise.set_exception(std::move(eptr));
  172. }
  173. };
  174. //无异常,多结果的callback类型:void(_Result_t...)
  175. template<typename _Promise_traits, typename... _Result_t>
  176. struct use_future_callback_t<_Promise_traits, _Result_t...> : public use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >
  177. {
  178. using use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >::use_future_callback_base_t;
  179. template<typename... Args>
  180. void operator()(Args&&... args) const
  181. {
  182. static_assert(sizeof...(Args) == sizeof...(_Result_t), "");
  183. this->_promise.set_value(std::make_tuple(std::forward<Args>(args)...));
  184. }
  185. };
  186. //有异常,多结果的callback类型:void(std::exception_ptr, _Result_t...)
  187. template <typename _Promise_traits, typename... _Result_t>
  188. struct use_future_callback_t<_Promise_traits, std::exception_ptr, _Result_t...> : public use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >
  189. {
  190. using use_future_callback_base_t<_Promise_traits, std::tuple<_Result_t...> >::use_future_callback_base_t;
  191. template<typename... Args>
  192. void operator()(std::exception_ptr eptr, Args&&... args) const
  193. {
  194. static_assert(sizeof...(Args) == sizeof...(_Result_t), "");
  195. if (!eptr)
  196. this->_promise.set_value(std::make_tuple(std::forward<Args>(args)...));
  197. else
  198. this->_promise.set_exception(std::move(eptr));
  199. }
  200. };
  201. //与use_future_callback_t配套的获得_Return_t的类
  202. template<typename _Future_traits, typename _Result_t>
  203. struct use_future_return_t
  204. {
  205. using result_type = _Result_t;
  206. using future_type = typename _Future_traits::template future_type<result_type>;
  207. future_type _future;
  208. use_future_return_t(future_type && ft)
  209. : _future(std::move(ft)) {}
  210. future_type get()
  211. {
  212. return std::move(_future);
  213. }
  214. };
  215. //利用use_future_callback_t + use_future_return_t 实现的callback适配器
  216. template<typename _Token_as_callable_t, typename... _Result_t>
  217. struct modern_callback_adapter_impl_t
  218. {
  219. using traits_type = _Token_as_callable_t;
  220. using callback_type = use_future_callback_t<traits_type, _Result_t...>;
  221. using result_type = typename callback_type::result_type;
  222. using return_type = use_future_return_t<traits_type, result_type>;
  223. static std::tuple<callback_type, return_type> traits(const _Token_as_callable_t& /*没人关心这个变量*/)
  224. {
  225. callback_type callback{};
  226. auto future = callback.get_future();
  227. return { std::move(callback), std::move(future) };
  228. }
  229. };
  230. //----------------------------------------------------------------------------------------------------------------------
  231. //一、做一个使用std::promise/std::future的辅助类。
  232. //这个类还负责萃取promise/future对的类型。
  233. struct std_future_t
  234. {
  235. template<typename _Result_t>
  236. using promise_type = std::promise<_Result_t>;
  237. template<typename _Result_t>
  238. using future_type = std::future<_Result_t>;
  239. };
  240. //二、申明这个辅助类的全局变量。不申明这个变量也行,就是每次要写use_future_t{},麻烦些。
  241. //以后就使用std_future,替代tostring_async的token参数了。
  242. //这个参数其实不需要实质传参,最后会被编译器优化没了。
  243. //仅仅是要指定_Callable_t的类型为std_future_t,
  244. //从而在tostring_async函数内,使用偏特化的modern_callback_adapter_t<std_future_t, ...>而已。
  245. constexpr std_future_t std_future{};
  246. //三、偏特化_Callable_t为std_future_t类型的modern_callback_adapter_t
  247. //真正的回调类型是use_future_callback_t,返回类型_Return_t是use_future_return_t。
  248. //配合use_future_callback_t的promise<result_type>,和use_future_return_t的future<result_type>,正好组成一对promise/future对。
  249. //promise在真正的回调里设置结果值;
  250. //future返回给调用者获取结果值。
  251. template<typename R, typename... _Result_t>
  252. struct modern_callback_adapter_t<std_future_t, R(_Result_t...)> : public modern_callback_adapter_impl_t<std_future_t, _Result_t...>
  253. {
  254. };
  255. //----------------------------------------------------------------------------------------------------------------------
  256. //同理,可以制作支持C++20的协程的下列一系列类(其实,这才是我的最终目的)
  257. struct use_librf_t
  258. {
  259. template<typename _Result_t>
  260. using promise_type = resumef::awaitable_t<_Result_t>;
  261. template<typename _Result_t>
  262. using future_type = resumef::future_t<_Result_t>;
  263. };
  264. constexpr use_librf_t use_librf{};
  265. template<typename R, typename... _Result_t>
  266. struct modern_callback_adapter_t<use_librf_t, R(_Result_t...)> : public modern_callback_adapter_impl_t<use_librf_t, _Result_t...>
  267. {
  268. };
  269. //所以,我现在的看法是,支持异步操作的库,尽可能如此设计回调。这样便于支持C++20的协程。以及future::then这样的任务链。
  270. //这才是“摩登C++”!
  271. //----------------------------------------------------------------------------------------------------------------------
  272. //使用范例
  273. //演示异步库有多个异步回调函数,只要按照Modern Callback范式去做回调,就不再需要写额外的代码,就可以适配到future+librf,以及更多的其他库
  274. template<typename _Ty1, typename _Ty2, typename _Callable_t>
  275. auto add_async(_Ty1&& val1, _Ty2&& val2, _Callable_t&& token)
  276. {
  277. MODERN_CALLBACK_TRAITS(token, void(decltype(val1 + val2)));
  278. std::thread([=, callback = MODERN_CALLBACK_CALL()]
  279. {
  280. using namespace std::literals;
  281. std::this_thread::sleep_for(0.1s);
  282. callback(val1 + val2);
  283. }).detach();
  284. MODERN_CALLBACK_RETURN();
  285. }
  286. //演示异步库有多个异步回调函数,只要按照Modern Callback范式去做回调,就不再需要写额外的代码,就可以适配到future+librf,以及更多的其他库
  287. template<typename _Ty1, typename _Ty2, typename _Callable_t>
  288. auto muldiv_async(_Ty1&& val1, _Ty2&& val2, _Callable_t&& token)
  289. {
  290. MODERN_CALLBACK_TRAITS(token, void(std::exception_ptr, decltype(val1 * val2), decltype(val1 / val2)));
  291. std::thread([=, callback = MODERN_CALLBACK_CALL()]
  292. {
  293. using namespace std::literals;
  294. std::this_thread::sleep_for(0.1s);
  295. auto v1 = val1 * val2;
  296. if (val2 == 0)
  297. callback(std::make_exception_ptr(std::logic_error("divided by zero")), v1, 0);
  298. else
  299. callback(nullptr, v1, val1 / val2);
  300. }).detach();
  301. MODERN_CALLBACK_RETURN();
  302. }
  303. __declspec(noinline)
  304. void resumable_main_modern_cb()
  305. {
  306. using namespace std::literals;
  307. //使用lambda作为异步回调函数,传统用法
  308. tostring_async_originalism(-1.0, [](std::string && value)
  309. {
  310. std::cout << value << std::endl;
  311. });
  312. std::this_thread::sleep_for(0.5s);
  313. tostring_async(1.0, [](std::string && value)
  314. {
  315. std::cout << value << std::endl;
  316. });
  317. std::this_thread::sleep_for(0.5s);
  318. std::cout << "......" << std::endl;
  319. //支持future的用法
  320. std::future<std::string> f1 = tostring_async_originalism_future(5);
  321. std::cout << f1.get() << std::endl;
  322. std::future<std::string> f2 = tostring_async(6.0f, std_future);
  323. std::cout << f2.get() << std::endl;
  324. //支持librf的用法
  325. GO
  326. {
  327. #ifndef __clang__
  328. try
  329. #endif
  330. {
  331. int val = co_await add_async(1, 2, use_librf);
  332. std::cout << val << std::endl;
  333. //muldiv_async函数可能会抛异常,取决于val是否是0
  334. //异常将会带回到本协程里的代码,所以需要try-catch
  335. auto ab = co_await muldiv_async(9, val, use_librf);
  336. //C++17:
  337. //auto [a, b] = co_await muldiv_async(9, val, use_librf);
  338. std::string result = co_await tostring_async(std::get<0>(ab) + std::get<1>(ab), use_librf);
  339. std::cout << result << std::endl;
  340. }
  341. #ifndef __clang__
  342. catch (const std::exception& e)
  343. {
  344. std::cout << "exception signal : " << e.what() << std::endl;
  345. }
  346. catch (...)
  347. {
  348. std::cout << "exception signal : who knows?" << std::endl;
  349. }
  350. #endif
  351. };
  352. resumef::this_scheduler()->run_until_notask();
  353. }